国史跡の佐伯城跡がある城山の麓に城下町が広がっています。いまも、県の有形文化財である三ノ丸櫓門をはじめ、旧三ノ丸御殿の玄関・広間部分を移築した住吉御殿など、江戸時代の建物をはじめ、当時の町の面影をたどることができます。