Wohl vom frühen Mittelalter bis zum Brand von 1383 stand auf dem Hügel die recht grosse Burg der Bucheggberger Grafen und ihrer Nachfahren. Auf ihren Ruinen wurde 1546 der heutige Turm errichtet, welcher bis 1798 als Gefängnis diente. Im 19. Jahrhundert hielt in ihm und der angebauten Scheune die Landwirtschaft Einzug und in seinem Untergrund, in den Sandsteinkellern, braute um die Jahrhundertwende der Bayer Faist das im Bezirk beliebte “landeseigene“ Bier. Seit der Restauration 1956 ist das Schloss ein Heimatmuseum.