Das Wohngebäude wurde um 1720 durch Franz-Anton von Speth neu errichtet. Dabei bezog man einen mittelalterlichen Bergfried sowie ein romanisches Burgtor in den Neubau ein. Die oberen Stockwerke werden durch eine prächtige dreiläufige Holztreppe aus der Erbauungszeit erschlossen, die mit stattlichen Heroldsfiguren auf den Pfosten geschmückt ist. Die sehr plastisch wirkenden Stuckdecken zeigen Landschaften und allegorische Szenen in reicher ornamentaler Rahmung. Einige Decken weisen sogar Stuckarbeiten aus der Zeit des Rokoko (um 1770) auf.
Durch die Einrichtung als Rathaus ist das Schloss für die Öffentlichkeit nur teilweise zugänglich.
