Am Mainufer, entlang der historischen Stadtmauer, gelangt man zu den Resten des Palatiums, der staufischen Kaiserpfalz, die Kaiser Friedrich Barbarossa Ende des 12. Jahrhunderts errichtete. Nach dem Niedergang der Staufer diente das „rote Schloss“ den Bürgern als Steinbruch – lediglich die Ostfassade überdauerte, da sie in die spätere Stadtbefestigung einbezogen wurde.

Ein weiteres Kulturdenkmal der Stauferzeit befindet sich inmitten der Altstadt. Das „Romanische Haus“, das 1187 anlässlich eines Hoftages erbaut wurde, diente einst als Vogtei. 1978 erkannten aufmerksame Denkmalschützer die historische Bedeutung des Gebäudes und brachten mit großem Engagement eine Sanierung zustande, für deren Gelingen die Stadt den Denkmalschutzpreis des Landes Hessen erhielt.

Im öffentlichen Leben hat das „Steinerne Haus“ längst wieder seinen Platz gefunden. Der Saal im Obergeschoss ist ein beleibter Trausaal und wird darüber hinaus für kulturelle Veranstaltungen genutzt. Hier finden Vorträge, Lesungen und Konzerte statt.