Das spätgotische Burghaus des Rittergeschlechts Schwalbach aus dem 15. Jahrhundert wurde an die Stadtmauer angebaut. Es verfügt über ein hohes Walmdach über Rundbogenfries, an der Südwestecke über einen runden Treppenturm, an den übrigen Ecken Erkertürmchen, davon eins mit dem ursprünglichen Spitzhelm. Nach Osten wurde unten ein rundes, oben eckiges Chörchen angebaut. Es wurde 1985-1987 restauriert und in der ursprünglichen Gestalt des 15. Jahrhunderts wiederhergestellt.