Seine größte bauliche Ausdehnung erfolgte im 16. Jahrhundert. Es entstanden um einen Hof gruppierte Ökonomiegebäude und das so genannte Neuhaus. Die Ökonomiegebäude sind heute nicht mehr vorhanden. Das Neuhaus diente bis 1976 verschiedenen Zwecken, zuletzt befanden sich Wohnungen darin. Mit hohem Aufwand ist das Gebäude in den Jahren 1977-1984 von Grund auf saniert und restauriert worden. Nach der Fertigstellung wurde hier das städtische Museum eingerichtet und 1985 eröffnet.