Das älteste Renaissancehaus der Stadt ist weit älter als 500 Jahre. Sein Name ist Hinweis auf seine Funktion in der Vergangenheit. Der Anbau mit dem heute so bewunderten Schmuckgiebel entsteht als Erweiterung des Pfarrhauses in der ehemaligen Kapelle (Ostseite des Gebäudes). 200 Jahre später kommt eine erneute Erweiterung im Süden dazu, wo heute die Webstühle der Museumsweberei stehen.