Das prächtige zweigeschossige Fachwerkgebäude mit Walmdach am Rathausplatz befindet sich nach historischer Überlieferung an der Stelle der früheren mittelalterlichen Badestube, in der Schwitzbäder bereitet wurden. 1306 wurde das öffentliche Badehaus erstmals erwähnt und im Dreißigjährigen Krieg niedergebrannt. Um 1700 entstand an gleicher Stelle der heutige Bau. Am Rathausplatz zwischen Badehaus und Museum erinnert ein kleiner Wasserlauf an den früher hier fließenden Banderbach.