Ten byl založen kolem roku 1250 rodem Švamberků, v první třetině 18. století byl barokně upraven. V současnosti v něm sídlí městské muzeum.

V letech 2004 – 2005 proběhla první z rekonstrukcí, a to západního a jižního křídla kláštera. V této době byly především renovovány střechy tohoto rozlehlého objektu. Ve zmiňovaném jižním a západním křídle byly vyměněny okenní a dveřní výplně, vznikly nové prostory kanceláří, informačního centra a galerie umění. Západní křídlo, kde v přízemí sídlí informační centrum, získalo ve zmíněné etapě novou fasádu.

Zbylá tři křídla objektu si na novou fasádu musela počkat až na další etapu rekonstrukce, a to na nynější rekonstrukční období, sahající z minulého desetiletí až do současného roku 2011.

Díky začlenění Městského muzea do projektu Norského finančního mechanismu pro obnovu vybraných sakrálních památek získaly klášterní prostory finanční podporu pro zrekonstruování zbylých dvou křídel, východního, severního a části křídla jižního, kde postupem času v nově opravených prostorech vznikne studijně-badatelské zázemí s možností občerstvení. Rekonstrukcí vznikly také nové prostory pro rozšíření stálých expozic a získalo se tak místo pro vystavení vybraných exponátů, do této doby uložených v depozitu muzea.

Muzejní depozitář díky této etapě rekonstrukce získal nové zázemí. Jedním ze základů rekonstrukčních prací byla totiž obnova půdních prostor, kde v půdních plochách východního a jižního křídla bude umístěn depozitář a v druhé části vznikl kulturně – vzdělávací sál s kapacitou 70 osob s bezbariérovým přístupem.

Kdo má zájem přijít zhodnotit odvedenou práci této poslední dvouleté etapy rekonstrukce, může navštívit městské muzeum v sobotu 16. dubna od 9 do 17 hodin.