Na severu přiléhá ke kostelu františkánský klášter – čtyřkřídlá jednopatrová budova kolem nádvoří. V přízemí je křížová chodba, původně otevřená do dvora půlkruhovými oblouky, r. 1735 byly zazděny do okna. Umělecky cenný je refektář, sklenutý valeně s lunetami, jejichž hrany jsou zdobeny štukovým ornamentem. Jsou zde dochována krásná rokoková kamna z r. 1780 od jindřichohradeckého mistra J. Hájka.
Od roku 2019 je objekt využíván příležitostně. Je v majetku nadačního fondu Grant. Na dveřích je zapsáno, že objekt využívá občanské sdružení Assisi, které by mělo klášter využívat na sociální bydlení.
Fotogalerie: