Jesuité budovali své sídlo v Březnici s podporou pobělohorského majitele panství Přibíka Jeníška z Újezda (královského prokurátora při procesu s povstalci 1620) v letech 1638–51 nejprve jako residenci, od roku 1651 jako kolej. Po zrušení řádu 1773 sem byla roku 1778 přenesena fara z nedalekých Bubovic, kam město předtím spadalo. Kostel sv. Františka a Ignáce je volně přístupný.