Po zrušení jezuitského řádu v roku 1773 začal klášter pustnout.