Ten niewielki, jednonawowy, barokowy kościółek ufundowała w 1696 roku Anna z Gnińskich Zamoyska, żona IV ordynata Marcina Zamoyskiego, a zaprojektował Jan Michał Link. Przylegający do kościoła, trójskrzydłowy klasztor powstał dopiero w latach 1769-1774 z fundacji VII ordynata Jana Jakuba Zamoyskiego. Krótko służył Klaryskom, a po kasacie klasztoru przekazany został Franciszkanom, a potem Siostrom Miłosierdzia. W 1817 roku urządzono w nim szpital wojskowy. W okresie międzywojennym był siedzibą policji, a po wojnie do 1985 roku Domu Dziecka.

Od 2010 roku w mieści się w nim Państwowa Szkoła Muzyczna I i II stopnia im. Karola Szymanowskiego.