Het klooster is in 1899 gebouwd naar ontwerp van de architect J.H. Tonnaer uit Delft in opdracht van de Franciscanenorde. Op de begane grond bevonden zich een gastenkwartier, refter, keuken, bibliotheek, sacristie, kapittelzaal en een bergruimte. De verbinding met de kerk was via de recreatiezaal, thans het parochiecentrum De Dam. Op de verdieping lagen het dormitorium met zesentwintig cellen, een kapel en ziekenboeg. Op de zolderverdieping waren nog eens zestien cellen voor Lekenbroeders, voorts een naaiatelier en opslag voor pijen voor reizende paters.
Vanaf 1920 was in het klooster het centrum voor missiewerk van de Franciscanenorde gevestigd. Leegloop van de orde leidde uiteindelijk tot de verkoop van het kloostergebouw aan de gemeente Woerden in 1978, waarna het de functie kreeg van streekmuziekschool .
Inmiddels is in het gebouw het theater en het centrum voor kunsteducatie gevestigd. De hoofdstructuur van het gebouw is grotendeels behouden.