Uměleckohistoricky i architektonicky cenný komplex barokních budov kláštera voršilek při kostele sv. Josefa se nachází na nároží ulic Josefská a Orlí v městské části Brno-střed. Od roku 1997 slouží komerčním subjektům a vlastní ho brněnské biskupství.
Klášter byl založen jako komunitní dům roku 1482 nebo 1484 z iniciativy Markéty Goldschmidové. vdovy po zlatníku. Vedly jej terciářky františkánského řádu, obecně zvané františkánky. Kardinál František z Ditrichštejna ustanovuje roku 26. dubna 1617 regulérní klášter. Společně s ním byl vystavěn i kostel sv. Josefa. Když konvent i s kostelem během prvního švédského obléhání Brna roku 1643 vyhořel a poté za dva roky během druhého obléhání ze strategických důvodů zbořen, tak se sestry se rozhodly vystavět klášter nový. V letech 1651–1653 byla vybudována patrová kvadratura kolem pravoúhlého rajského dvora.
V 70. letech 17. století byl konvent a prefektura propojena na severu jednoduchým křídlem. V bývalé klášterní zahradě se nachází raně barokní kaple Krista na hoře Olivetské z doby kolem roku 1670.
Josefínským dekretem z 18. ledna 1782 byl klášter františkánek zrušen, a budovy i s kostelem připadly voršilkám římského řádu. Řád zde působil až do roku 1950. Klášterní knihovna čítající přes 4200 svazků z 16.–20. století přešla do fondů Moravské zemského knihovny. Během druhé světové války byl areál poškozen při bombardování města. V roce 1961 se správy kostela ujala nedaleká minoritská fara.
Od 50. do konce 90. let v areálu sídlilo Technické muzeum v Brně.
Objekt kláštera byl roku 1991 vrácen řádu, který jej poté pronajímal komerčním účelům. Roku 2010 voršilky darovaly kostel za symbolickou cenu řeckokatolické církvi. Klášterní budovy v roce 2019 koupilo Biskupství brněnské, které prostřednictvím společnosti Urbanon plánuje do roku 2027 jeho kompletní revitalizaci a zpřístupnění zahrady.