Petrus Joseph Savelberg, stichter van zowel de Congregatie van Kleine Zusters van de H. Joseph als van de Congregatie van de Broeders van de H. Joseph, huurde in 1879 in Heel van de Maastrichtse familie Hermans het aan de tegenwoordige Mgr. Savelbergweg gelegen kasteel, om er een verpleeghuis voor epileptici, zwakzinnigen, vondelingen, weeskinderen en dakloze bejaarden te vestigen. Dit kasteel, dat Savelberg een jaar later met bijna 8 hectare kocht, werd voor een gedeelte door de zusters met hun vrouwelijke patiënten bewoond, terwijl, strikt gescheiden, de broeders en hun mannelijke patiënten in het andere gedeelte gehuisvest waren. Omstreeks 1900 werd het kasteel uitgebreid. Desondanks ontstond er door de toename van het aantal patiënten een gebrek aan ruimte. Om daaraan het hoofd te bieden, werd besloten de broeders te huisvesten in te realiseren nieuwbouw op het in Heel aan de tegenwoordige Rector Driessenstraat gelegen landgoed Daelzicht, dat de congregatie in 1907 had weten te verwerven. In 1910 kwam deze nieuwbouw gereed. Vanuit het kasteel in Heel namen de broeders er toen met hun patiënten hun intrek. De zusters bleven wonen op het kasteel dat toen onder de naam Huize Sint Anna geheel voor hen en hun vrouwelijke patiënten ter beschikking kwam