Rond het
Kasteel van Tilburg lagen destijds verschillende domeingronden met onderhorige pachthoeven die dienden tot levensonderhoud van de kasteelheren
Schetz van Grobbendonck. In een bewaard gebleven archiefstuk van 1665 is sprake van drie kasteelhoeven, waaronder de
Pijlijserhoeve of Waterhoef. De twee andere stonden in de herdgang
De Hasselt (Hasseltstraat), de ene op noordzijde van de hoek met de tegenwoordige Van Hogendorpstraat en de andere verderop in de straat richting het Wilhelminapark, nu bekend als de Kasteelhoeve. Na 1665 kwamen er nog twee hoeven, een op de zuidzijde van de hoek van de Hasseltstraat en de Van Hogendorpstraat en in 1736 de zogenaamde Nieuwe Hoef, gelegen op de hoek van de huidige Kwaadeindstraat en de Van Bylandtstraat. De Kasteelhoeve aan de Hasseltstraat is de enige die nog bestaat, mede dankzij het initiatief tot restauratie door prof. dr.
Harry van den Eerenbeemt in 1973. De verkoop van vijftienduizend historische kalenders door het
Tilburgs Studenten Corps Sint Olof legde hiervoor de financiële basis. De Kasteelhoeve was lange tijd in gebruik als wijkcentrum. In de voorgevel van deze Brabantse langgevelboerderij is in 1973 een stenen familiewapen van de laatste kasteelbewoners Van Hogendorp Van Hofwegen ingemetseld.
