Stalhouderij Kasteelsche Hof is gelegen op de voorburcht van het voormalige Kasteel Ooij.

De oude burcht, al vermeld in 1184, werd eeuwenlang bewoond door de adelijke geslachten Van Ooij en Van Bylandt. Het complex bestond uit hoofd- en voorburcht, torens, grachten en singels. Het grote middeleeuwse Kasteel werd in 1795 door Franse soldaten verwoest en is kort daarna afgebroken. Alleen de gebouwen op de voorburcht bleven behouden en werden als boerderij in gebruik genomen.

Wat er nu nog rest zijn o.a. de helft van het vroegere Gouverneurshuis met muurankers uit 1514.

De oude rijstal dateert uit de 17^e eeuw en heeft een prachtige bakstenen poort. Een gedeelte van deze stal werd in 1950 verbouwd tot woonhuis. Hieraan grenst een slanke, ietwat scheefstaande duiventoren.

Het geheel zal, zeker met de resterende gracht- en verdedigingsmuren, tot ieders verbeelding spreken.