Het enige gebouw in Broekhuizen dat nog aan de tijd der heerlijkheden herinnert is Kasteel Ooijen.
Het huis stamt uit de Middeleeuwen. In het midden van de 17e eeuw werd een groot gedeelte van de gebouwen gesloopt, slechts een gedeelte werd herbouwd. Het kasteel is in 2002 gerenoveerd en er zijn 10 vakantieappartementen in gerealiseerd.