Замок Де Хаар был построен бароном Ваном Зейленом ван Нейефелтом ван де Хаар, в 1892 году, по проэкту архитектора Кайперс (Кайперс, тем же самым, который построил государственный музей и центральную станцию в Амстердаме).

В 1482 году от замка остались одни руины. По ходу своей 700 летней историии замок не однократно перестраивался. Затем замок был заново построен через полвека. По легенде, по замку бродит привидение рыцаря Конрада - один из прежних владельцев, утонувший во рву собственного замка.