Costruito intorno al 1200 su iniziativa di Hugues d'Olhain, da cui ha preso il nome, questo castello mostra una struttura medievale ben conservata. Dal ponte levatoio si accede ad una corte in cui è visibile una torretta di guardia (scala con 100 gradini), una sala gotica, detta "sala delle guardie", cantine dalle mura spesse da 2 a 3 m e una cappella. Piacevole passeggiata lungo il fossato.