Le début de la construction du château en 1412 est attribué à David de Rambures, Grand Maître des Arbalétriers de France, la plus haute distinction militaire de l'époque, le "Lord Rambures" du Henry V de Shakespeare. Il mourut en 1415 à la bataille d'Azincourt. Jacques de Rambures, le petit-fils de David, en acheva la construction en 1470. Le propriétaire actuel du château est Charles Henri Le Tellier de Blanchard de La Roche-Fontenilles, comte de Blanchard, marquis de La Roche-Fontenilles.