Cette forteresse est un des plus beaux exemples de motte féodale à basse cour de l'Eure et Loir. Ses dimensions sont considérables puisque son grand diamètre approche des 90 mètres. Les fossés ont actuellement une largeur de 10 à 12 mètres et une profondeur qui varie suivant les points de 5 à 10 mètres. A l'origine ces fossés devaient être nettement plus creux qu'à l'heure actuelle.
C'est vraissemblablement pour faire face à la forteresse normande de la Madeleine de Nonancourt, construite par Henri 1er Beauclerc, duc de Normandie et Roi d'Angleterre, que le roi de France Louis VII, et Hugues II, seigneur du Thimerais, firent construire cette puissante motte, vers 1150.
Louis VII put s'emparer de la place forte de Verneuil en 1174. Il rencontra son adversaire, Henri II Plantagenêt, au gué de St Rémy. D'autres rencontres eurent lieu plus tard entre Henri II et son fils Richard Coeur de Lion, avec Philippe Auguste, roi de France. La proximité de ce chateau et du gué rend probable le séjour du roi de France en ces lieux.