Castegens, terre et château sont situés sur les coteaux dominant la petite ville historique de Castillon la Bataille, située à quelques kilomètres de Saint Émilion. Différents actes authentiques font état de l'existence de la demeure en 1431. Le manoir actuel, notamment par la configuration de ses toits pentus en tuiles plates, est très spécifique de l'architecture début de XVIe siècle. L'actuel propriétaire descendant direct des Simard de Pitray et des Segur, le compte dans sa famille depuis 130 ans.
Le site est depuis quelques années durant l'été, le théâtre de la reconstitution à grand spectacle de la Bataille de Castillon (1453), dernière bataille de la guerre de Cent ans.