Ce château a été édifié au XVIe siècle en bordure de la forêt de Notre-Dame. Le domaine des Agneaux, qui doit son nom à une ferme d’élevage, dépendait alors de l’évêché de Paris. Il fut la possession de personnages de haut rang, tels Laurent de Naberat, secrétaire particulier d’Anne d’Autriche (1601-1666), épouse de Louis XIII (1601-1666), et Simon Lefèvre d’Ormesson, issu d’une grande famille de magistrats.

Depuis 1946, le domaine des Agneaux est devenu un golf, ce qui en fait l’un des plus anciens de France ! Le parcours se fait dans un remarquable environnement boisé.