La ferme des Tournelles, autrefois appelée « Maison du Comte » fut édifiée par le Comte Charles 1er de Valois à la fin du XIII e siècle. De cette époque date la base cylindrique des deux tourelles et les fenêtres géminées dont le contour subsiste au premier étage attenant. Datant du XVIe siècle, le tiers supérieur des tourelles est octogonal et coiffé de pyramides en pierre soulignées d’arrêtes toriques. La ferme et les tourelles apparaissent sur le dessin de la « Gruerie de Nanteuil » daté de 1609.

En 1580, c’était l’hôtel seigneurial du fief des Tournelles, propriété des Greffin, seigneurs de Duvy. En 1592 Robert Greffin vend les bâtiments et la terre à Laurent Guillot. L’acte de vente en précise la composition : Maison, cave, étables, grange couverte de chaume, cour, jardin fermé de mur où il y a une fosse à poissons. La fosse était préalablement creusée dans le grand enclos actuel situé à l’ouest des bâtiments et pourvu de nombreuses sources.

En 1678 le bâtiment est dénommé « maison et ferme des Tournelles à Duvy ». La ferme reste dans la famille Guillot jusqu’au début du XVIIIe siècle.

Le 17 juillet 1967 la ferme devient la propriété d’Antoine Frenel « fermier des moulins de son Altesse Sérenissime Monseigneur le Duc d’Orléans ». L’édifice principal semble alors prendre les dimensions actuelles. Côté cour, une pierre de chaînage proche de l’extrémité est du bâtiment porte l’inscription « 1791 ». Les bâtiments formant la cour à l’est sont plus tardifs comme en témoigne une fenêtre à demi obturée. La ferme est restée la propriété des descendants des Frenel jusqu’en 1935.

Le porche actuel est surmonté d’un colombier, disposition caractéristique des entrées des fermes du Valois et du Multien. La vigne ornant la façade est au moins centenaire : elle figure dans les cartes postales datant du XXe siècle.