Sous l'Ancien Régime, cette ferme était la propriété de la famille Fréville de l'Orme (cf notes abbé Caresme). Celle-ci est vendue le 27 janvier 1819 par contrat passé devant Me Lepicard, notaire à Rouen, entre M. Charles Frédéric de Fréville et M. Charles-François Harel, commerçant à Rouen (rue de l'épicerie) : « Les objets ci-après désignés et bornés comprenant la majeure partie de la ferme de l'Orme, lesquels consistent :

1- en une masure dite la masure de la ferme de l'Orme, située en la commune de Routot, arrondissement de Pont-Audemer, édifiée de douze corps de bâtiments tant grands que petits qui sont : maison, pressoir, caves, écuries, étables, four, granges, charterie et autres, avec un jardin enclos de murs close viron moitié en murs sont partie en mauvais état et l'autre moitié en fossés avec les hauts arbres dessus étant, une mare y attenante nommée la mare de la Croix de l'Orme et un petit massif de jeunes ormes près d'icelle, plantée d'arbres fruitiers, le tout ainsi qu'elle se comporte contenant environ deux hectares soixante-dix-neuf ares, quatre ares dix perches. »

En 1856, un litige relatif à la propriété de la mare de l'Orme oppose la municipalité et les habitants de Routot à M. Stanislas Harel, fils de M. Charles-François Harel. Celui-ci se solde par une transaction officielle signée le 25 septembre 1858 entre M. Pierre-Casimir Decaux, maire de Routot et M. Stanislas Harel, négociant à Rouen : le maire reconnaît que M. Harel est propriétaire de la mare. En contrepartie M. Harel concède aux habitants de Routot le « droit à perpétuité de puiser l'eau et d'abreuver à la mare et s'engage : 1- à curer cette mare toutes les fois que ce travail pourra être utile ; 2- à enclore cette mare dans le cas où cette précaution serait réclamée par l'autorité administrative en laissant la place nécessaire vers la voie publique pour exercer le doit de puisage et d'abreuvage ; 3- à entretenir la croix, comme il l'a toujours fait jusqu'à présent ; 4- à rembourser à la commune de Routot les contributions des deux objets dont il s'agit à partir de l'époque où elle a commencé à les payer ».

L'ensemble des dépendances agricoles semblent avoir été remaniées à la fin du 19e siècle créant un ensemble homogène avec la maison du corps de ferme. La grange est datée de 1881.

En 1885, la commune de Routot choisit d'aliéner le chemin rural n° 25, dit du Criquet à la Croix de l'Orme, mitoyen avec la commune de La Haye-de-Routot. Le plan dressé par l'agent-voyer du canton de Routot montre que les écuries n'étaient pas encore construites et que d'autres bâtiments ont été démolis par la suite ou déplacés (comme les étables).

La ferme est toujours en activité agricole. Avant 1989, elle appartenait à un propriétaire parisien et était exploitée par la famille Binet.