Van Cortlandt Manor はもともと、王室憲章により、1697年にウィリアム3世から Stephanus Van Cortlandt に特許として与えられた 86,000 エーカー (35,000 ha) の土地であった。 西はハドソン川から東はニューヨーク州とコネチカット州の最初の境界線まで、縦20マイル、横10マイルのほぼ直方体で、「コートランド荘園」を形成しています。” この広大な土地は、ニューヨーク生まれのオランダ人紳士、ステファヌス・ヴァン・コートラントがインディアンから直接購入したものと、その後彼が購入した他の所有権によって取得したもので、この土地と、ハドソン川の西側、アンソニーの鼻の岬に面した小さな土地も、彼がインディアンから購入したものである。

マナー・ハウスは1732年以前に建てられたが、1749年に孫のピエール・ヴァン・コートラントが移り住むまで、所有者の主な住居ではなかった。

ピエールは1749年に家族を連れてきて、荘園を最も活気のある時代にした、と言われている。 この時期、荘園はリンゴ園、酪農場、養蜂場、窯、酒場、大工と鍛冶屋を営んでいたそうです。 ピエールとその家族が住んでいる間、ヴァンコートランド荘は自立した共同体であった。 しかし、この頃、独立戦争につながる緊張が高まっており、荘園は戦時中の隠れ家的な場所となる。 ピエールは植民地側につき、荘園は大陸軍を支援するために、その資源を利用して食料や物資を製造することになった。 ピエールは軍議に関わり、息子のフィリップは大陸軍の兵士となった。 やがてピエール一家は、戦争のさなかに荘園を明け渡した。 荘園はイギリス軍に荒らされ、劣悪な環境のまま放置されていた。 戦争が終わるころには准将となったフィリップが戻り、妹のキャサリンとともに荘園を修復した。

戦争後、ヴァンコートランド・マナーはニューヨークからオルバニーへのルートで欠かせない存在となった。 製粉所は再び繁栄し、地域社会や旅行者に食料、物資、宿泊施設を提供した。 ピエール夫妻は、荘園が再び完全に機能するようになった1803年まで戻ることはなかった。 荘園は、1945年に親族ではないオーティス・テイラーに売却されるまで、一族で受け継がれてきた。 この頃までには、この土地は輝きを失い、かつてのような繁栄した土地ではなくなっていた。 1953年にジョン・D・ロックフェラー・ジュニアが購入し、荘園の修復を開始した。 1961年、ヴァン・コートラント・マナーは国定歴史建造物に登録された。

この家はニューヨーク州コートラント・マナーの区域には含まれていない。 ヒストリック・ハドソン・バレーに含まれる邸宅のひとつである

。