Helier DeCarteret entdeckte die Ruinen dieses Anwesens, als er 1563 auf Sark landete. Er baute das Haus wieder auf und meißelte sein Wappen in den Stein, wodurch Le Manoir zur ursprünglichen Seigneurie wurde.

Le Manoir blieb bis 1730 Residenz des Seigneurs, als Susan Le Pelley zur Dame ernannt wurde. Sie entschied sich, in ihrem Wohnsitz Le Perronerie, innerhalb des Geländes der heutigen Seigneurie, zu bleiben und schenkte Le Manoir dem Pfarrer. Es diente weiterhin als Pfarrhaus bis in die 1930er Jahre, bevor es als Privathaus erworben wurde.