Im Dezember 1815 wurde ihm Longwood, eine Meierei auf der Hochebene der Insel, als vorläufige Wohnung angewiesen. Bereits 1815 begannen die Pläne für die Errichtung eines größeren Domizils für den ehemaligen Kaiser, denn das von jetzt an Longwood Old House genannte Gebäude war immer nur als Übergang gedacht. Nachdem er die Erschöpfung der letzten Monate überwunden, wurde ihm sein Aufenthalt bald unerträglich. Seine Ungeduld und Reizbarkeit ließ er an dem Gouverneur Sir Hudson Lowe aus, der durch die Befehle der Großmächte zu strenger Bewachung gezwungen war.
Seine Umgebung schmiedete fortwährend Fluchtpläne und forderte durch Versuche, mit Europa geheime Verbindungen anzuknüpfen, und durch maßlose Ansprüche scharfe Gegenmaßregeln Lowes heraus, über die man sich dann mit lauten Klagen beschwerte, bis Lowe alle Gefährten Napoleons, außer Bertrand und Montholon, von St. Helena entfernte.
Als man Napoleon nicht mehr erlauben wollte, ohne militärische Aufsicht ins Freie zu gehen, verließ er seine Wohnung nicht mehr. Meist beschäftigte er sich mit dem Diktieren der "Mémoires de Ste-Hélène", in denen er sein Leben, seine Absichten und Taten so darstellte, wie er sie von der Nachwelt aufgefasst wissen wollte, und sich mit dem erlogenen Schein der Vaterlands- und Freiheitsliebe und des Strebens nach der höhern Zivilisation der Menschheit umhüllte.
Anfang 1820 war Longwood New House fertig gestellt, doch Napoleon weigerte sich umzuziehen. Als Begründung diente ihm ein Eisenzaun, der einen unansehnlichen alten Holzzaun ersetzen sollte, welcher ihn an einen Gefängniszaun erinnerte. Longwood New House wurde kurz nach dem zweiten Weltkrieg abgerissen.
