拉斯加斯走後，古爾戈受到貝特朗和蒙託隆更猛烈的攻擊，他現在常常喃喃自語“走了，走吧”，而拿破崙卻躲在後面偷笑。和假軍人、新貴軍人蒙特隆爭寵的古爾戈發現他的對手在拿破崙王國中的地位已經超過了他。 現在，蒙託隆甚至拿古爾戈曾在布里埃納救過拿破崙但拿破崙一口否定之事對古爾戈進行揶揄取笑。但那事是千真萬確的。古爾戈大怒，向蒙託隆提出決鬥。但欺善怕惡的懦夫蒙託隆退縮了，拿破崙進行了干預，禁止決鬥，並批評了古爾戈，卻沒有批評蒙託隆。
這是最後的羞辱了，古爾戈請求拿破崙讓他離開該島，並很快就獲准離去。拿破崙對古爾戈還有一點不滿，他在給他母親的信件中將島上的生活說得很好，說哈德森·洛給他們的待遇十分慷慨。其中的一些信件落入巴黎官員手中，這些描述和此前拿破崙對島上的描寫截然不同，引起譁然。
1818年2月13日，古爾戈離開了朗伍德，在總督官邸附近的一間農舍裡待了幾個星期，等下一艘船到來。拿破崙拒絕支付他按理應該給的錢，使古爾戈身無分文、窘迫萬分，直到總督洛自掏腰包給了他100英鎊……
5月1日到達英國後，古爾戈同國務大臣談話，揭露了拿破崙對歐洲捏造島上事實的情況，他也指出拿破崙若要逃脫易如反掌。但古爾戈承認道：“無論他（拿破崙）在那兒如何的鬱郁不快，他仍秘密地享受著他的監禁生涯的重要性，享受著歐洲強國對該島所注入的興趣，以及對他的隻言片語的關注。”拉斯加斯證實了這一點，在離島前他引用了拿破崙的話說：“我們在此的形勢甚至有其積極的一面。歐洲所有人都在注視著我們。我們仍是不朽之途上的殉難者。”
陰謀詭計，同住在朗伍德屋簷下的那種強制性的親密關係以及相互衝突的個性，決定了他們必然會散夥。拉斯加斯、古爾戈以及奧梅拉都走了，現在貝特朗和蒙託隆夫人也堅持要帶著他們的孩子離開。可以肯定的是，這裡確實有過快樂的日子，特別是當身體發福、頭髮越來越稀疏的拿破崙也戴著他的大簷帽出現的時候。在晚上，他們大聲誦詩、下棋或打檯球，拿破崙又出了一個新的怪招，用手代替彈子棒打檯球。
費舍舅舅送3個科西嘉人來到聖赫勒拿島：兩個牧師和醫生安托馬奇。但這也不能改善朗伍德的凝重氣氛。沮喪的蒙託隆夫人被允許同她的孩子們，包括她才出生的女兒拿破里奧尼②，於1817年7月的頭一個星期乘船回法國。而可愛的身材高挑的金髮女郎貝特朗夫人法妮，在備受了數月的羞辱後，非常討厭拿破崙，拒絕再去朗伍德，卻被迫留了下來。生活變得更加單調壓抑，更令人無法忍受了。蒙託隆沒有離開的惟一理由是拿破崙曾賄賂他，許諾在等他的妻兒回到法國後就給她們一大筆錢，但暗示蒙託隆必須留下。
貝特朗夫人愈來愈迫切地想離開這個孤島， 特別是得知1817年她母親就已去世的訊息後就更想逃離該島。1820年，當她最後打算帶兒子女兒離開時，貝特朗宣佈他將在同一年內回國與自己的妻兒團聚。但拿破崙不允許。憤怒的法妮扔下她的行李，最終留了下來，但拒絕再同拿破崙交談，直到他死前數小時。
然而，早些時候，有3個人成功地逃脫了朗伍德，當然不是心甘情願的。最先是拿破崙的科西嘉男管家西普雷阿尼，他實際上是拿破崙的間諜軍官（兩家在阿雅克肖就是世交好友），這個從未得過感冒的身體強壯的人在1818年2月24日那天突然全身發冷，腹痛難忍、嘔吐——48小時後，他死了；醫生們都很困惑，但事實就是這樣——這個可憐人被埋在了附近。朗伍德方面對其死因提出了質疑，命�