На Святой Елене впервые были отмечены разные колебания в самочувствии и поведении Наполеона. 23 ноября вся его свита, жившая в Джеймстауне, была приглашена на обед в дом Балькомбов. Бертран отправился туда первым, но вскоре вернулся с вестью об отмене обеда. На следующий день Гурго пришёл к императору для записи его диктовок. Он нашёл его не таким, как обычно, – очень усталым, не способным пройтись по двору Императора мучил кашель, ему был неприятен дневной свет. Бен Вейдер писал по поводу этого случая: «Нестабильность поведения Наполеона является одним из указаний на регулярное поступление в его организм мышьяка». То есть кто-то из окружения императора начал травить его.
Наполеон любил бывать у Балькомбов. Приходил с наступлением темноты. Хозяин дома обычно лежал на кушетке, положив больную ногу на табурет, жена и дети сидели вокруг него. Говорили обычно о прочитанных романах, девочки задавали наивные вопросы и заливались смехом, когда их гость отпускал острое словечко. Иногда играли в вист или пели знаменитую шотландскую Ye Banks And Braes, а развеселившийся император напевал «Да здравствует Генрих IV».
А снаружи – неподвижный жар тропической ночи; рабы ходят взад и вперёд по веранде, разнося угощения и напитки; лишь звон цикад нарушает тишину ночи да небольшие ночные бабочки вьются вокруг факелов, освещающих подход к дому.
Сорок один день с высадки на остров Наполеон ходил в форме конных стрелков императорской гвардии: белая рубашка, белый муслиновый галстук с чёрным шёлковым воротником поверх него, скреплённый сзади пряжкой, белые шёлковые чулки, белые брюки, жилетка того же материала, зелёный мундир с красной отделкой.
28 ноября император стал ходить в зелёном фраке, его единственным украшением была эмблема (лента) Почётного легиона, да и ту он скрывал между жилетом и костюмом. Пара форменных брюк из белой материи, шёлковые чулки, туфли, скреплённые пряжкой, и небольшая шляпа, ставшая знаменитой, – одежда, которой Наполеон пользовался на Святой Елене.
Император по-прежнему много работал – диктовал свои воспоминания: Лас-Казу об итальянских кампаниях, гофмаршалу Бертрану – о египетском походе, мемуары о днях Консулата, острове Эльба и периоде «Ста дней» – генералу Гурго. Графу Монтолону – о днях Империи. И ещё оставалось время на чтение и беседы. Тогда Наполеон принялся за изучение английского языка. До нас дошла одна запись, сделанная его рукой: