पहरे में रहने के वावजूद नेपोलियन बाग़बानी का अपना शौक पूरा करते. इस काम में दो चीनी मजदूर उनकी मदद करते. नेपोलियन पौधों को अपने हाथ से पानी देना पसंद करते. नेपोलियन सही मायनों में न तो युद्धबंदी थे और न ही सज़ायाफ़्ता अपराधी. एक हद तक ही उनको पैदल चलने या घुड़सवारी करने की छूट दी जाती थी. उस समय भी हमेशा एक ब्रिटिश अफ़सर उनके साथ चलता था, घर के अंदर भी सैनिक उनकी हर गतिविधि पर नज़र रखते थे.

दिन में दो बार एक अफ़सर उनके सामने जाकर उनके वहाँ रहने की पुष्टि करता था. सेंट हेलेना के गवर्नर रहे रियर एडमिरल सर जॉर्ज कॉकबर्न ने अपनी डायरी में लिखा था, “दो पानी के जहाज़ हमेशा द्वीप का चक्कर लगाते रहते थे. नेपोलियन को कोई भी अख़बार पढ़ने के लिए नहीं दिया जाता था. इस बात के कोई सबूत नहीं हैं कि नेपोलियन ने सेंट हेलेना से कभी बच निकलने के बारे में सोचा हो.”

इसके विपरीत उन्होंने अपने-आप को वहाँ के हालात में कुछ इस तरह ढाल लिया था कि लगता था कि वो इसका आनंद लेने लगे हैं. वो सभी ब्रिटिश अधिकारियों के साथ विनम्र व्यवहार करते थे. वहाँ आने या वहाँ से गुज़रने वाले ब्रिटिश सैनिकों के लिए नेपोलियन की एक झलक भर पा लेना एक बहुत बड़ा आकर्षण हुआ करता था.

उन लोगों के साथ भी नेपोलियन का व्यवहार बहुत अच्छा हुआ करता था. नतीजा ये हुआ कि ब्रिटिश अख़बारों में इस आशय की ख़बरें छपने लगीं कि नेपोलियन को बहुत कठिन परिस्थितियों में रखा जा रहा है.

अप्रैल, 1816 में मेजर जनरल सर हडसन लोव ने एडमिरल कॉकबर्न की जगह सेंट हेलेना के सैनिक गवर्नर का कार्यभार संभाला, लेकिन शुरुआत से ही नेपोलियन और लोव के बीच नहीं बन पाई.

एडम ज़मोइस्की ने लिखा, “जब नए गवर्नर बिना पूर्व सूचना के लौंगवुड हाउस पहुंचे तो नेपोलियन ने उनसे मिलने से इनकार कर दिया. नेपोलियन ने उन्हें कहलवा भेजा कि वो उनसे अगले दिन मुलाकात करेंगे. मुलाकात हुई भी लेकिन नेपोलियन ने उसी क्षण से उन्हें नापसंद करना शुरू कर दिया. लोव ने भी नेपोलियन को सबक सिखाने का फ़ैसला कर लिया.”

जब नेपोलियन के एक अंग्रेज़ प्रशंसक ने उन्हें किताबों को दो कार्टन भेजे तो लोव ने उन्हें ज़ब्त करवा दिया. जब उनकी बहन पोलीन ने उनके इस्तेमाल के लिए कुछ चीज़ें भेजी तो उन्हें नेपोलियन के पास ये कहकर जाने से रोक दिया गया कि उन्हें इतनी सारी चीज़ों की ज़रूरत नहीं है.

इस बीच लोव और नेपोलियन के बीच दो मुलाकातें हुईं. टॉमस ऑबरी अपनी किताब में लिखते हैं. “नेपोलियन इन मुलाकातों को दौरान पूरे वक्त खड़े रहे. नतीजा ये रहा कि लोव को भी खड़े रहना पड़ा क्योंकि सम्राट के सामने बैठना प्रोटोकॉल के ख़िलाफ़ होता. लोव को ऊपर से आदेश हुआ कि नेपोलियन पर होने वाले ख़र्चे को कम किया जाए. जब लोव ने इस बारे में नेपोलियन से बात करनी चाही तो उन्होंने कहा कि इस बारे में मेरे बटलर से बात करिए.”

जब 18 अगस्त, 1816 को लोव एक बार फिर नेपोलियन से मिलने गए तो नेपोलियन उस पर ये कहकर बरस पड़े कि आप एक मामूली क्लर्क के सिवा कुछ भी नहीं हैं.

गिल्बर्ट मार्टिन्यू नेपोलियन की जीवनी में लिखते हैं, “नेपोलियन ने लोव से कहा कि ‘तुम सम्मानीय व्यक्ति कतई नहीं हो. तुम वो शख़्स हो जो चोरी-छिपे दूसरों के पत्र पढ़ता है. तुम मात्र एक जेलर हो, सैनिक तो बिल्कुल भी नहीं. मेरा शरीर ज़रूर तुम्हारे हाथ में है, लेकिन मेरी आत्मा स्वतंत्र है.”

ये सुनते ही लोव का मुंह लाल हो गया. उसने नेपोलियन से कहा ‘तुम हास्यास्पद हो और तुम्हारी अशिष्टता दयनीय है.’ ये कहकर लोव वहाँ से चले आए.

इसके बाद उनकी नेपोलियन से जीवित रहते कभी मुलाक़ात नहीं हुई.