У Фиц-Роя был очень своеобразный характер. Он обладал многими благородными чертами: был верен своему долгу, чрезвычайно великодушен, смел, решителен, обладал неукротимой энергией и был искренним другом всех, кто находился под его началом. Он не останавливался ни перед какими хлопотами, чтобы помочь тому, кто, по его мнению, был достоин помощи. Это был статный, красивый человек, вполне выдержанный тип джентльмена, изысканно вежливый в обращении, напоминавший своими манерами, как говорил мне посол в Рио, своего дядю со стороны матери — знаменитого лорда Каслри. Вместе с тем, он, должно быть, много унаследовал в своей внешности от Карла II, — д-р Уоллич подарил мне коллекцию изготовленных им фотографий, и я был поражен сходством одного портрета с Фиц-Роем; посмотрев на подпись, я увидел, что это Ч. Э. Собесский Стюарт, граф д'Олбени, который был незаконным потомком названного монарха.
Нрав у Фиц-Роя был самый несносный, и это проявлялось не только во вспышках гнева, но и в продолжительных приступах брюзгливости по отношению к тем, кто его обидел. Обычно он бывал особенно невыносим по утрам: своими орлиными глазами он всегда замечал какое-нибудь упущение на корабле, и тогда он не сдерживал гнева. Утром, сменяя друг друга, младшие офицеры обычно спрашивали: "Много ли чашек горячего кофе было выпито [капитаном] сегодня", что значило — в каком настроении капитан? Он был также несколько подозрителен и то и дело пребывал в дурном настроении, а однажды почти впал в безумие. Мне часто казалось, что ему не хватает трезвости в суждениях и здравого смысла. Ко мне он относился очень хорошо, но ужиться с этим человеком при той близости, которая была неизбежна для нас, обедавших за одним столом вдвоем с ним в его каюте, было трудно. Несколько раз мы ссорились, ибо, впадая в раздражение, он совершенно терял способность рассуждать. Так, в самом начале путешествия, когда мы были в Баие в Бразилии, он стал защищать и расхваливать рабство, к которому я испытывал отвращение, и сообщил мне, что он только что побывал у одного крупного рабовладельца, который созвал [при нем] своих рабов и спросил их, счастливы ли они и хотят ли получить свободу, на что все они ответили: "Нет!" Тогда я спросил его, должно быть не без издевки, полагает ли он, что ответ рабов, данный в присутствии их хозяина, чего-нибудь стоит? Это страшно разозлило его, и он сказал мне, что раз я не доверяю его словам, мы не можем больше жить вместе. Я думал, что вынужден буду покинуть корабль, но как только известие о нашей ссоре распространилось, — а распространилось оно быстро, так как капитан послал за своим первым помощником, чтобы в его присутствии излить свой гнев, всячески ругая меня, — я, к величайшему своему удовлетворению, получил приглашение от всех офицеров обедать с ними в их кают-кампаний. Однако через несколько часов Фиц-Рой проявил обычное свое великодушие, послав ко мне офицера, который передал мне его извинения и просьбу по-прежнему обедать с ним. Вспоминаю и другой случай, характеризующий его искренность. В Плимуте, до того как мы отправились в плавание, он страшно разозлился на торговца посудой, который отказался обменять некоторые предметы, купленные у него в лавке. Тогда капитан спросил у него цену одного очень дорогого фарфорового сервиза и сказал: "Я приобрел бы его, если бы вы не были так нелюбезны". Так как я знал, что в каюте [капитана] имеется обильный запас посуды, я усомнился в том, чтобы у него действительно было такое намерение; я не произнес ни слова, но, должно быть, мое сомнение отразилось у меня на лице. Когда мы вышли из лавки, он взглянул на меня и сказал: "Вы не поверили моим словам!"; я вынужден был признать, что это так. Несколько минут он молчал, а затем сказал: "Вы правы, из-за моего гнева на этого подлеца я поступил неправильно".
В Консепсьоне, в Чили, бедный Фиц-Рой страшно переутомился и был в очень дурном настроении. Он горько жаловался мне, что должен устроить большой вечер для всех местных жителей. Я возразил, сказав, что при данных обстоятельствах нет необходимости делать это. Тогда он пришел в ярость и заявил, что я такого сорта человек, который примет любое одолжение и ничем за него не отплатит. Ни слова не произнеся, я встал, вышел из каюты и вернулся в Консепсьон, где жил тогда. Через несколько дней я вернулся на корабль и был принят капитаном с обычной сердечностью, так как к этому времени буря полностью миновала. Однако первый помощник сказал мне: "Чёрт вас побери, Философ, лучше бы вы не ссорились со шкипером! В тот день, когда вы ушли с корабля, я смертельно устал (корабль находился в ремонте), а он заставил меня до полуночи шататься с ним по палубе и все время бранился по вашему адресу".