Если в отношении своей жены Сайго испытывал противоречивые чувства, то его местные друзья, Коба и Хоку, не вызывали у него подобного внутреннего конфликта. Коба был уроженцем Кагосима, с детства знавшим Сайго и Окубо. Он добился успеха как ученый и открыл академию в Кагосима, прежде чем получить пост в представительстве своего княжества в Осака. Когда Сайго был сослан на Амамиосима, Окубо вместе с другими друзьями добился назначения Коба на остров в качестве мэцукэ, официального цензора, осуществлявшего полицейский надзор. Как инспектор, Коба имел влияние на местных чиновников, благодаря чему мог обеспечить физическое благосостояние Сайго. Согласно устной традиции, Сайго и Коба были неутомимыми борцами с деспотичными местными порядками, главным защитником которых был управляющий островом Сагара Какухэй. Какими бы ни были их первоначальные отношения, Коба стал одним из самых близких друзей Сайго, с которым он делился тем, что оставалось неизвестным даже лучшим его друзьям с главных островов: счастьем, пережитым им в ссылке, и отвращением к осуществляемой на острове политике княжества.
Току Фудзинага родился на Амамиосима, в деревушке Кадо, расположенной неподалеку от Тацуго. Он служил начальником полиции округа Тацуго и через свою Жену являлся дальним родственником Айганы. Току и Сайго имели родственные души. Согласно местной традиции, Току славился своей честностью и силой характера. Хотя его должность предоставляла ему массу возможностей для личного обогащения, он жил скромно, полностью посвящая себя местным делам. Позднее он был переведен в округ Укэн, на южной оконечности Амамиосима, где его главным достижением стало строительство деревянного моста через небольшую речушку, разделявшую деревни Такэн и Юван. Как и Сай-го, Току был неподкупным, потому что он не испытывал интереса к материальным благам: Току и Сайго наслаждались простыми удовольствиями, которые приносили им охота и рыбалка. Как и в случае с Коба, начальная фаза отношений Сайго и Току не задокументирована, но Току также заслужил глубочайшее доверие Сайго. После возвращения на главные острова Сайго порушил Току присматривать за своей женой и детьми. Сайго чувствовал себя комфортно, демонстрируя Току как свое общественное, так и частное лицо. Например, в одном из писем он советовал Току, на каком острове чиновникам можно верить, рассказывал, как сильно он тоскует по своим детям, делился слухами об одном островном романе. Сайго доверил Току определяющий конфликт своей жизни: он хотел быть великим и преданным слугою государства и в то же время вести тихую жизнь, занимаясь рыбной ловлей с друзьями.
Сегодня в Тацуго есть реконструкция дома Сайго, построенного для его семьи. Согласно Рю Масака, дом, владельцем которого является один из потомков Айга-ны, стоит на том же месте, и при его возведении были использованы оригинальные столбы. В письмах Сайго не упоминается его дом, но устная традиция Амамиоси-ма повествует нам следующее: хотя к концу 1861 года Сайго имел на Амамиосима семью, учеников и близких друзей, а сам остров стал для него вторым домом, по его жилищу это было незаметно. Стремясь к уединению, Сайго изначально выбрал себе дом, расположенный на самой окраине Тацуго, или, точнее, на территории соседней деревушки Кобама. В 1859 году это было идеальное место для сердитого ссыльного холостяка. Однако в 1861-м Сайго пришлось еще раз вернуться к вопросу выбора дома. Поскольку теперь он был семейным человеком, дом в деревне казался более подходящим местом жительства для его жены и ребенка. В конце 1861 года Сайго, с помощью семьи Рю, занялся строительством нового дома, расположенного в самом центре Тацуго. По местным стандартам это был достаточно солидный дом: высокая соломенная крыша, под которой размещались две комнаты общей площадью около четырехсот квадратных футов. 20/11/1861 строительство дома было завершено, и Сайго посадил в саду памятное вишневое дерево. Вечером вся деревня собралась у него дома, чтобы отпраздновать новоселье. Тон единственного сохранившегося письма Сайго 1861 года подтверждает эту историю. В нем Сайго благодарил Окубо за то, что он старается получить для него прощение, но в то же время просил его признать свое поражение. Сайго не только примирился со ссылкой, но также начал демонстрировать некоторые признаки гордости за культуру Амамиосима. К письму он приложил образец копченой свинины, приготовленной по местному рецепту, и просил Окубо высказать о нем свое мнение. В этом письме Сайго очень похож на человека, который готов построить новый дом для своей новой семьи.