Софья Андреевна была абсолютно права, полагая, что и в этом, не слишком удачно ею выбранном доме жизнь была бы хороша, если бы были счастливы Лев Николаевич и дети, на которых он оказывал большое влияние. Только Сергей был доволен, чем и утешал мать. Роптала на первых порах, с грустью вспоминая о Ясной Поляне, даже Татьяна — но она вскоре закружится в вихре светских развлечений и романов с прекрасно танцующими и галантными московскими кавалерами, с головой и сердцем уйдет в эту новую и такую захватывающую жизнь, что и следовало предвидеть. Татьяне исполнилось восемнадцать лет. Она была рада вырваться из деревенского заточения даже больше матери. К тому же танцы и флирт сочетались с серьезными занятиями живописью.
В Ясную Поляну из карточного дома Волконского стремились сбежать и младшие дети. Но особенно тосковал и печалился Лев Николаевич, «впал не только в уныние, но даже в какую-то отчаянную апатию», перестал спать и есть. Подвел неутешительный итог первого московского месяца, «самого мучительного» месяца в его жизни: «Переезд в Москву. Всё устраиваются. Когда же начнут жить? Всё не для того, чтобы жить, а для того, что так люди. Несчастные! И нет жизни. Вонь, камни, роскошь, нищета. Разврат. Собрались злодеи, ограбившие народ, набрали солдат, судей, чтобы оберегать их оргию, и пируют». А затем нашел временный компромиссный выход из тягостного и тупикового положения, нанял себе для занятий две маленькие комнаты за шесть рублей во флигеле того же дома; там его, по крайней мере, не преследовала мысль о безлошадных крестьянах.
А для променада, общения с трудовым народом и необходимой после умственных занятий и изматывающих контактов с женой физической разрядки он уходил на Воробьевы горы пилить с мужиками дрова. «Это освежает меня, — признавался Толстой, — придает силы, видишь жизнь настоящую и хоть урывками в нее окунешься и освежишься». Илья, вспоминая первую зиму московской жизни, с удовольствием пишет об этих новых занятиях отца: «Приходил он домой усталый, весь в поту, полный новых впечатлений здоровой, трудовой жизни и за обедом рассказывал нам о том, как работают эти люди, во сколько упряжек, сколько они зарабатывают; и, конечно, он всегда сопоставлял трудовую жизнь и потребности своих пильщиков с нашей роскошью и барской праздностью». Не было в жизни семьи Толстых, понятно, никакой особенной роскоши и — тем более — барской праздности, но Толстой во всем был максималистом, предъявляя себе и близким чрезвычайно жесткие моральные требования. Непомерные: поднять «60 пудов» не могла ни Софья Андреевна, ни дети. Не под силу то было и самому Толстому. И невозможно, оставаясь в семье, в доме. Вот тогда-то в Москве во время очередной семейной ссоры (как всегда из-за «пустяков», каких-то курточек для детей, которые он не помогает шить) Лев Николаевич и воскликнул, что его самая страстная мечта уйти от семьи. Уйдет он из «семьи» еще нескоро: почти три десятилетия пролетят. Через сутки наступит примирение. Но мысль об уходе уже никогда не пройдет, мрачной тучей-угрозой нависнув над домами Толстых в Москве и Ясной Поляне. Пока же Толстой будет уходить пилить дрова за Москву-реку: занятие полезное и невинное. Льву Николаевичу не было нужды к кому-либо обращаться за разрешением. Он жил по своей воле — и очень хотел пострадать в тюрьме, остроге, ссылке. А выпала ему на долю только одна бессрочная каторга — семейная.
Пилка дров и две маленькие рабочие комнаты во флигеле не решали проблемы. Измученную и уже готовую согласиться больше не приезжать жить в эту «зараженную клоаку» Софью Андреевну Толстой огорошил тем, что в мае 1882 года энергично бросился искать «по всем улицам и переулкам» другой, более подходящий дом или, на худой конец, квартиру. Свой выбор он остановил на доме коллежского секретаря Ивана Александровича Арнаутова в Долго-Хамовническом переулке в районе Девичьего поля (Арнаутовка или Арнаутовский дом). На жену владельца дома Толстой произвел странное впечатление. Явился он первый раз поздно вечером, когда и рассмотреть толком ничего нельзя было, и вид его доверия не внушал: какой-то чудак в поношенном пальто и в порыжелой шляпе. Интересовался не так домом, как садом. Толстого действительно пленил своей «натуральностью» сад, где «было густо, как в тайге». Сад приглянулся и осматривавшему его в июне дяде жены Константину Александровичу Иславину: «Роз больше, чем в садах Гафиза, клубники и крыжовника бездна, яблонь с дерев десять, вишен будет штук 30, две сливы, много кустов малины и даже несколько барбариса. Вода тут же, чуть ли не лучше мытищинской. А воздух, а тишина! И это среди столичного столпотворения». Беседка перед террасой, столетняя липовая аллея, колодец с родниковой водой — рай, отгороженный от Содома, оазис в пустыне.