В четыре года его вернули в Тур, под родительский кров. Мать не сумела вызвать у детей любовь к себе. Оноре, пишет его сестра Лора, был "прелестный ребенок; веселый нрав, хорошо очерченный, всегда улыбающийся рот, темные глаза, блестящие и кроткие, высокий лоб, густые черные волосы - все заставляло прохожих оглядываться на него во время прогулок". Этот миловидный мальчуган, наивный и ласковый, постоянно встречал "суровый и испепелявший, как пламя, взгляд". Мать Бальзака "не признавала ни ласк, ни поцелуев, всех этих простых радостей жизни, она не умела создать для своих близких счастливый семейный очаг" Пристрастие к роскоши, желание нравиться и не ударить лицом в грязь портили ее характер.
Вторая сестра Оноре, Лоранса, родилась 18 апреля 1802 года, и по случаю ее крещения Бальзаки прибавили к своей фамилии дворянскую частицу "де", которую они, впрочем, впоследствии то употребляли, то опускали. Бернар-Франсуа быстро достиг довольно высокого положения в обществе. Пользуясь покровительством генерала-префекта, он постепенно становился одним из самых именитых жителей города. Сделавшись помощником мэра, он должен был приобрести недвижимость в Туре. Продав ферму в Газеране, принадлежавшую жене, Бернар-Франсуа приобрел красивый особняк со старинной деревянной обшивкой, с конюшнями и садом; дом этот под номером 29 помещался на улице Эндр-и-Луара: "Улица эта... императоров достойна... улица о двух тротуарах... искусно вымощенная, красиво застроенная, отлично прибранная и умытая, гладкая, как зеркало; царица всех улиц... единственная улица в Туре, достойная так называться" [Бальзак, "Озорные рассказы"]. Неделю спустя он купил ферму Сен-Лазар - на дороге из Тура в Сент-Авертен. Ферма, принадлежавшая государству, была конфискованным во время Революции церковным владением; это отпугивало святош, и потому покупка оказалась выгодной.
Еще более честолюбивый, чем прежде, убежденный в том, что, пользуясь негласной поддержкой, можно всего добиться, Бернар-Франсуа плел интриги, и у него вовсе не оставалось времени для воспитания детей. Его очень молодая и очень хорошенькая жена с упоением кружилась в вихре светской жизни; она пленяла и простоватых владельцев окрестных замков, и англичан, которые в ту пору не имели права покидать Тур.
Впоследствии, уже в пожилом возрасте, она говорила дочери: "Будучи женой немолодого человека, я вынуждена была соблюдать особую осмотрительность и держать на расстоянии тех, кто находил меня красивой; несколько суровое выражение моего лица приводило к тому, что меня считали скорее неприветливой, нежели любезной". Тщетная предосторожность! Завистливые местные дамы находили "ее наряды слишком изысканными" и намекали, что муж Лоры Бальзак чересчур преуспевает в делах. Своими успехами и победами она восстановила против себя всех добродетельных женщин города. "Твой отец, помня о своем преклонном возрасте, был настолько деликатен, что ничего не говорил мне". Он ничего не сказал и тогда, когда пошли разговоры о связи его жены с господином де Маргонном, владельцем замка в Саше. В глазах Бернара-Франсуа мир в семье был важнейшим условием долголетия.
Семья Маргонн занимала промежуточное положение между буржуазией и мелким дворянством. По общему мнению, члены семьи имели полное право на дворянскую частицу "де", однако Жан де Маргонн подписывался просто "Маргонн", так он и фигурировал в реестрах городской мэрии. Этот красивый молодой человек, родившийся в 1780 году, женился в 1803 году на своей кузине Анне де Савари, молодой девушке невысокого роста, с желтым лицом, горбатой и угрюмой; она принесла ему в приданое земельные угодья в Саше с тремя усадьбами, двумя фермами и шестью мельницами. Мессир Анри-Жозеф де Савари, мелкий дворянин, бывший кавалерийский офицер, приобрел в 1791 году в Вуврэ поместье Кайери с большим виноградником. Он носил парик, содержал любовницу-служанку, и "под его обманчивой простотою скрывалась чисто крестьянская осторожность". Его зять Маргонн - человек элегантный, холодный, слишком "городской" для того, чтобы похоронить себя в деревне, до 1815 года жил больше в Туре, нежели в Саше. Желая иметь благовидный предлог для того, чтобы оставаться в городе, он стал офицером городской когорты - этого цвета национальной гвардии. По воскресеньям он дефилировал со своими гренадерами по городскому бульвару и Королевской улице. Быть может, глядя, как торжественно выступает в своем парадном мундире этот видный собой, самодовольный человек, Лора Бальзак - если иметь в виду семейные предания и законы вероятности - и влюбилась в него. Всякая любовная связь целиком поглощает женщину. Даже после того, как сын и дочь вернулись из Сен-Сир-сюр-Луар домой, мать виделась с ними только по воскресеньям.
Оноре, Лора и Лоранса были доверены попечению грозной гувернантки, мадемуазель Делаэ; они жили в страхе перед пристальным взглядом темно-синих глаз матери и лживыми обвинениями гувернантки, которая утверждала, что Оноре ненавидит родительский дом, что он неглупый, но скрытный ребенок. Она насмехалась над тем, что мальчик мог подолгу, не отрываясь, смотреть на звезды. Совсем еще ребенком он разыгрывал небольшие комические сценки, чтобы позабавить сестер. Его сестра Лора вспоминает:
"Часами он пиликал на маленькой красной скрипке, и по его сияющему лицу было ясно видно, что в ушах у него звучат чудесные мелодии. Вот почему он очень удивлялся, когда я умоляла его прекратить этот кошачий концерт. "Неужели ты не слышишь, как это красиво?" - спрашивал он меня".
Оноре обладал счастливым свойством - он жил в воображаемом мире, и в его ушах звучали божественные аккорды, которых никто, кроме него, не слышал.
Самым примечательным событием первых лет его жизни было короткое путешествие в Париж. Дедушка и бабушка Саламбье пожелали познакомиться с внуком. Госпожа Бальзак повезла сына к ним, и старики были просто без ума от хорошенького мальчугана, которого они осыпали поцелуями и подарками. Не привыкший к такому ласковому обращению Оноре, возвратившись к себе, без конца рассказывал сестрам, какой хороший дом у дедушки и бабушки, какой там красивый сад и какой у них чудесный сторожевой пес по имени Муш. Госпожа Саламбье со своей стороны охотно описывала всем следующую забавную сценку, о которой вспоминает Лора Сюрвиль: