Когда Бьерну было пять лет, в Швеции наступил кратковременный экономический спад, и работа на отцовской верфи остановилась из-за резкого снижения спроса на ее продукцию. Гуннар изо всех сил боролся за спасение своего бизнеса, но в конце концов все же стал банкротом. Он потерял много денег и, чтобы содержать семью, был вынужден пойти рабочим на завод по производству промышленного стекла в Гетеборге. Это было крушение всех его надежд и унижение, глубину которого Бьерну в то время было еще трудно осознать.
В скором времени к ним явилась помощь в лице брата Гуннара — Эсбьерна. Четырьмя годами старше Гуннара, Эсбьерн Ульфсетер работал коммивояжером в различных компаниях, пока не устроился на бумажную фабрику в Вестервике в середине 30-х.
Он быстро всходил по карьерной лестнице и в конечном итоге при¬обрел компанию, в которой работал, став ее единоличным владельцем. К концу 40-х он уже был весьма состоятельным человеком. Эсбьерн предложил своему испытывавшему финансовые трудности брату рабо¬ту менеджера на бумажной фабрике. Гуннар с благодарностью принял предложение и в 1951 году переехал с женой и детьми в Вестервик. Сменив за несколько лет несколько адресов, семья Ульвеусов в конце концов обосновалась в квартире на центральной улице Норртуллсгатан, неподалеку от моря.
Не одни они перебрались в Вестервик в первые послевоенные десятилетия. В результате бурного расцвета промышленности в регионе за период с 1940 по 1970 год население города почти удвоилось. Привлекал он и своим расположением на побережье. Небольшие деревянные домики и ратуша, построенная в 1795 году, создавали идиллическую, живописную картину.
Теперь, после не очень комфортного существования в окрестностях Гетеборга, Бьерн и его сестра могли в полной мере насладиться безмятежной жизнью детей представителей среднего класса в условиях общего экономического подъема в стране. В то время как остальная Европа приходила в себя после ужасов Второй мировой войны и восстанавливала разрушенную экономику, сохранившая нейтралитет Швеция процветала, пользуясь отсутствием экспортной конкуренции со стороны других стран.
С учетом того, как сильно пострадала шведская экономика за годы Великой депрессии, это был удивительный прогресс. Перелом наступил в середине 30-х, когда к власти пришли социал-демократы, как оказалось, на 40 лет. За последующие десятилетия Швеция превратилась в хорошо организованное государство, в основе развития которого лежала так называемая шведская модель. Под этим термином подразумевались, главным образом, смешанная экономика и взаимные соглашения между работодателями и профсоюзами на рынке труда. Эту конструкцию венчала хорошо развитая система социального обеспечения, лучше всего характеризуемая шведским словом «folkhemmet» — общество, воспринимаемое как «общий дом», где бережно заботятся о безработных, больных и престарелых.
Будущие поколения должны были полностью использовать предоставлявшиеся им возможности, и в семье на Бьерна оказывалось определенное давление в этом направлении. Дополнительным поводом к этому служила неудача Гуннара Ульвеуса на ниве собственного бизнеса. Эсбьерн Ульфсетер был владельцем бумажной фабрики, Леннарт Ульвеус стал главой агентства в Германии, а Гуннару приходилось до-вольствоваться скромной должностью служащего в компании Эсбьерна.
«Потерпев фиаско в судостроении, я решил, что мой сын обязательно станет судостроителем и достигнет в этой области всех возможных высот», — вспоминает он. Айна Ульвеус подтверждает: «Помню,когда Бьерн приносил из школы четверку, отец всегда спрашивал: «Почему только четверка, если ты мог получить пятерку?»
Поначалу Бьерн учился довольно средне. Как и большинство его школьных товарищей, он был бесшабашным малым, которого гораздо больше интересовали футбол и хоккей, чем учеба. Его любимыми предметами были физика, шведский и английский, и уже в раннем возрасте он начал писать стихи. Этому способствовала, главным образом, его учительница, эксцентричная пожилая дама, которая каждую субботу заставляла весь класс заниматься поэтическими экзерсисами. «Вдохновение текло рекой, — вспоминает Бьерн. — И все это время наша учительница сидела за своим столом и чистила рыбу!»
Музыка не занимала важного места в семье Ульвеусов. Гуннар играл на мандолине, но, как вспоминает Бьерн, «если говорить откровенно, это звучало не очень впечатляюще». В доме не было проигрывателя, поэтому главным источником популярной музыки служило радио, которое, по сравнению с сегодняшним днем, предоставляло мало возможностей для развлечения.