Mencari untuk mendapatkan kembali kerajaan yang hilang oleh saudara tirinya Olaf Haraldsson, Harald memulai perjalanannya ke arah barat dan tiba di Sigtuna di Swedia, mungkin pada akhir tahun 1045.