Завоёванное Хоконом V укрепление представляло собой одноэтажное и трёхэтажное каменные строения, соединённые 60-метровой стеной. Недавно археологам удалось обнаружить ещё и мощную центральную башню со стенами толщиной 2 м. Хокону же этот кусок не показался лакомым, и он подарил всю провинцию Халланд шведскому герцогу (и по совместительству своему зятю) Эрику Магнуссону, с которым норвежский монарх ладил как нельзя лучше.

      Эрик вместе с супругой с радостью приняли такой подарок – здесь у них в 1316 г. рождается сын, будущий король Швеции Магнус Эрикссон. Эрик, надо сказать, прожил в замке не так уж долго: в 1317 г. он оказался на так называемом Нючёпингском пире, после которого его с братом заточили в одной из башен замка, где оба и скончались от голода.

      В 1321 г. в Варберге поселился Кнут Порсе (? – 1330). Он оказался тем человеком, который после смерти братьев Эрика и Вальдемара в Нючёпинге одержал победу над новым шведским монархом, королём Биргером, после позорного поражения вынужденного покинуть родную Швецию и скрываться у своей сестры Ингеборги и её мужа Эрика Менведа в Дании.

      Кнут был тем человеком, которому удалось убедить шведских аристократов выбрать новым монархом Магнуса Эрикссона, что было на руку прежде всего норвежцам. Возможно, именно в благодарность за это Кнут получил Варберг. Порсе всем сердцем желал создать собственную приграничную