Феодальное соперничество между Бретанью и Нормандией не утихнет и тогда, когда Вильгельм достигнет совершеннолетия и возьмет правление герцогством в свои уже не юношеские руки. Воевать же много нормандцам придется против герцога Алена III Бретанского, который предъявил свои, пусть и сомнительные, права на Нормандию.
Здесь следует заметить, что такие феодальные войны в средневековой Франции больше напоминали разбойные набеги на соседа, и не всегда в ходе их осаждались рыцарские замки и города, больше напоминавшие большие крепости. Поэтому в военном противостоянии двух больших феодов Французского королевства вся их военная сила редко подвергалась полной мобилизации.
Политическая ситуация в верхнем эшелоне власти (среди родни Роберта Дьявола) в герцогстве с малолетним Вильгельмом во главе постоянно менялась. Это грозило ему и его «партии» серьезными бедами и утратами. Младшие единокровные братья отца, люди самолюбивые, Можер и Вильгельм де Талу стали быстро набирать силу, что укрепляло их амбициозность и увеличивало число сторонников. Естественно, что в таком случае уменьшалось число людей, которые стояли за бастарда, объявленного отцом законным наследником нормандского престола.
В 1037 (или 1038) году Можер утверждается архиепископом Руанским. Иначе говоря, он оказывается во главе церковной иерархии Нормандии. В то же время Вильгельм де Талу становится графом Аркеза, тогда для герцогства большого феода. То есть число подвластных ему рыцарей заметно увеличивается и он становится в военном отношении сильней. С 1039 года имена Можера и Вильгельма де Талу в официальных актах Нормандии встречаются сразу после имени ее правителя, а тот находился еще на полном попечении.
На фоне их возвышения в герцогском семействе появляются и другие усиливающиеся личности, которые готовы были начать передел верховной власти в Нормандии. Особую опасность для подрастающего бастарда Вильгельма представлял Рауль Гассийский, убийца опекуна графа Жильбера де Бриона. Это был человек коварный, честолюбивый, готовый на любые поступки, в том числе на открытое убийство.
Правда, Раулю Гассийскому не удалось воспользоваться землями и недвижимостью убитого Жильбера де Бриона, прежде всего его замками. Он их не получил даже по суду, хотя усилий к тому было приложено немало. Да и денег поистратил тоже много. Крепкие замки Брионн и Вернон вместе с землями, крестьянами на них и титулом графа получил Ги де Брионн (Ги Бургундский), известный в истории как друг детства Вильгельма Завоевателя и его соратник. Он был сыном графа Рено Бургундского и Адели, дочери герцога Ричарда II.