Comme il était mineur à la mort de son père, survenue entre 1032 et 1035, la régence fut assurée par son grand-oncle, le pro-angevin Herbert Bacon. Gervais du Château du Loir, évêque du Mans, était un partisan blésois, et le régent et l'évêque entrèrent bientôt en lutte. Gervais, par un concile populaire, réussit à faire chasser Herbert en 1036 et proclama la majorité d'Hugues IV. Il arrange le mariage d'Hugues avec Berthe de Blois, mais Geoffroy II Martel, comte d'Anjou réplique en envahissant le Maine. Ce fut une époque où l'anarchie féodale s'installa dans le Maine, alors en proie aux ambitions angevines, blésoises et bientôt normandes.
