Nommé évêque de Séez en 1651, l’année même où son frère ainé, Jacques Rouxel, recevait le bâton de maréchal de France, il se fit sacrer aux Jésuites de Pontoise le . Il obtint, 1653, les lettres patentes pour la fondation définitive du séminaire de Sées, commencé, en 1650, par Pierre Pavy et fonda l’infirmerie de l’hôpital de cette ville.
Élevé archevêque de Rouen en 1671, à l’âge de 67 ans, il établit les Bénédictines du Saint-Sacrement et le Petit Séminaire. « Quoiqu’il eût haute taille, yeux vifs, goûts économes[1] », il se laissa gouverner par une curie et bientôt par son coadjuteur et cependant il n’entrava pas le mouvement catholique dans son diocèse.
Son rôle dans l’Assemblée de 1682, où il siégea, fut décoratif plutôt qu’actif. Par déférence pour son coadjuteur, autant que par infirmité, il se retira au château de Grancey les deux dernières années de sa vie.