1806 afslog han at blive lordkansler, men fik i strid med gammel sædvane sæde i kabinettet indtil 1809. Som politiker var han en udpræget tory (især imod katolikkernes ligestilling), og som dommer lod han sig i politiske sager alt for meget påvirke af sine egne stemninger.