Berger tillhörde kommittén för organiserandet av Svenska Gymnastik– och Idrottsföreningarnas Riksförbund 1903, var den drivande kraften vid utformandet av dess stadgar året därpå, var ledare för dess överstyrelse 1903–1922 och ordförande för dess stadgeutskott 1908–1912.