Nach akademischen Studien begann er eine militärische Laufbahn einzuschlagen, die er als Generalmajor der Kavallerie beendete. Im Krieg Karl XII. war er überwiegend mit der Rekrutierung und Ausbildung von Truppen beschäftigt. Er spielte aber auch eine wichtige Rolle im Zusammenhang mit der Verteidigung Stockholms im Jahr 1719. Im selben Jahr wurde er diplomatischer Gesandter in Paris.[1]
Im Jahr 1727 wurde er Landshövding in Västernorrlands län, wo er sich unter anderem für den Ausbau der Landstraßen einsetzte. In dieser Zeit beinhaltete dieser Län auch Gävleborgs län und Jämtland. Nachdem er zwölf Jahre als Landshövding seinen Dienst getan hatte, wurde er 1739 Präsident des schwedischen Staatskontors. Bielke war auch politisch sehr engagiert. So war er während der Freiheitszeit Mitglied in mehreren Reichstagen und Angehöriger der Mösspartei.[1]