לפני הצטרפותו לממשל קלינטון, עבד ברגר כעורך דין המתמחה בסחר בינלאומי. בשנותיו האחרונות כיהן כיושב ראש חברת ייעוץ לעניינים בינלאומיים ויושב ראש מועצה להשקעות בינלאומיות.
באפריל 2005 הודה ברגר בסעיף אישום משני בדבר נטילה בלתי מוסמכת ואחזקה של חומר מסווג מהארכיון הלאומי של ארצות הברית בוושינגטון. על פי התובע הראשי בתיק זה, נטל ברגר רק העתקים של מסמכים בעלי מידע מסווג, ושום חומר מקורי לא הושמד. הרקע לפרשת נטילת המסמכים הייתה לפני עדותו בועדה לחקר אירועי ה-11 בספטמבר, על דרך התנהלות ממשל קלינטון כנגד תכנוני מתקפות טרור משולבות של ארגון אל-קאעידה לפתיחת המילניום בשנת 2000, שאחת מהן נתגלתה בטעות.