Zwarte vant en olympisk bronsemedalje i vannpolo under Sommer-OL 1976 i Montréal. Han var med på det nederlandske laget som kom på tredjeplass i vannpoloturneringen bak Ungarn og Italia. Det nederlandske laget vant to kamper og spilte to uavgjort og tapte èn i finalerunden som besto av seks lag. Nederland fikk seks poeng, samme som Italia som kom på andreplass. Zwarte spilte åtte kamper og scoret to mål i OL-turneringen.