Nach dem Rücktritt des Abgeordneten William H. Moody wurde Gardner bei der fälligen Nachwahl für den sechsten Sitz von Massachusetts als dessen Nachfolger in das US-Repräsentantenhaus in Washington, D.C. gewählt, wo er am 4. November 1902 sein neues Mandat antrat. Nach acht Wiederwahlen konnte er bis zu seinem Rücktritt am 15. Mai 1917 im Kongress verbleiben. Von 1905 bis 1909 war er Vorsitzender des Committee on Industrial Arts and Expositions. Während seiner Zeit im Kongress wurden der 16. und der 17. Verfassungszusatz ratifiziert.
Gardners Rücktritt erfolgte nach dem amerikanischen Eintritt in den Ersten Weltkrieg. Er schloss sich erneut der United States Army an und war in einem Ausbildungslager in Macon stationiert. Dort ist er am 14. Januar 1918 verstorben.