Au cours de leur existence, Robert Bliss et son épouse Mildred(en) y rassemblèrent une importante collections d'objets et de livres. En 1940, la collection, la maison et le terrain furent l'objet d'une donation afin de créer la Dumbarton Oaks Research Library and Collection, dont la gestion fut confiée à l'université Harvard. À l'origine, l'institution ne s'intéressait qu'aux études byzantines. Elle publie une des plus importantes revues dans ce champ disciplinaire, les Dumbarton Oaks Papers.
La bibliothèque de Dumbarton Oaks possède plus de cent mille volumes. L'institution accueille plusieurs chercheurs résidents et accorde chaque année une quarantaine de bourses à destination de chercheurs visiteurs.
Les quatre hectares de jardins ont été dessinés sur la période 1922-1947 par l'architecte Beatrix Farrand. Ils se composent des parties suivantes : Star Garden, Green Garden, Beech Terrace, Urn Terrace, formal Rose Garden, Arbor Terrace, Fountain Terrace, Lover's Lane Pool, et Pebble Terrace, ainsi que Camellia Circle, Prunus Walk, Cherry Hill, Crabapple Hill, Forsythia Hill, et Fairview Hill. Les jardins sont ouverts au public.