El comtat, que es troba a la riba de l'estret Skagerrak, s'estén des Gjernestangen, a Risør, fins al Kvåsefjorden, a Lillesand. El 78% dels habitants del comtat viuen en els cinc municipis costaners: Arendal, Grimstad, Lillesand, Tvedestrand i Risør. El turisme és la principal font d'ingressos d'Aust-Agder. El municipi inclou les illes de Tromøy, Justøya, i Sandøya. L'interior del comtat abasta el districte tradicional de Setesdal, a través del qual flueix el riu Otra cap a la costa.
El significat del nom és «Agder Oriental», ja que Aust és la forma en nynorsk d'«est». Aust-Agder limita amb Vest-Agder, «Agder Occidental».
Fins al 1919, el comtat es deia Nedenes amt, nom del qual prové de l'antiga granja Nedenes (en nòrdic antic: Niðarnes). El primer element és el cas genitiu del nom del riu Nið (ara anomenat Nidelva), i l'últim element és nes, que significa «punta». El significat del nom del riu és desconegut.
Escut d'armes
L'escut d'armes data del 1958, i mostra dues barres d'or sobre un fons vermell. Simbolitzen el comerç de la fusta i la recuperació del mineral de ferro, que era important per a l'economia d'Aust-Agder.
Divisió administrativa
El sistema dels municipis, o kommuner, es va establir a Noruega el 1837, en base de les parròquies ja existents. Actualment el comtat d'Aust-Agder es divideix en 15 municipis:
Des del cens del 1769, Aust-Agder ha experimentat un constant creixement de la població: de 29.633-79.927 el 1900, i 102.848 el 2001. No va ser significativa l'emigració als Estats Units al segle xix i principis del segle xx.