Ei lita ferje går til Handa frå Tarbet på fastlandet og det går fleire båtturar til øya frå Fanagmore.
Øya består av raud sandstein og er omgjeve av klipper dekte av fuglar.
Nord på øya ligg to åsar, medan sør- og austsida er meir lågtliggande. Nord og vest på øya stig klippene til 100 meter, medan det er strender i sør og aust.
Mindre øyar rundt Handa er mellom anna Glas-Leac i sør, Eilean an Aigeach i nordaust og Stac an t-Sealbhaig i nord. Mellom øya og fastlandet ligg Sound of Handa.
Tidlegare vart øya nytt som gravplass og det er framleis restar av eit kapell søraust på øya.
Øya hadde 65 innbyggjarar i 1841, men potetsjuke tvinga folk bort i 1848. Dette er noko overraskande sidan øybuarane hadde ein forholdsvis variert diett som bestod av korn, fisk og sjøfugl, og ikkje var fullstendig avhengige av potetavlingane.