Going Up the Country est écrite, composée et chantée par l'un des fondateurs de Canned Heat, Alan Wilson. Celui-ci s'est largement inspiré du morceau Bull Doze Blues, enregistré en 1928 par le bluesman américain Henry Thomas, dont il reprend la mélodie et la rythmique[3],[4]. C'est le musicien Jim Horn qui joue la mélodie à la flûte traversière[2].
La chanson, dont le protagoniste décide de quitter la ville pour s'installer à la campagne, devient très populaire auprès des hippies. Elle est l'une des chansons emblématiques du festival de Woodstock où Canned Heat l'interprète le et en devient un hymne non officiel[3]. Son enregistrement apparaît dans l'album liveWoodstock: Music from the Original Soundtrack and More tandis que la version studio est entendue dans le film documentaire réalisé par Michael Wadleigh, Woodstock[5].