Radioheadin laulajan Thom Yorken mukaan laulun sanat kertovat hänen narsistisista ystävistään. "Justissa" on myös kitaristi Jonny Greenwoodin kitarasoolo, jossa hän käyttää ensimmäistä kertaa Digitech Whammy-pedaalia. Kappaleen kitaraosioita on inspiroinut post-punk-yhtye Magazine.
Englantilainen DJ ja tuottajaMark Ronson julkaisi kappaleesta oman versionsa helmikuussa 2008. Se on neljäs single Ronsonin toiselta albumilta, Version. Ronsonin versio kappaleesta julkaistiin aikaisemmin kokoelmalla Exit Music: Songs with Radio Heads.
Singlen musiikkivideon ohjasi Jamie Thraves. Yhtye valitsi hänet, koska he olivat nähneet hänen tekemiään lyhytelokuvia. Video nauhoitettiin Liverpool-rautatieaseman lähellä Lontoossa. Siinä yhtye soittaa kappaletta asunnossa ja tarinassa keski-ikäinen mies makaa keskellä jalkakäytävää. Ihmiset alkavat kerääntyä ja yrittävät auttaa makaavaa miestä, mutta mies ei ota apua vastaan. Yhtye seuraa tapahtumia asunnon ikkunasta. Video on tekstitetty, ja mies ja seuraajat keskustelevat. He yrittävät saada selville miksi mies makaa tiellä. Lopulta mies antaa periksi ja sanoo (tekstityksissä): "Kyllä, kerron teille, kerron teille miksi makaan tässä... mutta Jumala, anna anteeksi minulle... ja Jumala, auta meitä kaikkia... koska te ette tiedä mitä kysytte minulta." Kamera zoomaa miehen suuhun kun hän lopulta kertoo vastauksen, mutta tekstitykset ovat yhtäkkiä pysähtyneet, joten syytä ei kerrota. Kun kamera zoomaa pois miehen suusta, koko jalkakäytävä on täynnä makaavia ihmisiä.
Radioheadin jäsenet eivät ole paljastaneet, mitä miehen piti sanoa.