Coll signifie « col » en catalan. Le mot belitre, dans cette même langue, désigne un gueux, un voleur, comme le mot français vieilli « bélître ». Le coll dels Belitres désigne le col par lequel s'enfuyaient les voleurs et les contrebandiers[4], nombreux dans cette région montagneuse et frontalière.
Le col a été l'un des principaux lieux de l'exode des républicains espagnols après la victoire des troupes franquistes en 1939. Près de 100 000 personnes[5] ont passé ce col pour se réfugier en France et dans les pays latino-américains.