Der massive Bau aus dem 14. Jahrhundert diente als wichtiges Stadttor und Sitz der städtischen Nachtwache. Im 18. Jahrhundert wurde der Turm teilweise als Waffenlager genutzt. Heute beherbergt der Tour de l’Horloge eine ständige Ausstellung zur Geschichte des Remparts d’Avallon, der Stadtbefestigung von Avallon.