Lycéen, Michel Fayet se remémore de l’élection d’un député poujadiste en janvier 1956 dont l’invalidation donne lieu à une manifestation contre la présence de Jean-Marie Le Pen. A la tête du cortège qui vilipende la présence de l’extrême-droite dans la ville, Michel Fayet découvre Raymond Badiou, qui n’est rien moins que son professeur de mathématiques en plus d’être le maire socialiste.
Sortie des élèves du lycée en 1957 – Cette photographie provient du fonds André Cros, conservé par les archives municipales de la ville de Toulouse et placé sous licence CC BY-SA 4.0 par la délibération n°27.3 du 23 juin 2017 du Conseil Municipal de la Ville de Toulouse.
En 1957, le lycée de garçons de Toulouse se choisit un nom sur proposition de Raymond Badiou. Il prend le nom du célèbre mathématicien Pierre de Fermat.