Paul Brousse fit partie de l’équipe de la Jeanne d’Arc de Vichy avec les Américains Rudy Bennett et Larry Robertson, André Jacquemot, Alain Schol, et Paul Besson et le coach Djordje Andrijasevic qui fut finaliste de la coupe d’Europe des vainqueurs de coupe, en 1970 et double vainqueur de la coupe de France (1969 et 1970). « Quand il est arrivé à Vichy en 1963, il était champion de France junior avec Villeurbanne et capitaine de l’équipe de France junior. C’était un sacré renfort. C’était un ailier adroit, vif, percutant, qui aimait attaquer le cercle. En cela, il était en avance sur son temps », témoigne Paul Besson auprès de La Montagne.
Paul Brousse a également été président de la JAV de 1989 à 1993 et jusqu’à l’an dernier il venait encore voir l’équipe de Pro B malgré la maladie.