Né à Boulogne-sur-Mer (Pas-de-Calais) le 6 juin 1850, d’une famille de pêcheurs ; lui-même marin-pêcheur. En 1904, Brunet fonda à Boulogne le syndicat des inscrits maritimes dont il fut le trésorier, puis le secrétaire. Il eut une grande activité lors des grèves de 1905. Candidat socialiste aux élections municipales de 1908 et de 1912, il fut élu conseiller municipal.