Nascida em 1834, data do primeiro banquete em honra ao abade de l’Épée, a "família" dos surdos-mudos é obra de Ferdinand Berthier (1803-1886). Ao introduzir essa tradição de banquetes, Berthier consegue federar os surdos em torno da imagem do famoso pedagogo. Em 1838, fundou a Sociedade Central dos Surdos-Mudos de Paris, composta apenas por surdos, que servia como um grupo de pressão "representativo". Berthier e seus "irmãos" surdos reivindicavam, principalmente, acesso à igualdade por meio da língua de sinais em todas as áreas da sociedade. Até 1848, eles conseguiram que suas demandas fossem ouvidas, em parte porque os franceses ainda não estavam sensíveis à ideologia do progresso. Desde a revolução de 1848 até a década de 1870, houve um declínio gradual da influência da "família" dos surdos-mudos, em proporção ao crescente apoio à ideia de progresso e à sua interpretação "oralista", que triunfou em 1880 após do congresso de Milão.