« L'ignorance, la paresse, une déférence passive à l'autorité, l'intérêt et l'orgueil sont les sources les plus ordinaires des préjugés », s'exclamait Grégoire, et l'un des plus ancrés était celui de la couleur de la peau. Par testament, il fonda six prix à décerner par concours, dont le quatrième portait sur « les moyens d'extirper le préjugé injuste et barbare des blancs, contre la couleur des Africains et des sang-mêlé ». Organisé par la Société française pour l'abolition de l'esclavage, ce concours, dont la palme a été décernée non à l'abolitionniste Victor Schœlcher mais au haïtien S. Linstant, a suscité un vaste débat : plusieurs mémoires ont été rédigés dont deux ont été publiés, celui de Schœlcher en 1840 et celui de Linstant en 1841. Ces deux mémoires, très largement complémentaires, sont révélateurs des enjeux de l'époque à l'égard de la question de l'égalité et de l'esclavage. En effet, Linstant analyse essentiellement comment le préjugé, en s'étant d'abord attaché à la condition servile, s'est ancré sur la question de la couleur de la peau ; alors que l'ouvrage de Schœlcher constitue le premier véritable plaidoyer pour une abolition immédiate de l'esclavage. Le concours Grégoire forme ainsi un maillon déterminant dans la longue chaîne des abolitionnistes et des défenseurs de l'égalité, reliant les Amis des Noirs des années 1780 aux futurs acteurs de 1848.