Cette thèse est consacrée à l'étude de deux questions très différentes, reliées par les outils que nous utilisons pour les étudier. La première question est celle de la définition des théories de jauge sur un réseau avec un groupe de structure non commutatif. Ici, non commutatif ne signifie pas non Abelian, mais plutôt non commutatif au sens général de la géométrie non commutative. La deuxième question est celle du comportement des diffusions Browniennes sur des groupes matriciels non compacts d'un type spécifique, à savoir des groupes de matrices pseudo-orthogonales, pseudo-unitaires ou pseudo-symplectiques. Dans le premier chapitre, nous étudions des théories de jauge quantiques sur un réseau et leur limite continue sur le plan euclidien ayant une algèbre de Zhang pour groupe de stucture. Les algèbres de Zhang sont des analogues non commutatifs des groupes et contiennent la classe des groupes duaux de Voiculescu. Nous nous intéressons donc aux analogues non commutatifs des champs de jauges quantiques, que nous décrivons par l'holonomie aléatoire qu'ils induisent. Nous proposons une définition générale d'un champ d'holonomies ayant une symétrie de jauge présentant la structure d'une algèbre de Zhang, et construisons un tel champ à partir d'un processus quantique de Lévy sur une algèbre de Zhang. Dans le deuxième chapitre, nous étudions les approximations matricielles des champs maîtres en dimensions supérieures construits dans le chapitre précédent. Ces approximations (en distribution non commutative) sont obtenues en extrayant des blocs d'une diffusion unitaire Brownienne (à coefficients dans les algèbres de nombres réels, complexes ou quaternioniques) et en laissant la dimension de ces blocs tendre vers l'infini. Nous divisons notre étude en deux parties : dans la première, nous extrayons des blocs carrés tandis que dans la seconde, nous autorisons des blocs rectangulaires. Dans les deux derniers chapitres, nous utilisons les outils introduits (algèbres de Zhang et diagrammes de Brauer colorés) dans les deux premiers pour étudier des diffusions sur des groupes de matrices pseudo-unitaires. Nous prouvons la convergence non commutative des mouvements Browniens pseudo-unitaires que nous considérons vers des semi-groupes libres avec amalgamation sous l'hypothèse de convergence de la signature normalisée de la métrique de l'espace sous-jacent. Dans le cas déployé, c'est-à-dire, qu'au moins asymptotiquement, la métrique a autant de directions négatives que de directions positives, la distribution limite est la distribution d'un processus de Lévy, solution d'une équation différentielle stochastique libre. Nous laissons ouverte la question d'une telle réalisation de la distribution limite dans le cas général. De plus, nous présentons des résultats numériques sur la convergence de la distribution spectrale de ces matrices aléatoires et faisons deux conjectures. Dans le dernier chapitre, nous prouvons la normalité asymptotique des fluctuations.