A geometrically aware auto-encoder for multi-texture synthesis - Archive ouverte HAL
Communication Dans Un Congrès Année : 2023

A geometrically aware auto-encoder for multi-texture synthesis

Résumé

We propose an auto-encoder architecture for multi-texture synthesis. The approach relies on both a compact encoder accounting for second order neural statistics and a generator incorporating adaptive periodic content. Images are embedded in a compact and geometrically consistent latent space, where the texture representation and its spatial organisation are disentangled. Texture synthesis and interpolation tasks can be performed directly from these latent codes. Our experiments demonstrate that our model outperforms state-of-the-art feed-forward methods in terms of visual quality and various texture related metrics. The code is available online.
Dans cet article, nous proposons une architecture d'auto-encodeur pour la synthèse multi-textures. L'approche repose à la fois sur un encodeur compact tenant compte des statistiques de second ordre des features issues de réseaux profonds et sur un générateur incorporant un contenu périodique adaptatif. Les images sont intégrées dans un espace latent de texture géométriquement cohérent, permettant de séparer la représentation de la texture et son organisation spatiale. Les résultats de nos expériences démontrent que notre modèle surpasse les méthodes de l'état de l'art en termes de qualité visuelle et de vitesse. Notre approche est également adaptée aux manipulations spatiales de la texture, telles que l'interpolation et l'expansion.
Fichier principal
Vignette du fichier
ssvm.pdf (8.76 Mo) Télécharger le fichier
Origine Fichiers produits par l'(les) auteur(s)

Dates et versions

hal-04115917 , version 1 (21-06-2023)

Identifiants

Citer

Pierrick Chatillon, Yann Gousseau, Sidonie Lefebvre. A geometrically aware auto-encoder for multi-texture synthesis. SSVM 2023 - International Conference on Scale Space and Variational Methods in Computer Vision, May 2023, Santa Margherita di Pula, Italy. pp.263-275, ⟨10.1007/978-3-031-31975-4_20⟩. ⟨hal-04115917⟩
52 Consultations
17 Téléchargements

Altmetric

Partager

More