Correl-Net : segmentation des défauts par apprentissage profond dans les films anciens à l'aide de couches de corrélation
Résumé
Le processus de restauration de films anciens implique de nombreuses opérations, dont l’une consiste à identifier les défauts qui ont altéré le film. Cette opération peut être formulée comme un problème de segmentation binaire et résolue à l’aide de réseaux de segmentation de l’état de l’art tels que DeepLab v3+ ou NAS-FPN. Bien qu’elles soient très performantes pour apprendre les caractéristiques spatiales des défauts, ces méthodes ne prennent pas en compte le fait que les défauts constituent aussi des anomalies temporelles. Nous proposons donc une architecture fondée sur l’utilisation de couches de corrélation pour compenser le mouvement et éliminer les faux positifs potentiels, des éléments ressemblant à des défauts mais pouvant être suivis sur plusieurs images et faisant réellement partie de la scène. Nous introduisons également un processus de pré-entraînement auto-supervisé du réseau, qui précède une phase de spécification permettant d’adapter le détecteur à chaque film. Les résultats montrent que notre architecture, plus compacte et moins consommatrice de ressources que les méthodes de l’état de l’art, atteint une précision plus élevée tout en maintenant le rappel à un niveau comparable.
Domaines
Informatique [cs]Origine | Fichiers produits par l'(les) auteur(s) |
---|