IRIM at TRECVID 2012: Semantic Indexing and Instance Search
Nicolas Ballas
(1)
,
Benjamin Labbé
(1)
,
Aymen Shabou
(1)
,
Hervé Le Borgne
(1)
,
Philippe-Henri Gosselin
(2)
,
Miriam Redi
(3)
,
Bernard Merialdo
(3)
,
Hervé Jégou
(4)
,
Jonathan Delhumeau
(4)
,
Rémi Vieux
(5)
,
Boris Mansencal
(5)
,
Jenny Benois-Pineau
(5)
,
Stéphane Ayache
(6)
,
Abdelkader Hamadi
(7)
,
Bahjat Safadi
(7)
,
Franck Thollard
(8)
,
Nadia Derbas
(7)
,
Georges Quénot
(8)
,
Hervé Bredin
(9)
,
Matthieu Cord
(10)
,
Boyang Gao
(11)
,
Chao Zhu
(12)
,
Yuxing Tang
(12)
,
Emmanuel Dellandrea
(11)
,
Charles-Edmond Bichot
(11)
,
Liming Chen
(11)
,
Alexandre Benoit
(13)
,
Patrick Lambert
(13)
,
Tiberius Strat
(13)
,
Joseph Razik
(14)
,
Sébastien Paris
(14)
,
Hervé Glotin
(14, 15)
,
Tran Ngoc Trung
(16, 17, 18)
,
Dijana Petrovska-Delacrétaz
(16, 17, 18)
,
Gérard Chollet
(19)
,
Andrei Stoian
(20)
,
Michel Crucianu
(21)
1
LIST (CEA) -
Laboratoire d'Intégration des Systèmes et des Technologies
2 MIDI - Multimedia Indexation and Data Integration
3 Eurecom [Sophia Antipolis]
4 TEXMEX - Multimedia content-based indexing
5 LaBRI - Laboratoire Bordelais de Recherche en Informatique
6 LIF - Laboratoire d'informatique Fondamentale de Marseille - UMR 6166
7 LIG - Laboratoire d'Informatique de Grenoble
8 MRIM - Modélisation et Recherche d’Information Multimédia [Grenoble]
9 LIMSI - Laboratoire d'Informatique pour la Mécanique et les Sciences de l'Ingénieur
10 MALIRE - Machine Learning and Information Retrieval
11 imagine - Extraction de Caractéristiques et Identification
12 LIRIS - Laboratoire d'InfoRmatique en Image et Systèmes d'information
13 LISTIC - Laboratoire d'Informatique, Systèmes, Traitement de l'Information et de la Connaissance
14 LSIS - Laboratoire des Sciences de l'Information et des Systèmes
15 IUF - Institut universitaire de France
16 TSP - EPH - Département Electronique et Physique
17 SAMOVAR - Services répartis, Architectures, MOdélisation, Validation, Administration des Réseaux
18 CNRS - Centre National de la Recherche Scientifique
19 LTCI - Laboratoire Traitement et Communication de l'Information
20 CEDRIC - Centre d'études et de recherche en informatique et communications
21 CEDRIC - VERTIGO - CEDRIC. Données complexes, apprentissage et représentations
2 MIDI - Multimedia Indexation and Data Integration
3 Eurecom [Sophia Antipolis]
4 TEXMEX - Multimedia content-based indexing
5 LaBRI - Laboratoire Bordelais de Recherche en Informatique
6 LIF - Laboratoire d'informatique Fondamentale de Marseille - UMR 6166
7 LIG - Laboratoire d'Informatique de Grenoble
8 MRIM - Modélisation et Recherche d’Information Multimédia [Grenoble]
9 LIMSI - Laboratoire d'Informatique pour la Mécanique et les Sciences de l'Ingénieur
10 MALIRE - Machine Learning and Information Retrieval
11 imagine - Extraction de Caractéristiques et Identification
12 LIRIS - Laboratoire d'InfoRmatique en Image et Systèmes d'information
13 LISTIC - Laboratoire d'Informatique, Systèmes, Traitement de l'Information et de la Connaissance
14 LSIS - Laboratoire des Sciences de l'Information et des Systèmes
15 IUF - Institut universitaire de France
16 TSP - EPH - Département Electronique et Physique
17 SAMOVAR - Services répartis, Architectures, MOdélisation, Validation, Administration des Réseaux
18 CNRS - Centre National de la Recherche Scientifique
19 LTCI - Laboratoire Traitement et Communication de l'Information
20 CEDRIC - Centre d'études et de recherche en informatique et communications
21 CEDRIC - VERTIGO - CEDRIC. Données complexes, apprentissage et représentations
Nicolas Ballas
- Fonction : Auteur
- PersonId : 767569
- IdRef : 176879218
Hervé Le Borgne
- Fonction : Auteur
- PersonId : 181478
- IdHAL : herve-le-borgne
- ORCID : 0000-0003-0520-8436
- IdRef : 079208452
Philippe-Henri Gosselin
- Fonction : Auteur
- PersonId : 9334
- IdHAL : philippe-henri-gosselin
- IdRef : 106963392
Boris Mansencal
- Fonction : Auteur
- PersonId : 3740
- IdHAL : boris-mansencal
- ORCID : 0000-0002-9190-4819
- IdRef : 228223601
Jenny Benois-Pineau
- Fonction : Auteur
- PersonId : 7842
- IdHAL : jenny-benois-pineau
- ORCID : 0000-0003-0659-8894
- IdRef : 074466992
Stéphane Ayache
- Fonction : Auteur
- PersonId : 16733
- IdHAL : stephane-ayache
- ORCID : 0000-0003-2982-7127
- IdRef : 129313254
Georges Quénot
Connectez-vous pour contacter l'auteur
- Fonction : Auteur correspondant
- PersonId : 3114
- IdHAL : georges-quenot
- ORCID : 0000-0003-2117-247X
- IdRef : 034104518
Connectez-vous pour contacter l'auteur
Hervé Bredin
- Fonction : Auteur
- PersonId : 15856
- IdHAL : hbredin
- ORCID : 0000-0002-3739-925X
- IdRef : 121165779
Matthieu Cord
- Fonction : Auteur
- PersonId : 13617
- IdHAL : matthieucord
- ORCID : 0000-0002-0627-5844
- IdRef : 132968126
Emmanuel Dellandrea
- Fonction : Auteur
- PersonId : 7701
- IdHAL : emmanuel-dellandrea
- ORCID : 0000-0001-7346-228X
- IdRef : 114133034
Charles-Edmond Bichot
- Fonction : Auteur
- PersonId : 4094
- IdHAL : charles-edmondbichot
- IdRef : 120583860
Liming Chen
- Fonction : Auteur
- PersonId : 7562
- IdHAL : liming-chen
- IdRef : 067400175
Alexandre Benoit
- Fonction : Auteur
- PersonId : 6090
- IdHAL : alexandre-benoit
- ORCID : 0000-0002-0627-4948
- IdRef : 118249711
Patrick Lambert
- Fonction : Auteur
- PersonId : 864297
Joseph Razik
- Fonction : Auteur
- PersonId : 764010
- IdRef : 120118610
Sébastien Paris
- Fonction : Auteur
- PersonId : 758773
- ORCID : 0000-0003-1814-7679
Hervé Glotin
- Fonction : Auteur
- PersonId : 181213
- IdHAL : herve-glotin
- ORCID : 0000-0001-7338-8518
- IdRef : 112112501
Gérard Chollet
- Fonction : Auteur
- PersonId : 176991
- IdHAL : gerard-chollet
- ORCID : 0000-0003-4245-146X
- IdRef : 078020824
Michel Crucianu
- Fonction : Auteur
- PersonId : 180351
- IdHAL : michel-crucianu
- ORCID : 0000-0001-8204-6843
Résumé
The IRIM group is a consortium of French teams work- ing on Multimedia Indexing and Retrieval. This paper describes its participation to the TRECVID 2012 se- mantic indexing and instance search tasks. For the semantic indexing task, our approach uses a six-stages processing pipelines for computing scores for the likeli- hood of a video shot to contain a target concept. These scores are then used for producing a ranked list of im- ages or shots that are the most likely to contain the tar- get concept. The pipeline is composed of the following steps: descriptor extraction, descriptor optimization, classi cation, fusion of descriptor variants, higher-level fusion, and re-ranking. We evaluated a number of dif- ferent descriptors and tried di erent fusion strategies. The best IRIM run has a Mean Inferred Average Pre- cision of 0.2378, which ranked us 4th out of 16 partici- pants. For the instance search task, our approach uses two steps. First individual methods of participants are used to compute similrity between an example image of in- stance and keyframes of a video clip. Then a two-step fusion method is used to combine these individual re- sults and obtain a score for the likelihood of an instance to appear in a video clip. These scores are used to ob- tain a ranked list of clips the most likely to contain the queried instance. The best IRIM run has a MAP of 0.1192, which ranked us 29th on 79 fully automatic runs.
Domaines
Recherche d'information [cs.IR]| Origine | Fichiers produits par l'(les) auteur(s) |
|---|
Loading...