Offsite evaluation of localization systems: criteria, systems and results from IPIN 2021-22 competitions
Francesco Potortì
(1)
,
Antonino Crivello
(1)
,
Soyeon Lee
(2)
,
Blagovest Vladimirov
,
Sangjoon Park
(2)
,
Yushi Chen
(3)
,
Long Wang
,
Runze Chen
,
Fang Zhao
(4)
,
Yue Zhuge
,
Haiyong Luo
,
Antoni Perez-Navarro
(5)
,
Antonio Jiménez
(6)
,
Han Wang
(7)
,
Hengyi Liang
,
Cedric de Cock
,
David Plets
(8)
,
Yan Cui
(9)
,
Zhi Xiong
,
Xiaodong Li
(10)
,
Yiming Ding
,
Fernando Javier Álvarez Franco
,
Fernando Jesús Aranda Polo
,
Felipe Parralejo Rodríguez
,
Adriano Moreira
,
Cristiano Pendão
,
Ivo Silva
,
Miguel Ortiz
(11)
,
Ni Zhu
(11)
,
Ziyou Li
(11)
,
Valerie Renaudin
(11)
,
Dongyan Wei
,
Xinchun Ji
,
Wenchao Zhang
,
Yan Wang
,
Longyang Ding
,
Jian Kuang
,
Xiaobing Zhang
,
Zhi Dou
,
Chaoqun Yang
,
Sebastian Kram
,
Maximilian Stahlke
,
Christopher Mutschler
,
Sander Coene
,
Chenglong Li
,
Alexander Venus
,
Erik Leitinger
,
Stefan Tertinek
,
Klaus Witrisal
,
Yi Wang
,
Shaobo Wang
,
Beihong Jin
,
Fusang Zhang
,
Chang Su
,
Zhi Wang
,
Siheng Li
,
Xiaodong Li
,
Shitao Li
,
Mengguan Pan
,
Wang Zheng
,
Kai Luo
,
Ziyao Ma
,
Yanbiao Gao
,
Jiaxing Chang
,
Hailong Ren
,
Wenfang Guo
,
Joaquín Torres-Sospedra
1
CNR | ISTI -
CNR Istituto di Scienza e Tecnologie dell’Informazione “A. Faedo” [Pisa]
2 ETRI - Electronics and Telecommunications Research Institute [DaeJeon]
3 School of Electronics and Information Engineering [Harbin, Chine]
4 LLF - UMR7110 - Laboratoire de Linguistique Formelle
5 UOC - Universitat Oberta de Catalunya [Barcelona]
6 CAR - Centre for Automation and Robotics
7 Department of Engineering Science [Oxford]
8 UGENT - Universiteit Gent = Ghent University = Université de Gand
9 UMass Lowell - University of Massachusetts [Lowell]
10 NUS - National University of Singapore
11 AME-GEOLOC - Géolocalisation
2 ETRI - Electronics and Telecommunications Research Institute [DaeJeon]
3 School of Electronics and Information Engineering [Harbin, Chine]
4 LLF - UMR7110 - Laboratoire de Linguistique Formelle
5 UOC - Universitat Oberta de Catalunya [Barcelona]
6 CAR - Centre for Automation and Robotics
7 Department of Engineering Science [Oxford]
8 UGENT - Universiteit Gent = Ghent University = Université de Gand
9 UMass Lowell - University of Massachusetts [Lowell]
10 NUS - National University of Singapore
11 AME-GEOLOC - Géolocalisation
Francesco Potortì
- Fonction : Auteur
- PersonId : 1340711
- ORCID : 0000-0003-3835-3920
Antonino Crivello
- Fonction : Auteur
- PersonId : 1340710
- ORCID : 0000-0001-7238-2181
Blagovest Vladimirov
- Fonction : Auteur
Yushi Chen
- Fonction : Auteur
- PersonId : 1354444
- ORCID : 0009-0003-1349-6180
Long Wang
- Fonction : Auteur
- PersonId : 1354445
- ORCID : 0009-0001-9856-5856
Runze Chen
- Fonction : Auteur
- PersonId : 1354446
- ORCID : 0000-0002-6599-7898
Yue Zhuge
- Fonction : Auteur
- PersonId : 1354447
- ORCID : 0009-0000-6513-9933
Haiyong Luo
- Fonction : Auteur
- PersonId : 1354448
- ORCID : 0000-0001-6827-4225
Antoni Perez-Navarro
- Fonction : Auteur
- PersonId : 1354449
- ORCID : 0000-0002-7037-0635
Antonio Jiménez
- Fonction : Auteur
- PersonId : 1354450
- ORCID : 0000-0001-9771-1930
Han Wang
- Fonction : Auteur
- PersonId : 1354451
- ORCID : 0000-0002-2133-3045
Hengyi Liang
- Fonction : Auteur
- PersonId : 1354452
- ORCID : 0000-0002-1616-4259
Cedric de Cock
- Fonction : Auteur
- PersonId : 1354453
- ORCID : 0000-0002-2724-6989
David Plets
- Fonction : Auteur
- PersonId : 797055
- ORCID : 0000-0002-8879-5076
Yan Cui
- Fonction : Auteur
- PersonId : 1354454
- ORCID : 0000-0002-1382-1575
Zhi Xiong
- Fonction : Auteur
- PersonId : 1354455
- ORCID : 0000-0003-4619-4384
Xiaodong Li
- Fonction : Auteur
- PersonId : 1354456
- ORCID : 0000-0002-3703-084X
Yiming Ding
- Fonction : Auteur
- PersonId : 1354457
- ORCID : 0000-0002-7027-7633
Fernando Javier Álvarez Franco
- Fonction : Auteur
- PersonId : 1354458
- ORCID : 0000-0002-7610-1452
Fernando Jesús Aranda Polo
- Fonction : Auteur
- PersonId : 1354459
- ORCID : 0000-0003-3824-3094
Felipe Parralejo Rodríguez
- Fonction : Auteur
- PersonId : 1354460
- ORCID : 0000-0003-1739-829X
Adriano Moreira
- Fonction : Auteur
- PersonId : 1354461
- ORCID : 0000-0002-8967-118X
Cristiano Pendão
- Fonction : Auteur
- PersonId : 1354462
- ORCID : 0000-0002-4563-7414
Ivo Silva
- Fonction : Auteur
- PersonId : 1354463
- ORCID : 0000-0002-5423-0624
Miguel Ortiz
- Fonction : Auteur
- PersonId : 737116
- IdHAL : miguel-ortiz
- ORCID : 0000-0002-4075-7601
Ni Zhu
- Fonction : Auteur
- PersonId : 737115
- IdHAL : ni-zhu
- ORCID : 0000-0003-4033-3558
Valerie Renaudin
- Fonction : Auteur
- PersonId : 736540
- IdHAL : valerie-renaudin
- ORCID : 0000-0003-4535-5406
- IdRef : 193205130
Dongyan Wei
- Fonction : Auteur
- PersonId : 1354464
- ORCID : 0000-0002-4961-0032
Xinchun Ji
- Fonction : Auteur
Wenchao Zhang
- Fonction : Auteur
- PersonId : 1354465
- ORCID : 0000-0002-6412-3961
Yan Wang
- Fonction : Auteur
- PersonId : 1354466
- ORCID : 0000-0001-5606-2794
Longyang Ding
- Fonction : Auteur
- PersonId : 1354467
- ORCID : 0009-0001-0817-9207
Jian Kuang
- Fonction : Auteur
- PersonId : 1354468
- ORCID : 0000-0002-7680-0632
Xiaobing Zhang
- Fonction : Auteur
- PersonId : 1354469
- ORCID : 0009-0007-3507-3284
Zhi Dou
- Fonction : Auteur
- PersonId : 1354470
- ORCID : 0009-0008-8364-2688
Chaoqun Yang
- Fonction : Auteur
- PersonId : 1354471
- ORCID : 0009-0003-3780-8484
Sebastian Kram
- Fonction : Auteur
- PersonId : 1354472
- ORCID : 0000-0002-4907-791X
Maximilian Stahlke
- Fonction : Auteur
- PersonId : 1354473
- ORCID : 0000-0002-3572-7707
Christopher Mutschler
- Fonction : Auteur
- PersonId : 1354474
- ORCID : 0000-0001-8108-0230
Sander Coene
- Fonction : Auteur
- PersonId : 1354475
- ORCID : 0000-0002-0425-2841
Chenglong Li
- Fonction : Auteur
- PersonId : 1354476
- ORCID : 0000-0003-3261-5619
Alexander Venus
- Fonction : Auteur
- PersonId : 1354477
- ORCID : 0000-0002-4315-139X
Erik Leitinger
- Fonction : Auteur
- PersonId : 1354478
- ORCID : 0000-0003-1048-4849
Stefan Tertinek
- Fonction : Auteur
- PersonId : 1354479
- ORCID : 0000-0002-6664-9692
Klaus Witrisal
- Fonction : Auteur
- PersonId : 1354480
- ORCID : 0000-0002-1056-2133
Yi Wang
- Fonction : Auteur
- PersonId : 1354481
- ORCID : 0000-0001-8511-8558
Shaobo Wang
- Fonction : Auteur
- PersonId : 1354482
- ORCID : 0000-0002-4728-3437
Beihong Jin
- Fonction : Auteur
- PersonId : 1315872
- ORCID : 0000-0003-3683-4034
Fusang Zhang
- Fonction : Auteur
- PersonId : 1112126
- ORCID : 0000-0002-2529-8021
Chang Su
- Fonction : Auteur
- PersonId : 1354483
- ORCID : 0000-0002-6965-8201
Zhi Wang
- Fonction : Auteur
- PersonId : 1354484
- ORCID : 0000-0002-9913-8119
Siheng Li
- Fonction : Auteur
- PersonId : 1354485
- ORCID : 0000-0003-2022-3191
Xiaodong Li
- Fonction : Auteur
- PersonId : 1354486
- ORCID : 0000-0001-9435-3330
Shitao Li
- Fonction : Auteur
- PersonId : 1354487
- ORCID : 0000-0003-4276-6373
Mengguan Pan
- Fonction : Auteur
- PersonId : 1354488
- ORCID : 0000-0001-5835-4539
Wang Zheng
- Fonction : Auteur
- PersonId : 1354489
- ORCID : 0000-0001-8305-0676
Kai Luo
- Fonction : Auteur
- PersonId : 1354490
- ORCID : 0000-0002-7610-897X
Ziyao Ma
- Fonction : Auteur
- PersonId : 1354491
- ORCID : 0000-0001-5848-6902
Yanbiao Gao
- Fonction : Auteur
- PersonId : 1354492
- ORCID : 0000-0002-9090-3961
Jiaxing Chang
- Fonction : Auteur
- PersonId : 1354493
- ORCID : 0000-0002-4521-3873
Hailong Ren
- Fonction : Auteur
- PersonId : 1354494
- ORCID : 0000-0001-6725-0782
Wenfang Guo
- Fonction : Auteur
- PersonId : 1354495
- ORCID : 0000-0003-4487-9224
Joaquín Torres-Sospedra
- Fonction : Auteur
- PersonId : 1340709
- ORCID : 0000-0003-4338-4334
Résumé
Indoor positioning is a thriving research area which is slowly gaining market momentum. Its applications are mostly customised, ad hoc installations; ubiquitous applications analogous to GNSS for outdoors are not available because of the lack of generic platforms, widely accepted standards and interoperability protocols. In this context, the Indoor Positioning and Indoor Navigation (IPIN) competition is the only long-term, technically sound initiative to monitor the state of the art of real systems by measuring their performance in a realistic environment. Most competing systems are pedestrian-oriented and based on the use of smartphones, but several competing Tracks were set up, enabling comparison of an array of technologies. The two IPIN competitions described here include only off-site Tracks. In contrast with on-site Tracks where competitors bring their systems on site - which were impossible to organise during 2021 and 2022 - in off-site Tracks competitors download pre-recorded data from multiple sensors and process them using the EvaalAPI, a real-time, web-based emulation interface. As usual with IPIN competitions, Tracks were compliant with the EvAAL framework, ensuring consistency of the measurement procedure and reliability of results. The main contribution of this work is to show a compilation of possible indoor positioning scenarios and different indoor positioning solutions to the same problem.