Solving Bernoulli Rank-One Bandits with Unimodal Thompson Sampling - Archive ouverte HAL Accéder directement au contenu
Communication Dans Un Congrès Année : 2020

Solving Bernoulli Rank-One Bandits with Unimodal Thompson Sampling

Résumé

Stochastic Rank-One Bandits (Katarya et al, (2017a,b)) are a simple framework for regret minimization problems over rank-one matrices of arms. The initially proposed algorithms are proved to have logarithmic regret, but do not match the existing lower bound for this problem. We close this gap by first proving that rank-one bandits are a particular instance of unimodal bandits, and then providing a new analysis of Unimodal Thompson Sampling (UTS), initially proposed by Paladino et al (2017). We prove an asymptotically optimal regret bound on the frequentist regret of UTS and we support our claims with simulations showing the significant improvement of our method compared to the state-of-the-art.
Fichier principal
Vignette du fichier
Trinh20.pdf (1.23 Mo) Télécharger le fichier
128-128-all.png (23.48 Ko) Télécharger le fichier
16-16-log.png (146.95 Ko) Télécharger le fichier
32-32-all.png (22.05 Ko) Télécharger le fichier
4-4-all.jpg (132.88 Ko) Télécharger le fichier
4-4-log.png (184.48 Ko) Télécharger le fichier
64-64-all.png (22.56 Ko) Télécharger le fichier
8-8-log.png (173.69 Ko) Télécharger le fichier
closer-16-16.png (27.97 Ko) Télécharger le fichier
closer-32-32.png (30.58 Ko) Télécharger le fichier
closer-8-8.png (26.63 Ko) Télécharger le fichier
row_4_col_4_log.png (227.53 Ko) Télécharger le fichier
Origine : Fichiers éditeurs autorisés sur une archive ouverte
Origine : Fichiers produits par l'(les) auteur(s)
Loading...

Dates et versions

hal-02396943 , version 1 (06-12-2019)
hal-02396943 , version 2 (17-02-2020)

Identifiants

Citer

Cindy Trinh, Emilie Kaufmann, Claire Vernade, Richard Combes. Solving Bernoulli Rank-One Bandits with Unimodal Thompson Sampling. ALT 2020 - 31st International Conference on Algorithmic Learning Theory, Feb 2020, San Diego, United States. pp.1 - 28. ⟨hal-02396943v2⟩
235 Consultations
251 Téléchargements

Altmetric

Partager

Gmail Facebook X LinkedIn More