KL-UCB-switch: optimal regret bounds for stochastic bandits from both a distribution-dependent and a distribution-free viewpoints - Archive ouverte HAL Accéder directement au contenu
Pré-Publication, Document De Travail Année : 2019

KL-UCB-switch: optimal regret bounds for stochastic bandits from both a distribution-dependent and a distribution-free viewpoints

Résumé

In the context of K-armed stochastic bandits with distribution only assumed to be supported by [0,1], we introduce the first algorithm, called KL-UCB-switch, that enjoys simultaneously a distribution-free regret bound of optimal order $\sqrt{KT}$ and a distribution-dependent regret bound of optimal order as well, that is, matching the $\kappa\ln T$ lower bound by Lai & Robbins (1985) and Burnetas & Katehakis (1996). This self-contained contribution simultaneously presents state-of-the-art techniques for regret minimization in bandit models, and an elementary construction of non-asymptotic confidence bounds based on the empirical likelihood method for bounded distributions.
Fichier principal
Vignette du fichier
KL-UCB-GHMS.pdf (658.48 Ko) Télécharger le fichier
asymp_horizon_10000_nbrep_10000Bernoulli.pdf (19.99 Ko) Télécharger le fichier
asymp_horizon_10000_nbrep_10000TruncExp.pdf (18.24 Ko) Télécharger le fichier
asymp_horizon_10000_nbrep_10000TruncGauss.pdf (18.54 Ko) Télécharger le fichier
minimax_K_nbrep_5000.pdf (20.82 Ko) Télécharger le fichier
minimax_nbrep_5000.pdf (21.4 Ko) Télécharger le fichier
Origine : Fichiers produits par l'(les) auteur(s)

Dates et versions

hal-01785705 , version 1 (04-05-2018)
hal-01785705 , version 2 (05-11-2019)
hal-01785705 , version 3 (28-06-2022)

Identifiants

Citer

Aurélien Garivier, Hédi Hadiji, Pierre Ménard, Gilles Stoltz. KL-UCB-switch: optimal regret bounds for stochastic bandits from both a distribution-dependent and a distribution-free viewpoints. 2019. ⟨hal-01785705v2⟩
439 Consultations
716 Téléchargements

Altmetric

Partager

Gmail Facebook X LinkedIn More