Selecting informative conformal prediction sets with false coverage rate control - Archive ouverte HAL Accéder directement au contenu
Pré-Publication, Document De Travail Année : 2024

Selecting informative conformal prediction sets with false coverage rate control

Résumé

In supervised learning, including regression and classification, conformal methods provide prediction sets for the outcome/label with finite sample coverage for any machine learning predictor. We consider here the case where such prediction sets come after a selection process. The selection process requires that the selected prediction sets be `informative' in a well defined sense. We consider both the classification and regression settings where the analyst may consider as informative only the sample with prediction sets small enough, excluding null values, or obeying other appropriate `monotone' constraints. We develop a unified framework for building such informative conformal prediction sets while controlling the false coverage rate (FCR) on the selected sample. While conformal prediction sets after selection have been the focus of much recent literature in the field, the new introduced procedures, called InfoSP and InfoSCOP, are to our knowledge the first ones providing FCR control for informative prediction sets. We show the usefulness of our resulting procedures on real and simulated data.
Fichier principal
Vignette du fichier
GHRM24.pdf (8.1 Mo) Télécharger le fichier
ClassCondMinP1.pdf (9.87 Ko) Télécharger le fichier
ClassCondMinP2.pdf (9.89 Ko) Télécharger le fichier
ClassCondNonnull1.pdf (10.25 Ko) Télécharger le fichier
ClassCondNonnull2.pdf (10.48 Ko) Télécharger le fichier
FigsUnequalProbsNonnullSelection.pdf (888.36 Ko) Télécharger le fichier
FigswithCommonGroupUnequalProbsNonnullSelection.pdf (214.82 Ko) Télécharger le fichier
Intro.pdf (63.69 Ko) Télécharger le fichier
Intro_case_1_.pdf (57.05 Ko) Télécharger le fichier
Intro_case_3_.pdf (58.82 Ko) Télécharger le fichier
MainClassCondNONNULL1.pdf (10.45 Ko) Télécharger le fichier
RegressSelectPourIntro_case_5_naive.pdf (58.55 Ko) Télécharger le fichier
RegressSelectPourIntro_case_5_new.pdf (58.81 Ko) Télécharger le fichier
RegressSelect_case_-1_Noselection.pdf (156.93 Ko) Télécharger le fichier
RegressSelect_case_-1_naive.pdf (57.48 Ko) Télécharger le fichier
RegressSelect_case_-1_new.pdf (57.65 Ko) Télécharger le fichier
RegressSelect_case_-1_newprepro.pdf (98.03 Ko) Télécharger le fichier
RegressSelect_case_0_Noselection.pdf (157 Ko) Télécharger le fichier
RegressSelect_case_0_naive.pdf (54.03 Ko) Télécharger le fichier
RegressSelect_case_0_new.pdf (53.54 Ko) Télécharger le fichier
RegressSelect_case_0_newprepro.pdf (83.38 Ko) Télécharger le fichier
RegressSelect_case_1_Noselection.pdf (156.1 Ko) Télécharger le fichier
RegressSelect_case_1_naive.pdf (57.29 Ko) Télécharger le fichier
RegressSelect_case_1_new.pdf (60.13 Ko) Télécharger le fichier
RegressSelect_case_1_newprepro.pdf (101.34 Ko) Télécharger le fichier
RegressSelect_case_2_Noselection.pdf (156.22 Ko) Télécharger le fichier
RegressSelect_case_2_naive.pdf (63.24 Ko) Télécharger le fichier
RegressSelect_case_2_new.pdf (67.68 Ko) Télécharger le fichier
RegressSelect_case_2_newprepro.pdf (116.49 Ko) Télécharger le fichier
RegressSelect_case_3_Noselection.pdf (151.66 Ko) Télécharger le fichier
RegressSelect_case_3_naive.pdf (55.17 Ko) Télécharger le fichier
RegressSelect_case_3_new.pdf (56.06 Ko) Télécharger le fichier
RegressSelect_case_3_newprepro.pdf (99.14 Ko) Télécharger le fichier
RegressSelect_case_4_Noselection.pdf (151.66 Ko) Télécharger le fichier
RegressSelect_case_4_naive.pdf (55.18 Ko) Télécharger le fichier
RegressSelect_case_4_new.pdf (54.36 Ko) Télécharger le fichier
RegressSelect_case_4_newprepro.pdf (102.38 Ko) Télécharger le fichier
RegressSelect_case_5_Noselection.pdf (156.05 Ko) Télécharger le fichier
RegressSelect_case_5_naive.pdf (58.58 Ko) Télécharger le fichier
RegressSelect_case_5_new.pdf (58.83 Ko) Télécharger le fichier
RegressSelect_case_5_newprepro.pdf (98.41 Ko) Télécharger le fichier
RegressSelect_case_6_Noselection.pdf (156.39 Ko) Télécharger le fichier
RegressSelect_case_6_naive.pdf (61.94 Ko) Télécharger le fichier
RegressSelect_case_6_new.pdf (60.69 Ko) Télécharger le fichier
RegressSelect_case_6_newprepro.pdf (114.93 Ko) Télécharger le fichier
RegressSelectabPourIntro_case_1_naive.pdf (59.61 Ko) Télécharger le fichier
RegressSelectabPourIntro_case_1_new.pdf (62.92 Ko) Télécharger le fichier
RegressSelectabPourIntro_case_1_newprepro.pdf (107.87 Ko) Télécharger le fichier
RegressSelectabPourIntro_case_2_naive.pdf (62.12 Ko) Télécharger le fichier
RegressSelectabPourIntro_case_2_new.pdf (65.24 Ko) Télécharger le fichier
RegressSelectabPourIntro_case_2_newprepro.pdf (111.92 Ko) Télécharger le fichier
RegressSelectab_case_1_naive.pdf (59.64 Ko) Télécharger le fichier
RegressSelectab_case_1_new.pdf (62.95 Ko) Télécharger le fichier
RegressSelectab_case_1_newprepro.pdf (107.9 Ko) Télécharger le fichier
RegressSelectab_case_2_naive.pdf (62.15 Ko) Télécharger le fichier
RegressSelectab_case_2_new.pdf (65.27 Ko) Télécharger le fichier
RegressSelectab_case_2_newprepro.pdf (111.95 Ko) Télécharger le fichier
cifar3_min_level01.png (79.78 Ko) Télécharger le fichier
cifar3_min_shift_level01.png (70.46 Ko) Télécharger le fichier
cifar3_nonull_level01.png (74.38 Ko) Télécharger le fichier
cifar3_nonull_shift_level01.png (64.9 Ko) Télécharger le fichier
cifar3_shift_level01.png (65.11 Ko) Télécharger le fichier
ex_min_CC-cross.png (5.48 Mo) Télécharger le fichier
ex_min_CC.png (310.34 Ko) Télécharger le fichier
ex_min_basic.png (199.35 Ko) Télécharger le fichier
legends.pdf (5.2 Ko) Télécharger le fichier
subscriptMinP1.pdf (7.72 Ko) Télécharger le fichier
subscriptMinP1b.pdf (7.64 Ko) Télécharger le fichier
subscriptMinP2.pdf (7.77 Ko) Télécharger le fichier
subscriptMinP2b.pdf (7.64 Ko) Télécharger le fichier
subscriptnonnullSelection1.pdf (8.06 Ko) Télécharger le fichier
subscriptnonnullSelection1b.pdf (7.74 Ko) Télécharger le fichier
subscriptnonnullSelection2.pdf (8.11 Ko) Télécharger le fichier
subscriptnonnullSelection2b.pdf (7.18 Ko) Télécharger le fichier
Origine : Fichiers produits par l'(les) auteur(s)
Licence : CC BY - Paternité

Dates et versions

hal-04539688 , version 1 (09-04-2024)

Licence

Paternité

Identifiants

Citer

Ulysse Gazin, Ruth Heller, Ariane Marandon, Etienne Roquain. Selecting informative conformal prediction sets with false coverage rate control. 2024. ⟨hal-04539688⟩
0 Consultations
0 Téléchargements

Altmetric

Partager

Gmail Facebook X LinkedIn More