Note ABES Bayesian reinforcement learning with Dirichlet processes Apprentissage par renforcement Bayésien avec processus de Dirichlet Apprentissage en ligne Processus de Dirichlet Reinforcement Learning Online learning Bayesian nonparametric statistics Apprentissage par renforcement (intelligence artificielle) Statistique bayésienne non paramétrique Problème du bandit manchot Algorithmes en ligne L'apprentissage par renforcement (RL) a montré un grand potentiel dans des applications allant des jeux de société à la biologie et au-delà. Cependant, il reste encore à voir le jour dans d'autres domaines difficiles tels que l'agro-écologie, l'inefficacité des algorithmes RL dans de tels domaines essentiellement dus à des distributions de données concrètes compliquées qui ne sont pas conformes aux modèles statistiques standard tels que la famille exponentielle monoparamétrique. Motivée par de tels problèmes du monde réel, cette thèse introduit un nouveau cadre pour RL basé sur les statistiques non paramétriques bayésiennes, en particulier les processus de Dirichlet (DP). La première contribution de la thèse est le Dirichlet Process Posterior Sampling (DPPS), un algorithme non paramétrique bayésien probablement optimal pour les bandits multi-bras basé sur les DP. Essentiellement, DPPS est un algorithme de correspondance de probabilité, et combine la force du bootstrap (bayésien) avec un mécanisme de principe d'incorporation et d'exploitation d'informations antérieures. La thèse propose alors deux nouveaux algorithmes pour l'apprentissage par renforcement dans les processus de décision de Markov. La première est l'apprentissage profond basé sur l'échantillonnage par Thompson, dans lequel, l'exploration est basée sur l'échantillonnage postérieur de fonctions de valeur d'action (représentées par un réseau de neurones profonds). En particulier, l'étape d'échantillonnage postérieure de cet algorithme utilise un nouveau schéma basé sur DP, également introduit dans cette thèse, et qui peut être d'intérêt indépendant pour d'autres applications des réseaux de neurones bayésiens. Le deuxième algorithme est un algorithme RL de distribution qui repose sur une égalité de distribution associée aux DP. Reinforcement learning (RL) has shown great potential in applications ranging from board games to biology and beyond. However, it still remains to see proper light of the day in other challenging domains such as agro-ecology, the inefficiency of RL algorithms in such domains essentially owed to complicated real world data distributions that do not conform to standard statistical models such as single-parametric exponential family. Motivated by such real world problems, this thesis introduces a new framework for RL based on Bayesian nonparametric statistics, specifically Dirichlet Processes (DPs). The first contribution of the thesis is Dirichlet Process Posterior Sampling (DPPS), a provably optimal Bayesian non-parametric algorithm for multi-arm bandits based on DP priors. Essentially, DPPS is a probability-matching algorithm, and combines the strength of (Bayesian) bootstrap with a principled mechanism of incorporating and exploiting prior information. The thesis then proposes two new algorithms for reinforcement learning in Markov decision processes. The first one is Thompson sampling based deep Q learning, wherein, exploration is based on posterior sampling of action-value functions (represented through a deep neural network). In particular, the posterior sampling step in this algorithm utilizes a new DP based scheme, also introduced in this thesis, and which can be of independent interest in other applications of Bayesian neural networks. The second algorithm is a distributional RL algorithm that hinges on a distributional equality associated with the DPs. Electronic Thesis or Dissertation Text en PDF 3323437 https://pepite-depot.univ-lille.fr/LIBRE/EDMADIS/2026/2026ULILB002.pdf https://theses.fr/2026ULILB002/abes https://theses.hal.science/tel-05532911 https://theses.hal.science/tel-05532911 https://theses.hal.science/tel-05532911 Vashishtha Sumit Vashishtha 1996-02-28 IN 297609203 https://theses.fr/2026ULILB002 2026ULILB002 https://doi.org/10.70675/15a61d1dz9039z4312zb71ez11cbefa7abfe 2026-01-30 Informatique et applications Université de Lille (2022-....) 259265152 Doctorat Docteur es non oui Maillard Odalric-Ambrym MADS_DIRECTEUR_DE_THESE_1 158055594 Castillo Ismaël MADS_PRESIDENT_DU_JURY 109612930 Durand Audrey MADS_MEMBRE_DU_JURY_1 268922713 Mannor Shie MADS_RAPPORTEUR_1 253868076 Alquier Pierre MADS_RAPPORTEUR_2 114486735 École graduée Mathématiques, sciences du numérique et de leurs interactions (Lille ; 2021-....) MADS_ECOLE_DOCTORALE_1 258621362 Centre Inria de l'Université de Lille MADS_PARTENAIRE_DE_RECHERCHE_1 104752 185432247 Centre de Recherche en Informatique, Signal et Automatique de Lille MADS_PARTENAIRE_DE_RECHERCHE_2 410272 18388695X Agence nationale de la recherche (France ; 2005-....) MADS_PARTENAIRE_DE_RECHERCHE_3 121892174 Université de Lille (2022-....) MADS_PARTENAIRE_DE_RECHERCHE_4 259265152 ddc:004 Maillard Odalric-Ambrym Castillo Ismaël Durand Audrey Mannor Shie Alquier Pierre École graduée Mathématiques, sciences du numérique et de leurs interactions (Lille ; 2021-....) Centre Inria de l'Université de Lille Centre de Recherche en Informatique, Signal et Automatique de Lille Agence nationale de la recherche (France ; 2005-....) Université de Lille (2022-....) PDF 3323437