Vers une Conception et une Certification d'un Système de Décision Obtenu par Apprentissage par Renforcement Profond

Christophe Bohn (1) , Rezzoug Mehdi (1) , Jaafra Yesmina (2) , Adjed Faouzi (1) , Pelliccia Frédéric (3) , Habib Lydia (4)

1 IRT SystemX
2 Expleo France
3 Airbus Group Innovations [Toulouse]
4 AIRBUS Protect

Nous avons travaillé sur un agent d'intelligence artificiel pour le changement de voie, l'accélération et le freinage dans un environnement autoroutier simulé. Nous avons proposé une approche de conception basée sur les notions de marge de sécurité dans la fonction de récompense de l'agent. Les résultats de l'apprentissage nous ont permis d'améliorer significativement les performances de l'agent d'un facteur 10 tout en maintenant une vitesse supérieure au flux de circulation. Les méthodes mises en oeuvre démontrent la complémentarité entre apprentissage et évaluation pour la conception d'un agent de décision sûr. Nous avons complété cette approche par la méthode des attaques adverses afin d'améliorer la robustesse de l'agent. Ces éléments constituent une première étape dans la conception d'un système autonome sûr.

Mots clés: Conception fonctionnelle sûre; Conduite autonome; Apprentissage profond par renforcement; Evaluation de performances

Domaines: Sciences de l'ingénieur [physics]

Christophe Bohn, Rezzoug Mehdi, Jaafra Yesmina, Adjed Faouzi, Pelliccia Frédéric, et al.. Vers une Conception et une Certification d'un Système de Décision Obtenu par Apprentissage par Renforcement Profond. Congrès Lambda Mu 23 « Innovations et maîtrise des risques pour un avenir durable » - 23e Congrès de Maîtrise des Risques et de Sûreté de Fonctionnement, Institut pour la Maîtrise des Risques, Oct 2022, Paris Saclay, France. ⟨hal-03878440⟩