[Projets 2027] SycoLex – Liana Ermakova (HCTI) & Éric Sanjuan (LIA)
📜 Titre : SycoLex – LLM et conseil juridique : quels risques pour les non-experts ?
🧑🤝🧑 Équipe :
- Liana Ermakova (HCTI, Université de Brest) – Porteuse
- Éric Sanjuan (LIA) – Porteur
- Isabelle Laurent (LAB-LEX, Université de Brest)
- Jaap Kamps (University of Amsterdam)
- Kripabandhu Ghosh (Indian Institute Of Science Education And Research Kolkata)
- Hichem Semmar (LIA)
- Christina Koumpli (·JPEG)
- Gaël Depoorter (·JPEG)
- Pascal Martinez (AIedge4U)
📌 Résumé : Le projet SycoLex (action du GDR MADICS SimpleText) étudie les risques liés à l’utilisation des LLM pour accéder à des informations et des conseils juridiques par des non-experts. Il se concentre notamment sur la complaisance (sycophancy), c’est-à-dire la tendance des LLM à valider excessivement les affirmations ou interprétations des utilisateurs, au risque de renforcer des erreurs juridiques ou une confiance injustifi ée. Le projet vise à construire des corpus issus de plusieurs juridictions relevant de la common law (Inde, États-Unis – EN) et du droit continental (France – FR). À partir d’affaires judiciaires réelles, différents LLM sont confrontés à des formulations opposées d’une même question et à plusieurs stratégies d’incitation à la complaisance. SycoLex développe ainsi un benchmark pour évaluer la robustesse des LLM face au cadrage des utilisateurs et développer des méthodes de détection de la complaisance. Ces travaux serviront notamment de base au shared task FIRE 2027.
💰 Instrument : Projet passerelle
🆔 Identifiant : 27-PAS-1
