Using GPT-6 Astra to compute French unemployment benefits
The author upgraded to ChatGPT Pro with GPT-6 Astra to compute France Travail benefits; results were accurate with cited rules, but the droit d'option figure used pre-deduction ARE.
Quand l'IA se trompe... à cause de France Travail (et de l'Unédic) Depuis plusieurs mois j'utilise l'IA comme assistant, en vérifiant les réponses pour éviter les erreurs. Depuis quelques jours, pour la fiabilité et pour faciliter les tâches purement administratives, je suis passé à ChatGPT Pro avec le tout dernier modèle GPT-6 Astra. La performance de GPT-6 Astra est phénoménale, l'IA décrit sa méthodologie (ce qui facilite ma vérification) et cite ses sources réglementaires avec des liens, tout en s'exprimant de manière intelligible même si ça reste évidemment un peu technique. Samedi matin j'avais un rendez-vous en visio avec une allocataire de France Travail. Je demande à ChatGPT de calculer le montant des allocations chômage à partir de l'attestation employeur de l'allocataire : le résultat est parfaitement exact. Cela dit on est sur un dossier très simple, un CDI avec des salaires quasiment identiques tous les mois, aucune prime, pas d'arrêt maladie. Autre bon point de ChatGPT : il me prévient que si l'allocataire avait un reliquat de droits, France Travail effectuera dans un premier temps une réactivation de ces vieux droits et qu'il faudra mobiliser le droit d'option pour passer aux nouvelles allocations si elles sont plus avantageuses. Ça tombe bien, l'allocataire envisage justement une demande de droit d'option auprès de France Travail. Mais dans le résultat de calcul de ChatGPT j'ai identifié ce qui semblait à l'avance une erreur : il m'a présenté un capital de droits correspondant au montant d'ARE hors prélèvements par le nombre de jours d'allocations. Or pour le calcul du droit d'option, on doit utiliser le montant d'ARE après prélèvement de retraite complémentaire et non avant. Pour piéger ChatGPT je lui demande donc comment ça fonctionne le droit d'option, et il s'appuie sur le montant erroné. La suite est ici en images. Au lieu d'analyser les textes réglementaires, ChatGPT a d'abord fait confiance aux sites de France Travail et de l'Unédic. Or sur le site de France Travail en particulier, il y a beaucoup de carences, d'erreurs de formulation et autres approximations. Et vous, quelles sont vos expériences avec l'IA sur des sujets liés à France Travail ?