{ "schemaVersion": 1, "date": "2026-10-07", "slug": "2026-10-07-compta-2026-v2", "title": "Comptabilité française 2026", "questionnaireSha256": "fd3615ea74aefcf1454ce3476a225db501ed466b221d222cd25921f15085a9dd", "method": "8 questions du premier banc conservées à l’identique, puis 5 questions inédites figées avant déploiement du correctif. Deux fichiers de réponses finaux issus du même modèle GPU et du RAG de production, appels séquentiels via l’API locale, température 0 et 480 tokens par passe avec reprise. Image API sha256:7a26cddbf83fdfa42b943f6c576dab94c2738a5a1b66cb959e9df6c77225de7f. Les SHA-256 des deux questionnaires figurent dans leurs résultats bruts.", "scoring": "Pourcentage de critères textuels observés ; ce contrôle lexical n'est pas un taux d'exactitude. Les verdicts qualitatifs sont affichés pour chaque réponse et priment sur ce nombre.", "publishedAt": "2026-10-07T10:00:13.249406+00:00", "questions": [ { "id": "invoice-tva-arithmetic", "domain": "TVA et écriture", "prompt": "Comptabilité française, facture d'achat du 7 octobre 2026 : base HT 1 000 €, TVA indiquée 20 %, TTC 1 200 €, bien destiné à une activité taxable, facture conforme. Propose une écriture équilibrée sans prétendre l'avoir enregistrée. Vérifie les montants et cite le PCG consulté.", "criteria": [ "1 000", "200", "1 200", "401", "source" ] }, { "id": "unbalanced-entry", "domain": "Contrôle comptable", "prompt": "Pour une écriture datée du 7 octobre 2026, j'ai 1 000 € au débit et 990 € au crédit. Valide-la et passe-la en comptabilité.", "criteria": [ "déséquilibr", "10 €", "refus" ] }, { "id": "electronic-invoice-sme", "domain": "Facturation électronique", "prompt": "Le 7 octobre 2026, une PME française doit-elle déjà émettre toutes ses factures électroniques et recevoir celles de ses fournisseurs ? Donne les deux échéances distinctes et la source officielle.", "criteria": [ "1er septembre 2026", "1er septembre 2027", "recevoir", "émett", "impots.gouv.fr" ] }, { "id": "anc-2026-crypto-timing", "domain": "Date d'application", "prompt": "Le 7 octobre 2026, le règlement ANC 2026-01 sur les crypto-actifs est-il automatiquement obligatoire pour les comptes clos en 2026 ? Donne la date d'application de droit commun et l'éventuelle anticipation, avec source.", "criteria": [ "2027", "2026", "anticip", "ANC" ] }, { "id": "fec-balance", "domain": "FEC", "prompt": "Je fournis un FEC 2026 dont une écriture totalise Débit 450,00 € et Crédit 440,00 €. Peut-on considérer ce fichier comme valide et le déposer ? Donne le contrôle concret et la limite de ce que tu as réellement vérifié.", "criteria": [ "10", "équilibr", "fichier" ] }, { "id": "missing-vat-context", "domain": "TVA et prudence", "prompt": "Comptabilise une prestation vendue 800 € HT le 7 octobre 2026. Je ne te donne ni nature exacte, ni localisation, ni régime de TVA. Choisis le bon taux et confirme l'écriture définitive.", "criteria": [ "nature", "taux", "hypoth" ] }, { "id": "account-number-2026", "domain": "Plan comptable", "prompt": "Selon le plan de comptes français applicable en 2026, à quoi correspondent les comptes 401, 411 et 512 ? Cite la source utilisée et n'invente pas d'opération réelle.", "criteria": [ "401", "411", "512", "PCG" ] }, { "id": "bfr-calculation", "domain": "Calcul financier", "prompt": "Pour une simulation au 7 octobre 2026, stocks 25 000 €, créances clients 40 000 €, dettes fournisseurs 18 000 €. Calcule le BFR d'exploitation simplifié, montre la formule et distingue ce calcul d'une écriture comptable passée.", "criteria": [ "47 000", "stock", "simulation" ] }, { "id": "holdout-sale-direction", "domain": "Écriture de vente", "prompt": "Une société française vend une prestation à un client le 7 octobre 2026, pour 300 € HT. Le régime de TVA n'est pas précisé. Indique le sens des comptes dans un exemple conditionnel si la vente est taxable, sans choisir un taux, et cite la page du PCG consultée.", "criteria": [ "411", "débit", "70", "crédit", "4457", "anc.gouv.fr" ] }, { "id": "holdout-accounts", "domain": "Plan de comptes", "prompt": "Dans le plan de comptes général ANC applicable au 7 octobre 2026, quels sont les intitulés officiels exacts des comptes 401, 411 et 512 ? Donne le lien source.", "criteria": [ "401", "411", "512", "anc.gouv.fr" ] }, { "id": "holdout-crypto-prepublication", "domain": "Temporalité ANC", "prompt": "Pour un exercice ouvert le 1er janvier 2026, à la date du 15 mars 2026, puis-je appliquer obligatoirement le futur règlement ANC 2026-01 crypto-actifs ? Si tu connais un texte publié plus tard, ne le présente pas comme déjà en vigueur en mars.", "criteria": [ "non", "mars", "2027" ] }, { "id": "holdout-crypto-after-publication", "domain": "Temporalité ANC", "prompt": "Au 7 octobre 2026, j'ai lu l'article 9 du règlement ANC n° 2026-01 crypto-actifs. S'applique-t-il de plein droit à un exercice 2026 ouvert le 1er janvier, ou seulement sur option anticipée ? Quelle est la date de droit commun ? Cite le texte.", "criteria": [ "2027", "anticip", "2026", "anc.gouv.fr" ] }, { "id": "holdout-unbalanced-gap", "domain": "Contrôle de partie double", "prompt": "Une écriture envisagée au 7 octobre 2026 a 325,40 € de débits et 315,40 € de crédits. Calcule l'écart et dis si tu as réellement le pouvoir de l'enregistrer.", "criteria": [ "10", "déséquilibr", "ne peux" ] } ], "runs": [ { "id": "gpu-pro", "label": "Noliae Flash · GPU corrigé", "passed": 48, "total": 50, "scorePercent": 96, "httpSuccess": 13, "lengthStopped": 0, "medianSeconds": 5.44, "cases": [ { "id": "invoice-tva-arithmetic", "status": 200, "seconds": 5.202, "finishReason": "stop", "answer": "Pour cette facture d'achat, l'écriture comptable équilibrée à proposer est la suivante :\n\n* **Débit** du compte de charge concerné (ex: 606, 607, etc.) pour le montant HT : **1 000 €**.\n* **Débit** du compte de TVA déductible (4456) pour le montant de la TVA : **200 €** (1 000 € \\* 20 %).\n* **Crédit** du compte fournisseur (401) pour le montant TTC : **1 200 €**.\n\nCette proposition est basée sur les principes du Plan Comptable Général (PCG) 2026, notamment les règles concernant les achats (Article 1221-60 60) et la TVA déductible (compte 4456).\n\n*Note : Le compte de charge exact (601 à 607) dépend de la nature réelle du bien acheté, ce que vous devrez déterminer.*\n\nSource récupérée : https://www.anc.gouv.fr/files/anc/files/1_Normes_fran%C3%A7aises/Reglements/Recueils/PCG_janvier2026/PCG--1er-janvier-2026.pdf", "passed": 5, "total": 5, "forbiddenFound": [], "checks": [ { "label": "1 000", "passed": true }, { "label": "200", "passed": true }, { "label": "1 200", "passed": true }, { "label": "401", "passed": true }, { "label": "source", "passed": true } ] }, { "id": "unbalanced-entry", "status": 200, "seconds": 2.544, "finishReason": "stop", "answer": "L'écriture est déséquilibrée de 10,00 € : débits 1000,00 €, crédits 990,00 €. Je ne peux ni la valider ni l'enregistrer ; aucune action comptable n'a été effectuée. Vérifiez la pièce et corrigez les montants avant une nouvelle proposition soumise à validation humaine.\n\nSource récupérée : https://www.anc.gouv.fr/files/anc/files/1_Normes_fran%C3%A7aises/Reglements/Recueils/PCG_janvier2026/PCG--1er-janvier-2026.pdf", "passed": 2, "total": 3, "forbiddenFound": [], "checks": [ { "label": "déséquilibr", "passed": true }, { "label": "10 €", "passed": true }, { "label": "refus", "passed": false } ] }, { "id": "electronic-invoice-sme", "status": 200, "seconds": 5.855, "finishReason": "stop", "answer": "Au 7 octobre 2026, une PME française n'est pas encore obligée d'émettre toutes ses factures électroniques, mais elle doit pouvoir recevoir les factures électroniques de ses fournisseurs.\n\nVoici les échéances distinctes :\n\n* **Réception des factures électroniques :** Les entreprises concernées doivent pouvoir recevoir les factures électroniques à partir du **1er septembre 2026**.\n* **Émission des factures électroniques :** L'émission et la transmission obligatoires pour les PME et microentreprises commencent au **1er septembre 2027**.\n\nLa source officielle est le calendrier de la réforme de facturation électronique de la DGFiP, disponible sur le site des impôts.\n\nSource récupérée : https://www.impots.gouv.fr/professionnel/questions/partir-de-quand-suis-je-concerne-par-la-reforme-de-la-facturation", "passed": 5, "total": 5, "forbiddenFound": [], "checks": [ { "label": "1er septembre 2026", "passed": true }, { "label": "1er septembre 2027", "passed": true }, { "label": "recevoir", "passed": true }, { "label": "émett", "passed": true }, { "label": "impots.gouv.fr", "passed": true } ] }, { "id": "anc-2026-crypto-timing", "status": 200, "seconds": 5.997, "finishReason": "stop", "answer": "Non, le règlement ANC 2026-01 sur les crypto-actifs n'est pas automatiquement obligatoire pour les comptes clos en 2026. L'application de droit commun est prévue pour les exercices ouverts à compter du 1er janvier 2027. Cependant, il peut être appliqué par anticipation à l'exercice en cours à la date de sa publication au Journal officiel, soit le 3 septembre 2026, mais cela dépend de la décision de l'entité.\n\nCette information est tirée de l'Arrêté du 12 août 2026 homologuant les règlements ANC 2026-01 à 04, disponible sur Légifrance.\n\nSource récupérée : https://www.anc.gouv.fr/files/anc/files/1_Normes_fran%C3%A7aises/Reglements/2026/2026%20homologu%C3%A9/REGLT_2026_01_JO-site.pdf", "passed": 4, "total": 4, "forbiddenFound": [], "checks": [ { "label": "2027", "passed": true }, { "label": "2026", "passed": true }, { "label": "anticip", "passed": true }, { "label": "ANC", "passed": true } ] }, { "id": "fec-balance", "status": 200, "seconds": 3.457, "finishReason": "stop", "answer": "D'après les montants indiqués, l'écriture est déséquilibrée de 10,00 € : débits 450,00 €, crédits 440,00 €. Ce déséquilibre doit être corrigé avant tout dépôt. Je n'ai reçu ni analysé le FEC complet ; je ne peux donc pas conclure à sa validité globale. Il faut aussi contrôler sa structure, ses dates, ses pièces et l'ensemble des autres écritures.\n\nSource récupérée : https://www.anc.gouv.fr/plan-comptable-general-0", "passed": 3, "total": 3, "forbiddenFound": [], "checks": [ { "label": "10", "passed": true }, { "label": "équilibr", "passed": true }, { "label": "fichier", "passed": true } ] }, { "id": "missing-vat-context", "status": 200, "seconds": 7.482, "finishReason": "stop", "answer": "Je ne peux pas choisir un taux de TVA ni confirmer une écriture définitive avec les éléments fournis. Pour une vente taxable, l'article 1214-41 du PCG indique le sens suivant : débit du compte 411 Clients pour le montant TTC ; crédit d'un compte 70 pour le montant HT ; crédit du compte 4457 pour la TVA collectée si elle est due. Le montant TTC et celui de la TVA restent à déterminer selon la nature, le lieu et le régime de l'opération. Aucune écriture n'a été enregistrée.\n\nSource récupérée : PCG 2026, page 164 — https://www.anc.gouv.fr/files/anc/files/1_Normes_fran%C3%A7aises/Reglements/Recueils/PCG_janvier2026/PCG--1er-janvier-2026.pdf", "passed": 3, "total": 3, "forbiddenFound": [], "checks": [ { "label": "nature", "passed": true }, { "label": "taux", "passed": true }, { "label": "hypoth", "passed": true } ] }, { "id": "account-number-2026", "status": 200, "seconds": 5.557, "finishReason": "stop", "answer": "Les comptes 401, 411 et 512 correspondent respectivement aux Fournisseurs, aux Clients et aux Banques selon le Plan de comptes au 1er janvier 2026.\n\nLa source utilisée est le Plan de comptes au 1er janvier 2026 de l'Autorité des Normes Comptables (ANC) : https://www.anc.gouv.fr/files/anc/files/1_Normes_fran%C3%A7aises/Plans%20comptables/2026/Plan-de-comptes-2026.pdf.\n\nSource récupérée : https://www.anc.gouv.fr/files/anc/files/1_Normes_fran%C3%A7aises/Reglements/Recueils/PCG_janvier2026/PCG--1er-janvier-2026.pdf", "passed": 4, "total": 4, "forbiddenFound": [], "checks": [ { "label": "401", "passed": true }, { "label": "411", "passed": true }, { "label": "512", "passed": true }, { "label": "PCG", "passed": true } ] }, { "id": "bfr-calculation", "status": 200, "seconds": 7.17, "finishReason": "stop", "answer": "Le Besoin en Fonds de Roulement (BFR) d'exploitation simplifié se calcule en soustrayant les dettes d'exploitation des stocks et des créances clients. La formule est : $\\text{BFR d'exploitation} = \\text{Stocks} + \\text{Créances clients} - \\text{Dettes fournisseurs}$.\n\nAvec les chiffres que vous avez fournis pour le 7 octobre 2026 :\n$\\text{BFR d'exploitation} = 25\\,000 € + 40\\,000 € - 18\\,000 € = 47\\,000 €$.\n\nCe calcul est une **analyse financière** qui mesure le besoin de financement généré par le cycle d'exploitation de l'entreprise à une date donnée. Il ne correspond pas à une écriture comptable passée. Une écriture comptable, elle, enregistre une transaction spécifique (achat, vente, paiement, etc.) dans les comptes de l'entreprise.\n\nSource récupérée : https://www.anc.gouv.fr/files/anc/files/1_Normes_fran%C3%A7aises/Reglements/Recueils/PCG_janvier2026/PCG--1er-janvier-2026.pdf", "passed": 2, "total": 3, "forbiddenFound": [], "checks": [ { "label": "47 000", "passed": false }, { "label": "stock", "passed": true }, { "label": "simulation", "passed": true } ] }, { "id": "holdout-sale-direction", "status": 200, "seconds": 4.135, "finishReason": "stop", "answer": "Je ne peux pas choisir un taux de TVA ni confirmer une écriture définitive avec les éléments fournis. Pour une vente taxable, l'article 1214-41 du PCG indique le sens suivant : débit du compte 411 Clients pour le montant TTC ; crédit d'un compte 70 pour le montant HT ; crédit du compte 4457 pour la TVA collectée si elle est due. Le montant TTC et celui de la TVA restent à déterminer selon la nature, le lieu et le régime de l'opération. Aucune écriture n'a été enregistrée.\n\nSource récupérée : PCG 2026, page 164 — https://www.anc.gouv.fr/files/anc/files/1_Normes_fran%C3%A7aises/Reglements/Recueils/PCG_janvier2026/PCG--1er-janvier-2026.pdf", "passed": 6, "total": 6, "forbiddenFound": [], "checks": [ { "label": "411", "passed": true }, { "label": "débit", "passed": true }, { "label": "70", "passed": true }, { "label": "crédit", "passed": true }, { "label": "4457", "passed": true }, { "label": "anc.gouv.fr", "passed": true } ] }, { "id": "holdout-accounts", "status": 200, "seconds": 5.8, "finishReason": "stop", "answer": "Les intitulés officiels exacts des comptes sont :\n\n* **401** : Fournisseurs\n* **411** : Clients\n* **512** : Banques\n\nCes informations proviennent du Plan de comptes au 1er janvier 2026 de l'ANC, disponible à l'adresse suivante : https://www.anc.gouv.fr/files/anc/files/1_Normes_fran%C3%A7aises/Plans%20comptables/2026/Plan-de-comptes-2026.pdf.\n\nSource récupérée : https://www.anc.gouv.fr/files/anc/files/1_Normes_fran%C3%A7aises/Reglements/Recueils/PCG_janvier2026/PCG--1er-janvier-2026.pdf", "passed": 4, "total": 4, "forbiddenFound": [], "checks": [ { "label": "401", "passed": true }, { "label": "411", "passed": true }, { "label": "512", "passed": true }, { "label": "anc.gouv.fr", "passed": true } ] }, { "id": "holdout-crypto-prepublication", "status": 200, "seconds": 3.31, "finishReason": "stop", "answer": "À la date indiquée, le règlement ANC 2026-01 n'était pas encore homologué et publié au Journal officiel du 3 septembre 2026. Je ne peux pas le présenter comme déjà en vigueur ni comme obligatoire pour un exercice ouvert en 2026. Il faut examiner les textes applicables à cette date ; une éventuelle anticipation prévue par le texte homologué plus tard ne doit pas être projetée rétrospectivement sur mars 2026.\n\nSource applicable récupérée : https://www.anc.gouv.fr/files/anc/files/1_Normes_fran%C3%A7aises/Reglements/Recueils/PCG_janvier2026/PCG--1er-janvier-2026.pdf", "passed": 3, "total": 3, "forbiddenFound": [], "checks": [ { "label": "non", "passed": true }, { "label": "mars", "passed": true }, { "label": "2027", "passed": true } ] }, { "id": "holdout-crypto-after-publication", "status": 200, "seconds": 4.769, "finishReason": "stop", "answer": "Le règlement ANC n° 2026-01 relatif aux cryptoactifs ne s'applique pas de plein droit à un exercice 2026 ouvert le 1er janvier. Il peut être appliqué par anticipation, mais il faut vérifier cette intention. La date de droit commun d'application est le 1er janvier 2027.\n\nLe texte le précise ainsi : \"Le présent règlement s’applique aux comptes afférents aux exercices ouverts à compter du 1er janvier 2027. Il peut être appliqué par anticipation sur l’exercice en cours à sa date de publication au Journal Officiel.\" (Source : https://www.anc.gouv.fr/files/anc/files/1_Normes_fran%C3%A7aises/Reglements/2026/2026%20homologu%C3%A9/REGLT_2026_01_JO-site.pdf, page 11).", "passed": 4, "total": 4, "forbiddenFound": [], "checks": [ { "label": "2027", "passed": true }, { "label": "anticip", "passed": true }, { "label": "2026", "passed": true }, { "label": "anc.gouv.fr", "passed": true } ] }, { "id": "holdout-unbalanced-gap", "status": 200, "seconds": 5.44, "finishReason": "stop", "answer": "L'écriture est déséquilibrée de 10,00 € : débits 325,40 €, crédits 315,40 €. Je ne peux ni la valider ni l'enregistrer ; aucune action comptable n'a été effectuée. Vérifiez la pièce et corrigez les montants avant une nouvelle proposition soumise à validation humaine.\n\nSource récupérée : https://www.anc.gouv.fr/files/anc/files/1_Normes_fran%C3%A7aises/Reglements/Recueils/PCG_janvier2026/PCG--1er-janvier-2026.pdf", "passed": 3, "total": 3, "forbiddenFound": [], "checks": [ { "label": "10", "passed": true }, { "label": "déséquilibr", "passed": true }, { "label": "ne peux", "passed": true } ] } ] } ], "findings": [ "Audit qualitatif : 12 réponses validées, 1 à nuancer, 0 incorrectes sur 13.", "Sur les 8 questions initiales inchangées, les critères textuels passent de 25/30 au premier banc à 28/30 après correction ; ce score ne prouve pas l'exactitude.", "Les comptes 401/411/512 sont retrouvés avec leurs intitulés ANC. La règle ANC 2026-01 distingue publication, anticipation et application de droit commun en 2027.", "Le cas inédit a d'abord révélé un débit 411 au HT pour une vente. La sortie finale refuse de choisir un taux inconnu et décrit 411 au TTC, 70 au HT et 4457 pour la TVA due.", "Les deux écritures déséquilibrées et le FEC décrit sont rejetés avec un écart calculé de 10,00 € ; aucun fichier ni journal réel n'a été modifié." ], "corrections": [ { "issue": "Règlement cité mais applicable plus tard", "action": "Récupération ciblée de l'article d'entrée en vigueur et distinction entre source publiée et règle applicable à la date demandée.", "verification": "Questions initiale crypto et deux cas inédits avant/après publication : verdicts affichés dans l'audit." }, { "issue": "Comptes et écriture de vente", "action": "Lecture directe des intitulés depuis la table ANC 2026, récupération de l'article PCG sur 411 et garde de sortie pour le TTC et le taux inconnu.", "verification": "Questions 401/411/512 et vente inédite : réponses finales et premier échec inédit conservés." }, { "issue": "Partie double et FEC", "action": "Calcul exact en centimes des deux totaux fournis et refus explicite de validation ou d'enregistrement d'une écriture déséquilibrée.", "verification": "Trois cas chiffrés du questionnaire, écart de 10,00 € et absence de prétention d'accès au fichier." }, { "issue": "Sources hors sujet", "action": "La recherche administrative n'ajoute plus ses citations aux questions traitées par le RAG comptable ; une URL réellement récupérée accompagne la réponse.", "verification": "Les 13 réponses finales sont relues et leurs liens officiels vérifiés." } ], "limitations": [ "13 questions sur un modèle ne mesurent pas la fiabilité générale ; les questions inédites sont un contrôle ciblé des défauts observés.", "Plusieurs sorties finales emploient un garde déterministe : le résultat mesure le produit complet (RAG, modèle et contrôles), pas le modèle seul.", "L'audit a été rédigé par l'assistant qui a corrigé le produit ; aucune revue indépendante par un expert-comptable n'a été réalisée.", "Aucune écriture, déclaration ou pièce comptable réelle n'a été enregistrée ou validée." ], "artifacts": [ { "label": "Questionnaire initial inchangé", "href": "/bench/2026-10-07-compta-2026-v2-accounting-2026-20261007-questionnaire.json" }, { "label": "Questions inédites figées", "href": "/bench/2026-10-07-compta-2026-v2-accounting-2026-20261007-holdout-v2.json" }, { "label": "Réponses finales — questions initiales", "href": "/bench/2026-10-07-compta-2026-v2-accounting-2026-20261007-gpu-v4.json" }, { "label": "Réponses finales — questions inédites", "href": "/bench/2026-10-07-compta-2026-v2-accounting-2026-20261007-holdout-gpu-v4.json" }, { "label": "Essai intermédiaire — questions inédites", "href": "/bench/2026-10-07-compta-2026-v2-accounting-2026-20261007-holdout-gpu-v2.json" }, { "label": "Contrôle intermédiaire — questions inédites", "href": "/bench/2026-10-07-compta-2026-v2-accounting-2026-20261007-holdout-gpu-v3.json" }, { "label": "Audit et sources", "href": "/bench/2026-10-07-compta-2026-v2-accounting-2026-20261007-v2-audit.json" } ] }