{
  "suite_sha256": "2d708441f56cc4bfa985576a2892d792f391f30862845279fea161374070d3dc",
  "method": "sequential local API; lexical checks are not an accuracy grade",
  "models": [
    "gpu-pro"
  ],
  "cases": 5,
  "results": [
    {
      "id": "holdout-sale-direction",
      "domain": "Écriture de vente",
      "model": "gpu-pro",
      "status": 200,
      "seconds": 6.864,
      "finish_reason": "stop",
      "answer": "Je ne peux pas choisir un taux de TVA ni confirmer une écriture définitive avec les éléments fournis. Pour une vente taxable, l'article 1214-41 du PCG indique le sens suivant : débit du compte 411 Clients pour le montant TTC ; crédit d'un compte 70 pour le montant HT ; crédit du compte 4457 pour la TVA collectée si elle est due. Le montant TTC et celui de la TVA restent à déterminer selon la nature, le lieu et le régime de l'opération. Aucune écriture n'a été enregistrée.\n\nSource récupérée : PCG 2026, page 164 — https://www.anc.gouv.fr/files/anc/files/1_Normes_fran%C3%A7aises/Reglements/Recueils/PCG_janvier2026/PCG--1er-janvier-2026.pdf",
      "grade": {
        "lexical_groups_passed": 6,
        "lexical_groups_total": 6,
        "groups": [
          {
            "options": [
              "411",
              "client"
            ],
            "pass": true
          },
          {
            "options": [
              "débit",
              "débité"
            ],
            "pass": true
          },
          {
            "options": [
              "70",
              "706",
              "produit"
            ],
            "pass": true
          },
          {
            "options": [
              "crédit",
              "crédité"
            ],
            "pass": true
          },
          {
            "options": [
              "4457",
              "tva collectée"
            ],
            "pass": true
          },
          {
            "options": [
              "anc.gouv.fr",
              "PCG"
            ],
            "pass": true
          }
        ],
        "forbidden_found": []
      },
      "error": null
    },
    {
      "id": "holdout-accounts",
      "domain": "Plan de comptes",
      "model": "gpu-pro",
      "status": 200,
      "seconds": 5.81,
      "finish_reason": "stop",
      "answer": "Les intitulés officiels exacts des comptes sont :\n\n*   **401** : Fournisseurs\n*   **411** : Clients\n*   **512** : Banques\n\nCes informations proviennent du Plan de comptes au 1er janvier 2026 de l'ANC, disponible à l'adresse suivante : https://www.anc.gouv.fr/files/anc/files/1_Normes_fran%C3%A7aises/Plans%20comptables/2026/Plan-de-comptes-2026.pdf.",
      "grade": {
        "lexical_groups_passed": 4,
        "lexical_groups_total": 4,
        "groups": [
          {
            "options": [
              "401",
              "Fournisseurs"
            ],
            "pass": true
          },
          {
            "options": [
              "411",
              "Clients"
            ],
            "pass": true
          },
          {
            "options": [
              "512",
              "Banques"
            ],
            "pass": true
          },
          {
            "options": [
              "anc.gouv.fr"
            ],
            "pass": true
          }
        ],
        "forbidden_found": []
      },
      "error": null
    },
    {
      "id": "holdout-crypto-prepublication",
      "domain": "Temporalité ANC",
      "model": "gpu-pro",
      "status": 200,
      "seconds": 3.324,
      "finish_reason": "stop",
      "answer": "Non, vous ne pouvez pas appliquer obligatoirement le règlement ANC 2026-01 sur les crypto-actifs pour un exercice ouvert au 1er janvier 2026, même si le règlement est publié plus tard.\n\nSelon le PCG consolidé au 1er janvier 2026, les règlements publiés cette année (comme le 2026-01) ne s'appliquent pas par défaut aux exercices ouverts en 2026. Si vous avez connaissance d'un texte publié après le 15 mars 2026, il ne doit pas être présenté comme étant déjà en vigueur à cette date.\n\nSource récupérée : https://www.anc.gouv.fr/files/anc/files/1_Normes_fran%C3%A7aises/Reglements/Recueils/PCG_janvier2026/PCG--1er-janvier-2026.pdf",
      "grade": {
        "lexical_groups_passed": 2,
        "lexical_groups_total": 3,
        "groups": [
          {
            "options": [
              "non",
              "pas"
            ],
            "pass": true
          },
          {
            "options": [
              "mars",
              "publication",
              "2026"
            ],
            "pass": true
          },
          {
            "options": [
              "2027",
              "anticipation",
              "ultérieur"
            ],
            "pass": false
          }
        ],
        "forbidden_found": []
      },
      "error": null
    },
    {
      "id": "holdout-crypto-after-publication",
      "domain": "Temporalité ANC",
      "model": "gpu-pro",
      "status": 200,
      "seconds": 4.73,
      "finish_reason": "stop",
      "answer": "Le règlement ANC n° 2026-01 relatif aux cryptoactifs ne s'applique pas de plein droit à un exercice 2026 ouvert le 1er janvier. Il peut être appliqué par anticipation, mais il faut vérifier cette intention. La date de droit commun d'application est le 1er janvier 2027.\n\nLe texte le précise ainsi : \"Le présent règlement s’applique aux comptes afférents aux exercices ouverts à compter du 1er janvier 2027. Il peut être appliqué par anticipation sur l’exercice en cours à sa date de publication au Journal Officiel.\" (Source : https://www.anc.gouv.fr/files/anc/files/1_Normes_fran%C3%A7aises/Reglements/2026/2026%20homologu%C3%A9/REGLT_2026_01_JO-site.pdf, page 11).",
      "grade": {
        "lexical_groups_passed": 4,
        "lexical_groups_total": 4,
        "groups": [
          {
            "options": [
              "2027"
            ],
            "pass": true
          },
          {
            "options": [
              "anticip",
              "option"
            ],
            "pass": true
          },
          {
            "options": [
              "2026"
            ],
            "pass": true
          },
          {
            "options": [
              "anc.gouv.fr",
              "legifrance.gouv.fr"
            ],
            "pass": true
          }
        ],
        "forbidden_found": []
      },
      "error": null
    },
    {
      "id": "holdout-unbalanced-gap",
      "domain": "Contrôle de partie double",
      "model": "gpu-pro",
      "status": 200,
      "seconds": 5.424,
      "finish_reason": "stop",
      "answer": "L'écart entre les débits (325,40 €) et les crédits (315,40 €) est de 10,00 €.\n\nJe n'ai pas le pouvoir d'enregistrer cette écriture. Une écriture comptable est une proposition qui nécessite une vérification complète (pièce, nature de l'opération, date, régime fiscal, plan de comptes) et une validation humaine avant d'être exécutée par un outil autorisé. De plus, une écriture doit être équilibrée, ce qui n'est pas le cas ici.\n\nSource récupérée : https://www.anc.gouv.fr/plan-comptable-general-0",
      "grade": {
        "lexical_groups_passed": 3,
        "lexical_groups_total": 3,
        "groups": [
          {
            "options": [
              "10"
            ],
            "pass": true
          },
          {
            "options": [
              "déséquilibr",
              "non équilibr",
              "écart"
            ],
            "pass": true
          },
          {
            "options": [
              "ne peux",
              "pas",
              "aucun",
              "non"
            ],
            "pass": true
          }
        ],
        "forbidden_found": []
      },
      "error": null
    }
  ]
}