Modèle cloud A
FAUXModèle généraliste du marché · sans vos règlesSIMULATION
Montant à payer : 2 568,00 € HT, conforme à la commande (600 × 4,20 €) plus 48,00 € de port.
- VERSION
- Simulation
- TEMPS
- 6,1 s
- DONNÉES SORTIES
- Oui
Démo · IA locale
Un petit modèle, vos règles. Face aux plus grands.
Des demandes typiques d'entreprises de la santé et de la finance, écrites pour le test. Chaque modèle reçoit la même consigne. Les réponses sont affichées sans retouche, avec la version et la date du test.Des demandes typiques d'entreprises de la santé et de la finance, écrites pour le test. Chaque modèle reçoit la même consigne.
SIMULATION · MODÈLES CLOUD ANONYMISÉS · RÉSULTATS RÉELS PRÉSENTÉS EN RENDEZ-VOUSDemande · Mail · comptabilité fournisseursPeux-tu vérifier la facture FV-8841 de Métaux Rivière et me dire combien on doit payer ? On règle à J+7.
- Commande CA-2207 : 600 pièces réf. B-14 à 4,20 € HT
- Facture FV-8841 : 600 × 4,20 € = 2 520,00 € HT · port 48,00 € · total 2 568,00 € HT
- Paiement prévu à J+7 après réception de la facture
RÈGLES MÉTIERFOURNIES AU MODÈLE LOCAL SEUL
- Contrat Métaux Rivière : remise de 3 % au-delà de 500 pièces par commande
- Franco de port au-delà de 2 000 € HT
- Escompte de 2 % si paiement sous 10 jours, calculé après remise
SIMULATION
Modèle cloud B
FAUXModèle généraliste du marché · sans vos règlesSIMULATION
La facture est cohérente avec la commande. Total à régler : 2 568,00 € HT.
- VERSION
- Simulation
- TEMPS
- 5,4 s
- DONNÉES SORTIES
- Oui
Modèle local Glowsoft
JUSTEVotre serveur · règles + agentSIMULATION
Montant à payer : 2 395,51 € HT. Écart à réclamer : 123,60 € HT (remise de 3 % non appliquée : 75,60 € · port facturé 48,00 € alors que franco). Escompte de 2 % applicable : 48,89 €.
- VERSION
- Simulation
- TEMPS
- 2,4 s
- DONNÉES SORTIES
- Non
RÉPONSE ATTENDUEMontant à payer : 2 395,51 € HT. Écart à réclamer : 123,60 € HT (remise de 3 % non appliquée : 75,60 € · port facturé 48,00 € alors que franco). Escompte de 2 % applicable : 48,89 €.
Résultats
Sur l'ensemble des cas.
Juste : la réponse attendue, sans erreur. Partiel : le bon raisonnement avec une erreur de montant ou de règle.
Sur l’ensemble des cas
| MODÈLE · MODE | JUSTE | PARTIEL | FAUX | TESTÉS |
|---|---|---|---|---|
| Modèle cloud A · sans vos règles | 0 | 0 | 6 | 6 / 6 |
| Modèle cloud A · avec vos règles | 2 | 3 | 1 | 6 / 6 |
| Modèle cloud B · sans vos règles | 0 | 1 | 5 | 6 / 6 |
| Modèle cloud B · avec vos règles | 4 | 2 | 0 | 6 / 6 |
| Modèle local Glowsoft · vos règles | 6 | 0 | 0 | 6 / 6 |
Protocole
Vérifiable par tous.
- 01Même consigneLe texte envoyé est publié avec chaque cas.
- 02Deux modesLes modèles généralistes reçoivent la demande et les pièces, une fois sans vos règles, une fois avec.
- 03Réponses brutesAucune retouche. Version du modèle et date du test affichées.
- 04Données anonymiséesCas construits sur des demandes réelles, sans aucune donnée identifiante.
- 05Limites assuméesSur le raisonnement long et ouvert, les grands modèles cloud restent devant. Ces cas sont des tâches cadrées.
- 01Même consigne pour les trois modèles
- 02Réponses affichées sans retouche, datées
- 03Juste, partiel ou faux, selon la réponse attendue