Dossier vivant · IA

Arbre de qualification

Auditer un fournisseur IA pour l'e-commerce

Un audit fournisseur ne valide pas une promesse commerciale. Il relie chaque exigence à une preuve datée, un test sur le cas d'usage, une clause opposable et un propriétaire interne. Une certification ou une démonstration ne couvre jamais à elle seule tout le service.

Publié le Vérifié le Mis à jour le

Synthèse décisionnelle

Confirmé

Ce qui change

  • La qualification RGPD du fournisseur se détermine au cas par cas selon les finalités et moyens réels ; le mot SaaS ou IA ne tranche pas le rôle.
  • Une norme de système de management comme ISO/IEC 42001 évalue un périmètre organisationnel ; elle ne prouve pas l'exactitude de chaque sortie ni la conformité du cas d'usage.
  • L'audit doit couvrir la chaîne de sous-traitants, les versions de modèles, les flux de données et la procédure de sortie, pas seulement l'interface visible.

Recommandation

Ce que vous pouvez faire

  1. Écrire les exigences bloquantes et les preuves acceptables avant la démonstration commerciale.
  2. Tester le service sur un jeu représentatif autorisé, avec version, coût, erreurs et interventions humaines journalisés.
  3. Inclure au contrat les rôles, usages de données, sous-traitants, sécurité, incidents, changements, export et suppression.

À confirmer

Ce que l’on ne sait pas encore

  • Les performances réelles, le coût complet et la charge de supervision restent non mesurables sans pilote sur le cas d'usage.
  • Une documentation publique ne prouve pas que l'environnement client, le modèle et les options proposés bénéficient de tous les contrôles annoncés.
  • La qualification au titre du règlement européen sur l'IA dépend du système et du rôle effectivement exercé par chaque acteur.

Réponse rapide

Auditer un fournisseur IA consiste à vérifier une chaîne de preuves, pas à remplir un questionnaire déclaratif. Pour chaque exigence, il faut savoir qui affirme, quel document le démontre, quel test le confirme, quelle clause l’impose et qui surveille son maintien.

La première étape n’est pas la comparaison des modèles. Elle consiste à définir le service exact : cas d’usage, utilisateurs, données, décisions, actions autorisées, territoires, version, intégrations et procédure d’arrêt.

Quatre niveaux de preuve

Niveau Exemple Valeur Limite
Déclaration réponse commerciale ou page web ouvre une vérification non opposable ou périmètre incertain
Document politique, rapport, certificat, liste de sous-traitants décrit un contrôle et une date peut couvrir une autre entité ou offre
Test essai reproductible sur l’environnement client proposé mesure un comportement observable reste borné au jeu et à la version
Contrat clause, annexe sécurité, DPA, SLA répartit obligations et recours ne prouve pas l’efficacité technique

Une exigence critique doit idéalement combiner document, test et contrat. Une réponse « oui » sans pièce ni périmètre reste non vérifiée, pas conforme par défaut.

1. Identité et périmètre du service

Vérifier l’entité contractante, le service, la région, le modèle, la version, les options activées et les composants tiers. Demander une architecture des flux qui montre : navigateur, API, journaux, stockage, outils appelés, support, sauvegardes et sous-traitants ultérieurs.

Questions bloquantes :

  • quelle entité reçoit les données et dans quels pays ?
  • le modèle est-il dédié, mutualisé, routé ou remplacé dynamiquement ?
  • quelles fonctions peuvent changer sans accord ?
  • quelles actions le service peut-il déclencher dans le catalogue, le SAV, le paiement ou la commande ?
  • quel identifiant permet de relier une sortie à une version et une configuration ?

Une marque connue ne prouve ni l’environnement client, ni le sous-processeur, ni le modèle réellement utilisés.

2. Données, finalités et réutilisation

La CNIL indique que la qualification de responsable de traitement ou de sous-traitant dépend des finalités et moyens réels et doit être appréciée au cas par cas. Un fournisseur peut avoir un rôle différent selon qu’il exécute les instructions du client ou réutilise les données pour ses propres finalités.

Construire une matrice par flux :

Flux Données autorisées Finalité Stockage Réutilisation Suppression
entrée utilisateur catégories et champs précis tâche définie durée et région oui, non ou à confirmer délai et preuve
contexte récupéré catalogue, commande, base SAV réponse ou action cache et journaux idem idem
sortie texte, score, recommandation usage interne ou externe historique entraînement ou évaluation export et effacement
télémétrie identifiants, erreurs, coûts exploitation du service région et durée analyse fournisseur règle documentée

Le CEPD rappelle dans son avis 28/2024 que l’anonymat d’un modèle doit être apprécié au cas par cas et étayé, notamment face aux risques d’extraction ou d’inférence. Une affirmation générique selon laquelle « le modèle ne contient pas de données » ne clôt donc pas l’analyse.

3. Sécurité et chaîne de sous-traitance

La fiche CNIL sur la sous-traitance demande au responsable de connaître les mesures de sécurité mises en œuvre et d’obtenir des garanties suffisantes. L’audit doit couvrir :

  • authentification, habilitations et séparation des environnements clients ;
  • chiffrement en transit et au repos selon le risque ;
  • gestion des secrets et des connecteurs ;
  • journalisation, accès support et conservation ;
  • tests de sécurité et suivi des vulnérabilités ;
  • notification, qualification et coopération en cas d’incident ;
  • sous-traitants ultérieurs, préavis de changement et droit d’opposition lorsque applicable ;
  • sauvegarde, restauration, continuité et arrêt d’urgence.

Un rapport d’audit périmé ou expurgé peut rester utile, mais il faut noter ce qu’il ne permet pas de vérifier. L’absence de document ne vaut pas absence de contrôle ; elle rend la preuve non mesurable.

4. Qualité, limites et évaluation

Le NIST AI RMF propose de gouverner, cartographier, mesurer et gérer les risques tout au long du cycle de vie. Pour un achat, cela implique un protocole d’évaluation réexécutable.

Le jeu de test doit couvrir cas courants, exceptions, entrées ambiguës, contenu interdit, langues utilisées et tentatives de détourner le système. Pour chaque exemple, conserver l’entrée autorisée, le résultat attendu, la sortie, la version et la décision humaine.

Mesurer au minimum :

  • erreurs par type, pas seulement une moyenne ;
  • faux positifs et faux négatifs lorsque le système classe ;
  • citations ou preuves réellement récupérables ;
  • stabilité sur plusieurs exécutions si elle est nécessaire ;
  • temps humain de contrôle et de correction ;
  • échecs d’outil, délais, indisponibilités et coûts ;
  • capacité à refuser ou à escalader plutôt qu’inventer.

Le dossier Cas d’usage IA : valeur et risque fournit la structure du pilote. Un benchmark du fournisseur mesure éventuellement son environnement, pas le catalogue, la langue et les règles de l’acheteur.

5. Autorité et supervision humaine

Lister séparément ce que l’outil peut lire, proposer, rédiger et exécuter. Une permission technique ne constitue pas une autorisation métier.

Pour chaque action, définir :

  1. les préconditions ;
  2. la personne ou la règle qui autorise ;
  3. les limites de montant, volume et objet ;
  4. le journal et les preuves ;
  5. le délai de détection ;
  6. l’annulation ou la compensation possible.

Un « humain dans la boucle » n’est pas un contrôle si la personne ne dispose pas du temps, du contexte ou du pouvoir d’arrêter l’action.

6. Normes et certifications : contrôler le périmètre

ISO/IEC 42001:2023 est une norme internationale de système de management de l’IA. Elle porte sur l’établissement, la mise en œuvre, la maintenance et l’amélioration d’un système de management dans une organisation.

Si le fournisseur présente un certificat, vérifier l’organisme, la validité, l’entité, les sites, les produits et exclusions couverts. Même valide, ce certificat ne prouve pas à lui seul l’exactitude d’une sortie, la conformité RGPD du flux client, la sécurité d’un connecteur ou la qualité du cas d’usage. Cette limite découle du périmètre d’une norme de management, pas d’un défaut de la norme.

7. Contrat, coût et sortie

Le contrat et ses annexes doivent traiter au minimum :

  • description du service et responsabilités ;
  • données autorisées, finalités et interdictions de réutilisation ;
  • sous-traitants, régions et transferts ;
  • sécurité, audit, incident et coopération ;
  • versions, changements matériels et préavis ;
  • niveaux de service et exclusions ;
  • propriété intellectuelle, réclamations et contenus ;
  • export dans un format exploitable, délai de suppression et attestation ;
  • assistance de transition et sort des intégrations ;
  • structure complète de facturation et plafonds configurables.

La réversibilité se teste avant signature : exporter configuration, journaux, évaluations et données utiles ; remplacer les accès ; restaurer le processus précédent ; faire supprimer une copie de test. Une promesse de portabilité non exercée reste déclarative.

Grille de décision

Verdict Condition
poursuivre le pilote preuves suffisantes sur les exigences bloquantes, test possible et sortie praticable
poursuivre sous réserve écart borné, propriétaire et date de correction contractuelle
limiter le périmètre valeur possible mais données, actions ou populations trop sensibles
refuser finalité incompatible, réutilisation incontrôlée, sécurité non vérifiable ou absence de sortie

Le statut « sous réserve » doit expirer. Sans preuve à la date prévue, il devient un refus ou une réduction de périmètre.

Le dossier sur les cookies, le consentement et la mesure complète les traitements côté navigateur. La conformité e-commerce européenne aide à replacer l’IA parmi les autres obligations du parcours.

Inconnues à conserver

La conformité juridique, le coût complet, la qualité en production et la charge humaine restent propres à l’environnement client et au cas d’usage. Un audit documentaire peut préparer la décision ; seul un test borné et réconcilié mesure le comportement réel. Même après signature, chaque changement matériel de modèle, données, sous-traitant ou capacité doit rouvrir les contrôles concernés.

Historique

  • 23 août 2026 : création et vérification à partir du NIST, du CEPD, de la CNIL, d’ISO et du règlement européen sur l’IA.

Preuves

Sources primaires

  1. AI Risk Management Framework

    NIST · consulté le

  2. Opinion 28/2024 on certain data protection aspects related to AI models

    Comité européen de la protection des données · publié le · consulté le

  3. Déterminer la qualification juridique des fournisseurs de systèmes d'IA

    CNIL · consulté le

  4. Sécurité : gérer la sous-traitance

    CNIL · publié le · consulté le

  5. ISO/IEC 42001:2023 AI management systems

    ISO · publié le · consulté le

  6. Règlement (UE) 2024/1689 sur l'intelligence artificielle

    EUR-Lex · publié le · consulté le