Assistant de consultation IA : évaluer le temps gagné après correction, pas seulement la vitesse de rédaction

Définir exactement ce qui est automatisé

NHS England décrit des outils capables de convertir la parole en documentation structurée. Il distingue les enjeux de sécurité, d’intégration, de protection des données et d’organisation ; son cadre britannique ne remplace pas les obligations françaises.

Nous proposons de nommer le livrable attendu : transcription, synthèse, lettre ou classement de notes. Interdire explicitement les ajouts non demandés évite qu’un outil acheté pour rédiger soit utilisé progressivement pour décider d’un diagnostic, d’une prescription ou d’un codage sans évaluation adaptée.

Références : NHS England — recommandations sur les assistants de documentation ambiante.

Tester les erreurs qui peuvent inverser le sens

NHS England signale les difficultés liées au vocabulaire, aux accents, aux omissions et à l’interprétation du contexte. Une hypothèse peut, par exemple, être présentée à tort comme un diagnostic établi.

Voici notre jeu de tests fictifs à intégrer à une recette. Ce sont des scénarios de contrôle, pas des propos de patients réels.

Sur petit écran, faites défiler le tableau horizontalement pour voir toutes les colonnes.

Références : NHS England — recommandations sur les assistants de documentation ambiante.

Donner au relecteur les moyens de refuser le résultat

Le GMC rappelle, pour les professionnels qu’il régule au Royaume-Uni, que les décisions prises avec l’aide d’une IA restent de leur responsabilité et que les limites de la technologie doivent être discutées. Il insiste aussi sur la formation et le signalement des risques.

Notre règle de fonctionnement proposée : aucune note ne devient définitive par simple expiration d’un délai. Le professionnel doit pouvoir corriger, rejeter, reprendre une saisie manuelle et identifier la version validée. Une validation en lot sans lecture ne constitue pas un contrôle utile.

Références : GMC — intelligence artificielle et technologies innovantes.

Cartographier ce qui sort de la consultation

La CNIL explique que la réutilisation d’échanges privés pour entraîner ou améliorer un modèle ne correspond pas automatiquement aux attentes des personnes. La finalité de production d’un compte rendu et celle d’entraînement doivent être analysées séparément.

Avant tout essai avec des données réelles, notre liste de questions au fournisseur porte sur l’audio, la transcription, les journaux techniques, la conservation, les sous-traitants, les transferts et les accès du support. Faites vérifier le cadre juridique, les exigences d’hébergement applicables et l’information des patients. Une mention commerciale « sécurisé » ne répond pas à ces questions.

Références : CNIL — intérêt légitime et développement d’un système d’IA.

Mesurer le travail complet, y compris les reprises

Nous proposons de comparer le temps de documentation habituel au temps comprenant lancement, relecture, correction et intégration. Mesurez séparément les erreurs de présentation et celles qui modifient une information clinique ; une moyenne globale peut masquer un défaut rare mais grave.

Un pilote doit aussi regarder les échecs : bruit, interruption réseau, consultation multilingue, refus d’utilisation ou impossibilité d’enregistrer correctement. Ne retirez pas ces situations du bilan simplement parce qu’elles rendent le résultat moins favorable. Le taux d’usage ne mesure pas à lui seul l’utilité.

Prévoir les conditions d’arrêt avant celles de généralisation

Notre proposition est de désigner un responsable du pilote, une procédure de remontée d’incident et des critères d’arrêt discutés avec les soignants et la sécurité. Toute mise à jour importante du produit doit déclencher une nouvelle vérification des scénarios critiques.

Documentez ce qui est autorisé, pour quels professionnels et dans quels types de consultation. Un succès sur des échanges courts en français ne démontre pas la même qualité dans tous les services. La possibilité de revenir au mode manuel doit rester opérationnelle.

Évaluer aussi l’effet sur la conversation

NHS England invite à considérer les effets sur l’interaction entre patient et professionnel. Le bénéfice attendu ne se limite donc pas au nombre de caractères produits.

Notre question de fin de pilote est simple : l’outil a-t-il réellement facilité l’écoute, ou a-t-il ajouté des interruptions et des explications techniques ? Recueillez les difficultés sans pénaliser le refus d’utilisation et conservez une alternative adaptée.

Références : NHS England — recommandations sur les assistants de documentation ambiante.

Questions complémentaires