Version web
Tableau de bord de l'adéquation à l'intelligence artificielle
Comment utiliser cet outil
Le présent outil vous aidera à déterminer si un problème ou un point de tension précis se prête bien à une solution intégrant l'intelligence artificielle (IA). Vous devez remplir les cinq parties de la grille d'évaluation pour chaque point de tension soulevé dans votre schéma de processus.
L'IA désigne un large éventail de technologies capables de remplir des tâches typiquement associées aux fonctions cognitives de l'être humain, notamment la reconnaissance, l'apprentissage et le raisonnement logique.
Une solution intégrant l'IA utilise cette dernière pour générer des extrants (prédictions, contenus, recommandations ou décisions) à partir des intrants reçus. Pour fonctionner, les systèmes d'IA doivent s'appuyer sur des données. Voici quelques exemples :
- Automatisation : l'IA s'appuie sur des règles, des flux de travail fixes et une logique prédéfinie pour exécuter des tâches répétitives avec efficacité, ce qui peut réduire les erreurs et accélérer les processus.
- Détection et prédiction : l'IA utilise des schémas appris à partir de données pour détecter ou prédire des résultats dignes d'intérêt.
- Intelligence artificielle générative : de grands modèles de langage sont utilisés pour générer de nouveaux contenus (textes, images, sons, codes ou autres formes de données) à partir de requêtes.
À qui s'adresse cet outil?
Cet outil a été conçu pour les équipes qui amorcent l'exploration des solutions intégrant l'IA. Il s'adresse à toute personne qui souhaite adopter une démarche structurée et fondée sur des données probantes pour découvrir ces solutions et en planifier l'utilisation.
Pourquoi l'utiliser?
Beaucoup de projets qui intègrent l'IA échouent. Et ce n'est pas nécessairement la technologie en soi qui est fautive, mais plutôt le fait qu'on l'applique aux mauvais problèmes. Cette grille d'évaluation vous aidera à éviter que votre projet connaisse le même sort :
- en vous faisant évoluer de la constatation d'un vague symptôme vers un diagnostic clair, étayé par des données;
- en confirmant que l'IA est le bon outil pour la tâche, et non une solution appelée à déboucher sur d'autres problèmes;
- en vous procurant une analyse de cas solide, fondée sur des données probantes, ce qui favorisera le soutien de la direction.
Quel est l'objectif?
Après cette évaluation, vous saurez mieux si l'IA convient ou non à votre situation précise. Vous pourrez ainsi prendre une décision stratégique quant à votre projet et choisir d'aller de l'avant, de le réorienter ou de l'interrompre. Les cinq parties de la grille d'évaluation vous donneront une vision globale de la pertinence d'utiliser une solution intégrant l'IA pour la tâche souhaitée, de la gravité du problème à résoudre et de votre état de préparation à utiliser une telle solution.
Quand devrait-on utiliser cet outil?
La grille d'évaluation devrait être remplie pendant la phase exploratoire de votre projet. Il est préférable de l'utiliser une fois que vous aurez une certaine compréhension du problème à résoudre, mais avant de choisir une solution précise et de mener une évaluation technique complète avec l'aide des TI.
Comment l'utiliser?
La procédure est simple :
- Concentrez-vous sur un seul problème précis. Référez-vous au cours
Le processus de conception : Comprendre le problème (DDN237)
pour mieux savoir comment définir le problème et évaluer la viabilité et la faisabilité d'une solution donnée.
Si votre solution intégrant l'IA est appelée à effectuer de multiples tâches distinctes, veuillez remplir une grille séparée pour chacune d'entre elles.
Les grilles individuelles fourniront une évaluation plus représentative.
- Remplissez chacune des cinq parties ci-après.
- Pour chaque critère, fournissez une évaluation honnête à l'aide du guide de pointage présenté dans chaque partie.
- Utilisez le pointage final et le guide d'interprétation pour orienter une discussion stratégique avec votre équipe.
Remarque sur les considérations politiques et éthiques :
Cette grille est un outil qui vise à évaluer des possibilités opérationnelles et techniques. Elle ne peut en aucun cas remplacer une évaluation formelle des risques, une évaluation des facteurs relatifs à la vie privée (EFVP) ou un examen éthique. Tous les projets intégrant l'IA, en particulier ceux qui impliquent l'automatisation de décisions, doivent être conformes à la Directive sur la prise de décisions automatisée du Conseil du Trésor. L'utilisation de l'IA générative doit, quant à elle, respecter le Guide sur l'utilisation de l'intelligence artificielle générative. La grille d'évaluation doit être utilisée conjointement avec les directives officielles, et non les remplacer.
Partie A : Nature de la tâche (pointage de la pertinence de l'IA)
Cette partie vise à évaluer si la tâche est adaptée aux capacités actuelles de l'IA. Pour chaque critère, inscrivez 0 pour « non » ou 1 pour « oui ».
0 - Non 1 - Oui
1. Cette tâche est-elle très répétitive? Exemples de tâches répétitives adaptées à l'IA :
- systèmes de recommandation
- détection d'anomalies
- prévisions
Exemples de tâches répétitives adaptées à l'IA générative :
- production de nouveaux rapports
- création de contenu pour les réseaux sociaux
- rédaction de résumés
2. La tâche fait-elle appel à un grand nombre de données? Requiert-elle d'analyser un grand volume de textes, de nombres ou d'images?
3. La tâche repose-t-elle sur la découverte de schémas dans les données? Exemples : tri des CV, cerner des tendances
4. La tâche consiste-t-elle à générer du contenu standardisé (ou basé sur des modèles)? Exemple : faire des ébauches de descriptions de poste ou de courriels
5. Avez-vous déjà exploré des solutions non liées à l'IA et constaté qu'elles donnaient des résultats insuffisants?
Sous-total A (pointage de la pertinence de l'IA) : __ / 5
Partie B : Incidence du problème (pointage des contrariétés)
Cette partie évalue la gravité du problème. Si possible, fondez votre évaluation sur des données réelles plutôt que sur des suppositions. Pour chaque critère, notez l'incidence sur une échelle de 1 (incidence très faible) à 5 (incidence très élevée).
1 - Incidence très faible 5 - Incidence très élevée
6. Quelle est l'incidence de ce point de tension sur les ressources? Exemples : temps consacré, ressources financières, ressources physiques
7. Quelle est l'incidence psychologique de ce point de tension sur le personnel? Exemples : stress, frustration
8. À quelle fréquence cette tension engendre-t-elle des erreurs? À quel rythme les erreurs entraînent-elles une surcharge de travail?
9. Quelle est l'incidence de ce point de tension sur les objectifs de l'organisation? Quel est le coût stratégique de l'inaction?
Sous-total B (pointage des contrariétés) : __ / 20
Partie C : Qualité du processus (ou « éviter d'automatiser des processus inadéquats »)
Cette partie évalue la stabilité du processus sous-jacent et vise à s'assurer qu'il est suffisamment défini pour se prêter à une intervention de l'IA. Pour chaque critère, inscrivez 0 pour « non » ou 1 pour « oui ».
0 - Non 1 - Oui
10. Le processus actuel est-il stable et bien établi? Autrement dit, il ne doit pas changer constamment ni être entièrement ponctuel.
11. Est-ce que les résultats que l'on souhaite obtenir du processus sont clairs et convenus au préalable? Est-on en mesure de reconnaître de « bons » résultats?
12. Le processus a-t-il déjà été simplifié au maximum?
Sous-total C (pointage de la qualité du processus) : __ / 3
Partie D : Qualité des données (« données inexactes = résultats erronés »)
Cette partie évalue si les données nécessaires à l'outil d'IA sont facilement accessibles et si leur qualité est suffisante. Pour chaque critère, inscrivez 0 pour « non » ou 1 pour « oui ».
0 - Non 1 - Oui
13. Les données nécessaires à l'apprentissage et au fonctionnement de l'IA sont-elles accessibles? Exemples : documents historiques, documents pertinents pour la tâche
14. Les données disponibles sont-elles de qualité suffisante? Sont-elles exactes, exhaustives, actualisées et relativement filtrées?
15. Les données sont-elles organisées et présentées dans un format utilisable? Exemples : dans une base de données dotée d'une gouvernance adéquate, dans un format exploitable par la machine
Sous-total D (pointage de la qualité des données) : __ / 3
Partie E : Conformité et éthique
Cette partie consiste en une vérification préliminaire qui vise à déterminer ce qu’exigent les politiques. Elle ne remplace pas une évaluation formelle. Si vous répondez « oui » à une seule de ces questions, vous devez en référer aux expert·es de votre ministère.
| Question relative à la conformité |
Action requise |
|
16. L'outil d'IA traitera-t-il des renseignements permettant d'identifier une personne?
La Loi sur la protection des renseignements personnels définit les renseignements personnels comme des renseignements qui – quels que soient leur forme et leur support – concernent un individu identifiable : nom, matricule d'employé·e, cote de rendement, renseignements financiers, numéro de sécurité sociale, adresses postales, statuts de citoyenneté, informations biométriques, etc.
|
Si vous avez répondu « oui », une évaluation des facteurs relatifs à la vie privée (EFVP) est obligatoire. Il s'agit d'un volet crucial du projet qui doit être mené parallèlement à son élaboration. La première étape consiste à joindre la personne qui coordonne l'accès à l'information et la protection des renseignements personnels (AIPRP) au sein de votre ministère.
|
|
17. L'outil d'IA accompagnera-t-il ou remplacera-t-il l'être humain dans la prise de décisions administratives visant ou ayant une incidence sur des personnes?
Exemples : tri des CV, détermination de l'admissibilité, évaluation du rendement, automatisation des approbations, reconnaissance faciale, attribution d'une cote de risque
|
Si vous avez répondu « oui », une évaluation de l'incidence algorithmique (EIA) est obligatoire. Cette évaluation doit être réalisée avant le déploiement du système.
|
|
18. Les données utilisées pour entraîner ou faire fonctionner l'IA présentent-elles des implications juridiques ou un risque relatif à la conformité et à l'imputabilité en cas d'erreur?
Exemples : présence de biais historiques dans les données d'entraînement, lacunes dans les données relatives à des groupes marginalisés
|
Si vous avez répondu « oui », il existe un risque éthique important. Ce problème doit être documenté, et un plan d'atténuation doit être mis en place comme élément central du registre des risques de votre projet et de toute EFVP ou EIA officielle.
|
Guide d'interprétation du tableau de bord
Ce guide vous aidera à interpréter vos résultats. Vous pouvez vous y reporter pour orienter une discussion stratégique avec votre équipe et déterminer la prochaine étape la plus appropriée pour votre projet.
Étape 1 : Calcul des sous-totaux
Premièrement, il faut calculer les sous-totaux obtenus pour chacune des quatre parties notées. La partie E ne compte pas dans ce calcul, puisqu'il s'agit d'une vérification de conformité.
| Partie de la grille d'évaluation |
Votre pointage |
|
Partie A : pointage de la pertinence de l'IA
|
__ /5
|
|
Partie B : pointage des contrariétés
|
__ /20
|
|
Partie C : pointage de la qualité du processus
|
__ /3
|
|
Partie D : pointage de la qualité des données
|
__ /3
|
Étape 2 : Interprétation du pointage de chaque partie
| Partie de la grille d'évaluation |
Si votre pointage est... |
Cela signifie... |
|
A : pointage de la pertinence de l'IA (sur 5 points)
|
4–5 (élevé)
2–3 (modéré)
0–1 (faible)
|
Aller de l'avant. La tâche est adaptée à l'utilisation d'une solution intégrant l'IA.
Interrompre. La tâche ne convient que partiellement. Une approche hybride (humain et IA) peut être nécessaire.
Réorienter. La tâche ne se prête pas à l'IA. Optez pour une solution sans IA.
|
|
B : pointage des contrariétés (sur 20 points)
|
14–20 (élevé)
8–13 (modéré)
0–7 (faible)
|
Le problème est grave et justifie un investissement important.
Le problème pose des inconvénients connus, mais n'est peut-être pas prioritaire.
Le problème a une incidence minime.
|
|
C : pointage de la qualité du processus
D : pointage de la qualité des données (note combinée sur 6 points)
|
5–6 (élevé)
3–4 (modéré)
0–2 (faible)
|
Aller de l'avant. Votre projet a des fondements solides et vous pouvez aller de l'avant.
Interrompre. Vous devez améliorer les fondements du projet (par exemple, en épurant le processus).
Réorienter. Un remaniement profond des fondements est nécessaire avant de pouvoir déployer avec succès un projet intégrant l'IA.
|
Étape 3 : Examen de la conformité et de l'éthique (partie E)
Il s'agit de l'étape la plus importante de l'évaluation. Cette partie n'est pas notée; elle consiste en une vérification de conformité visant à cibler les exigences obligatoires pour votre projet.
- Si vous avez répondu « oui » à la question 16 (renseignements permettant d'identifier une personne) ou à la question 17 (décisions automatisées), cela indique qu'un processus de conformité officiel doit être lancé et intégré à votre plan de projet. Il ne faut pas percevoir cette étape comme un obstacle, mais comme un processus parallèle qui assurera un déploiement responsable.
- Si vous avez répondu « oui » à la question 18 (données biaisées), cela indique un risque éthique important qui doit être pris en charge au moyen d'un plan d'atténuation officiel.
Étape 4 : Élaboration de la recommandation stratégique
Pour terminer, vous devez combiner l'interprétation de votre pointage aux vérifications de la conformité afin d'élaborer une recommandation globale.
| Si votre profil correspond à... |
Votre recommandation stratégique est... |
|
Pertinence élevée de l'IA (A)
Contrariétés élevées (B)
Qualité élevée (C + D)
Conformité validée
|
Candidat idéal : Il s'agit d'un excellent projet; vous pouvez donc aller de l'avant, à condition de faire toute EFVP ou EIA requise.
Recommandation : Examiner le Registre de l'IA du gouvernement du Canada et consulter vos collègues afin de déterminer si vous pourriez réutiliser ou adapter d'autres projets similaires faisant usage de l'IA.
|
|
Pertinence élevée de l'IA (A)
Contrariétés élevées (B)
Qualité faible (C + D) ou résultats ambigus en matière de conformité
|
Potentiel élevé, mais amélioration nécessaire : Il s'agit d'une bonne idée, mais certaines bases doivent être revues (par exemple, repérer et corriger les inexactitudes dans les données).
Recommandation : Interrompre le projet afin de résoudre les problèmes liés aux processus ou aux données avant d'aller plus loin. Lancer les procédures obligatoires (EFVP, EIA) si nécessaire. Les volets « qualité » et « conformité » doivent être réglés avant le déploiement.
|
|
Pertinence élevée de l'IA (A)
Contrariétés faibles (B)
Qualité modérée ou élevée (C + D)
|
Potentiel élevé, mais priorité faible : Le projet a du potentiel, mais ne répond pas à un problème prioritaire.
Recommandation : Interrompre. Marquer le projet comme une possibilité de perfectionnement pour les personnes qui souhaitent développer leurs compétences. Si le financement le permet, ce projet représente un moyen peu risqué de renforcer les capacités.
|
|
Pertinence modérée de l'IA (A) ou
contrariétés modérées (B)
|
Candidat moyen : Ce projet a du potentiel, mais nécessite une bonne analyse de cas.
Recommandation : Interrompre. Envisager la mise en place d'un projet pilote de petite envergure pour mieux évaluer les avantages apportés par la solution proposée, ou réévaluer le problème en fonction d'une autre solution intégrant l'IA.
|
|
Pertinence faible de l'IA (A) ou
contrariétés faibles (B)
|
Priorité faible; réévaluation nécessaire : La tâche n'est pas adaptée à l'IA ou le problème n'est pas assez important.
Recommandation : Réorienter le projet et envisager d'abord des améliorations simples à apporter aux processus, sans recourir à l'IA.
|
