Navigation – Plan du site

AccueilNumérosvol. 25, n° 1Dossier principalTour d’horizon des enjeux éthique...

Dossier principal

Tour d’horizon des enjeux éthiques liés à l’IA en santé

Joé T. Martineau et Frédérique Romy Godin

Résumés

Les applications d’intelligence artificielle (IA) en santé offrent de nombreux bénéfices potentiels, mais génèrent aussi des risques et soulèvent plusieurs enjeux éthiques. En effet, l’évolution rapide des technologies IA, l’incertitude quant à leurs impacts sur les individus et sur nos sociétés, ainsi que le manque de réglementation les encadrant, forcent une réflexion profonde sur les enjeux éthiques que le développement et le déploiement de systèmes d’intelligence artificielle (SIA) soulèvent, ainsi que sur notre positionnement face à leur utilisation.
Le présent article propose un tour d’horizon des différents enjeux éthiques liés au développement et à l’utilisation des technologies d’IA dans le milieu de la santé, en deux parties. D’abord, nous abordons les enjeux éthiques liés à l’exploitation de données massives nécessaires à l’entraînement des algorithmes de l’IA. Ensuite, nous présenterons les principaux enjeux éthiques liés au développement et à l’utilisation des SIA en santé, en abordant la façon dont ces systèmes impactent nos vies ainsi que l’environnement physique et social dans lesquels nous vivons.

Haut de page

Notes de l’auteur

Ce manuscrit est tiré d’un cahier de recherche produit dans le cadre d’un mandat réalisé par un groupe de travail de l’Axe Santé durable de l’OBVIA pour la Direction de la planification stratégique et de la performance (DGPSP) du ministère de la Santé et des Services sociaux du Québec (MSSS). Les auteures détiennent les droits de propriété intellectuelle par rapport au contenu, aux images, graphiques et tableaux utilisés dans cet article.

Texte intégral

1Les technologies d’intelligence artificielle (IA) appliquées au domaine de la santé se développent à un rythme rapide, et leur implantation est déjà en cours dans plusieurs organisations de la santé, tant sur le plan du diagnostic, des soins cliniques, que de l’administration des services. Ces applications présentent de nombreux bénéfices potentiels à la fois pour les organisations, les professionnels et les gestionnaires de la santé, que pour les patients. Cependant, ces technologies ne sont pas nécessairement sans risque et leur développement et leur déploiement dans le milieu de la santé suscitent à la fois fascination, enthousiasme et espoir d’améliorer la qualité des soins, des diagnostics et la gestion de la santé, et de l’inquiétude, de la méfiance et de nombreux questionnements. En effet, l’évolution rapide des technologies d’IA, l’incertitude quant à leurs impacts sur les individus, les organisations de la santé et sur nos sociétés, ainsi que le manque de réglementation les encadrant, forcent une réflexion profonde sur les enjeux éthiques que le développement de systèmes d’intelligence artificielle (SIA) soulève, ainsi que sur notre positionnement quant à leur utilisation.

2Dans cet article, nous proposons un tour d’horizon des principaux enjeux éthiques liés au développement et à l’utilisation des technologies d’IA dans le domaine de la santé en explorant la littérature scientifique et la littérature grise (rapports gouvernementaux et d’organismes reconnus) sur l’éthique de l’IA et sur la gouvernance éthique des données dans le domaine de la santé. Notre objectif est de répondre à la question : « À quels enjeux éthiques devons-nous porter attention dans l’intégration de l’IA en santé ? ». Nous visons à fournir un portrait d’ensemble des enjeux touchant ces technologies, et non une analyse en profondeur d’un ou deux de ces enjeux. En outre, bien que nous nous appuyions sur la littérature pertinente, nous ne prétendons pas que cette revue des enjeux, ni de la littérature, soit exhaustive. En effet, les technologies d’IA et leurs applications en santé évoluant rapidement, les enjeux éthiques sont aussi amenés à évoluer et à se diversifier avec le temps. De plus, la littérature dans le domaine est foisonnante et provient de différents domaines, ce qui rend l’objectif d’une revue systématique très complexe.

3Dans la première section de cet article, nous abordons des enjeux éthiques liés à l’exploitation des données massives dans le domaine de la santé. Ces enjeux comprennent notamment le consentement à la collecte et au partage des données personnelles, la confidentialité et la protection de la vie privée des personnes, la qualité et la fiabilité des données, ainsi que les risques liés à l’archivage et la conservation des données. Nous poursuivons notre tour d’horizon avec une seconde section englobant les enjeux liés au développement des SIA en santé. Cette section traite de l’utilisation non éthique des SIA, de leur manque d’explicabilité, de l’enjeu de la responsabilité décisionnelle, des biais et de la discrimination algorithmique, du développement d’agents moraux artificiels, des enjeux existentiels de l’IA, du futur du travail et de la transformation des emplois, de l’accès variable aux technologies de l’IA et de l’accroissement des injustices sociales lié à l’utilisation des SIA, de la commercialisation des technologies de l’IA et, enfin, des impacts environnementaux de celles-ci.

Principaux enjeux éthiques liés à l’exploitation des données massives en santé

4Le développement et le déploiement des technologies d’IA, dont celles qui mobilisent l’apprentissage automatique, nécessitent la collecte et l’utilisation d’une énorme quantité de données, souvent à juste titre nommées « données massives » ou « big data ». Ces données sont nécessaires pour entraîner les algorithmes utilisés par les différents SIA. De ce fait, les données sont devenues des ressources précieuses et convoitées par différents acteurs publics et privés, poursuivant des objectifs divers. De nombreux enjeux éthiques liés à l’IA en santé sont liés à la nature même de ces données et à la façon dont elles sont collectées, entreposées, utilisées, partagées, etc. Nous présentons dans cette section les principaux enjeux éthiques associés à la gouvernance des données, enjeux résumés dans la Figure 1 ci-après selon les étapes du cycle de vie des données.

5Figure 1 : Enjeux éthiques et cycle de vie des données

Enjeux liés au consentement à la collecte et au partage des données personnelles

6Plusieurs des enjeux éthiques liés au déploiement de l’IA dans le domaine de la santé trouvent leur source dans la façon dont les données sur les individus sont collectées. D’abord, ce que l’on entend par « données personnelles » dans le domaine de l’IA en santé est souvent beaucoup plus large que l’idée que la population générale s’en fait intuitivement. Au-delà des données biomédicales et/ou cliniques comprises dans le dossier médical (les renseignements de santé), les SIA en santé peuvent aussi exploiter une panoplie de données de la vie quotidienne des individus, telles que des données d’entraînement physique, de nutrition, de sommeil et d’habitudes de vie qui proviennent bien souvent d’objets connectés utilisés dans la vie quotidienne. Téléphones intelligents, montres et autres appareils d’entraînement physique connectés, pour ne nommer que ceux-là, collectent des données sur les individus en temps réel, qui sont ensuite converties en données « médicales » et analysées pour en dériver des informations sur la santé globale des personnes (WHO, 2021). Comme les sources de données se multiplient, les acteurs impliqués dans la collecte de ces données se diversifient aussi. Ceux-ci peuvent inclure des organisations publiques du milieu de la santé, mais aussi les entreprises privées qui développent les technologies utilisées par le système de la santé ou encore les objets connectés précédemment mentionnés (Someh et al., 2019). Les différents moyens de collecte des données personnelles, ainsi que leur partage entre acteurs publics et privés, sont rarement compris et anticipés par les individus, tout comme la quantité de données collectées. En effet, les différentes organisations développant et utilisant les technologies d’IA déployées en santé collectent souvent beaucoup plus de données que nécessaire, parfois en anticipant des utilisations commerciales ultérieures comme la vente de données, qui sont inconnues des individus auprès de qui ces données sont initialement collectées (Hand, 2018).

7Bien que l’obtention du consentement à la collecte et au partage des données personnelles dans le cadre du système de santé québécois soit de mieux en mieux balisée et encadrée, le consentement à la collecte et au partage des données personnelles par les applications de santé et objets connectés est, dans de nombreux cas, obtenu de façon trop rapide, voire parfois même fallacieuse (Grundy et al., 2019). Dans les faits, l’utilisateur est souvent amené à cocher aveuglément une case dans une application ou sur un site web, sans avoir nécessairement bien compris les implications de ce consentement et sans s’être fait expliquer, dans des mots clairs et accessibles, les tenants du « contrat » qu’il signe en cochant cette case. Et lorsque l’utilisateur s’attarde à lire les formulaires de consentement et contrats de confidentialité des données personnelles des entreprises privées commercialisant des objets connectés ou applications d’IA, il se perd souvent dans le jargon juridique inaccessible et opaque de ces très longs documents, qui échappent à la compréhension du commun des mortels (Andrejevic, 2014 ; Hand, 2018).

8Ces pratiques et le manque de transparence avec lequel elles sont communiquées remettent en question la notion même de consentement libre et éclairé et entravent l’autonomie des individus (Beauchamp, 2011). Valeur fondamentale en santé, l’autonomie désigne la capacité d’un individu de décider pour lui-même, et ce, en connaissance de cause, ainsi que d’agir à partir de sa propre volonté et sans contrainte (Calvo et al., 2020 ; Dilhac, Abrassart et Voarino, 2018). Le consentement libre et éclairé a donc pour objectif de favoriser l’autonomie des personnes, en les protégeant elles-mêmes, et par extension en protégeant leurs données, contre des actes qui seraient posés contre leur gré ou à leur insu. Le consentement libre et éclairé requiert, d’une part, une compréhension adéquate de la part de l’individu concerné de ce à quoi il consent, et d’autre part, une absence de contrainte à consentir (Porsdam Mann, Savulescu et Sahakian, 2016), qui est largement atteinte par les pratiques dépeintes précédemment.

Enjeux liés à la confidentialité et à la protection de la vie privée des personnes

9Les pratiques de collecte et de partage des données précédemment mentionnées peuvent considérablement entraver la confidentialité et la protection de la vie privée des individus concernés. La protection de la confidentialité correspond à la revendication des individus, des groupes ou des institutions à déterminer eux-mêmes quand, comment et dans quelle mesure les informations les concernant sont communiquées à d’autres (Mai, 2016), et implique que les individus maintiennent un contrôle et un choix sur leurs données personnelles. Il en est de même pour la protection de la vie privée qui, elle, réfère à la protection de zones qui échappent au regard d’autrui, ainsi qu’à la limitation et au contrôle de l’accès aux informations qui concernent les individus (Mai, 2016 ; Richterich, 2018). L’abondance de données collectées de toute part à des fins qui sont parfois difficiles à saisir, ainsi que le partage de ces données, parfois même à l’insu des individus, entre les diverses organisations de l’écosystème dont les intérêts ne sont pas divulgués, peuvent compromettre l’exercice de ce contrôle et de ces choix (Amann et al., 2020).

10Afin de protéger la confidentialité des données personnelles, qui contiennent souvent des informations sensibles et très privées sur les individus, les organisations utilisent des méthodes qui visent à empêcher l’identification des individus, comme la désidentification, la pseudonymisation et l’anonymisation des données. Vues comme des mécanismes de préservation de la confidentialité et de la vie privée, ces techniques ne sont pas à toute épreuve, et n’offrent pas toujours le haut niveau de confidentialité promis. Effectivement, elles ont démontré des failles considérables, méconnues des utilisateurs, qui peuvent mettre à risque la confidentialité de leurs informations et leur vie privée (Basso et al., 2016). À titre d’exemple concernant l’anonymisation, technique qui implique le retrait des données identificatoires des bases de données de façon irréversible, il a été démontré qu’il suffit de quatre données anonymisées, provenant de différentes banques de données, pour permettre à un acteur spécifique de réidentifier l’individu que ces données décrivent avec une exactitude quasi parfaite (WHO, 2021).

11À ces risques s’ajoutent ceux de la sécurité des données et des cyberattaques potentielles inhérentes à tout système informatique. L’augmentation de l’utilisation de l’IA en santé et la collecte de données massives rendent le milieu plus susceptible d’être visé par des fuites de données et des cyberattaques qui peuvent compromettre le fonctionnement des SIA, la performance des algorithmes ainsi que la confidentialité des données sur lesquelles ils sont entraînés, parfois même à l’insu des développeurs (WHO, 2021). En plus d’entraver la sécurité, la vie privée et la dignité des individus touchés, ces incidents potentiels peuvent avoir des répercussions graves sur les personnes dont les données sont concernées, notamment comme le ciblage indésiré de leur profil, des tentatives d’hameçonnage crédibles sur la base de leurs données médicales, le vol de leur identité, ou encore le traitement discriminatoire de leurs demandes auprès de fournisseurs à l’extérieur du milieu médical. Finalement, en cas de cyberattaque, des établissements ou le système de santé en entier peuvent être paralysés, causant des problèmes d’accessibilité, de communication et de sécurité potentiellement importants.

Enjeux de fiabilité, de qualité et de représentativité des données

12Les algorithmes utilisés dans les SIA mobilisant l’apprentissage automatique sont entraînés sur des ensembles de données qui se doivent de rencontrer certains standards en termes de qualité, de fiabilité et de représentativité, sans quoi les algorithmes développés sur ces données peuvent être biaisés et causer d’importants torts aux individus, groupes et communautés concernés. La qualité et la fiabilité des données varient en fonction de la diversité de sources desquelles proviennent les données, le soin porté à la gestion du cycle de vie des données, la quantité de données contenue dans la banque d’entraînement ou encore la représentativité des données de cette même banque (WHO, 2021). D’autant plus important, les données d’entraînement doivent être appropriées pour les fins auxquelles les algorithmes sont créés. Un manque de constance dans l’application des différents critères qui nous permettent d’assurer la qualité, la fiabilité et la représentativité des données utilisées peut grandement affecter la performance des algorithmes en question et influencer la qualité de leurs prédictions et recommandations.

13Après l’entraînement de l’algorithme vient l’étape de validation, qui permet de vérifier la qualité de la performance de cet algorithme ainsi que le caractère généralisable de cette performance. Cette validation doit être faite à l’aide d’un ensemble de données distinct de celui utilisé pour l’entraînement de l’algorithme. Effectivement, le but de cette étape est d’évaluer la performance de l’algorithme sur une variété de données pour assurer sa performance sur le terrain (Hand, 2018), ce que valider l’algorithme sur le même ensemble de données ne permettrait pas de faire. Prenons l’exemple fictif d’un algorithme entraîné pour détecter une condition médicale à partir de marqueurs biologiques. Si les données utilisées pour entraîner l’algorithme ont été majoritairement collectées auprès de personnes de sexe masculin, il est possible que lorsque l’algorithme sera déployé en contexte hospitalier, il tire des conclusions inexactes lorsqu’il rencontrera des données concernant des personnes de sexe féminin. Lorsqu’ils sont respectés, ces différents critères de validation nous permettent de limiter les chances qu’une fois commercialisés et déployés, les SIA performent de façon sous-optimale auprès de certaines populations, en arrivent à des conclusions qui renforcent des préjugés et entraînent un traitement discriminatoire à leur égard.

Enjeux liés à l’archivage et la conservation des données

14Les données personnelles sont parfois conservées de façon anonymisée, ce qui ne les qualifie plus comme telles et implique qu’elles ne soient plus soumises aux règles juridiques sur les données personnelles qui en limite les conditions d’utilisation. Une fois converties dans un format qui n’identifie plus les personnes, ces données peuvent être utilisées à des fins autres que celles initialement consenties et ont parfois pour but de servir les objectifs de tierces parties (Reddy et al., 2020). Plusieurs enjeux éthiques sont soulevés par un tel scénario. Tout d’abord, rappelons que les données anonymisées peuvent potentiellement être réidentifiées (Basso et al., 2016), ce qui devient problématique lorsque les données médicales de patients, informations très sensibles, se trouvent dans des mains autres que celles de professionnels de la santé ou des personnes qui les ont collectées.

15De plus, il est possible que des personnes ayant initialement partagé leurs données de façon consentie, comme des patients ou des utilisateurs d’objets connectés et applications de santé, désirent éventuellement retrouver un certain contrôle sur celles-ci, et les voir supprimées. Plusieurs raisons peuvent être évoquées pour justifier le retrait éventuel du consentement à la conservation des données. D’abord, les données qui nous concernent représentent ce qui est parfois appelé notre « profil digital » (Breidbach et al., 2019). Nos données personnelles représentent donc ce que les différents acteurs du milieu de la santé connaissent à propos de nous. Dans le cas d’individus qui vivent avec des conditions de santé spécifiques, parfois même stigmatisantes, l’utilisation de leurs données personnelles peut devenir particulièrement contraignante (Someh et al., 2019). En effet, prenons le cas d’une personne aux prises avec des problèmes de dépendance, qui se voit bombardée de publicités l’incitant à consulter les sites Internet de centres de désintoxication, ou celui d’une femme ayant avorté qui se voit proposer des articles pour femme enceinte lors de ses achats en ligne, ou encore celui d’une personne en rémission d’un cancer qui demeure non assurable aux yeux des compagnies d’assurance. Au-delà même du fait que ces réalités difficiles leur soient constamment rappelées, et les souffrances qui y sont rattachées exacerbées, il devient difficile pour ces personnes de s’affranchir de ces conditions présentes et passées, et de vivre une vie qui n’est pas contrainte par le profilage et par ces mêmes données. Dans plusieurs cas, les personnes peuvent être définies par une condition médicale qui, parfois temporaire, laisse des traces indélébiles dans les banques de données (Martin, 2015). Ces individus peuvent souhaiter retirer leur consentement à l’archivage de leurs données personnelles pour éviter de vivre avec les impacts sur leur liberté et leur autonomie que la conservation et le traitement ultérieur de leurs données sensibles peuvent causer. La perte de contrôle des individus sur leurs données personnelles, ainsi que leur désir de retrouver ce contrôle et de pouvoir demander la suppression des données les concernant motivent – en partie – les revendications au droit à l’effacement des données, ou au « droit à l’oubli ».

Principaux enjeux éthiques liés au développement des systèmes d’IA en santé

16Après avoir discuté des enjeux éthiques propres à l’exploitation des données massives, nous présentons ci-après les principaux enjeux éthiques liés au développement et à l’implantation des systèmes d’IA dans le milieu de la santé.

Utilisation non éthique des SIA

17L’IA peut être utilisée afin d’améliorer plusieurs aspects du système de santé. Face aux nombreuses possibilités offertes par ces avancées technologiques, il est de la responsabilité des décideurs d’évaluer le caractère éthique des différentes applications, puisque toutes ne sont pas nécessairement souhaitables. De façon générale, celles qui contreviennent aux principes éthiques établis par différentes initiatives nationales et internationales et qui causent préjudice de façon claire, voire intentionnelle, ne sont pas souhaitables et devraient soit subir des modifications profondes permettant d’éviter les effets néfastes anticipés, ou être retirées du marché (WHO, 2021).

18Malgré tout, le caractère non éthique de certains de ces systèmes n’est pas toujours évident à déceler. Effectivement, dans les conditions d’utilisation et les politiques de confidentialité et de protection de la vie privée sont parfois dissimulées les intentions des développeurs ou propriétaires de ces technologies qui peuvent porter préjudice aux individus de façon insoupçonnée (Andrejevic, 2014 ; Hand, 2018). À l’insu de l’utilisateur, une montre intelligente qui enregistre la localisation de ses entraînements physiques peut devenir un outil de surveillance de ses déplacements et de profilage qui permet d’orienter les publicités qu’il reçoit, et une application lui permettant de tenir un registre quotidien de ses activités et de ses émotions peut devenir un outil normatif qui décourage certaines habitudes de vie et en encourage d’autres, pouvant parfois servir les intentions cachées de tierces parties. Cette subtile incitation comportementale (nudging en anglais) oriente les choix individuels en fonction de valeurs et d’intérêts spécifiques, parfois perçus comme supérieurs et positifs (ex. arrêt du tabagisme, perte de poids, exercice physique), mais aussi parfois motivés par des intérêts commerciaux (ex. achat de produits aidant l’arrêt du tabagisme, de suppléments alimentaires aidant la perte de poids, ou d’un abonnement payant à une application de conditionnement physique). Cette pratique porte atteinte à l’autonomie et à l’agentivité morales des personnes qui ont le droit et le choix d’adhérer à un mode de vie qui leur convient, qu’il s’aligne ou non avec les recommandations des professionnels de la santé, de la santé publique ou des organisations privées (Birhane, 2021).

19En outre, la validité scientifique et l’efficacité d’un SIA ne sont pas suffisantes pour justifier le déploiement d’une technologie et la qualifier de « souhaitable ». C’est pourquoi l’évaluation des aspects éthiques de ces technologies est si importante. Entre autres, un des facteurs importants à considérer est la balance des coûts et des bénéfices liés au déploiement d’une solution d’IA en santé. Malgré les bienfaits potentiels pouvant résulter de l’utilisation d’un SIA, la probabilité et l’ampleur des effets négatifs y étant associés doivent être évaluées et peuvent, selon l’analyse des aspects éthiques effectuée, venir décourager ou même exclure l’utilisation de cette technologie (WHO, 2021). En effet, il serait difficile de justifier l’utilisation d’un SIA promettant des économies de ressources considérables pour le milieu de la santé s’il compromettait la qualité des soins octroyés aux patients, ou s’il entraînait de grands risques de discrimination ou de violation du secret professionnel, par exemple. L’ensemble des bénéfices et des coûts potentiels d’une technologie doivent être explorés et attentivement évalués avant de pouvoir justifier le déploiement d’une technologie qui pourrait, malgré ses bénéfices, engendrer des torts non prévus. Bien qu’il soit difficile de prévoir et de contrôler, les organisations qui développent et déploient ces technologies doivent, de façon proactive, s’assurer de mettre en place des processus transparents qui permettent d’explorer les enjeux éthiques liés à leur technologie, de mitiger les risques, de surveiller la performance de l’application en contexte réel d’utilisation, de recueillir la rétroaction des différentes parties prenantes à la suite de son utilisation et de réagir rapidement au cas où un tort imprévu survienne et que des individus soient lésés.

Le manque d’explicabilité des SIA

20À l’heure actuelle, les systèmes de décision algorithmique en santé servent majoritairement d’outil de support à la décision humaine et n’ont pas une pleine autonomie décisionnelle (Amann et al., 2020). Ces systèmes ne prennent donc pas de décision par eux-mêmes, mais formulent des prédictions et des recommandations. Cependant, même si le jugement final revient au personnel professionnel de la santé (par exemple le diagnostic d’un patient), la grande complexité du fonctionnement de certains SIA fait qu’il est parfois difficile, ou même impossible, pour ce dernier de comprendre le raisonnement qui permet à l’algorithme d’arriver à une recommandation précise. C’est ce qu’on appelle le phénomène de la « boîte noire », symbole de l’opacité du fonctionnement de certains SIA, notamment ceux mobilisant l’apprentissage automatique (Amann et al., 2020). L’absence ou la faible explicabilité des SIA peut contribuer à diminuer l’interprétabilité, l’acceptabilité et l’adoption de la technologie par les professionnels et les patients, et mettent en lumière plusieurs enjeux. Imaginons le cas où un clinicien serait en désaccord avec la recommandation d’un SIA. Dans un tel cas, l’impossibilité d’expliciter le raisonnement du SIA afin de le rendre compréhensible pour le clinicien l’empêche de déterminer si la recommandation du système est valable et fiable dans un contexte précis, et donc s’il peut avoir confiance dans la recommandation émise par la technologie. Le patient pourrait lui aussi demander à comprendre les tenants d’une recommandation faite par un SIA. Qui plus est, des recommandations potentiellement erronées engendrées par les algorithmes qui servent de base pour la prise de décision clinique pourraient possiblement causer de graves torts aux patients, d’autant plus qu’ils peuvent ne pas avoir été mis au courant que des décisions concernant leur santé ont été prises à l’aide de SIA (WHO, 2021).

21Aussi, bien que ces systèmes soient développés avec l’intention d’améliorer la santé des individus et l’organisation des services de santé, ils sont sujets aux erreurs de ceux qui les développent et les approuvent, ainsi qu’à des problèmes techniques, et peuvent parfois offrir de mauvaises recommandations dans l’allocation des ressources, la planification ou encore les soins et les traitements fournis aux patients. Ces recommandations sont difficilement contestables étant donné le manque de transparence des systèmes d’IA et peuvent avoir des répercussions importantes sur la qualité des soins octroyés, ainsi que sur la sécurité et la santé des individus touchés. Il est souhaitable que les entreprises qui développent des SIA augmentent l’explicabilité et l’interprétabilité de ces systèmes, du moins qualitativement.

La responsabilité décisionnelle

22La prise de décisions cliniques assistées par un SIA issu d’algorithmes d’apprentissage automatique, de par leur opacité, complexifie alors la notion de responsabilité, que nous explorons ci-après.

23Poursuivons avec cet exemple dans lequel une erreur commise par un clinicien appuyé par un SIA cause des torts sérieux à un patient. Dans un tel cas, qui du clinicien ou du SIA est ultimement responsable des conséquences de la décision prise ? Si le clinicien n’a ni une bonne compréhension ni un réel contrôle sur ce système expert et sur ses recommandations, peut-il être tenu responsable, moralement et/ou légalement, d’une erreur commise sur la base de celui-ci ? Nous pourrions lui reprocher de s’être fié aveuglément à un mauvais système. Cependant, de nombreux SIA possèdent une capacité d’analyse et une performance qui sont parfois supérieures à celle du clinicien et qui justifient leur utilisation en milieu clinique. Cette performance supérieure des systèmes d’IA est possible grâce à l’analyse de millions de données issues de jugements cliniques et équivaut donc, selon certains, à l’expertise de plusieurs milliers de cliniciens. Dans le cas qui nous occupe, l’erreur est-elle donc la faute de l’organisme et des personnes qui ont approuvé l’utilisation de ce système au niveau clinique (Santé Canada, par exemple), de l’organisation de santé qui a implanté cette technologie, ou encore de l’entreprise qui a développé le SIA en question ? Selon les recommandations de l’Organisation mondiale de la santé (WHO, 2021), bien que les cliniciens doivent raisonnablement pouvoir se fier aux recommandations des SIA, celles-ci ne devraient jamais supplanter le jugement des cliniciens. Le partage de la responsabilité entre les différents acteurs impliqués dans le développement et la commercialisation de systèmes d’IA, de même que ceux impliqués dans leur déploiement dans un hôpital par exemple, est complexe. Effectivement, la multitude d’acteurs impliqués diffuse la notion de responsabilité qui finit parfois par n’être portée par personne, ce qui peut causer des torts aux individus touchés par des erreurs médicales impliquant des SIA.

Les biais et la discrimination algorithmique

24Comme nous l’avons mentionné précédemment, les algorithmes d’apprentissage automatique apprennent en fonction des données à partir desquelles ils sont entraînés, mais ils apprennent aussi en fonction des décisions humaines prises lors de leur développement. Effectivement, ces décisions orientent le développement d’un SIA et déterminent la raison d’être d’un projet, les professionnels qui le réaliseront, les paramètres des algorithmes, les données utilisées pour l’entraîner et valider leur performance, mais aussi auprès de quelles populations et au sein de quels milieux le SIA sera déployé (Cutillo et al., 2020). De façon involontaire, les individus qui prennent ces décisions teintent souvent inconsciemment les étapes de développement du SIA de leurs perspectives, de leurs croyances et de leurs biais individuels. Les algorithmes sont donc formés en fonction de ces paramètres sociaux intangibles transmis par leurs concepteurs, entre autres. Ils peuvent donc reproduire et amplifier leurs biais et performer au désavantage de certains groupes non considérés, par exemple en discriminant des individus issus de communautés marginalisées (Birhane, 2021).

Les enjeux liés au développement d’agents moraux artificiels

25Certains enjeux éthiques liés à l’IA en santé sont liés au développement d’agents moraux artificiels. Un agent moral artificiel est un SIA capable « d’action morale, de raisonnement, de jugement et de prise de décision » (Coeckelbergh, 2020 : 204, traduction libre). De tels systèmes autonomes avancés ne sont pas encore réellement implantés dans le système de santé, mais commencent à faire leur apparition dans certaines industries (pensons par exemple aux agents conversationnels tels que Chat-GPT ou autres chatbots basés sur l’apprentissage automatique, ou encore aux voitures autonomes, qui sont de bons exemples d’agents moraux artificiels en développement). Néanmoins, le rythme de développement des technologies et le grand intérêt général pour l’innovation en IA nous poussent à croire qu’un jour ces systèmes avancés puissent être développés et utilisés dans le milieu de la santé. En effet, les agents moraux artificiels pourraient trouver plusieurs utilités dans le domaine de la santé, notamment celle de diagnostiquer les patients de façon autonome (WHO, 2021). Cela dit, la délégation complète de l’expertise médicale du professionnel de la santé dans les « mains » d’un tel agent aurait de nombreuses implications. Par exemple, la participation du patient dans la prise de décision concernant sa propre santé pourrait en être affectée. Cette participation permet au patient d’exercer son autonomie, de défendre ses intérêts et de consentir à des soins qui respectent son projet de vie et ses valeurs (Amann et al., 2020). La complexité de fonctionnement de ces systèmes hautement spécialisés – qui, notons-le à nouveau, échappe parfois aux développeurs eux-mêmes – pourrait potentiellement entraver la qualité du consentement fourni par le patient. De son côté, le professionnel de la santé pourrait perdre le contrôle d’une partie importante de ce qui construit son identité professionnelle, mais aussi le contact avec une dimension essentielle du soin : la relation avec son patient (WHO, 2021).

26Une autre implication liée à la délégation d’une agentivité morale aux SIA est à soulever. Effectivement, de quelle « morale » parlons-nous ici ? Cette question relève des valeurs morales et visions du monde qui seront véhiculées de façon implicite par ces systèmes, et des intérêts et intentions des personnes derrière le développement de ces systèmes. Comme cela a été mentionné précédemment, les personnes qui développent ces SIA sont porteuses de biais, de perspectives, de valeurs et d’intérêts individuels, et elles représentent aussi bien souvent des intérêts privés et commerciaux. Ce faisant, elles contribuent à concevoir des systèmes autour d’objectifs et d’intentions qui, de façon consciente ou non, ne sont pas neutres. En laissant le développement de ces systèmes opaques non réglementé et non encadré sur le plan éthique, rien ne nous assure que les intérêts et les valeurs promus par ceux-ci soient alignés avec les valeurs du patient, qui sont par ailleurs en soi variables, ou même celles de la société (Amann et al., 2020 ; WHO, 2021).

Les enjeux existentiels de l’IA

27La dimension existentielle de l’IA aborde les choix fondamentaux que nous faisons en tant que société et la place que nous désirons donner aux technologies d’IA dans nos vies et dans notre société. Cette dimension nous ramène à la question de ce que signifie vivre une vie satisfaisante et digne, et à prendre des décisions sociétales qui sont arrimées avec cette définition et des valeurs morales susceptibles de varier à travers les cultures et à travers le temps (Birhane, 2021). Prenons l’exemple d’un robot compagnon muni d’un agent conversationnel déployé en hébergement pour personnes âgées dans le but de briser leur isolement. Les intentions derrière un tel projet sont louables et les retombées potentiellement positives. N’empêche, ce scénario pose plusieurs questions éthiques. Qu’est-ce que cette décision révèle-t-elle à propos de nous, en tant que société, de notre relation avec les personnes âgées, et avec la notion du vieillissement en général ? Est-il désirable de remplacer le contact humain par celui d’un robot, et est-ce réellement ce que nous souhaitons pour nos aînés ? Les réponses à ces questions peuvent d’ailleurs varier, selon les cultures, et évoluer dans le temps.

28Aussi, des auteurs soulignent les risques que des robots ou systèmes dotés d’une IA générale, c’est-à-dire similaire ou même supérieure à l’intelligence humaine, se « désalignent » des objectifs pour lesquels ils ont été créés et adoptent d’autres objectifs qui pourraient être potentiellement contraires à l’intérêt des humains (McLean et al., 2021). Ces systèmes sophistiqués pourraient même potentiellement échapper au contrôle humain. Ces scénarios, bien que controversés, méritent attention et prudence dans le développement de systèmes d’IA très avancés.

Les enjeux liés au futur du travail et à la transformation des emplois en santé

29De nombreux questionnements éthiques sont liés aux bouleversements du marché du travail générés par l’intégration de l’IA dans le milieu de la santé. Beaucoup d’incertitude plane sur la question, tant sur la nature des changements potentiels des tâches et des emplois dans les différents secteurs de la santé, que sur les impacts de ces changements sur le personnel de la santé et sur son identité professionnelle. Ainsi, plusieurs acteurs se questionnent sur la désirabilité et l’acceptabilité sociale et organisationnelle de ces changements (Danaher, 2017 ; Smids, Nyholm et Berkers, 2020).

30Si les individus ne sont pas remplacés dans leur emploi, plusieurs seront certainement appelés à travailler en proximité avec des SIA. L’intégration de ces systèmes dans le milieu de la santé nous pousse donc à poser la question de la littératie numérique et de la formation du personnel médical, administratif et de soutien en matière d’IA (WHO, 2021), sans oublier celle des patients et de leurs proches. La technologie derrière ces systèmes est complexe et le fossé qui sépare le champ d’expertise des différents travailleurs de la santé et les connaissances nécessaires pour pouvoir bien intégrer les SIA dans leur quotidien est parfois très large (Ahmad, Eckert et Teredesai, 2018). Effectivement, à l’heure actuelle, les professionnels de la santé, le personnel administratif, tout comme les patients en connaissent très peu sur l’IA, ses utilisations et son fonctionnement, ce qui pose de nombreux enjeux. Le manque de connaissances et de compréhension pourrait notamment créer une dépendance humaine envers la technologie et affecter la capacité de jugement professionnel. Finalement, l’introduction des SIA dans le quotidien des travailleurs de la santé pourrait porter atteinte à l’autonomie et la dignité de ces derniers, qui voient leur expertise être dévalorisée par l’introduction de SIA qui viennent relever ces individus d’une partie ou même éventuellement de l’entièreté de leurs fonctions (WHO, 2021).

L’accès variable aux technologies de l’IA et l’accroissement des injustices sociales par l’IA

31Si l’IA et ses différentes applications ne semblent connaître aucune frontière, l’accès aux technologies d’IA est loin d’être universel. Effectivement, cet accès est souvent réservé aux individus et organisations issus de pays riches ou de milieux sociaux économiques élevés (en anglais, on nomme cet enjeu le digital divide). Ces iniquités d’accès et d’utilisation à travers le monde renforcent des disparités sociales existantes et affectent considérablement la qualité et la représentativité des données à notre disposition pour créer, développer et déployer des SIA qui respectent les principes d’équité, de diversité et d’inclusion qui sont au cœur de l’IA responsable (WHO, 2021). Ces écarts sont aussi présents sur le plan local, notamment entre les différents groupes et communautés d’un pays. Historiquement, les groupes marginalisés vivent une précarité qui rend difficile l’accès à certaines commodités essentielles ; encore plus aux technologies d’IA. L’écart d’accès et l’écart d’utilisation aux échelles locale et mondiale affectent à leur tour la qualité des technologies d’IA qui sont développées (WHO, 2021).

32Effectivement, la difficulté d’accès à ces technologies par certains groupes signifie qu’au mieux très peu de données les concernant sont collectées ; ils sont donc sous – voire non représentés – par ces technologies qui ne peuvent être adaptées à leur réalité, par manque d’accès à leurs données. Ce phénomène renforce les disparités sociales existantes et participe à les marginaliser davantage (Birhane, 2021), comme discuté précédemment. Les SIA peuvent donc parfois être créés par et pour certains groupes privilégiés, excluant une majorité d’individus marginalisés par leur genre, leur sexe, leur âge, leur origine ethnique ou leur condition médicale, par exemple. Parfois déployés à tort dans des milieux issus de cultures et de réalités différentes de ceux ayant été pris en compte dans leur développement, les SIA peuvent avoir des effets néfastes considérables et palpables sur la vie de ces individus (Birhane, 2021).

Les enjeux liés à commercialisation des technologies de l’IA en santé

33Les SIA déployés dans le système de la santé émanent principalement de la recherche universitaire et de la recherche menée dans les entreprises privées. Comme nous l’avons mentionné plus haut, certaines entreprises privées agissent avec un manque de transparence concernant leurs pratiques de gestion et protection des données personnelles des utilisateurs de leur technologie. L’absence de mesures incitatives à la transparence permet à ces entreprises d’opérer sous un voile cachant des informations à propos de leur technologie et des pratiques qui « franchissent parfois des limites éthiques » (WHO, 2021).

34En outre, alors que certaines entreprises divulguent le moins d’information possible à propos de leurs activités, elles en collectent toujours plus à propos de celles de leurs utilisateurs (Richterich, 2018). Cette asymétrie est problématique. Effectivement, si l’accumulation de données utilisateurs augmente le pouvoir des entreprises, celui des utilisateurs est considérablement réduit par le manque d’information disponible à l’égard des entreprises et réduit les possibilités d’action contre elles, autant de la part des utilisateurs que des autorités pertinentes (Mittelstadt et Floridi, 2016 ; Someh et al., 2019).

35De plus, le pouvoir des grandes entreprises privées de technologies est parfois un moyen de pression efficace auprès des autorités et des gouvernements. Cette pression est notamment exercée dans le but de modifier le cours de travaux, le contenu de politiques ou l’application de lois, de sorte que ces derniers s’alignent avec les intérêts commerciaux des entreprises privées qui, eux, ne sont pas toujours alignés avec ceux de la santé publique et de la société (WHO, 2021).

Les impacts environnementaux de l’IA

36Quoiqu’encore peu étudiés, les impacts environnementaux de l’IA sont réels. Malgré les nombreux bénéfices qu’ils peuvent avoir dans le milieu de la santé, les SIA s’accompagnent d’une dépense énergétique qui peut, paradoxalement, contribuer à la dégradation de la santé de notre planète ; dégradation qui a des coûts visibles et connus sur la santé des populations. Effectivement, la quantité d’énergie utilisée pour entraîner les algorithmes d’apprentissage automatique, au cœur de nombreuses applications de l’IA aujourd’hui, ainsi que les infrastructures nécessaires pour soutenir le développement des algorithmes et l’entreposage des données, par exemple, est non négligeable et alourdit considérablement la dette énergétique des technologies d’IA (van Wynsberghe, 2021).

Conclusion

37Nous avons présenté dans cet article un tour d’horizon des principaux enjeux éthiques liés au développement et au déploiement des technologies d’IA dans le domaine de la santé. Ceux-ci concernent à la fois les enjeux liés à la bonne gouvernance des données personnelles et de santé, ainsi que les enjeux propres aux systèmes d’IA développés et implantés dans le milieu de la santé. Face à ces enjeux, de nombreuses initiatives nationales et internationales ont proposé dans les dernières années des principes, des chartes et des lignes directrices visant à encadrer le développement éthique et responsable des technologies d’IA (Langlois et Régis, 2021). Malgré la pertinence avérée de ces propositions normatives, des auteurs se questionnent sur la possibilité même de ces grands principes afin de répondre aux enjeux éthiques liés au développement et au déploiement de l’IA dans nos sociétés. En effet, certains principes de haut niveau sont parfois difficilement traduisibles en pratiques concrètes pour les milieux organisationnels (Mittelstadt, 2019), et peuvent même causer d’autres enjeux de hiérarchisation entre certains de ces principes (Krijger, 2021). Certains outils ont été proposés afin de tenter d’opérationnaliser l’éthique de l’IA en organisation, dans différents domaines (Morley et al., 2020), et plusieurs initiatives en ce sens sont en développement. Au-delà de l’encadrement éthique et volontaire des technologies, plusieurs acteurs en appellent au développement d’un encadrement juridique robuste de celles-ci. Des lois sur la gouvernance des données de santé ont été proposées et adoptées au Québec et ailleurs dans le monde. Des lois encadrant directement les systèmes d’IA sont en développement au Canada et ailleurs, mais tardent à être adoptées. Le défi de réussir à prévenir et à pallier les risques et enjeux éthiques liés à l’intégration de l’IA dans les soins et les services de santé reste encore bien présent pour les décideurs, organisations et acteurs du domaine, tant au Québec, au Canada, que partout dans le monde. Tous doivent se soucier d’adopter une posture responsable et prudente dans le développement et l’implantation de systèmes d’IA, afin d’en diminuer les risques.

Haut de page

Bibliographie

Ahmad, Muhammad Aurangzeb, Ankur Teredesai et Carly Eckert (2018), Interpretable machine learning in healthcare, Proceedings of the 2018 ACM international conference on bioinformatics, computational biology, and health informatics.

Amann, Julia et al. (2020), « Explainability for artificial intelligence in healthcare: a multidisciplinary perspective », BMC Medical Informatics and Decision Making, vol. 20, no 1, article 310, https://doi.org/10.1186/s12911-020-01332-6 (23 mai 2023).

Andrejevic, Mark (2014), « Big data, big questions| the big data divide », International Journal of Communication, vol. 8, p. 17.

Basso, Tania et al. (2016), Challenges on anonymity, privacy, and big data, 2016 Seventh Latin-American Symposium on Dependable Computing (LADC).

Beauchamp, Tom L. (2011), « Informed consent: its history, meaning, and present challenges », Cambridge Quarterly of Healthcare Ethics, vol. 20, no 4, p. 515-523.

Birhane, Abeba (2021), « Algorithmic injustice: a relational ethics approach », Patterns, vol. 2, no 2, https://doi.org/https://doi.org/10.1016/j.patter.2021.100205 (23 mai 2023).

Breidbach, Cristoph F. et al. (2019), « On the ethical implications of big data in service systems », dans Paul P. Maglio et al. (dir.), Handbook of Service Science, Volume II, Springer, p. 661-674.

Calvo, R. A. et al. (2020), « Supporting human autonomy in AI systems: A framework for ethical enquiry », dans C. Burr et L. Floridi (dir.), Ethics of Digital Well-Being, Springer, p. 31-54.

Coeckelbergh, Mark (2020), AI ethics, MIT Press.

Cutillo, Christine M. et al. (2020), « Machine intelligence in healthcare—perspectives on trustworthiness, explainability, usability, and transparency », NPJ Digital Medicine, vol. 3, no 1, p. 1-5.

Danaher, John (2017), « Will life be worth living in a world without work? Technological unemployment and the meaning of life », Science and Engineering Ethics, vol. 23, no 1, p. 41-64.

Dilhac, Marc-Antoine, Christophe Abrassart et Nathalie Voarino (2018), Rapport de la Déclaration de Montréal pour un développement responsable de l’intelligence artificielle, Université de Montréal.

Grundy, Quinn et al. (2019), « Data sharing practices of medicines related apps and the mobile ecosystem: traffic, content, and network analysis », BMJ, no 364, l920, https://doi.org/10.1136/bmj.l920 (23 mai 2023).

Hand, David J. (2018), « Aspects of data ethics in a changing world: Where are we now? » Big data, vol. 6, no 3, p. 176-190.

Krijger, Joris (2021), « Enter the metrics: critical theory and organizational operationalization of AI ethics », AI & SOCIETY, no 37, p. 1427-1437.

Langlois, Lyse et Catherine Régis (2021), « Analyzing the contribution of ethical charters to building the future of artificial intelligence governance », dans B. Braunschweig et M. Ghallab (dir.), Reflections on Artificial Intelligence for Humanity, Springer, p. 150-170.

Mai, Jens-Erik (2016), « Big data privacy: The datafication of personal information », The Information Society, vol. 32, no 3, p. 192-199.

Martin, Kirsten E. (2015), « Ethical Issues in Big Data Industry », MIS Quarterly Executive, vol. 14, no 2, p. 67-85.

McLean, Scott et al. (2021), « The risks associated with Artificial General Intelligence: A systematic review », Journal of Experimental & Theoretical Artificial Intelligence, p. 649-663, https://doi.org/10.1080/0952813X.2021.1964003 (23 mai 2023).

Mittelstadt, Brent Daniel (2019), « Principles alone cannot guarantee ethical AI », Nature Machine Intelligence, vol. 1, no 11, p. 501-507, https://doi.org/10.1038/s42256-019-0114-4 (23 mai 2023).

Mittelstadt, Brent Daniel et Luciano Floridi (2016), « The ethics of big data: current and foreseeable issues in biomedical contexts », The ethics of biomedical big data, vol. 22, p. 445-480.

Morley, Jessica et al. (2020),« From What to How: An Initial Review of Publicly Available AI Ethics Tools, Methods and Research to Translate Principles into Practices », Science and Engineering Ethics, vol. 26, no 4, p. 2141-2168, https://doi.org/10.1007/s11948-019-00165-5 (23 mai 2023).

Porsdam Mann, Sebastian, Julian Savulescu et Barbara Sahakian (2016), « Facilitating the ethical use of health data for the benefit of society: electronic health records, consent and the duty of easy rescue », Philosophical Transactions of the Royal Society A: Mathematical, Physical and Engineering Sciences, vol. 374, no 2083.

Reddy, Sandeep et al. (2020), « A governance model for the application of AI in health care », Journal of the American Medical Informatics Association, vol. 27, no 3, p. 491-497.

Richterich, Annika (2018), The big data agenda: Data ethics and critical data studies, University of Westminster Press.

Smids, Jilles, Sven Nyholm et Hannah Berkers (2020), « Robots in the workplace: a threat to—or opportunity for—meaningful work? », Philosophy & Technology, vol. 33, no 3), p. 503-522.

Someh, Ida et al. (2019), « Ethical issues in big data analytics: A stakeholder perspective », Communications of the Association for Information Systems, vol. 44, no 1, article 34.

Van Wynsberghe, Aimee (2021), « Sustainable AI: AI for sustainability and the sustainability of AI », AI and Ethics, vol. 1, no 3, p. 213-218.

WHO (2021), Ethics and governance of artificial intelligence for health: WHO guidance, World Health Organization Retrieved, https://www.who.int/publications/i/item/9789240029200 (23 mai 2023).

Haut de page

Pour citer cet article

Référence électronique

Joé T. Martineau et Frédérique Romy Godin, « Tour d’horizon des enjeux éthiques liés à l’IA en santé »Éthique publique [En ligne], vol. 25, n° 1 | 2023, mis en ligne le 03 novembre 2023, consulté le 05 décembre 2024. URL : http://journals.openedition.org/ethiquepublique/7978 ; DOI : https://doi.org/10.4000/ethiquepublique.7978

Haut de page

Auteurs

Joé T. Martineau

Joé T. Martineau est professeure agrégée d’éthique organisationnelle au Département de management de HEC Montréal. Ses intérêts de recherche, d’enseignement et d’intervention en organisation portent sur les questions d’éthique et de gouvernance touchant les organisations privées, publiques et du secteur de la santé. Ses travaux l’ont notamment menée à réfléchir à la composition et l’efficacité des programmes d’éthique et à la diversité des pratiques de gestion éthique dans les organisations, aux différents facteurs qui influencent la réflexion et le comportement éthiques des acteurs organisationnels, ainsi qu’aux enjeux éthiques liés à la transition numérique et au développement et au déploiement de l’intelligence artificielle en organisation. Elle est membre régulier de l’Observatoire international sur les impacts sociétaux de l’IA et du numérique (OBVIA), membre associée de l’Unité de recherche en éthique pragmatique de la santé à l’Institut de recherches cliniques de Montréal (IRCM), membre régulier de l’Institut d’éthique appliquée (IDÉA) de l’Université Laval, et cochercheure au Centre de recherche en éthique (CRÉ) de l’Université de Montréal.

Articles du même auteur

Frédérique Romy Godin

Frédérique Godin détient une maîtrise en gestion en développement organisationnel de HEC Montréal et travaille dans le domaine de l’IA responsable depuis 2020. Elle a travaillé auprès de startups d’IA, de ministères québécois sur des projets d’accompagnement en recherche-action en tant que professionnelle de recherche aux HEC et à l’OBVIA, ainsi qu’en tant que chargée de projets internationaux à Mila, au sein de l’équipe IA pour l’humanité. Son travail est centré sur la réalisation de mandats à l’intersection entre la recherche et la pratique visant à opérationnaliser les promesses de l’éthique de l’IA de façon concrète, en outillant les acteurs concernés de pratiques tangibles et responsables.

Haut de page

Droits d’auteur

Le texte et les autres éléments (illustrations, fichiers annexes importés), sont « Tous droits réservés », sauf mention contraire.

Haut de page
Rechercher dans OpenEdition Search

Vous allez être redirigé vers OpenEdition Search