00:00RMC, Estelle Midi, on n'arrête pas le progrès.
00:03Parce qu'on parle santé avec Anthony Morel aujourd'hui.
00:06Bonjour Anthony.
00:07Faut-il faire confiance à ChatGPT sur les questions médicales ?
00:10C'est devenu le réflexe de millions de personnes.
00:13Dès qu'on a un petit bobo, on pose la question à ChatGPT.
00:16On lui envoie même une photo si on a quelque chose sur la peau, etc.
00:20Et c'est peut-être pas une si bonne idée que ça.
00:21Ben non, je ne sais pas si vous êtes familier de cette chose-là.
00:24De demander à ChatGPT de poser des diagnostics.
00:28Oui, je vois Élise, bien sûr.
00:29Non, non, je suis peu fondreillac, donc j'aurais peur de la réponse.
00:31Ah ouais, c'est ça.
00:31Parce qu'on voit toujours des choses...
00:32L'internet tôt, on n'a pas que ça.
00:34Moi, je le fais tout le temps, je dois l'avouer.
00:36Et pourtant, quand j'ai lu cette étude, je me suis dit que ce n'était pas forcément une très
00:39très bonne chose.
00:39C'est une étude qui a été publiée par des chercheurs de l'université d'Oxford
00:42dans la très sérieuse revue Nature,
00:44qui explique cette étude, qui conclut plutôt que
00:48les principaux modèles d'intelligence artificielle à commencer par ChatGPT,
00:52lorsqu'on leur demande de poser un diagnostic,
00:54en fait, ils sont aussi mauvais qu'une simple recherche sur Google.
00:57Que quand tu vas, tu sais, à l'ancienne, faire ta recherche sur les forums médicaux
01:00où on te dit que c'est ça, que tu as une tumeur au cerveau quand tu as une migraine,
01:03enfin ce genre de truc,
01:04et bien là, c'est exactement la même chose, finalement.
01:07C'est ce que montre, en tout cas, cette étude,
01:08alors qu'elle a été réalisée en utilisant, si on peut dire,
01:131300 volontaires qui ont posé leurs symptômes, en fait, dans ChatGPT.
01:17On leur a dit, voilà, vous allez dire à ChatGPT ce que vous avez,
01:20et puis on va voir, avec vos mots à vous, et on va voir ce que ChatGPT vous répond.
01:24Bon, alors ça allait de « j'ai mal à la tête après une soirée un peu arrosée »
01:28à des calculs biliaires, enfin des choses vraiment très différentes, d'accord,
01:31mais très symptomatiques aussi.
01:33Et ce dont on se rend compte, eh bien, c'est que l'IA arrive à poser un diagnostic correct
01:37dans 30% des cas.
01:3930% des cas.
01:40Seulement.
01:41Seulement, exactement.
01:42Et quand on fait, avec un groupe contrôle, on leur donne la même consigne,
01:45mais on leur dit, vous allez vous débrouiller pour essayer de trouver ce que vous avez
01:48en cherchant sur Google, on arrive à peu près à 30% également.
01:51C'est pas plus efficace que Google pour le patient.
01:53La conclusion, c'est que les patients doivent être conscients que demander à un modèle
01:57de langage ce qu'ils ont peut être dangereux et peut passer à côté d'une urgence médicale.
02:00C'est ce que conclut cette étude.
02:02Mais pourtant, moi j'ai un très bon ami en qui j'ai totale confiance, qui s'appelle
02:05Anthony Morel, et que j'entends depuis des années me dire « l'IA va remplacer les
02:10plus grands spécialistes, elle défecte tout sur une moindre radio, elle verra ce que
02:14l'œil humain ne peut pas voir ». Je croyais que l'IA était meilleur que le médecin.
02:17C'est vrai, moi aussi.
02:17Alors c'est ce qui m'a un peu désarçonné dans un premier temps en lisant cette étude.
02:20Et puis après, je me suis rendu compte que ce n'était pas contradictoire du tout.
02:23En réalité, ce qu'on voit dans les études que j'ai citées précédemment, où on voit
02:27effectivement que l'IA est plus performante que les médecins, c'est quand on pose à l'IA
02:31un cas clinique parfait, c'est-à-dire avec des mots savants, avec si tu veux le résultat
02:37d'une revue scientifique, tu le donnes à Tchad GPT, il va te l'analyser parfaitement.
02:40Si tu lui donnes un résultat d'analyse médicale, il va l'analyser parfaitement.
02:43En revanche, dans l'étude que je viens de citer, la différence, c'est que ce sont
02:46les patients eux-mêmes, avec leurs propres mots, qui ont essayé de se dépatouiller et
02:50de demander à Tchad GPT ce qu'ils avaient.
02:52Et ça, ça fait une très très grosse différence.
02:54Ben oui, parce qu'en fait, le maillon faible, il y a des biais.
02:56Le maillon faible, c'est le patient, c'est nous, c'est vous, c'est moi, c'est l'humain.
02:59Parce qu'on ne connaît pas, tu vois, tu vas dire, ah ben oui, là j'ai un peu mal
03:01au ventre.
03:02Ouais, bah Tchad GPT, si tu veux, c'est un peu vague pour lui.
03:04Ça me gratouille, ça me chatouille.
03:05Quand tu vas voir le médecin, évidemment, il va être beaucoup plus précis que ça.
03:08Il va faire une sorte de contre-interrogatoire.
03:10Peut-être que tu vas avoir un symptôme, mais il va dire,
03:12ben c'est pas ce symptôme-là qui est important.
03:14Et un truc qui t'avait semblé être un détail, ben en fait, c'est ça qui compte.
03:16Et c'est là qu'on voit l'importance du médecin humain, d'ailleurs.
03:19C'est que, en fait, le patient tout seul, il ne peut pas s'en dépatouiller.
03:21Donc vraiment, c'est ça qu'il faut retenir.
03:23Si je comprends bien, il n'y a que les médecins qui peuvent se servir de l'IA.
03:25C'est un peu ça.
03:26C'est un outil vraiment très performant pour l'IA.
03:28Ça peut l'être aussi pour le patient.
03:30Moi, je pense, déjà, pour préparer sa consultation,
03:32voilà, quelles questions, comment structurer un petit peu
03:34la façon dont je vais discuter avec le médecin.
03:36Et puis aussi, on peut aussi lui poser des questions
03:38quand on n'a pas bien compris ce que le médecin nous a dit, par exemple.
03:40Ou alors, quand on lui pose des questions médicales,
03:42il faut vraiment être précis.
03:43C'est-à-dire, il faut donner un maximum de détails
03:45depuis quand les symptômes ont commencé.
03:46Est-ce qu'on a des antécédents familiaux ?
03:48Enfin, tout ce qu'on peut donner.
03:49D'ailleurs, la Haute Autorité de Santé doit publier une fiche
03:51de bonne utilisation des outils d'IA
03:53qui devraient sortir dans les semaines qui viennent
03:54et qui devraient être, là encore, assez utiles pour les patients.
03:56On surveillera ça de très près.
03:58Merci beaucoup, Anthony.
03:59On n'arrête pas le progrès, c'est quand vous voulez.
04:01Évidemment, un podcast sur l'appli RMC.
04:03On parle de quoi, demain, Anthony ?
04:04Demain, on va aller faire un tour dans les allées
04:06du Mobile World Congress.
04:07C'est le plus grand salon mondial de la téléphonie mobile.
04:09Ça se tient en ce moment à Barcelone.
04:11Donc, c'est le téléphone du futur.
04:12Nos prochains smartphones, on va les découvrir demain
04:14avec Anthony Morel sur RMC.
Commentaires