Google annonce un accès limité à son LMM médical Med-PaLM 2

"Le 13 avril dernier, Google a annoncé qu’un groupe restreint de clients Google Cloud aura accès à son LLM médical Med-PaLM 2 dans les semaines à venir pour des tests limités, afin d’explorer des cas d’utilisation pour étudier des moyens sûrs, responsables et significatifs d’utiliser cette technologie.

C’est lors de son événement annuel sur la santé, The Check Up, où Google a partagé des mises à jour sur l’IA en santé, notamment ses progrès dans la recherche sur le modèle médical du grand langage (LLM) qu’a été présenté Med-PaLM 2.

Le LLM Med-PaLM
Med-PaLM est une version adaptée au domaine médical de PaLM (Pathways Language Model), le LLM de 540 milliards de paramètres, entraîné avec le système Pathways par Google Research, introduit dans l’article intitulé « PaLM: Scaling Language Modeling with Pathways », publié le lundi 4 avril 2022.

Présenté en décembre 2022 par Google Research et DeepMind, Med-PaLM a été entraîné en utilisant MultiMedQA, qui combine six ensembles de données existantes sur les réponses aux questions ouvertes couvrant les examens médicaux professionnels, la recherche et les demandes des consommateurs et HealthSearchQA, un nouvel ensemble de données à réponse libre des questions médicales recherchées en ligne.

Le modèle a été le premier à obtenir une « note de passage » (avec 67,5% de bonnes réponses alors que l’on en exige 60%) aux questions-réponses à choix multiples basées sur les examens de licence médicale des États-Unis (USMLE).

Pour le tester, les chercheurs l’ont soumis, ainsi que des professionnels de santé, à une même série de questions-réponses que d’autres professionnels ont ensuite évalués. Le résultat était très proche : 92,6 % des réponses correctes pour Med-PaLM, contre 92,9 % pour les professionnels humains..." Lire la suite