Six jours après le lancement de ChatGPT Santé, OpenAI est dépassé sur son propre benchmark de santé
L'entreprise chinoise Baichuan Intelligence a dépassé OpenAI sur son propre benchmark médical HealthBench avec son nouveau modèle Baichuan-M3, atteignant un score de 65,1% et un taux d'hallucination de seulement 3,5%. Ce modèle utilise une technique de reinforcement learning adaptée à la médecine (Fact Aware RL) pour équilibrer précision et sécurité des réponses.
Baichuan a également développé son propre benchmark, SCAN-bench, pour évaluer les capacités de diagnostic en profondeur, où M3 surpasse même les médecins humains dans certains tests, grâce à sa connaissance interdisciplinaire et sa rigueur dans le questionnement.
Contrairement à d'autres entreprises qui se concentrent sur des applications simples comme le bien-être mental, Baichuan vise la médecine sérieuse, en priorisant des domaines complexes comme l'oncologie. L'objectif est d'augmenter l'accès à des diagnostics de haute qualité, de construire la confiance avec les patients et, à terme, de contribuer à la modélisation mathématique de la vie pour progresser vers l'IA générale.
marsbit01/14 02:37
