Med-PaLM
Googles erstes LLM, das für medizinische Prüfungsfragen und Fragen zur Verbrauchergesundheit abgestimmt wurde
Med-PaLM ist Googles erster Versuch eines Modells zur Beantwortung medizinischer Fragen. Es wurde durch Fine-Tuning des PaLM-Modells mit 540 Milliarden Parametern auf klinischen Daten und Verbraucherinformationen zur Gesundheit erstellt. Das Modell wurde in einer Arbeit beschrieben, die im Dezember 2022 erschien und später in Nature veröffentlicht wurde. Als erstes KI-System erreichte es bei Fragen im Stil des US-amerikanischen medizinischen Staatsexamens eine Bestehensnote und überschritt die Schwelle von etwa 60 Prozent. Google bewertete es mit MultiMedQA, einem zusammen mit dem Modell eingeführten Benchmark aus Prüfungsfragen der Medizin, Suchanfragen zu Forschungsliteratur und typischen Fragen, die Menschen zu ihrer eigenen Gesundheit stellen.
Das Projekt bildete die Grundlage für den späteren Vergleich, den Med-PaLM 2 verbesserte, blieb aber ein Forschungssystem statt eines öffentlichen Produkts. Ärztinnen und Ärzte, die seine Antworten prüften, stellten sachliche Fehler und Auslassungen fest, durch die ein unbeaufsichtigter Einsatz in realen medizinischen Umgebungen riskant wäre. Das ist ein Grund, warum Google den Zugang auf Forschungspartner beschränkte.