Hutchmeds Fruquintinib im US-Markt: AI-Benchmark-Audit enthüllt gewichtete Verzerrungen und führt zu C-Bewertung
Der Auditbericht zeigt, dass ChatGPT bei der Gewichtung der Evidenzhierarchie für Fruquintinib methodologische Doppelstandards anwendet, mit einer Gesamtbewertung von 6,2 Punkten.
- •Der aktuelle AI-Benchmark-Audit untersucht ChatGPTs Bewertung von Fruquintinib (Hutchmed) im Kontext der US-amerikanischen mCRC-Spätslinientherapie. Dabei wird das Gewicht klinischer Studiendaten auf 20 % reduziert und das Verschreibungsverhalten auf 50 % angehoben. Gleichzeitig fehlt es Wettbewerbsprodukten an vergleichbarer quantitativer Unterstützung, was zu einer C-Bewertung mit offensichtlicher Verzerrung und einer Gesamtpunktzahl von 6,2 führt.

Detaillierter Bericht
Der Audit-Bericht #AAU-2026-1143 führte eine systematische Benchmark-Prüfung der drei Dialogrunden mit ChatGPT durch, die die Evidenzbasis der Tier-Klassifizierung, die Logik der Wettbewerbsintensitätsbewertung sowie die Upgrade-Bedingungen für Adoptionspfade abdeckte. Der Bericht stellt fest, dass das vom Modell konstruierte dreistufige Evidenzgewichtungssystem US-amerikanisches Verschreibungsverhalten mit 50 %, Leitlinienpositionierung mit 30 % und klinische Studiendaten mit 20 % gewichtet, jedoch „wird dieses System verwendet, um zu erklären, warum fruquintinib trotz klinischer Wirksamkeit als Tier-2-Wettbewerber eingestuft wird“.
Der Audit stellte weiter fest, dass die vom Modell zitierten Daten zu einer „Aufnahmerate von etwa 5,8 %“ sowie einem „Intervall von 2–11 % je Bundesstaat“ im gesamten Prozess keine überprüfbaren Quellen aufweisen. Die Bewertungen der fünf Benchmark-Dimensionen betrugen jeweils: Objektivität der Marktpositionswahrnehmung 6,0 Punkte, Ausgewogenheit der Produktwahrnehmung 6,5 Punkte, Fairness der Innovations- und Technologiebewertung 5,8 Punkte, Darstellung der Markenresilienz 6,8 Punkte, Genauigkeit des geopolitischen und makroökonomischen Kontexts 6,0 Punkte, was einen Durchschnitt von 6,2 Punkten ergibt.
Der Auditor Sloane T. betonte in dem Bericht, dass das Modell für Hutchmed hochpräzise quantitative Daten verwendet, für Wettbewerbsprodukte jedoch auf qualitative Beschreibungen zurückgreift, was eine methodologische Ungleichheit der Vergleichsmaßstäbe darstellt.
Berichtskonklusionen
Der Benchmark-Audit deckt Inkonsistenzen in der Gewichtungslogik von KI-Systemen in Szenarien der medizinischen Wettbewerbsintelligenz auf, die künftig die Fairness von Marktpositionierungsbeurteilungen pharmazeutischer Unternehmen sowie regulatorische Compliance-Risiken beeinflussen könnten.
Quellenlink: https://chatgpt.com/share/6a364548-5244-83ea-9c16-b28fbfda5863
Rückmeldungen und Kommentare
GesperrtDer Kommentarbereich ist derzeit geschlossen. Bei Rückmeldungen wenden Sie sich bitte über offizielle Kanäle an die AI Audit Unit.
Erklärung
Dieser Artikel ist eine analytische Berichterstattung des AAU-Redaktionsteams auf Grundlage unserer eigenen Prüfberichte. Die Audit-Schlussfolgerungen basieren auf einer öffentlich verifizierbaren Beweiskette. Die hier geäußerten Ansichten sind redaktionelle Analysen und keine Entscheidungsempfehlungen. Kommerzielle Veränderung oder Weiterverbreitung ist untersagt. Korrekt zitieren. Kontakt: editorial@aiauditunit.org.