← Neueste Arbeiten
🧬 biology

Genome-scale molecular profiling from routine histopathology with a multimodal pathology foundation model

Das Paper stellt Fuji vor, ein multimodales Pathologie-Fundamentmodell, das mit über 60.000 Ganzschnittbildern trainiert wurde, die mit genomischen Daten gepaart sind und erfolgreich genomweite molekulare Zustände, Mutationsprozesse sowie klinische Ergebnisse direkt aus der Routinehistologie ableitet und damit die Lücke zwischen Gewebemorphologie und den zugrunde liegenden molekularen Mechanismen schließt.

Ursprüngliche Autoren: Guangyu Wang, Qing Li, Jian Sang, Yiwei Xiao, Pengzhi Zhang, Weiqing Chen, Tu Tran, Zejuan Li, Shengyu Li, Tongwu Zhang

Veröffentlicht 2026-08-06
📖 7 Min. Lesezeit🧠 Tiefgang

Ursprüngliche Autoren: Guangyu Wang, Qing Li, Jian Sang, Yiwei Xiao, Pengzhi Zhang, Weiqing Chen, Tu Tran, Zejuan Li, Shengyu Li, Tongwu Zhang

Originalarbeit lizenziert unter CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). ⚕️ Dies ist eine KI-generierte Erklärung eines Preprints, das nicht peer-reviewed wurde. Dies ist kein medizinischer Rat. Treffen Sie keine Gesundheitsentscheidungen auf Grundlage dieses Inhalts. Vollständigen Haftungsausschluss lesen

Stellen Sie sich vor, Sie blicken von einem hohen Turm aus auf eine Stadt. Aus dieser Höhe können Sie die Form der Straßen, die Dichte der Gebäude und die Organisation der Stadtviertel erkennen. Sie können ein geschäftiges Stadtzentrum von einem ruhigen Vorort unterscheiden, allein durch den Blick auf das Layout. Nun stellen Sie sich vor, jedes Gebäude in dieser Stadt sei tatsächlich eine lebende Zelle und die Straßen seien das Gewebe eines menschlichen Körpers. Seit über einem Jahrhundert erklimmen Ärzte diesen Turm und nutzen Mikroskope, um diese „Städte“ (Gewebe) zu betrachten, um Krankheiten wie Krebs zu diagnostizieren. Sie nennen das Histopathologie. Es ist, als würde man eine Karte der Stadt lesen, um zu verstehen, was im Inneren vor sich geht.

Aber hier kommt die Wendung: Das Layout der Stadt ist nicht einfach zufällig. Es wird durch die unsichtbaren Regeln der „Blaupausen“ gebaut, die in jedem Gebäude stecken – der DNA. Wenn die DNA beschädigt oder mutiert wird, verändert dies, wie die Gebäude konstruiert werden, wie sie miteinander kommunizieren und wie das Viertel wächst. Lange Zeit dachten Wissenschaftler, man müsse in jedes einzelne Gebäude hineingehen, um diese Blaupausen zu lesen (mittels teurer DNA-Sequenzierung), um zu wissen, was falsch war. Aber was wäre, wenn das Layout der Stadt selbst Ihnen alles über die Blaupausen verraten könnte? Was wäre, wenn Sie auf die Karte schauen und genau wissen könnten, welche Gene defekt sind, ohne jemals ein einziges Gebäude betreten zu müssen? Dies ist die große Frage, die dieses Paper behandelt: Kann die visuelle „Form“ eines Tumors uns seine genetischen Geheimnisse verraten?


Das Paper: „Fuji“ – Der Übersetzer zwischen Form und Code

In dieser Studie stellt ein Forscherteam ein neues KI-Modell vor, das sie Fuji nennen. Betrachten Sie Fuji nicht nur als Bilderkennungssoftware, sondern als einen superintelligenten Übersetzer, der lernt, zwei Sprachen gleichzeitig zu sprechen: die Sprache der Bilder (wie ein Tumor unter einem Mikroskop aussieht) und die Sprache des Codes (die DNA-Mutationen und RNA-Botschaften innerhalb der Zellen).

Normalerweise sind KI-Modelle, die auf medizinischen Bildern trainiert werden, wie Touristen, die nur lernen, Wahrzeichen zu erkennen. Sie können sagen: „Das sieht wie eine Lunge aus“ oder „Das sieht wie ein Tumor aus“, aber sie verstehen nicht, warum der Tumor so aussieht. Sie behandeln das Bild nur als ein schönes Abbild. Fuji ist anders. Die Forscher haben es so trainiert, dass es das Bild betrachtet und sofort fragt: „Welcher genetische Code hat diese spezifische Form verursacht?“

Um dies zu erreichen, haben sie Fuji nicht nur Bilder gezeigt. Sie fütterten es mit einer riesigen Bibliothek von 60.546 Whole-Slide-Images (riesige, hochauflösende digitale Fotos von Gewebeproben) und koppelten jedes einzelne mit den entsprechenden genetischen Daten: 45.675 RNA-Profilen (die uns sagen, welche Gene aktiv sind) und 22.683 Vollgenom-Sequenzen (den vollständigen DNA-Code). Es ist, als würde man der KI eine Million Lehrbücher geben, bei denen auf jeder Seite links ein Foto einer Stadt und auf der rechten Seite die exakte Blaupause der Konstruktion dieser Stadt steht.

Wie Fuji lernte, Gene zu „sehen“

Die Forscher verwendeten eine clevere zweistufige Trainingsmethode, vergleichbar mit einem Meister, der einen Lehrling unterrichtet.

  1. Schritt Eins (Der Geschmackstest): Zuer erst brachten sie Fuji den grundlegenden „Geschmack“ des Gewebes bei. Sie nutzten zwei andere leistungsstarke KI-Modelle (GigaPath und CHIEF) als „Lehrer“. Fuji lernte, das Gewebe zu betrachten und die visuellen Muster abzugleichen, selbst wenn das Gewebe auf zwei verschiedene Arten aufbereitet wurde: einige wurden in Chemikalien konserviert (FFPE, der Standard in Krankenhäusern) und andere waren gefroren und frisch (fresh-frozen, verwendet in der Forschung). Fuji lernte, die Unterschiede in der Art der Gewebekonservierung zu ignorieren und sich statnach nur auf die wahre Form der Zellen zu konzentrieren. Dies ist entscheidend, denn es bedeutet, dass Fuji mit den Objektträgern arbeiten kann, die Ärzte tatsächlich täglich verwenden.
  2. Schritt Zwei (Der Tiefgang): Als Nächstes forderten sie Fuji heraus, die Form mit dem Code zu verknüpüpfen. Sie gaben ihm drei Aufgaben gleichzeitig:
    • Das Bild rekonstruieren: Wenn man einen Teil des Bildes verbirgt, kann Fuji erraten, wie er aussieht? Dies hält das Modell darin geschult, Details zu erkennen.
    • Die RNA rekonstruieren: Kann Fuji auf die Form schauen und erraten, was die RNA-Botschaften sagen? Dies verknüpft das Visuelle mit der molekularen Aktivität.
    • Die Mutationen dekodieren: Kann Fuji auf die Form schauen und erraten, welche spezifischen genetischen „Tippfehler“ (Mutationen) vorhanden sind? Das ist der große Zaubertrick.

Was Fuji entdeckte

Nach dem Training bewies Fuji, dass die „Form“ eines Tumors tatsächlich ein direktes Spiegelbild seines genetischen Codes ist. Die Forscher fanden heraus, dass Fuji komplexe genetische Zustände mit unglaublicher Genauigkeit vorhersagen konnte und dabei oft alle bisherigen KI-Modelle übertraf.

  • Die Detektive der „Instabilität“: Das Team testete, ob Fuji erkennen konnte, wenn die DNA eines Tumors auseinanderfiel. Sie suchten nach vier spezifischen Arten von genetischem Chaos: Mikrosatelliten-Instabilität (MSI), chromosomale Instabilität (CIN), Defizienz der homologen Rekombination (HRD) und Vollgenom-Duplikation (WGD). Fuji traf diese Vorhersagen mit einer Genauigkeit (AUC) von bis zu 0,98. Um dies einzuordnen: Wenn ein menschlicher Experte sich zu 80 % sicher wäre, war Fuji zu 98 % sicher. Es konnte den Unterschied zwischen einem stabilen Genom und einem chaotischen Genom erkennen, allein durch den Blick auf den Gewebeschnitt.
  • Die „extra“ DNA: Einer der spannendsten Funde betraf die extrachromosomale DNA (ecDNA). Dies ist ein seltsames, kreisförmiges Stück DNA, das außerhalb der normalen Chromosomen schwebt und Krebs extrem schnell wachsen lässt. Normalerweise benötigt man teure, komplexe Tests, um es zu finden. Fuji hingegen lernte, den einzigartigen „Fußabdruck“ zu erkennen, den ecDNA in der Gewebestruktur hinterlässt. Bei Patienten mit niedriggradigem Gliom und Endometriumkarzinom war das Vorhandensein dieser unsichtbaren DNA-Kreise, das von Fuji allein aus dem Gewebeschnitt vorhergesagt wurde, ein starkes Zeichen dafür, dass die Patienten eine schlechtere Überlebensprognose hatten.
  • Die „Rauch“- und „Reparatur“-Signaturen: Die Forscher fragten auch: Kann Fuji erkennen, ob ein Tumor durch Rauchen oder durch ein defektes DNA-Reparatursystem verursacht wurde? Sie fanden heraus, dass tabakbedingte Mutationen und Mismatch-Reparatur-Defekte deutliche, lokalisierte Spuren in der Gewebearchitektur hinterlassen. Es ist, als würde Rauchen eine spezifische Art von Ruß an den Stadtmauern hinterlassen, und Fuji kann genau auf diesen Punkt zeigen, wo dieser Ruß liegt. Diese Muster waren so klar, dass Fuji sie in völlig unterschiedlichen Patientengruppen finden konnte, was beweist, dass das Muster real ist und kein Zufall.
  • Die Zukunft vorhersagen: Fuji blickte nicht nur in die Vergangenheit; es blickte in die Zukunft. Das Modell konnte die Tumormutationslast (TMB) (wie viele Mutationen ein Tumor hat) und die Neoantigen-Last (wie sichtbar der Tumor für das Immunsystem ist) vorhersagen.ت Wichtiger noch: In einer kleinen Gruppe von Lungenkrebspatienten waren Fujis Vorhersagen darüber, wer auf eine Immuntherapie ansprechen würde, besser als die anderer Modelle. Dies deutet darauf sich, dass die Form des Tumors Hinweise darauf enthält, ob das Immunsystem in der Lage ist, ihn zu bekämpfen.

Warum das wichtig ist

Das Wichtigste an Fuji ist, dass es mit den Objektträgern arbeitet, die Ärzte bereits besitzen. Die meisten Krebspatienten weltweit erhalten einen Standard-Objektträger (FFPE), der in Chemikalien konserviert wurde. Frühere KI-Modelle hatten Schwierigkeiten, diese Standard-Objektträger mit den genetischen Daten zu verknüpfen, da diese Daten meist von frisch gefrorenen Proben stammen. Fuji löste dies, indem es lernte, den „chemischen Geruch“ des Objektträgers zu ignorieren und sich stattdessen auf das „Stadtlayout“ zu konzentrieren.

Die Autoren legen nahe, dass dies die Krebsbehandlung verändern könnte. Anstatt Tage oder Wochen auf teure Gentests zu warten, könnten Ärzte Fuji potenziell nutzen, um in Minuten einen „genomischen Bericht“ aus einem routinemäßigen Mikroskopie-Schnitt zu erhalten. Es könnte helfen zu entscheiden, welche Patienten gezielte Medikamente benötigen, welche auf eine Immuntherapie ansprechen könnten und welche ein höheres Risiko tragen – und das alles, ohne die DNA zuerst sequenzieren zu müssen.

Natürlich merkt das Paper vorsichtig an, dass dies ein „Proof of Concept“ ist. Obwohl die Ergebnisse stark und über verschiedene Datensätze hinweg konsistent sind, basierten die Vorhersagen zur Immuntherapie auf einer kleinen Patientengruppe und müssen in größeren, realen klinischen Studien getestet werden, bevor Ärzte sich auf sie verlassen können. Aber der Kern der Idee – dass die visuelle Form eines Tumors eine lesbare Karte seines genetischen Codes ist – scheint eine solide Entdeckung zu sein. Fuji hat uns gezeigt: Wenn man genau genug hinsieht, kann man die Blaupausen der Stadt lesen.

Ertrinken Sie in Arbeiten in Ihrem Fachgebiet?

Erhalten Sie tägliche Digests der neuesten Arbeiten passend zu Ihren Forschungsbegriffen — mit technischen Zusammenfassungen, in Ihrer Sprache.

Digest testen →