Medizinische Bildgebung — MRT-Entrauschung und Genexpression aus Pathologiebildern
Reduktion von Speckle-Rauschen in der MRT für ein Privatunternehmen sowie eine Masterarbeit an der Isfahan University of Technology zur Rekonstruktion von Genexpressionssignalen aus digitalen Pathologiebildern, die dafür Graph Neural Networks, Vision-Foundation-Modelle und adaptierte Techniken aus Sprachmodellen kombiniert.
Auf einen Blick
- Speckle-Rauschen verdeckt diagnostische Details in der MRT; Genexpressions-Assays sind langsam und teuer, Pathologiebilder dagegen schnell und günstig.
- Modelle zur Speckle-Entrauschung für die MRT und eine Masterarbeit, die Genexpression aus Gigapixel-Pathologiebildern vorhersagt.
- Abgeschlossen: MRT-Projekt 2020 bis 2021; Masterarbeit im September 2025 fertiggestellt, ein Paper ist in Vorbereitung.
Highlights
Speckle-Rauschen in der MRT reduzieren
Entrauschungsmodelle gegen das Speckle-Rauschen, das diagnostische Details in der MRT und verwandten Verfahren zerstört.
Genexpression aus Pathologiebildern
Die Masterarbeit prüft, ob Whole-Slide-Pathologiebilder einen langsamen, teuren Genexpressions-Assay ersetzen können.
Vision-Foundation-Modelle
Ein Vision-Foundation-Modell verarbeitet als erster Schritt des Pathologie-Strangs das Whole-Slide-Bild im Gigapixel-Format.
Graph Neural Networks
Ein Graph Neural Network baut auf der Ausgabe des Bildmodells auf, auf dem Weg zur Genexpressionsvorhersage.
Adaptierte Sprachmodell-Techniken
Techniken aus großen Sprachmodellen, für diese Aufgabe adaptiert und mit statistischen und probabilistischen Methoden kombiniert.
Ziel: wenig Rechenaufwand, niedrige Latenz
Die Masterarbeit zielte darauf ab, Rechenaufwand und Latenz so gering wie möglich zu halten – eine harte Vorgabe bei Gigapixel-Eingaben.
Die Herausforderung
Speckle-Rauschen zerstört diagnostisch relevante Details in der MRT. Das erste Projekt zielte darauf ab, es zu reduzieren, in der MRT und in verwandten bildgebenden Verfahren.
Das zweite Problem ist ebenso wirtschaftlicher wie wissenschaftlicher Natur. Genexpressions-Assays sind langsam, teuer und logistisch mühsam, während sich Whole-Slide-Pathologiebilder schnell und günstig gewinnen lassen. Diese Bilder erreichen Gigapixel-Größe, und die Masterarbeit setzte eine harte Vorgabe für Rechenaufwand und Latenz.
Architektur
Zwei Forschungsstränge. Für die MRT: Modelle zur Speckle-Entrauschung. Für die Pathologie: Ein Vision-Foundation-Modell verarbeitet das Whole-Slide-Bild, und ein Graph Neural Network baut auf dessen Ausgabe auf, während für die Aufgabe adaptierte Techniken großer Sprachmodelle ebenfalls in die Genexpressionsvorhersage einfließen. Der Ansatz nutzt außerdem statistische und probabilistische Methoden.
Was ich gebaut habe
Die Masterarbeit untersucht, ob Whole-Slide-Pathologiebilder einen Genexpressions-Assay ersetzen können. Ziel ist es, molekularbiologische Signale direkt aus Gigapixel-Bildern zu gewinnen und dabei Rechenaufwand und Latenz so gering wie möglich zu halten.
MRT: Reduktion von Speckle-Rauschen in der MRT und verwandten bildgebenden Verfahren.
Pathologie: Vorhersage der Genexpression aus digitalen Pathologiebildern durch die Kombination von Graph Neural Networks, Vision-Foundation-Modellen, adaptierten LLM-Techniken und statistischer Modellierung.
Ergebnis
Die Masterarbeit wurde im September 2025 an der Isfahan University of Technology abgeschlossen; ein darauf basierendes Paper ist in Vorbereitung. Das MRT-Projekt zum Speckle-Rauschen für ein Privatunternehmen lief von März 2020 bis März 2021.
Meine Rolle
- Forschte für ein Privatunternehmen zur Reduktion von Speckle-Rauschen in der MRT und verwandten bildgebenden Verfahren, März 2020 bis März 2021.
- Verfasste an der Isfahan University of Technology eine Masterarbeit zur Vorhersage der Genexpression aus digitalen Pathologiebildern.
- Kombinierte im Ansatz der Masterarbeit Graph Neural Networks, Vision-Foundation-Modelle, adaptierte LLM-Techniken und statistische Methoden.
- Arbeitete in der Masterarbeit unter einer harten Vorgabe für Rechenaufwand und Latenz.
Technik
Rechenaufwand und Latenz als Vorgaben
Die Masterarbeit unterlag einer harten Vorgabe für Rechenaufwand und Latenz, mit dem Ziel, beides so gering wie möglich zu halten.
Ausgelegt für Gigapixel-Eingaben
Der Pathologie-Strang arbeitet direkt mit Whole-Slide-Bildern im Gigapixel-Format.
Mehrere Modellfamilien, eine Vorhersage
Graph-Methoden, Vision-Foundation-Modelle und adaptierte Sprachmodell-Methoden fließen in eine einzige Genexpressionsvorhersage ein, ergänzt durch statistische Methoden.
Ergebnisse
- Masterarbeit im September 2025 an der Isfahan University of Technology abgeschlossen; ein Paper ist in Vorbereitung.
- Projekt zur Reduktion von Speckle-Rauschen in der MRT für ein Privatunternehmen abgeschlossen, März 2020 bis März 2021.
- Masterarbeit: Vorhersage der Genexpression (Molekularbiologie) aus digitalen Pathologiebildern.