Explorable Data Science

micro_sam
Quadrate in 4x4-Raster mit Flexbox


Interactive Cell Tracking

In diesem Experiment können Sie eine Zelle am Anfang eines Videos markieren und diese Zelle dann automatisch über den Rest des Videos verfolgen. Das Experiment nutzt ein neuronales Netzwerk für interaktive Segmentierung (Segment Anything) und verwendet es, um der Zelle durch die Zeit zu folgen. Fehler beim Verfolgen der Zelle können durch erneute Markierungen korrigiert werden.

Wie funktioniert das Verfolgen der Zelle über die Zeit?

Die Zelle wird durch die Markierung des Bildpunktes am Anfang des Videos segmentiert, wie auch in dem Beispiel zur Segmentierung. Danach wird der Umriss der so identifizierten Zelle in das nächste Bild des Videos übertragen, und das Segmentierungsmodell wird mit diesem Umriss als Anhaltspunkt genutzt, um die entsprechende Zelle wieder zu finden. Dieser Prozess wird wiederholt, bis die Zelle im ganzen Video identifiziert ist. Wenn im Ergebnis Fehler enthalten sind, können diese durch erneute Markierung im entsprechenden Videoabschnitt behoben werden.

Anwendungsgebiete von Tracking

Das automatische Folgen von Objekten in Videos hat viele Anwendungen, z.B. in selbstfahrenden Autos, um die Bewegung anderer Verkehrsteilnehmer zu verstehen. Die dort verwendeten Methoden sind ähnlich der hier gezeigten Anwendung: dem Folgen von Zellen in mikroskopischen Zeitaufnahmen. Diese Technik wird in der biologischen und medizinischen Forschung angewendet, um das Verhalten von Zellkulturen und deren Reaktion auf unterschiedliche Einflüsse, wie z.B. Medikamentenbehandlungen, zu testen. Experimente an Zellkulturen sind eine häufige Vorstufe zu Medikamentenstudien an Tieren oder Patienten.







Trotz sorgfältiger inhaltlicher Kontrolle übernehmen wir keine Haftung für die Inhalte externer Links. Für den Inhalt der verlinkten Seiten sind ausschließlich deren Betreiber verantwortlich.