KI kann Hirnströme in Videos übersetzen

29. Mai 2023, 07:58 |  0 Kommentare

Die Kombination aus Magnetresonanztomographie und Stable Diffusion ermöglicht eine erstaunlich akkurate Reproduktion von angesehenen Inhalten

Zunächst nutzte man einen Datensatz aus öffentlich verfügbaren Videos und dazu gehörenden fMRT-Scans (funktionelle Magnetresonanztomographie). Die fMRT-Scans wurden in Daten übersetzt und in Kombination mit dem Videomaterial dazu verwendet, ein eigenes Modell der Bilder-KI Stable Diffusion zu trainieren.


Bild: mind-video.com

Um das System, das den Namen "MinD-Video" erhielt, zu testen, ließ man es aus dem fMRT-Daten Videos erzeugen. Die Ergebnisse, so zeigt auch das via arXiv als Preprint veröffentlichte Paper, sind durchaus beeindruckend. Die KI-Reproduktionen entsprechen inhaltlich stark den jeweiligen Videos, zeigen also die gleichen Szenen, Bewegungen und Subjekte. Gröbere Abweichungen gibt es vorwiegend bei Details und der Farbgebung. Laut den Wissenschaftlern lag die Genauigkeit der Videos bei der Abbildung des Gesehenen bei 85 Prozent. Ergebnisse zeigt man auch auf einer eigens eingerichteten Website. Der Code für MinD-Video soll bald auf Github veröffentlicht werden.

Mehr dazu findest Du auf derstandard.at


Autor schreiben




Kurze URL:


Bewertung: 4.0/5 (3 Stimmen)


Das könnte Dich auch interessieren:


Ähnliche News:
Intel: Wer KI am PC nutzt, braucht länger für die Arbeit als ohne KI
Russische Hacker attackieren US-Unternehmen per Wi-Fi
Kind bringt Krypto-Anleger mehrfach um ihr Geld
Über 1.000 Gläubige beichteten bei KI-Jesus in der Schweiz
KI-Klage der New York Times: OpenAI löscht versehentlich Beweise
Preiserhöhung: VKI erfolgreich mit Klage gegen DAZN
Niantic trainiert KI mit Geodaten
765874: Unification - Der letzte Kurzfilm mit Kirk und Spock
Google-KI: Gemini sagt Nutzer, er solle "bitte sterben"
KI-Großmutter verschwendet Zeit von Telefonbetrügern


Weitere News:
Windows CPC NXT: Erste Bilder von Microsofts neuem Windows-Produkt
Android Auto ergänzt beim Vorlesen ein "Oh"
22 Millionen Nutzer: Europol zerschlägt großes illegales Streamingnetzwerk
Mercedes-Benz: Neues System soll Fahrzeuge schneller einparken lassen
Russische Hacker attackieren Windows-Nutzer via Firefox
Leak: Rockstar-Programmierer deutet die PC-Version von GTA 6 an
Musk schimpft über Tarnkappenjäger F-35, will stattdessen billige Drohnen
"Stalker 2": Entwickler versprechen schnelle Behebung schwerer Bugs
Whistleblower beschreiben Umweltsünden in Gigafactory Texas
Nächste Nintendo-Konsole könnte schon im Jänner enthüllt werden


Einen Kommentar schreiben

Du willst nicht als "Gast" schreiben? Logg Dich Hier ein.

Code:

Code neuladen

Kommentare
(0)

Bitte bleibe sachlich und fair in deinen Äußerungen. Sollte dein Kommentar nicht sofort erscheinen, ist er in der Warteschlange gelandet und wird meist zeitnah freigeschaltet.



Kommentare:

Du hast bereits für diesen Kommentar abgestimmt...

;-)


© by Ress Design Group, 2001 - 2024

Top