Nachricht

May 18, 2023

KI hilft in der Realität

„Früher dachte man, dass es mit vorhandener Consumer-Hardware unmöglich sei, 3D-Holographieberechnungen in Echtzeit durchzuführen“, sagte Hauptautor Liang Shi, ein Ph.D. Student in der MIT-Abteilung für

„Früher dachte man, dass es mit vorhandener Consumer-Hardware unmöglich sei, 3D-Holographieberechnungen in Echtzeit durchzuführen“, sagte Hauptautor Liang Shi, ein Ph.D. Student in der Fakultät für Elektrotechnik und Informatik des MIT. „Es wird oft gesagt, dass es in 10 Jahren kommerziell erhältliche holografische Displays geben wird, doch diese Aussage gibt es schon seit Jahrzehnten.“

Um die Okklusion zu bekämpfen, stellten sie außerdem einen neuen Satz physikbasierter Berechnungen bereit. Der Algorithmus optimierte mit einem fotorealistischen Trainingsdatensatz seine eigenen Berechnungen und verbesserte erfolgreich seine Fähigkeit, Hologramme zu erzeugen. Das Netzwerk arbeitete um Größenordnungen schneller als physikbasierte Berechnungen. Die Methode ist in der Lage, Hologramme in Millisekunden aus Bildern mit Tiefeninformationen zu erzeugen – bereitgestellt durch typische computergenerierte Bilder und kann mit einem Multikamera-Setup oder einem Lidar-Sensor berechnet werden. Das kompakte Tensor-Netzwerk benötigt weniger als 1 MB Speicher. „Das ist vernachlässigbar, wenn man die Dutzende und Hunderte von Gigabyte bedenkt, die auf dem neuesten Mobiltelefon verfügbar sind“, sagte der Forscher Wojciech Matusik. In VR glaubt das Team, dass die Technologie realistischere Szenen liefern und eliminieren könnte Überanstrengung der Augen und andere Nebenwirkungen einer langfristigen VR-Nutzung. Die Technologie könnte auch in Displays zum Einsatz kommen, die die Phase von Lichtwellen modulieren können. „Es ist ein beträchtlicher Sprung, der die Einstellung der Menschen zur Holographie völlig verändern könnte“, sagte Matusik. „Wir haben das Gefühl, dass neuronale Netze für diese Aufgabe geboren wurden.“ Die Arbeit wurde in Nature veröffentlicht (www.doi.org/10.1038/s41586-020-03152-0).