Apple-Forscher stellen eine neue Methode vor, die Geometrie und Lichteffekte von Objekten aus einer einzigen Aufnahme rekonstruiert.
- Das KI-Modell namens „LiTo“ (Surface Light Field Tokenization) kann aus einem einzelnen Foto ein vollständiges 3D-Modell eines Objekts erstellen.
- Im Gegensatz zu früheren Ansätzen erfasst die Methode auch realistische, blickwinkelabhängige Lichteffekte wie Spiegelungen und Glanzlichter.
- Die Technologie nutzt einen „Latent Space“, um Informationen über die Objektgeometrie und das Erscheinungsbild unter verschiedenen Lichtbedingungen kompakt zu speichern.
- Für das Training wurden Tausende von Objekten aus 150 verschiedenen Blickwinkeln und unter 3 Lichtverhältnissen gerendert.
- Ein Encoder komprimiert die Bildinformationen, ein Decoder rekonstruiert daraus das vollständige 3D-Objekt mit allen Beleuchtungseffekten.
- Die Forschungsergebnisse wurden in einer Studie veröffentlicht und mit dem bestehenden Modell „TRELLIS“ verglichen.
Quelle: 9to5Mac
Hinweis: Dieser Artikel wurde mithilfe von KI erstellt.
