Menschen sind soziale Tiere, und unsere Kleidung und Accessoires sind Schlüsselelemente für Selbstdarstellung und Kommunikation in unserem Alltag.Da sich die sozialen Netzwerke allmählich in die Online-Welt erweitert haben, so auch die Notwendigkeit der Digitalisierung von Kleidung und Accessoires.

In der Forschungsarbeit mit dem Titel MEGANE: Morphable Eyeglass und Avatar Network konzentrierten sich Forscher der Australian National University und Meta auf die Modellierung von Brillen,Ein alltägliches Zubehör für Milliarden von Menschen auf der ganzen Welt.Insbesondere argumentieren sie, dass es nicht ausreicht, die Brille allein zu modellieren, um Realismus zu erreichen, und dass auch die Wechselwirkung der Brille mit dem Gesicht berücksichtigt werden muss.

Aus geometrischer Sicht deformieren sich die Brille und das menschliche Gesicht am Berührungspunkt, weshalb die Form der Brille und des Gesichts nicht unabhängig voneinander bestimmt werden kann.- Genauso., ist ihr Erscheinen durch den globalen Lichttransport gekoppelt, und Schatten und gegenseitige Reflexionen können erscheinen und die Strahlung beeinflussen.Realismus ist daher notwendig, um Realismus zu erreichen..

Originalmethoden können nicht alle geometrischen und photometrischen Wechselwirkungen, die in der realen Welt existieren, genau nachbilden, oder Animationsergebnisse leiden oft unter Sicht- und Zeitinkonsistenzen.Obwohl neue Neural-Rendering-Methoden eine fotorealistische Darstellung menschlicher Köpfe und allgemeiner Objekte in 3D-konsistenter Weise erreichen, verwandte Methoden berücksichtigen nicht die Wechselwirkungen zwischen Objekten und führen zu unzuverlässigen Objektkombinationen.

Im Gegensatz zu bestehenden Methoden zielt das Team darauf ab, die geometrischen und photometrischen Wechselwirkungen zwischen Brillenrahmen und dem menschlichen Gesicht auf Basis von Bildbeobachtungen datengetrieben zu modellieren.Zu diesem Zweck, haben sie MEGANE gestartet.

Dieses einzigartige deformierbare und wieder leuchtende Brillensystem repräsentiert die Form und das Erscheinungsbild des Rahmens und seine Wechselwirkung mit dem menschlichen Gesicht.Unterstützung von Änderungen der Topologie und Rendereffizienz, verwenden die Forscher eine hybride Darstellung, die Oberflächengeometrie und volumetrische 3D-Darstellungen kombiniert.

Da die Hybriddarstellung eine explizite Korrespondenz zwischen den Brillen liefert, kann ihre Struktur subtil nach der Kopfform verändert werden.Das Modell wird durch ein hochgetreues generatives Modell des menschlichen Kopfes bedingt., so dass sie speziell auf Verformungen und Erscheinungsveränderungen des Trägers abzielt.