Mit Doly können Sie 3D-Produktvideos von Ihrem iPhone aus erstellen

Mit Doly koennen Sie 3D Produktvideos von Ihrem iPhone aus erstellen

AniMLdas französische Startup hinter einer neuen 3D-Capture-App namens Dolywill die Fotoraum von Produktvideos, sozusagen. Wenn Sie Turnschuhe auf einem Online-Marktplatz verkaufen oder Instagram-Anzeigen für Ihre direkt an den Verbraucher gerichteten Waren erstellen müssen, hilft Ihnen Doly dabei, mit Ihrem Telefon 3D-Modelle zu erstellen und diese in professionell aussehende Produktvideos umzuwandeln.

Während die Erstellung von Videos bekanntermaßen schwierig ist, ist die Generierung eines 3D-Modells noch schwieriger. Deshalb hat sich das AniML-Team darauf konzentriert, das Erlebnis zu vereinfachen. Sie möchten die 3D-Erfassung zu einer Mainstream-Technologie machen, indem sie zunächst eine iPhone-App daraus packen.

So funktioniert die 3D-Erfassung mit Doly: Der Nutzer richtet die Kamera seines Smartphones auf das Produkt und bewegt sich körperlich es, um es in 3D zu erfassen. Im Hintergrund erfasst die App Standbilder und sendet sie an die Cloud. AniML hat eine Rekonstruktionspipeline mit etwas namens Gaußsches Spritzen um diese Bilder in ein realistisches 3D-Modell umzuwandeln.

3D-Modelle werden traditionell mit einer Sammlung von Punkten im 3D-Raum, einer auf diese Oberflächen projizierten 2D-Textur und Lichteffekten erstellt. Gaussian Splatting ist eine völlig neue Rendering-Pipeline, bei der mithilfe eines vorab trainierten KI-Modells eine 3D-Punktwolke aus einer Reihe von 2D-Bildern geschätzt wird.

„Unser Ausgangspunkt war eine technologische Erkenntnis: KI war gerade in der 3D-Welt angekommen. Also forschten Leute bei Facebook, aber noch mehr bei Google, und schrieben eine ziemlich wichtige Forschungsarbeit über etwas namens NeRF“, sagte Rémi Rousseau, Mitbegründer und CEO von AniML, gegenüber Tech. „Es ist ein neues Paradigma, bei dem man versucht, 3D zu rekonstruieren, indem man maschinelles Lernen die Arbeit erledigen lässt.“

„Sie arbeiten nicht mehr in polygonbasiertem 3D, sondern jetzt in neuronalbasiertem 3D“, fügte er hinzu.

Gaussian Splatting ist nicht genau dasselbe wie NeRF, aber es ist eine Art abgeleitete 3D-Modellierungstechnologie, wie Rousseau es beschreibt.

Das ist also der technische Teil. AniML konzentrierte sich dann darauf, einen Anwendungsfall zu finden, der die Benutzer vom ersten Tag an fesseln könnte. E-Commerce-Unternehmen waren die offensichtliche Wahl für ein Erstellungstool für 3D-Modelle.

Was bietet die App sonst noch? Nach der Aufnahme eines 3D-Modells können Doly-Nutzer in einer Vorlagenbibliothek eine 3D-Szene auswählen, in die ihr Objekt integriert werden soll. Das kann eine einfache 3D-Rotation mit schlichtem Hintergrund sein oder etwas Dramatischeres im Sinne einer Marketing-Inszenierung, etwa wenn sich die Kamera langsam dem Objekt nähert und in verschiedene Winkel wechselt.

Ist der Kunde mit dem Ergebnis zufrieden, hat er die Möglichkeit, das Video über die App zu kaufen und für die Verwendung an anderer Stelle herunterzuladen.

Bildnachweise: AniML

Rousseau hatte zuvor bereits zwei VR-Unternehmen gegründet – darunter Mimesys, ein Startup, das 2019 von Magic Leap übernommen wurde. Sein Mitgründer Pierre Pontevia kann ebenfalls eine interessante Erfolgsbilanz vorweisen: Er verkaufte ein Unternehmen an den 3D-Tool-Riesen Autodesk und ein anderes an die 3D-Content-Entwicklungsplattform Unity.

Bisher hat AniML 2 Millionen US-Dollar gesammelt. Benachbart führte die Seed-Runde an. Das Startup beteiligte sich auch an KI-Zuschussder Startup-Accelerator unter der Leitung von Nat Friedman und Daniel Gross. Ebenfalls investiert sind Kima Ventures und mehrere Angel-Investoren, darunter Julien Chaumond von Hugging Face; Nicolas Steegman und François Lagunas, die zuvor Stupeflix gegründet haben; Alban Denoyel vom bekannten Sketchfab; Bertrand Schmitt; Thibaud Elziere und Vincent Nallatamby. Uns wurde auch gesagt, dass Bpifrance einen Teil dieser Runde mit einem Zuschuss unterstützt hat.

Es wird interessant sein zu sehen, ob große Marken, Second-Hand-Händler und andere E-Commerce-Profis 3D-gerenderte Videos für kommende Kampagnen und Online-Angebote nutzen. Aber es ist schon jetzt schön zu sehen, dass man dank künstlicher Intelligenz möglicherweise kein professionelles Videoaufnahmestudio mehr braucht, um überzeugende Produktvisualisierungen zu erstellen.

tch-1-tech