Snap präsentierte auf der Augmented World Expo eine frühe Version eines Echtzeit-Bilddiffusionsmodells für Geräte, das lebendige Augmented-Reality-Erlebnisse (AR) generieren kann. Das Unternehmen stellte auch generative KI-Tools für AR-Schöpfer vor.
Bobby Murphy, Mitbegründer und CTO von Snap, erklärte vor Ort, dass das Modell klein genug sei, um auf Smartphones zu laufen, und schnell genug, um Frames in Echtzeit basierend auf Textaufforderungen neu zu rendern. Er betonte, dass die generative KI-Bilddiffusionsmodelle zwar aufregend seien, aber eine deutlich höhere Geschwindigkeit benötigten, um einen großen Einfluss auf Augmented Reality zu haben. Daher habe sich das Snap-Team der Beschleunigung von Machine-Learning-Modellen verschrieben.
Snapchat-Nutzer werden Berichten zufolge in den nächsten Monaten beginnen, Linsen-Effekte zu sehen, die auf diesem generativen Modell basieren. Snap plant, es bis Ende des Jahres für Entwickler bereitzustellen. Bobby Murphy sagte: „Dieses Echtzeit-generative Machine-Learning-Modell für Geräte und zukünftige Modelle markieren eine aufregende neue Richtung für Augmented Reality und lassen uns die Art und Weise, wie wir AR-Erlebnisse rendern und erstellen, neu überdenken.“
Darüber hinaus kündigte Murphy die Einführung von Lens Studio 5.0 an, das Entwicklern neue generative KI-Tools bietet, mit denen sie AR-Effekte schneller als je zuvor erstellen und Wochen oder sogar Monate an Zeit sparen können. AR-Schöpfer können mit den neuen Tools schnell Selfie-Linsen generieren, hochauflösende Machine-Learning-Gesichtseffekte erstellen und benutzerdefinierte Style-Effekte in Echtzeit generieren, die Gesicht, Körper und Umgebung des Benutzers abdecken. Sie können auch innerhalb weniger Minuten 3D-Materialien generieren und auf ihre Linsen anwenden.
Zusätzlich können AR-Schöpfer die Gesichtsnetzwerktechnologie des Unternehmens nutzen, um mithilfe von Text- oder Bildaufforderungen Charaktere wie Außerirdische oder Zauberer zu generieren, sowie Masken, Texturen und Materialien innerhalb weniger Minuten zu erstellen. Die neueste Version von Lens Studio enthält auch einen KI-Assistenten, der AR-Schöpfern bei Fragen helfen kann. Snap geht davon aus, dass diese neuen Tools die Art und Weise, wie AR erstellt wird, grundlegend verändern und es Schöpfern ermöglichen werden, ihre kreativen Ideen schneller umzusetzen.