Kakao-Gehirn kündigte heute die Entwicklung seiner neuesten Face-Swap-Technologie „Smooth-Swap“ an, die darauf ausgelegt ist, die Möglichkeiten des glatten Face-Swap durch verbesserte Identitätseinbettung zu erweitern. Das innovative Modell rühmt sich seiner bahnbrechenden, vereinfachten Architektur, nachdem es komplexe externe Module bestehender Systeme durch einen integrierten, reibungslosen Identity Embedder ersetzt hat, der wiederum einen schnelleren und stabileren Face-Swapping ermöglicht.
Das Papier „Smooth-Swap: A Simple Enhancement for Face-Swapping with Smoothness“ des Unternehmens, das einen weiteren wichtigen Meilenstein in der Face-Swapping-Forschung von Kakao Brain darstellt, wird auf der bevorstehenden globalen Computer-Vision-Konferenz CVPR 2022 zum zweiten Mal in einem Jahr vorgestellt Reihe. Dazu gehört eine exklusive mündliche Präsentationssitzung, die den herausragendsten Beiträgen unter den akzeptierten Artikeln vorbehalten ist (25,33 % von 8.161 Einreichungen wurden in diesem Jahr angenommen). Bei der letztjährigen Veranstaltung hatten nur 4 % der akzeptierten Beiträge Zeit für eine mündliche Präsentation, in der Kakao Brain für seine außergewöhnliche Forschungsarbeit „HOTR: End-to-End Human-Object Interaction Detection with Transformers“ nominiert wurde. In diesem Jahr ist es „Smooth-Swap“ nicht nur gelungen, die Komplexität seiner Architektur erheblich zu reduzieren, sondern es besitzt auch ein großes Kommerzialisierungspotenzial, was beide von der führenden Computer Vision Conference anerkannt und belohnt wurden.
Ein genauer und konsistenter Identitätsgradient ist unerlässlich, um die Identität einer Person nahtlos zu ändern, ohne die hohe Qualität des Bildes zu beeinträchtigen. Durch überwachten Kontrastverlust trainiert, erhält „Smooth-Swap“ seinen stabilen Identitätsgradienten durch das Erlernen der Einbettung mit einer höheren Glätte. Diese Verbesserungen adressieren die Schwäche des früheren Modells, handgefertigte Komponenten und 3D-Gesichtsmodellierung hinzuzufügen, was letztendlich sein Design komplizierte und eine ausgeklügelte Hyperparameter-Abstimmung nach sich zog. Stattdessen stützt sich „Smooth-Swap“ auf eine einfache U-Net-basierte Architektur mit einem integrierten Smooth Identity Embedder, um Spitzenleistung zu liefern.
Lesen Sie auch: Vier Datenschutz-Fehltritte, die es 2022 und darüber hinaus zu vermeiden gilt
Die einfache Architektur und verbesserte Leistung von „Smooth-Swap“ haben die Technologie nicht nur hinsichtlich ihres Kommerzialisierungspotenzials und ihrer breiteren Anwendung konkurrenzfähig gemacht, sondern ermöglichen ihr auch, anspruchsvollere Face-Swapping-Szenarien wie Face-Swapping während der Videowiedergabe zu bewältigen. „Smooth-Swap“ schlägt einen differenzierten Ansatz zur Einbettung von Identitäten vor und ermöglicht dem Generator, qualitativ hochwertigere Bilder zu erstellen, insbesondere wenn die Gesichtsform einer Person geändert wird. Durch „Smooth-Swap“ von Kakao Brain, das einen schnellen und stabilen Gesichtswechsel ermöglicht, sollen verschiedene Arten von digitalen Menschen wie virtuelle Influencer, Show-Moderatoren und Ansager entwickelt werden.
„Wir sind stolz und aufgeregt, der Welt die bahnbrechende Face-Swap-Technologie ‚Smooth-Swap‘ vorzustellen“, sagte Kim Il-doo, CEO von Kakao Brain. „Ich bin fest davon überzeugt, dass diese Technologie die Innovation im Bereich des Face-Swapping beschleunigen und uns dem unglaublich immersiven Metaversum, von dem wir immer geträumt haben, sowie den digitalen Human Services der Zukunft einen weiteren Schritt näher bringen wird.“
Schauen Sie sich das Neue an Enterprisetalk-Podcast. Für weitere solche Updates folgen Sie uns auf Google News Enterprisetalk-Nachrichten.
