Das neueste Projekt von OpenAI, Shap-E, ist ein Modell, mit dem Sie 3D-Objekte aus Text generieren können, ähnlich wie Dall-E 2D-Bilder erstellen kann.
Laut OpenAI ist Shap-E „ein bedingtes generatives Modell für 3D-Assets. Im Gegensatz zu jüngsten Arbeiten an generativen 3D-Modellen, die eine einzige Ausgabedarstellung erzeugen, generiert Shap-E direkt die Parameter impliziter Funktionen, die sowohl als texturierte Netze als auch als neuronale Strahlungsfelder gerendert werden können.“
Der GitHub-Beitrag des Unternehmens erklärt weiter, wie Shap-E auf einer Kombination aus Mapping von 3D-Assets und einem bedingten Diffusionsmodell trainiert wird.
Dieses Free-to-Run-Programm ist jedoch etwas schwieriger zu installieren und einzurichten als das allseits beliebte chatgpt des Unternehmens, wie von untersucht wurde Toms Hardware.
Sie können die herunterladen Shap-E-Modell auf GitHub kostenlos und greifen Sie mit Microsoft Paint 3D darauf zu. Es funktioniert auch, wenn es in eine STL-Datei konvertiert wird, wodurch die von Ihnen erstellten Renderings über 3D-Drucker zum Leben erweckt werden können.
Während diese Grundkenntnisse des Shap-E-Modells einfach erscheinen mögen, ist möglicherweise ein gewisses technisches Verständnis erforderlich, um das Modell zu installieren und zum Laufen zu bringen.
Der Chefredakteur der Publikation, Avram Piltch, testete Shap-E, und er behauptet, er habe acht Stunden gebraucht, um sich damit zu beschäftigen. Er fügte hinzu, dass OpenAI nur wenige Anweisungen bietet, außer zu erklären, dass Sie einen Python-Pip-Befehl für die Installation verwenden sollten.
Nach der Installation, sagt Piltch, konnte er Eingabeaufforderungen mit farbanimierten GIF-Dateien und monochromen PLY-Dateien testen, wobei die animierten GIFs vorteilhaft waren, stellte er fest.
Einige Eingabeaufforderungen beinhalteten einen Hai, a Minecraft Creeper und „ein Flugzeug, das wie eine Banane aussieht“, die alle je nach Dateityp unterschiedliche Qualitätsstufen aufwiesen. Piltch nutzte auch die Funktion des Modells, mit der Benutzer ein 2D-Bild zur Umwandlung in ein 3D-Objekt hochladen können.
Der Redakteur merkte an, dass diejenigen, die versuchen, Shap-E zu installieren und 3D-Objekte zu rendern, bedenken sollten, dass das Modell viele Systemressourcen von einem PC erfordert.
Insbesondere ist Shap-E nur mit Nvidia-GPUs kompatibel und erfordert Hochleistungs-CPUs, um in Minuten statt Stunden zu rendern.
Empfehlungen der Redaktion
