Compos3D: Interactive Part-Based Composition for Creative Control in Generative 3D Models
Compos3D ist ein interaktives System, das die kreative Kontrolle bei der generativen 3D-Modellierung verbessert, indem es Benutzern ermöglicht, durch einen Remixing-Workflow aus ausgewählten Teilen mehrerer Kandidaten kohärente Designs zusammenzustellen, anstatt sich auf unvorhersehbare wiederholte Regenerationen zu verlassen.
Originalarbeit lizenziert unter CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dies ist eine KI-generierte Erklärung des untenstehenden Papers. Sie wurde nicht von den Autoren verfasst oder gebilligt. Für technische Genauigkeit konsultieren Sie das Originalpaper. Vollständigen Haftungsausschluss lesen
Stellen Sie sich vor, Sie versuchen, den perfekten Kuchen in einem magischen Ofen zu backen, der nur auf Ihre Stimme hört. Sie sagen: „Mach mir einen Schokoladenkuchen mit Drachenflügeln!“ Der Ofen summt und puff – ein Kuchen kommt heraus. Aber die Flügel sind auf der falschen Seite, die Schokolade ist zu dunkel und die Basis fehlt. Auf die alte Art der Dinge müssten Sie sagen: „Versuch es noch einmal!“, und hoffen, dass der nächste Kuchen besser wird. Wenn Ihnen die Schokolade gefällt, aber die Flügel hassen, stecken Sie fest. Sie können die Flügel nicht einfach gegen ein neues Paar austauschen; Sie müssen auf den ganzen Kuchen erneut wetten. Diese „Würfelmethode“ ist die Art und Weise, wie die meisten aktuellen 3D-KI-Tools arbeiten, und das Paper argumentiert, dass dies frustrierend ist, weil man jedes Mal die guten Teile verliert, wenn man versucht, die schlechten zu korrigieren.
Hier kommt Compos3D, ein neues System, das das Spiel verändert. Anstatt den Output der KI als fertiges Produkt zu behandeln, das man entweder behält oder wegwirft, behandelt Compos3D ihn wie eine riesige Kiste voller LEGO-Steine.
So funktioniert es:
- Das Bake-Off: Sie bitten die KI, mehrere verschiedene 3D-Modelle (wie Stühle oder Monster) basierend auf Ihrer Idee zu erstellen.
- Die Schatzsuche: Sie betrachten alle Ergebnisse und wählen die spezifischen Teile aus, die Sie lieben. Vielleicht möchten Sie die Sitzfläche von Stuhl A, die Rückenlehne von Stuhl B und die Beine von Stuhl C. Sie können diese Teile auswählen, indem Sie in einem 2D-Bild darauf klicken oder indem Sie direkt auf das 3D-Modell klicken.
- Das Remixen: Sie ziehen und lassen diese Lieblingsstücke auf eine Leinwand ziehen und arrangieren sie zu einer groben, unordentlichen Collage. Es muss noch nicht perfekt sein; es ist nur Ihre Vorstellung davon, wie die Teile zusammenpassen sollten.
- Der magische Kleber: Das System nimmt dann Ihre grobe Collage und „synthetisiert“ sie. Es fungiert wie ein superintelligenter Kleber, der Ihre separaten Teile zu einem glatten, kohärenten 3D-Modell verschmilzt und dabei die Lücken schließt und sicherstellt, dass die Geometrie realistisch aussieht.
Die Autoren testeten diese Idee mit acht Personen, die neu in der 3D-Modellierung waren. Sie baten diese Nutzer, einen hybriden Arbeitsstuhl mit sehr spezifischen Anforderungen (wie einer hohen Rückenlehne und Armlehnen in Form von Drachenbeinen) zu entwerfen. Die Nutzer probierten zwei Methoden aus: die alte „Würfelmethode“ der Regeneration und die neue „Remixing“-Methode.
Die Ergebnisse waren eindeutig. Die Nutzer fühlten sich mit der Remixing-Methode viel mehr unter Kontrolle. Sie berichteten, dass die finalen Designs ihren Vorstellungen viel besser entsprachen (mit einem Durchschnittswert von 6,12 von 7 für das Remixing, im Vergleich zu 4,12 für die Regeneration). Sie hatten auch das Gefühl, dass das Tool besser auf ihre Wünsche reagierte. Es gab jedoch einen Haken: Das Remixing erforderte etwas mehr mentale Anstrengung. Die Nutzer bewerteten den Aufwand für das Remixing etwas höher (3,50) als für die Regeneration (2,94). Aber hier ist der Clou: Obwohl es härtere Arbeit war, fanden die Nutzer es angenehmer (Bewertung von 5,75 für das Remixing gegenüber 4,81 für die Regeneration). Es scheint, dass die Möglichkeit, die eigene Auswahl zu treffen und Teile selbst zu bestimmen, die zusätzliche Anstrengung lohnenswert machte.
Die Studie untersuchte auch zwei Wege des Remixings: die Verwendung von 2D-Bildern (wie eine Collage) oder 3D-Modellen (wie das Bewegen tatsächlicher Blöcke im Raum). Der 3D-Weg fühlte sich intuitiver an, um Dinge im Raum zu bewegen, während der 2D-Weg schneller war, um Teile auszuwählen. Die meisten Menschen bevorzugten den 3D-Remixing-Ansatz für seine Präzision, obwohl dieser den größten Aufwand erforderte.
Das Paper legt nahe, dass dieser „teilbasierte“ Ansatz ein großer Schritt nach vorn ist, da er es Nutzern ermöglicht, ihre Absicht durch Bauen statt durch bloßes Beschreiben auszudrücken. Ein Nutzer bemerkte, dass sie sich mit der alten Methode eher so fühlten, als würden sie „etwas eintippen und sehen, was passiert“, während sie sich beim Remixing wie ein echter Designer fühlten, der Entscheidungen trifft.
Die Autoren weisen vorsichtig darauf hin, dass dies kein Zauberstab ist, der alles löst. Sie haben es nur mit acht Personen bei einer spezifischen Designaufgabe (einem Stuhl) getestet und nicht überprüft, ob die finalen Modelle tatsächlich in der realen Welt gedruckt oder gebaut werden könnten. Aber die Ergebnisse legen stark nahe, dass die Gabe an Menschen, Teile aus verschiedenen KI-Generationen zu mischen und zu kombinieren, zu glücklicheren, kreativeren Designern führt, die das Gefühl haben, die wahre Kontrolle über ihre Kreationen zu haben. Anstatt zu hoffen, dass die KI beim ersten Versuch richtig liegt, kuratieren Sie die besten Teile und lassen die KI die schwere Arbeit erledigen, sie zusammenzufügen.
Ertrinken Sie in Arbeiten in Ihrem Fachgebiet?
Erhalten Sie tägliche Digests der neuesten Arbeiten passend zu Ihren Forschungsbegriffen — mit technischen Zusammenfassungen, in Ihrer Sprache.