Compos3D: Interactive Part-Based Composition for Creative Control in Generative 3D Models
Compos3D is een interactief systeem dat de creatieve controle in generatieve 3D-modellering verbetert door gebruikers in staat te stellen coherente ontwerpen samen te stellen via een remix-workflow van geselecteerde onderdelen uit meerdere kandidaten, in plaats van te vertrouwen op onvoorspelbare herhaalde regeneraties.
Oorspronkelijk artikel gelicentieerd onder CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dit is een AI-gegenereerde uitleg van het onderstaande artikel. Het is niet geschreven of goedgekeurd door de auteurs. Raadpleeg het oorspronkelijke artikel voor technische nauwkeurigheid. Lees de volledige disclaimer
Stel je voor dat je de perfecte taart probeert te bakken met een magische oven die alleen naar je stem luistert. Je zegt: "Maak me een chocoladetaart met drakenvleugels!" De oven bromt en poef—daarbuiten komt een taart uit. Maar de vleugels zitten aan de verkeerde kant, de chocolade is te donker en de basis ontbreekt. Op de oude manier van doen zou je moeten zeggen: "Probeer het opnieuw!" en hopen dat de volgende taart beter is. Als je de chocolade wel lekker vindt maar de vleugels haat, zit je vast. Je kunt de vleugels niet zomaar inruilen voor een nieuw paar; je moet weer een gok wagen met de hele taart. Deze "dobbelsteen werpen"-methode is hoe de meeste huidige 3D AI-tools werken, en het artikel betoogt dat dit frustrerend is omdat je de goede onderdelen verliest telkens wanneer je probeert de slechte onderdelen te verbeteren.
Maak kennis met Compos3D, een nieuw systeem dat het spel verandert. In plaats van de output van de AI te behandelen als een eindproduct dat je ofwel houdt of weggooit, behandelt Compos3D het als een enorme doos met LEGO-blokjes.
Zo werkt het:
- De Bakwedstrijd: Je vraagt de AI om verschillende verschillende 3D-modellen (zoals stoelen of monsters) te maken op basis van jouw idee.
- De Speurtocht: Je bekijkt alle resultaten en kiest de specifieke onderdelen die je geweldig vindt. Misschien wil je de zitting van Stoel A, de rugleuning van Stoel B en de poten van Stoel C. Je kunt deze onderdelen pakken door op een 2D-afbeelding te klikken of door direct op het 3D-model te klikken.
- De Remix: Je sleept en plaatst deze favoriete stukjes op een canvas en arrangeert ze tot een ruwe, rommelige collage. Het hoeft nog niet perfect te zijn; het is slechts jouw visie van hoe de onderdelen in elkaar zouden moeten passen.
- De Magische Lijm: Het systeem neemt vervolgens jouw ruwe collage en "synthetiseert" deze. Het werkt als een super slimme lijm die je afzonderlijke stukken samenvoegt tot één vloeiend, samenhangend 3D-model, waarbij de gaten wordt gedicht en ervoor wordt gezorgd dat de geometrie er echt uitziet.
De auteurs testten dit idee met acht mensen die nieuw waren aan 3D-modelleren. Ze vroegen deze gebruikers om een hybride werkstoel te ontwerpen met zeer specifieke eisen (zoals een hoge rugleuning en drakenpoot-armleuningen). De gebruikers probeerden twee methoden: de oude "dobbelsteen werpen" regeneratiemethode en de nieuwe "remixing"-methode.
De resultaten waren duidelijk. De gebruikers voelden zich veel meer in controle met de remixing-methode. Ze rapporteerden dat de uiteindelijke ontwerpen veel beter overeenkwamen met hun ideeën (met een gemiddelde score van 6,12 op 7 voor remixing, vergeleken met 4,12 voor regeneratie). Ze vonden ook dat het gereedschap beter reageerde op hun wensen. Er was echter een addertje onder het gras: remixing kostte iets meer mentale inspanning. Gebruikers beoordeelden de inspanning iets hoger voor remixing (3,50) dan voor regeneratie (2,94). Maar dit is de kern: zelfs al was het harder werk, de gebruikers vonden het plezieriger (scorend 5,75 voor remixing versus 4,81 voor regeneratie). Het lijkt erop dat het hebben van de macht om je eigen onderdelen te kiezen en te combineren de extra inspanning de moeite waard maakte.
De studie keek ook naar twee manieren om de remixing te doen: het gebruik van 2D-afbeeldingen (zoals een collage) of 3D-modellen (zoals het daadwerkelijk bewegen van blokken in de ruimte). De 3D-manier voelde intuïtiever voor het bewegen van dingen in de ruimte, terwijl de 2D-manier sneller was voor het kiezen van stukken. De meeste mensen gaven de voorkeur aan de 3D-remixing-aanpak vanwege de precisie, hoewel dit de meeste inspanning vereiste van allemaal.
Het artikel suggereert dat deze "onderdeel-gebaseerde" aanpak een grote stap voorwaarts is omdat het gebruikers in staat stelt hun intentie uit te drukken door te bouwen in plaats van alleen te beschrijven. Eén gebruiker merkte op dat ze met de oude methode het gevoel hadden dat ze gewoon "iets typten en keken wat er gebeurde", maar met remixing voelden ze zich een echte ontwerper die keuzes maakt.
De auteurs zijn voorzichtig om te vermelden dat dit geen toverstaf is die alles oplost. Ze hebben dit alleen getest met acht mensen met één specifieke ontwerp taak (een stoel), en ze hebben niet gecontroleerd of de uiteindelijke modellen daadwerkelijk geprint of gebouwd kunnen worden in de echte wereld. Maar de bevindingen suggereren sterk dat het mensen de mogelijkheid geven om onderdelen uit verschillende AI-generaties te mixen en te matchen, leidt tot gelukkiger, creatiever ontwerpers die het gevoel hebben echt de baas te zijn over hun creaties. In plaats van te hopen dat de AI het in de eerste poging goed krijgt, krijg je de kans om de beste stukjes te cureren en de AI het zware werk te laten doen van het samenvoegen ervan.
Verdrinkt u in papers in uw vakgebied?
Ontvang dagelijkse digests van de nieuwste papers die bij uw onderzoekswoorden passen — met technische samenvattingen, in uw taal.