De techgigant introduceerde onlangs Meta 3D Gen, een speciaal type model dat eenvoudige tekstberichten in minder dan een minuut omzet in gedetailleerde 3D-modellen.
Het nieuwe onderzoek is onderdeel van Meta’s voortdurende inspanningen om de mogelijkheden van kunstmatige intelligentie te verbeteren, met name in generatieve AI. In tegenstelling tot traditionele tekst-naar-afbeelding-generatoren produceert Meta 3D Gen volledig gerealiseerde 3D-modellen, compleet met hoogwaardige geometrie en texturen, waardoor het een belangrijk hulpmiddel is voor het maken van 3D-assets.
De reis om hoogwaardige 3D-assets te creëren is traditioneel arbeidsintensief en tijdrovend geweest. Kunstenaars en ontwerpers hebben talloze uren besteed aan het boetseren van modellen en het toepassen van texturen om het gewenste detailniveau te bereiken. Dit proces omvatte vaak het gebruik van meerdere softwaretools en vereiste een hoog niveau van expertise. De introductie van tekst-naar-afbeeldingsgeneratoren vereenvoudigde het maken van 2D-afbeeldingen, maar het genereren van 3D-modellen bleef een complexe taak.
Meta 3D Gen verandert dit door geavanceerde AI-modellen te gebruiken om de creatie van 3D-assets te automatiseren!
Hoe werkt Meta 3D Gen?
Het systeem gebruikt een twee-fasenmethode, waarbij de AssetGen- en TextureGen-technologieën van Meta worden gecombineerd. AssetGen behandelt de generatie van de 3D-geometrie, terwijl TextureGen zich richt op het toepassen van texturen en materiaalkaarten met een hoge resolutie. Deze scheiding zorgt voor meer controle en iteratieve verfijning, vergelijkbaar met hoe tekst-naar-afbeelding-generatoren werken.
De kern van de functionaliteit van Meta 3D Gen ligt in het vermogen om tekstprompts te interpreteren en deze te vertalen naar gedetailleerde 3D-modellen. Dit gebeurt in twee effectieve fasen, zoals uitgelegd in de Meta 3D Gen onderzoekspaper:
- Tekst-naar-3D-generatie
- Tekst-naar-textuur generatie
De magie van de nieuwe tool begint met een simpele tekst. Wanneer een gebruiker een tekstprompt invoert, genereert het AI-model van Meta 3D Gen een 3D-mesh die de basisvorm en -structuur vertegenwoordigt die in de prompt worden beschreven. Deze eerste fase richt zich op het creëren van nauwkeurige geometrie die kan ondersteunen fysiek gebaseerde rendering (PBR).
Zodra het 3D-netwerk is gemaakt, systeem past texturen en materiaalkaarten met hoge resolutie toe. Dit proces verbetert de visuele getrouwheid van het model, waardoor het geschikt is voor real-world toepassingen. Gebruikers kunnen de textuurstijl aanpassen door de invoertekst te wijzigen, wat zorgt voor eenvoudige aanpassing zonder het onderliggende gaas te wijzigen.
Zoals je kunt zien, de resultaten zien er niet erg realistisch uitMet een kleine aanpassing van de verlichting kunnen deze lamamodellen er echter heel stijlvol en lief uitzien.
De aanpak van Meta zorgt ervoor dat de uiteindelijke output van hoge kwaliteit is en gebruikt kan worden in verschillende modellerings- en renderingscenario’s. Volgens Meta’s onderzoek, De resultaten van 3D Gen worden door professionele 3D-artiesten boven andere verkozen tekst naar 3D-modelgeneratorenen het proces verloopt aanzienlijk sneller, vaak duurt het minder dan een minuut.
Waar kan het echt schitteren?
De mogelijkheid van Meta 3D Gen om snel 3D-modellen van hoge kwaliteit te genereren, opent talloze mogelijkheden in verschillende sectoren, zoals:
- Gameontwikkelaars en animators Met Meta 3D Gen kun je snel gedetailleerde personages, omgevingen en rekwisieten maken.
- Creëren meeslepende VR- en AR-ervaringen vereist een groot aantal hoogwaardige 3D-assets. Meta 3D Gen kan dit proces stroomlijnen, waardoor het eenvoudiger wordt om interactieve en boeiende virtuele omgevingen te ontwikkelen.
- Ontwerpers kunnen Meta 3D Gen gebruiken om snel productconcepten visualiseren en itereren op ontwerpenDe mogelijkheid om gedetailleerde 3D-modellen te genereren vanuit eenvoudige tekstprompts kan de prototypingfase versnellen en de samenwerking tussen ontwerpteams verbeteren.
Naarmate Meta 3D Gen zich verder ontwikkelt, wordt verwacht dat het het proces van 3D-assetcreatie verder zal vereenvoudigen en verbeteren. Het vermogen van de technologie om snel en nauwkeurig hoogwaardige modellen te genereren, heeft het potentieel om de manier waarop industrieën 3D-modellering benaderen te transformeren. Door een groot deel van het handmatige werk te automatiseren, stelt Meta 3D Gen kunstenaars en ontwerpers in staat zich te richten op creativiteit en innovatie.
Meta’s voortdurende onderzoek en ontwikkeling op het gebied van generatieve Meta-AI zullen in de toekomst waarschijnlijk leiden tot nog geavanceerdere mogelijkheden. Voor nu, Meta 3D-generatie is een krachtig hulpmiddel dat de efficiëntie en productiviteit bij het maken van 3D-assets kan verbeteren.
Credits voor de hoofdafbeelding: upklyak/Freepik