Een Uniform, High-Fidelity en Multi-Formaat 3D Asset Generatie Framework aangedreven door Trellis
Trellis vertegenwoordigt een monumentale sprong voorwaarts op het gebied van 3D-contentcreatie. Het Trellis-model, ontwikkeld door onderzoekers van Microsoft Research (MSRA) en HKU, introduceert een revolutionaire benadering voor het genereren van hoogwaardige 3D-assets uit enkele afbeeldingen of tekstuele prompts. In tegenstelling tot eerdere generatiemethoden die worstelen met topologie of snelheid, maakt Trellis gebruik van een Structured Latent Diffusion (SLAT)-architectuur om ervoor te zorgen dat elk door Trellis gegenereerd asset geometrie en textuur van professionele kwaliteit behoudt. Als hoeksteen van de Story321-modelbibliotheek stelt Trellis makers in staat om traditionele modelleerknelpunten te omzeilen. Of je nu een op Trellis gebaseerde game-omgeving bouwt of een door Trellis aangedreven VR-ervaring, het Trellis-framework biedt de precisie en veelzijdigheid die nodig zijn voor moderne digitale productie. Het Trellis-ecosysteem is ontworpen als de definitieve oplossing voor high-fidelity 3D-synthese in het AI-tijdperk.

Trellis is een state-of-the-art 3D generatief model dat gebruikmaakt van grootschalige pre-training op een enorme dataset van meer dan 500.000 3D-objecten. In de kern is Trellis gebouwd op een Rectified Flow Transformer-architectuur, die opschaalt tot 2 miljard en zelfs 4 miljard parameters in zijn Trellis.2-iteratie. De belangrijkste innovatie van Trellis ligt in zijn vermogen om visuele kenmerken in kaart te brengen in een gestructureerde latente ruimte (SLAT), die Trellis vervolgens gebruikt om te decoderen in meerdere 3D-representaties tegelijkertijd. Trellis geeft niet alleen een eenvoudig mesh weer; het kan 3D Gaussian Splatting (3DGS), Radiance Fields en hoge-resolutie Meshes genereren, allemaal vanuit dezelfde Trellis latente code. Deze uniforme aanpak maakt Trellis uniek geschikt voor het verwerken van complexe topologieën en niet-manifold geometrieën die andere modellen vaak niet kunnen weergeven. Door geavanceerde O-Voxel-representaties te integreren, zorgt Trellis ervoor dat zelfs de meest ingewikkelde details van een Trellis-model met chirurgische precisie behouden blijven.
Trellis biedt uniforme generatie van 3D Gaussians, Meshes en Radiance Fields.
Trellis gebruikt een 2B-4B parameter Rectified Flow Transformer voor superieur redeneren.
Trellis bereikt bliksemsnelle feed-forward inferentie zonder optimalisatie per instantie.
Binnenin de Trellis Engine: Innovatie op Schaal
De Trellis SLAT-architectuur is het geheim van zijn succes. Trellis organiseert 3D-gegevens in een gestructureerd raster dat de globale structuur in evenwicht brengt met lokale details, waardoor Trellis consistentie kan behouden over verschillende weergaven.
Een enkele Trellis inferentie run kan worden gedecodeerd in verschillende formaten. Dit betekent dat Trellis-gebruikers kunnen schakelen tussen Mesh en 3DGS zonder het zware Trellis-diffusieproces opnieuw uit te voeren, waardoor enorme computerbronnen worden bespaard.
Trellis is getraind op een diverse verzameling 3D-gegevens, waardoor Trellis een breed scala aan categorieën kan begrijpen, van organische karakters tot mechanische onderdelen met harde oppervlakken. De kennisbasis van Trellis is echt van wereldklasse.
Trellis maakt manipulaties in de latente ruimte mogelijk, wat betekent dat u op Trellis gebaseerde lokale bewerkingen kunt uitvoeren of variaties van een Trellis-model kunt genereren door eenvoudigweg de invoerparameters of de Trellis latente seed aan te passen.
Van Afbeelding naar Trellis 3D: Een Stapsgewijze Uiteenzetting
Trellis begint met het nemen van een invoerafbeelding en deze door een visuele encoder (zoals DINOv2) te leiden. Trellis projecteert deze functies vervolgens in een 3D sparse grid, waardoor de Trellis gestructureerde latente ruimte wordt geïnitialiseerd.
De Trellis Rectified Flow Transformer voert denoising uit binnen de latente ruimte. Door een reeks Trellis inferentiestappen verfijnt het model de 3D-structuur, waardoor de Trellis-uitvoer perfect aansluit bij de invoerprompt.
Zodra de Trellis latente ruimte is voltooid, transformeren gespecialiseerde Trellis decoders de gegevens in een bruikbaar 3D-formaat. Of het nu een Trellis Mesh of een Trellis Gaussian Splat is, de uiteindelijke uitvoer is klaar voor onmiddellijke implementatie.
Industrieën Empoweren met Trellis 3D Technologie
Game studio's gebruiken Trellis om de creatie van achtergrond assets en props te automatiseren. Trellis vermindert de kosten per asset aanzienlijk, waardoor Trellis-aangedreven pipelines de contentproductie exponentieel kunnen opschalen.
Retailers gebruiken Trellis om productfoto's om te zetten in interactieve 3D-modellen. Trellis biedt klanten een 360-graden beeld van producten, waardoor de door Trellis aangedreven winkelervaring wordt verbeterd en het aantal retouren wordt verminderd.
Trellis is de perfecte tool voor het bouwen van virtuele werelden. Door Trellis te gebruiken om omgevingen en avatars te genereren, kunnen makers op Trellis gebaseerde digitale ruimtes in enkele minuten vullen met diverse en hoogwaardige 3D-content.
Uw Begrip van het Trellis Ecosysteem Verdiepen
Trellis is een grootschalig model. Hoewel basis Trellis inferentie kan draaien op een 16GB VRAM GPU (zoals een RTX 3090), presteren de volledige Trellis-X-Large of Trellis.2 modellen het beste op 24GB+ VRAM hardware om de diepe Trellis latente verwerking aan te kunnen.
Trellis onderscheidt zich door zijn SLAT-architectuur en multi-formaat uitvoer. In tegenstelling tot modellen die zich alleen richten op meshes, biedt Trellis een flexibeler Trellis-framework dat 3D Gaussians en Radiance Fields omvat met een hogere topologische nauwkeurigheid.
Ja, Trellis ondersteunt tekst-naar-3D via zijn multi-modale Trellis embedding systeem. U kunt een object beschrijven en Trellis zal een overeenkomstig Trellis 3D-asset synthetiseren dat uw tekstuele instructies precies volgt.
Microsoft heeft het Trellis-onderzoek en de code vrijgegeven voor academische doeleinden. De Trellis-community bouwt actief plugins om Trellis-mogelijkheden in software zoals Blender en Unreal Engine te brengen.
Sluit je aan bij de 3D-revolutie met het Trellis-model op Story321. Begin met het genereren van high-fidelity Trellis-assets en transformeer uw creatieve visie in een Trellis 3D-realiteit met slechts één klik.