Trellis tarafından desteklenen Birleşik, Yüksek Doğruluklu ve Çok Formatlı 3D Varlık Oluşturma Çerçevesi
Trellis, 3D içerik oluşturma alanında devrim niteliğinde bir atılımı temsil ediyor. Microsoft Research (MSRA) ve HKU'daki araştırmacılar tarafından geliştirilen Trellis modeli, tek görüntülerden veya metinsel istemlerden yüksek kaliteli 3D varlıklar oluşturmaya yönelik devrim niteliğinde bir yaklaşım sunuyor. Topoloji veya hız konusunda zorlanan önceki nesil yöntemlerin aksine, Trellis, her Trellis tarafından oluşturulan varlığın profesyonel düzeyde geometri ve doku korumasını sağlamak için Yapılandırılmış Gizli Difüzyon (SLAT) mimarisi kullanır. Story321 model kitaplığının temel taşı olarak Trellis, içerik oluşturucuların geleneksel modelleme darboğazlarını aşmasını sağlar. İster Trellis tabanlı bir oyun ortamı, ister Trellis güdümlü bir VR deneyimi oluşturuyor olun, Trellis çerçevesi modern dijital üretim için gereken hassasiyeti ve çok yönlülüğü sağlar. Trellis ekosistemi, yapay zeka çağında yüksek doğruluklu 3D sentezi için kesin çözüm olacak şekilde tasarlanmıştır.

Trellis, 500.000'den fazla 3D nesneden oluşan devasa bir veri kümesi üzerinde büyük ölçekli ön eğitimden yararlanan, son teknoloji ürünü bir 3D üretken modeldir. Temelinde Trellis, Trellis.2 yinelemesinde 2 milyar hatta 4 milyar parametreye kadar ölçeklenen Düzeltilmiş Akış Dönüştürücü mimarisi üzerine kurulmuştur. Trellis'in temel yeniliği, görsel özellikleri yapılandırılmış bir gizli alana (SLAT) eşleme yeteneğinde yatar ve Trellis daha sonra bunu aynı anda birden fazla 3D gösterimine kod çözmek için kullanır. Trellis sadece basit bir ağ çıktısı vermekle kalmaz; aynı Trellis gizli kodundan 3D Gaussian Splatting (3DGS), Işıma Alanları ve yüksek çözünürlüklü Ağlar oluşturabilir. Bu birleşik yaklaşım, Trellis'i diğer modellerin genellikle temsil etmekte başarısız olduğu karmaşık topolojileri ve manifold olmayan geometrileri işleme konusunda benzersiz bir şekilde yetenekli kılar. Gelişmiş O-Voxel temsillerini entegre ederek Trellis, bir Trellis modelinin en karmaşık ayrıntılarının bile cerrahi hassasiyetle korunmasını sağlar.
Trellis, 3D Gaussians, Ağlar ve Işıma Alanlarının birleşik üretimini sunar.
Trellis, üstün akıl yürütme için 2B-4B parametreli Düzeltilmiş Akış Dönüştürücü kullanır.
Trellis, örnek başına optimizasyon olmadan yıldırım hızında ileri besleme çıkarımı elde eder.
Trellis Motorunun İçinde: Ölçekte İnovasyon
Trellis SLAT mimarisi, başarısının sırrıdır. Trellis, 3D verilerini küresel yapıyı yerel ayrıntılarla dengeleyen yapılandırılmış bir ızgarada düzenler ve Trellis'in farklı görünümlerde tutarlılığı korumasını sağlar.
Tek bir Trellis çıkarım çalıştırması farklı formatlarda çözülebilir. Bu, Trellis kullanıcılarının ağır Trellis difüzyon sürecini yeniden çalıştırmadan Ağ ve 3DGS arasında geçiş yapabileceği ve büyük miktarda hesaplama kaynağı tasarrufu sağlayabileceği anlamına gelir.
Trellis, organik karakterlerden sert yüzeyli mekanik parçalara kadar çok çeşitli kategorileri anlamasını sağlayan çeşitli bir 3D veri külliyatı üzerinde eğitilmiştir. Trellis'in bilgi tabanı gerçekten dünya standartlarındadır.
Trellis, gizli alan manipülasyonlarına izin verir, yani giriş parametrelerini veya Trellis gizli çekirdeğini ayarlayarak Trellis tabanlı yerel düzenlemeler yapabilir veya bir Trellis modelinin varyasyonlarını oluşturabilirsiniz.
Görüntüden Trellis 3D'ye: Adım Adım Bir Döküm
Trellis, bir giriş görüntüsü alıp bir görsel kodlayıcıdan (DINOv2 gibi) geçirerek başlar. Trellis daha sonra bu özellikleri bir 3D seyrek ızgaraya yansıtır ve Trellis yapılandırılmış gizli alanını başlatır.
Trellis Düzeltilmiş Akış Dönüştürücü, gizli alan içinde gürültü giderme gerçekleştirir. Bir dizi Trellis çıkarım adımı aracılığıyla model, 3D yapısını iyileştirerek Trellis çıktısının giriş istemiyle mükemmel şekilde hizalanmasını sağlar.
Trellis gizli alanı tamamlandığında, özel Trellis kod çözücüleri verileri kullanılabilir bir 3D formatına dönüştürür. İster bir Trellis Ağı ister bir Trellis Gaussian Splat olsun, nihai çıktı hemen dağıtıma hazırdır.
Trellis 3D Teknolojisi ile Endüstrileri Güçlendirme
Oyun stüdyoları, arka plan varlıkları ve aksesuarların oluşturulmasını otomatikleştirmek için Trellis'i kullanır. Trellis, varlık başına maliyeti önemli ölçüde azaltır ve Trellis destekli hatların içerik üretimini katlanarak ölçeklendirmesine olanak tanır.
Perakendeciler, ürün fotoğraflarını etkileşimli 3D modellere dönüştürmek için Trellis'i kullanır. Trellis, müşterilere ürünlerin 360 derecelik bir görünümünü sunarak Trellis güdümlü alışveriş deneyimini geliştirir ve iade oranlarını azaltır.
Trellis, sanal dünyalar inşa etmek için mükemmel bir araçtır. İçerik oluşturucular, ortamlar ve avatarlar oluşturmak için Trellis'i kullanarak Trellis tabanlı dijital alanları dakikalar içinde çeşitli ve yüksek kaliteli 3D içerikle doldurabilir.
Trellis Ekosistemini Anlayışınızı Derinleştirme
Trellis, büyük ölçekli bir modeldir. Temel Trellis çıkarımı 16 GB VRAM GPU'da (RTX 3090 gibi) çalışabilse de, tam Trellis-X-Large veya Trellis.2 modelleri, derin Trellis gizli işlemesini işlemek için 24 GB+ VRAM donanımında en iyi performansı gösterir.
Trellis, SLAT mimarisi ve çok formatlı çıktısı nedeniyle öne çıkıyor. Yalnızca ağlara odaklanan modellerin aksine, Trellis, daha yüksek topolojik doğruluğa sahip 3D Gaussians ve Işıma Alanları içeren daha esnek bir Trellis çerçevesi sağlar.
Evet, Trellis çok modlu Trellis gömme sistemi aracılığıyla metinden 3D'ye desteği sunar. Bir nesneyi tanımlayabilirsiniz ve Trellis, metinsel talimatlarınızı tam olarak izleyen karşılık gelen bir Trellis 3D varlığı sentezleyecektir.
Microsoft, Trellis araştırma ve kodunu akademik amaçlarla yayınladı. Trellis topluluğu, Trellis yeteneklerini Blender ve Unreal Engine gibi yazılımlara getirmek için aktif olarak eklentiler oluşturuyor.
Story321'deki Trellis modeliyle 3D devrimine katılın. Yüksek doğruluklu Trellis varlıkları oluşturmaya başlayın ve yaratıcı vizyonunuzu tek bir tıklamayla bir Trellis 3D gerçekliğine dönüştürün.