تريليس
إطار عمل موحد وعالي الدقة ومتعدد التنسيقات لإنشاء أصول ثلاثية الأبعاد مدعوم من تريليس
يمثل تريليس قفزة هائلة في مجال إنشاء المحتوى ثلاثي الأبعاد. تم تطوير نموذج تريليس بواسطة باحثين في Microsoft Research (MSRA) و HKU، ويقدم نهجًا ثوريًا لإنشاء أصول ثلاثية الأبعاد عالية الجودة من صور فردية أو مطالبات نصية. على عكس طرق الجيل السابقة التي تعاني من الطوبولوجيا أو السرعة، يستخدم تريليس بنية الانتشار الكامن المنظم (SLAT) لضمان احتفاظ كل أصل تم إنشاؤه بواسطة تريليس بهندسة وملمس احترافيين. باعتباره حجر الزاوية في مكتبة نموذج Story321، يمكّن تريليس المبدعين من تجاوز الاختناقات التقليدية في النمذجة. سواء كنت تقوم ببناء بيئة ألعاب تعتمد على تريليس أو تجربة واقع افتراضي مدفوعة بتريليس، فإن إطار عمل تريليس يوفر الدقة والتنوع المطلوبين للإنتاج الرقمي الحديث. تم تصميم النظام البيئي لتريليس ليكون الحل النهائي للتوليف ثلاثي الأبعاد عالي الدقة في عصر الذكاء الاصطناعي.
ما هو نموذج تريليس؟
تريليس هو نموذج توليدي ثلاثي الأبعاد حديث يستخدم التدريب المسبق واسع النطاق على مجموعة بيانات ضخمة تضم أكثر من 500000 كائن ثلاثي الأبعاد. في جوهره، يعتمد تريليس على بنية Rectified Flow Transformer، ويتوسع إلى 2 مليار وحتى 4 مليارات معلمة في تكراره Trellis.2. يكمن الابتكار الأساسي لتريليس في قدرته على تعيين الميزات المرئية في مساحة كامنة منظمة (SLAT)، والتي يستخدمها تريليس بعد ذلك لفك تشفيرها إلى تمثيلات ثلاثية الأبعاد متعددة في وقت واحد. لا يخرج تريليس مجرد شبكة بسيطة؛ بل يمكنه إنشاء Gaussian Splatting ثلاثي الأبعاد (3DGS) وحقول الإشعاع والشبكات عالية الدقة، وكل ذلك من نفس رمز تريليس الكامن. هذا النهج الموحد يجعل تريليس قادرًا بشكل فريد على التعامل مع الطوبولوجيا المعقدة والهندسة غير المتشعبة التي تفشل النماذج الأخرى غالبًا في تمثيلها. من خلال دمج تمثيلات O-Voxel المتقدمة، يضمن تريليس الحفاظ على أدق التفاصيل في نموذج تريليس بدقة جراحية.
يقدم تريليس توليدًا موحدًا لـ Gaussians ثلاثية الأبعاد والشبكات وحقول الإشعاع.
يستخدم تريليس محول Rectified Flow Transformer بمعلمات 2B-4B لتحقيق استدلال فائق.
يحقق تريليس استدلالًا سريعًا للغاية للتغذية الأمامية دون تحسين لكل مثيل.
رؤية الكمبيوترتوليف ثلاثي الأبعادالعرض العصبي
الميزات التقنية الأساسية لتريليس
داخل محرك تريليس: الابتكار على نطاق واسع
SLAT: مساحة كامنة منظمة
بنية تريليس SLAT هي سر نجاحها. ينظم تريليس البيانات ثلاثية الأبعاد في شبكة منظمة توازن بين الهيكل العام والتفاصيل المحلية، مما يسمح لتريليس بالحفاظ على الاتساق عبر وجهات نظر مختلفة.
فك تشفير تريليس الموحد
يمكن فك تشفير تشغيل استدلال تريليس واحد إلى تنسيقات مختلفة. هذا يعني أنه يمكن لمستخدمي تريليس التبديل بين Mesh و 3DGS دون إعادة تشغيل عملية انتشار تريليس الثقيلة، مما يوفر موارد حسابية هائلة.
التدريب المسبق واسع النطاق لتريليس
يتم تدريب تريليس على مجموعة متنوعة من البيانات ثلاثية الأبعاد، مما يمكن تريليس من فهم مجموعة واسعة من الفئات، من الشخصيات العضوية إلى الأجزاء الميكانيكية ذات الأسطح الصلبة. قاعدة معارف تريليس عالمية حقًا.
تحرير تريليس التفاعلي
يسمح تريليس بمعالجة المساحات الكامنة، مما يعني أنه يمكنك إجراء تعديلات محلية تعتمد على تريليس أو إنشاء اختلافات في نموذج تريليس ببساطة عن طريق تعديل معلمات الإدخال أو بذرة تريليس الكامنة.
كيف يعمل خط أنابيب تريليس
من صورة إلى تريليس ثلاثي الأبعاد: تفصيل خطوة بخطوة
1
ترميز ميزات تريليس
يبدأ تريليس بأخذ صورة إدخال وتمريرها عبر أداة ترميز مرئية (مثل DINOv2). ثم يقوم تريليس بإسقاط هذه الميزات في شبكة متفرقة ثلاثية الأبعاد، وتهيئة مساحة تريليس الكامنة المنظمة.
2
مطابقة تدفق تريليس
يقوم محول Rectified Flow Transformer الخاص بتريليس بإزالة الضوضاء داخل المساحة الكامنة. من خلال سلسلة من خطوات استدلال تريليس، يقوم النموذج بتحسين الهيكل ثلاثي الأبعاد، مما يضمن توافق إخراج تريليس تمامًا مع مطالبة الإدخال.
3
تحقيق أصول تريليس
بمجرد الانتهاء من تريليس الكامن، تقوم أدوات فك تشفير تريليس المتخصصة بتحويل البيانات إلى تنسيق ثلاثي الأبعاد قابل للاستخدام. سواء كانت شبكة تريليس أو Gaussian Splat من تريليس، فإن الإخراج النهائي جاهز للنشر الفوري.
تطبيقات تريليس الواقعية
تمكين الصناعات بتقنية تريليس ثلاثية الأبعاد
تريليس في تطوير الألعاب
تستخدم استوديوهات الألعاب تريليس لأتمتة إنشاء أصول وخلفيات. يقلل تريليس بشكل كبير من التكلفة لكل أصل، مما يسمح لخطوط الأنابيب المدعومة من تريليس بتوسيع نطاق إنتاج المحتوى بشكل كبير.
تريليس للتجارة الإلكترونية
يستخدم تجار التجزئة تريليس لتحويل صور المنتجات إلى نماذج ثلاثية الأبعاد تفاعلية. يوفر تريليس للعملاء عرضًا بزاوية 360 درجة للمنتجات، مما يعزز تجربة التسوق المدفوعة بتريليس ويقلل من معدلات الإرجاع.
تريليس في Metaverse
تريليس هي الأداة المثالية لبناء عوالم افتراضية. باستخدام تريليس لإنشاء بيئات وصور رمزية، يمكن للمبدعين ملء المساحات الرقمية القائمة على تريليس بمحتوى ثلاثي الأبعاد متنوع وعالي الجودة في دقائق.
أسئلة متداولة حول تريليس
تعميق فهمك للنظام البيئي لتريليس
ما هي متطلبات الأجهزة لتريليس؟
تريليس هو نموذج واسع النطاق. في حين أن استدلال تريليس الأساسي يمكن أن يعمل على وحدة معالجة رسومات VRAM بسعة 16 جيجابايت (مثل RTX 3090)، فإن نماذج Trellis-X-Large أو Trellis.2 الكاملة تعمل بشكل أفضل على أجهزة VRAM بسعة 24 جيجابايت + للتعامل مع معالجة تريليس الكامنة العميقة.
كيف يقارن تريليس بنماذج الذكاء الاصطناعي ثلاثية الأبعاد الأخرى مثل Tripo أو Rodin؟
يتميز تريليس ببنية SLAT الخاصة به وإخراج متعدد التنسيقات. على عكس النماذج التي تركز فقط على الشبكات، يوفر تريليس إطار عمل تريليس أكثر مرونة يتضمن Gaussians ثلاثية الأبعاد وحقول الإشعاع بدقة طوبولوجية أعلى.
هل يمكن لتريليس إنشاء نماذج ثلاثية الأبعاد من النص؟
نعم، يدعم تريليس النص إلى ثلاثي الأبعاد من خلال نظام تضمين تريليس متعدد الوسائط. يمكنك وصف كائن، وسيقوم تريليس بتجميع أصل تريليس ثلاثي الأبعاد مطابق يتبع تعليماتك النصية بدقة.
هل نموذج تريليس مفتوح المصدر؟
أصدرت Microsoft أبحاث تريليس ورموزه للأغراض الأكاديمية. يقوم مجتمع تريليس ببناء مكونات إضافية بنشاط لجلب إمكانات تريليس إلى برامج مثل Blender و Unreal Engine.
جرب قوة تريليس اليوم
انضم إلى ثورة الأبعاد الثلاثية مع نموذج تريليس على Story321. ابدأ في إنشاء أصول تريليس عالية الدقة وحوّل رؤيتك الإبداعية إلى واقع تريليس ثلاثي الأبعاد بنقرة واحدة فقط.