Trellis 2

Превращает любое изображение в детализированную 3D-модель с текстурами, материалами и поддержкой прозрачности за секунды.

Категория: Метки:

Создание качественной 3D-графики для игр, приложений или дизайна обычно требует много времени, специальных навыков и мощного оборудования. Microsoft Research и учёные из Университета Цинхуа представили новое решение — Trellis 2.

Это нейросеть, которая превращает обычное плоское изображение в готовую объёмную модель с текстурами и материалами. Теперь для получения 3D-ассета не нужна долгая ручная работа.

Что такое Trellis 2

Trellis 2 — это большая 3D-генеративная модель с 4 миллиардами параметров. Она создана для превращения одного изображения в качественную 3D-модель. Модель работает на основе инновационной разреженной воксельной структуры O-Voxel.

Что такое Trellis 2

Это позволяет нейросети обрабатывать сложную геометрию, включая открытые поверхности и внутренние структуры, что раньше было проблемой для традиционных методов. Технологическая основа включает Sparse 3D VAE с 16-кратным пространственным сжатием, что делает модель быстрой и эффективной.

Как зарегистрироваться в Trellis 2

Trellis 2 — это открытая модель. Код и готовые веса доступны на GitHub под лицензией MIT. Регистрация как таковая не нужна, но для использования доступны несколько способов:

  • Демо на Hugging Face Spaces: быстрый старт без установки в браузере.
  • Локальная установка через Conda: для полного контроля и производительности.
  • Docker-контейнер: для изолированного и воспроизводимого окружения.
  • Кастомные ноды для ComfyUI: интеграция в популярный графический интерфейс.
  • Облачные платформы (Layer, Runware): для запуска без мощного локального GPU.

Пошаговая инструкция по локальной установке (Linux):

  1. Клонируйте репозиторий: git clone -b main https://github.com/microsoft/TRELLIS.2.git --recursive
  2. Создайте Conda-окружение: conda env create -f environment.yaml --new-env
  3. Активируйте окружение: conda activate trellis2
  4. Загрузите предобученные веса модели: huggingface-cli download microsoft/TRELLIS.2-4B
  5. Запустите демо-скрипт: python run_demo.py --input image.png --output model.glb

Как применять

Процесс работы с нейросетью прост. Вы загружаете одно изображение, и Trellis 2 генерирует на его основе 3D-модель. Управлять качеством результата можно через несколько параметров: разрешение выходной модели (от 512³ до 1536³), целевое количество треугольников (от 100 тысяч до 2 миллионов), размер текстур (1024, 2048 или 4096 пикселей) и включение ремешинга для исправления геометрии.

Какие функции есть

Модель Microsoft предлагает широкий набор возможностей для профессиональной работы:

  • Генерация по одному изображению или текстовому запросу (Text-to-3D).
  • Полные PBR-материалы: базовый цвет, металличность, шероховатость и прозрачность.
  • Поддержка сложной геометрии: открытые и внутренние поверхности.
  • Высокое разрешение детализации — до 1536³.
  • Компактное латентное пространство с 16-кратным сжатием.
  • Локальное редактирование уже сгенерированных ассетов.
  • Предпросмотр модели в браузере без установки ПО.
  • Экспорт в форматы GLB, Radiance Fields, 3D Gaussians и меши.

Особенности перед другими сервисами

Trellis 2 выгодно отличается от конкурентов по нескольким параметрам:

  • Мощность: 4 миллиарда параметров против 1–2 млрд у большинства аналогов.
  • Качество геометрии: Уникальная структура O-Voxel для работы со сложными формами.
  • Скорость: Генерация модели разрешением 512³ занимает всего 3 секунды на H100.
  • Эффективность: Сжатие латентного пространства в 16 раз для экономии памяти.
  • Открытость: Полностью открытый код и веса под лицензией MIT.
  • Трёхэтапный пайплайн: форма → детализация → текстурирование с PBR.

Тарифы

Базовая модель Trellis 2 распространяется абсолютно бесплатно с открытым исходным кодом. Для облачного использования доступны следующие варианты:

  • Бесплатный пробный период на некоторых платформах (Layer, Runware, AIBase).
  • Поминутная оплата GPU на облачных серверах (RunPod, Banana, Replicate).
  • Пакеты кредитов на генерации (например, $12 за определённый объём).

Для кого подойдёт

Инструмент окажется полезным для широкого круга специалистов:

  • Гейм-дизайнеры и разработчики игр: Быстрая генерация прототипов и ассетов.
  • 3D-художники и дизайнеры персонажей: Создание основы для дальнейшей проработки.
  • Кино- и анимационные студии: Продакшн-модели для сцен и фонов.
  • Архитекторы и дизайнеры интерьеров: Визуализация проектов и мебели.
  • Разработчики метавселенных и XR-приложений: Наполнение миров контентом.
  • Энтузиасты: Изучение современных технологий 3D-генерации.

Аналоги

У Trellis 2 есть несколько сильных конкурентов на рынке генерации 3D:

  • Hunyuan-3D-2.1 от Tencent — сильный соперник, особенно в области текстурирования.
  • TripoSR — быстрая генерация из одного изображения.
  • Phidias — поддерживает текст, изображения и 3D-условия на входе.
  • Ouroboros3D — использует рекурсивную диффузию для Image-to-3D.
  • LATTICE — высококачественная генерация 3D-моделей.
  • Stable Zero123 — генерирует модель по нескольким снимкам объекта.

Заключение

Trellis 2 от Microsoft Research — это мощный, быстрый и доступный инструмент для создания 3D-моделей. Открытая лицензия MIT, высокая скорость работы и превосходное качество делают его подходящим решением как для профессиональных студий, так и для независимых разработчиков. Поддержка сообщества и интеграция с ComfyUI выводят Trellis 2 в лидеры в своей области.

Год основания

2025 год

Платформа

,

Стоимость

Язык интерфейса

Английский

Отзывы

Отзывов пока нет.

Добавить отзыв