Hunyuan Motion 1.0 — 텍스트 기반 3D 인체 모션 대규모 생성

Hunyuan Motion은 자연어를 기반으로 고품질의 스켈레톤 기반 3D 애니메이션을 구현합니다.

Hunyuan Motion은 차세대 텍스트 기반 3D 인체 모션 생성 모델 스위트로서, 일반적인 영어 프롬프트를 유연하고 사실적인 스켈레톤 기반 애니메이션으로 변환합니다. Flow Matching으로 학습된 10억 개의 파라미터를 가진 Diffusion Transformer를 기반으로 하는 Hunyuan Motion은 명령어 추종, 모션 디테일 및 시간적 부드러움을 새로운 차원으로 끌어올립니다. 이 프로젝트는 빠른 반복 작업, 재현 가능한 워크플로우 및 플랫폼 간 호환성을 위해 즉시 사용 가능한 CLI와 대화형 Gradio 앱을 제공합니다. 대규모 사전 학습, 고품질 미세 조정 및 인간 피드백을 통한 강화 학습을 통해 Hunyuan Motion은 게임, 영화, VR/AR, 가상 프로덕션 및 디지털 휴먼 파이프라인에서 최첨단 품질과 안정성을 달성합니다. github.com에서 공식 오픈 소스 구현, 사전 학습된 가중치 및 빠른 시작 도구를 살펴보세요.

텍스트-모션 변환

3D 애니메이션

Hunyuan Motion이란 무엇인가요?

Hunyuan Motion은 자연어 프롬프트에서 직접 스켈레톤 기반 캐릭터 애니메이션을 생성하는 일련의 텍스트 기반 3D 인체 모션 생성 모델입니다. Diffusion Transformer를 기반으로 하고 Flow Matching으로 학습된 Hunyuan Motion은 10억 개의 파라미터 수준으로 확장되어 이전 오픈 소스 시스템에 비해 명령어 추종 및 모션 품질을 크게 향상시킵니다. 훈련 파이프라인은 다양한 인체 모션에 대한 대규모 사전 훈련, 엄선된 고품질 시퀀스에 대한 미세 조정, 인간 피드백을 통한 강화 학습의 세 단계를 결합하여 상세한 텍스트 지침에 부합하는 부드럽고 물리적으로 그럴듯한 모션을 제공합니다. 그 결과 최신 3D 파이프라인에 완벽하게 통합되는 프롬프트-애니메이션 워크플로우가 탄생했습니다. 이 프로젝트는 다양한 성능 환경을 위해 표준 모델(≈10억 개의 파라미터)과 Lite 변형(≈0.46B 개의 파라미터)을 제공하며, 플랫폼 간 지원, 일괄 처리 친화적인 CLI 및 대화형 탐색을 위한 쉬운 Gradio UI를 함께 제공합니다. 자세한 내용, 업데이트 및 사용 지침은 [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)의 공식 리포지토리에서 확인할 수 있습니다.

Flow Matching을 사용한 Diffusion Transformer가 ~10억 개의 파라미터로 확장되어 뛰어난 명령어 추종 및 모션 품질을 제공합니다. [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)

3단계 훈련: 자연스럽고 일관성 있는 모션을 위한 대규모 사전 훈련, 고품질 미세 조정 및 RLHF [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)

빠른 로컬 추론 및 대화형 시각화를 위한 즉시 사용 가능한 CLI 및 Gradio 앱 [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)

Flow Matching

주요 기능

Hunyuan Motion이 특별한 이유

10억 규모의 Diffusion Transformer + Flow Matching

Hunyuan Motion은 Flow Matching을 사용하여 DiT 백본을 ~10억 개의 파라미터로 확장하여 프레임 전체에서 안정성을 유지하면서 명령어 추종 및 모션 품질을 향상시킵니다. [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)에서 공식 모델 설명 및 훈련 개요를 참조하세요.

3단계 훈련 파이프라인

3,000시간 이상의 모션 데이터에 대한 대규모 사전 훈련은 광범위한 사전 지식을 구축하고, 400시간의 엄선된 미세 조정은 디테일과 부드러움을 향상시키며, 인간 피드백을 통한 RL은 자연스러움과 프롬프트 준수를 개선합니다. 자세한 내용은 [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)에 문서화되어 있습니다.

모델 동물원: 표준 및 Lite

최첨단 모션 충실도를 위해 HY-Motion-1.0(~10억 개의 파라미터)을 선택하거나 더 가벼운 배포를 위해 HY-Motion-1.0-Lite(~0.46B)를 선택하세요. 리포지토리는 빠른 설정을 위한 가중치 및 지침을 제공합니다. [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)

텍스트 우선 모션 생성

Hunyuan Motion은 일반 언어 프롬프트를 사용하고 의도한 액션, 스타일 및 페이싱에 부합하는 모션을 출력하여 모든 포즈를 직접 애니메이션하지 않고도 창의적인 제어가 가능합니다.

프롬프트 엔지니어링 및 지속 시간 추정

선택적으로 LLM 기반 지속 시간 추정기 및 프롬프트 재작성기 모듈을 연결하여 페이싱과 명확성을 개선합니다. Hunyuan Motion은 필요에 따라 이러한 도우미를 활성화하거나 비활성화하는 간단한 플래그를 노출합니다. [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)

CLI 및 Gradio 포함

대규모 프롬프트 세트의 경우 CLI를 통해 일괄 작업을 실행하거나 대화형 시각화를 위해 로컬 Gradio 서버를 시작합니다. 이러한 도구는 [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)의 명확한 지침 및 예제와 함께 공식 리포지토리에서 유지 관리됩니다.

플랫폼 간 지원

Hunyuan Motion은 macOS, Windows 및 Linux에서 실행되어 혼합 팀이 워크플로우를 공유할 수 있도록 지원합니다. 리포지토리에는 일관된 설정 및 추론을 위한 요구 사항 및 스크립트가 포함되어 있습니다. [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)

프로덕션 친화적인 출력

스켈레톤 기반 모션을 생성함으로써 Hunyuan Motion은 리그된 캐릭터 파이프라인에 적합하고 익숙한 DCC 툴체인을 사용하여 다운스트림 리타게팅, 블렌딩 및 정리 작업을 지원합니다.

Hunyuan Motion 작동 방식

프롬프트에서 스켈레톤 애니메이션으로

명령어 파싱 및 지속 시간 계획

사용자는 원하는 액션, 스타일 및 페이싱을 설명하는 자연어 프롬프트를 작성합니다. Hunyuan Motion은 선택적으로 프롬프트 재작성 및 지속 시간 추정 모듈을 사용하여 의도를 명확히 하고, 타이밍을 추론하고, 생성을 위한 구문 표현을 표준화할 수 있습니다. 이 단계는 특히 [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)의 공식 리포지토리에 문서화된 복잡하거나 다단계 액션에서 텍스트 설명과 모션 결과 간의 일치를 증가시킵니다.

Flow-Matched DiT 샘플링 및 스켈레톤 합성

Hunyuan Motion은 Flow Matching을 통해 훈련된 Diffusion Transformer를 사용하여 모션 궤적을 샘플링합니다. 이 모델은 프롬프트에 부합하는 부드럽고 시간적으로 일관성 있는 스켈레톤 기반 3D 모션을 출력합니다. 결과는 Gradio 앱에서 대화형으로 보거나 3D 파이프라인에 통합하기 위해 CLI를 통해 저장할 수 있습니다. 전체 사용 지침은 [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)에서 제공됩니다.

Hunyuan Motion 사용처

프리비즈에서 최종 애니메이션까지

게임 개발 및 프로토타입 제작

Hunyuan Motion을 사용하여 달리기, 점프, 공격, 이모트 및 이동 모션을 빠르게 생성하여 게임 플레이를 프로토타입하고 캐릭터 느낌을 반복합니다. 디자이너는 프롬프트 변형을 테스트하고 게임 내 리그로 리타게팅하기 위해 스켈레톤 기반 모션을 빠르게 내보낼 수 있습니다. 더 큰 라이브러리의 경우 CLI는 일괄 추론 및 일관된 출력 명명을 지원합니다. 공식 리포지토리는 [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)에서 권장되는 워크플로우 및 플래그를 보여줍니다.

영화, VFX 및 가상 프로덕션

시네마틱 파이프라인에서 Hunyuan Motion은 프리비즈 및 블로킹을 가속화합니다. 감독은 의도를 텍스트로 스케치하고 Hunyuan Motion이 기준 모션을 생성하도록 한 다음 애니메이터에게 전달하여 개선할 수 있습니다. 부드럽고 명령어 추종 동작은 샷 전체에서 수정 사항을 좁고 예측 가능하게 유지하는 데 도움이 됩니다.

디지털 휴먼 및 가상 인플루언서

Hunyuan Motion을 디지털 휴먼과 페어링하여 표현력이 풍부한 제스처, 유휴 루프 및 스타일화된 행위를 합성합니다. Hunyuan Motion은 프롬프트 기반이므로 비기술적 제작자는 모션 아이디어를 더 빠르게 탐색하고 기술 감독과 협력하여 다듬고 전달할 수 있습니다.

VR/AR 및 몰입형 경험

Hunyuan Motion은 몰입도를 높이는 주변 군중 모션, 가이드 상호 작용 및 내러티브 비트를 빠르게 생성하는 것을 지원합니다. 스켈레톤 기반 출력은 헤드셋에 최적화된 리그 및 런타임 제약 조건으로 애니메이션을 리타게팅하는 것을 간단하게 만듭니다.

교육, 연구 및 연구소

교육자 및 연구원은 Hunyuan Motion을 모션에 대한 Diffusion Transformer 및 Flow Matching 접근 방식의 참조로 사용할 수 있습니다. 이 프로젝트의 오픈 소스 코드와 모델 동물원은 재현 가능한 실험과 명령어 추종 벤치마크를 가능하게 합니다. [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)

내부 모션 라이브러리를 구축하는 스튜디오

일관된 하우스 스타일 모션 라이브러리를 구축할 때 Hunyuan Motion은 일관된 기반을 제공합니다. 팀은 톤, 페이싱 및 스타일을 텍스트로 지정하고 일관된 테이크를 생성하고 에셋 관리에 통합하기 전에 Gradio 앱을 통해 검토를 표준화할 수 있습니다.

자주 묻는 질문

Hunyuan Motion으로 생성을 시작하는 데 필요한 모든 것

Hunyuan Motion은 정확히 무엇을 생성합니까?

Hunyuan Motion은 일반적인 3D 애니메이션 파이프라인에 통합되도록 설계된 텍스트 프롬프트에서 스켈레톤 기반 3D 인체 모션을 생성합니다. 이 모델은 사실감, 시간적 부드러움 및 명령어 추종에 중점을 두어 액션, 스타일 및 페이싱이 사용자가 설명하는 내용을 반영하도록 합니다. [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)에서 프로젝트 개요 및 예제를 참조하세요.

Hunyuan Motion은 어떻게 훈련됩니까?

Hunyuan Motion은 광범위한 사전 지식을 학습하기 위해 3,000시간 이상의 모션에 대한 대규모 사전 훈련, 디테일과 부드러움을 위해 400시간의 엄선된 고품질 데이터에 대한 미세 조정, 명령어 일치 및 자연스러움을 더욱 개선하기 위한 인간 피드백을 통한 강화 학습의 세 단계 프로세스를 사용합니다. 기술 요약 및 훈련 노트는 [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)의 공식 리포지토리에 있습니다.

HY-Motion-1.0과 HY-Motion-1.0-Lite의 차이점은 무엇입니까?

둘 다 Hunyuan Motion의 일부입니다. HY-Motion-1.0은 명령어 추종 및 모션 충실도를 최대화하는 표준 ~10억 개의 파라미터 모델인 반면 HY-Motion-1.0-Lite(~0.46B)는 더 가벼운 배포 및 더 빠른 처리 시간을 위해 최적화되었습니다. GPU 예산 및 모션 품질 요구 사항에 따라 선택하세요. 모델 다운로드 지침은 [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)에서 제공됩니다.

Hunyuan Motion을 로컬에서 어떻게 실행합니까?

PyTorch 및 프로젝트 요구 사항을 설치하고 리포지토리의 지침에 따라 사전 훈련된 가중치를 다운로드한 다음 선호하는 인터페이스를 선택합니다. 일괄 프롬프트의 경우 CLI를 사용하거나 대화형 UI의 경우 Gradio 앱을 시작합니다. 단계별 빠른 시작은 [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)에 자세히 설명되어 있습니다.

Hunyuan Motion이 지속 시간을 추정하고 프롬프트를 자동으로 다시 작성할 수 있습니까?

예. Hunyuan Motion은 선택적으로 지속 시간 추정기 및 프롬프트 재작성 모듈을 사용하여 페이싱과 명확성을 개선할 수 있습니다. 간단한 플래그를 통해 이러한 모듈을 활성화하거나 비활성화할 수 있습니다. 사용할 수 없는 경우 연결 오류를 방지하기 위해 명시적으로 끌 수 있습니다. 자세한 내용은 [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)의 리포지토리 사용 노트에 설명되어 있습니다.

Hunyuan Motion은 어떤 운영 체제를 지원합니까?

Hunyuan Motion은 추론을 위해 macOS, Windows 및 Linux를 지원합니다. CLI 및 Gradio 모두에 대한 설치 지침, 종속성 목록 및 도구는 [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)에서 확인할 수 있습니다.

대화형 데모가 있습니까?

예. 이 프로젝트에는 대화형 시각화를 위해 로컬에서 실행할 수 있는 Gradio 앱이 포함되어 있습니다. 공식 리포지토리는 모델을 사용해 볼 수 있는 Hugging Face Space 및 공식 사이트도 가리킵니다. [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)에서 링크 및 설정을 찾으세요.

Hunyuan Motion 출력을 파이프라인에 어떻게 통합합니까?

Hunyuan Motion은 스켈레톤 기반 모션을 생성하므로 리그로 리타게팅하고 기존 클립과 혼합하고 DCC 도구를 통해 전달하여 다듬을 수 있습니다. CLI는 일괄 작업에 적합하고 Gradio 앱은 가져오기 전에 창의적인 탐색 및 검토를 지원합니다. [github.com](https://github.com/Tencent-Hunyuan/HY-Motion-1.0)에서 자세히 알아보세요.

Hunyuan Motion으로 창작을 시작하세요

지금 바로 프롬프트를 프로덕션 준비가 완료된 스켈레톤 애니메이션으로 바꾸세요. 공식 리포지토리에서 빠른 시작을 따르고, 즉각적인 시각화를 위해 Gradio 앱을 시작하고, 일괄 모션 생성을 위해 CLI로 빠르게 반복하세요. 종속성, 체크포인트 및 사용 노트를 포함하여 Hunyuan Motion을 로컬에 배포하는 데 필요한 모든 것은 github.com에서 확인할 수 있습니다.