MiniMax H3, ComfyUI 출시 당일 지원 — 오픈 가중치·네이티브 오디오·2K 영상

1 week ago 21

MiniMax의 3세대이자 첫 오픈 가중치 비디오 모델 H3가 ComfyUI에서 출시 당일부터 지원되며, 최대 15초 길이의 2K 영상을 생성함 텍스트·이미지 기반 생성부터 시작·종료 프레임 제어와 참조 기반 생성까지 하나의 모델에서 처리하고, 영상과 스테레오 오디오를 동시에 생성함 참조 영상의 카메라 움직임·연기·편집 리듬을 다른 피사체와 스타일에 적용하는 모션 전이와 인플레이스 편집으로 샷을 반복 수정할 수 있음 변조 가중치 조회 테이블, int8 convrot 양자화, 커스텀 커널을 적용해 최소 모델의 메모리 사용량을 123.6GB에서 42.5GB로 66% 절감함 동적 VRAM 오프로딩을 결합하면 RTX 3060에서도 로컬 실행할 수 있으며, ComfyUI 0.30.0과 I2V·R2V·T2V 워크플로로 시작 가능함 입력부터 출력까지 아우르는 H3 MiniMax H3는 Hailuo 01과 Hailuo 02를 잇는 3세대 비디오 모델로, MiniMax가 처음 가중치를 공개한 모델임 텍스트·이미지·비디오·오디오를 입력받아 최대 2K 해상도, 클립당 최대 15초의 영상을 생성함 네 가지 생성 방식을 지원함 텍스트→비디오: 프롬프트만으로 영상을 생성함 이미지→비디오: 입력 이미지를 움직이는 영상으로 변환함 시작·종료 프레임 제어: 첫 프레임이나 마지막 프레임 또는 둘 다 지정해 중간 장면을 생성함 참조→비디오: 이미지·비디오·오디오를 참조해 피사체, 움직임, 음성을 결과 클립에 유지함 멀티모달 처리와 네이티브 오디오 이미지·오디오·비디오 사이의 관계와 원하는 장면을 프롬프트로 지정하면 H3가 교차 모달 작업을 자체 처리함 기존에 분리될 수 있는 다섯 가지 작업을 하나의 모델로 통합함 오디오는 후처리로 덧붙이는 방식이 아니라 영상과 동일한 생성 패스에서 만들어지며, 모든 오디오 출력은 네이티브 스테레오임 모션 전이와 반복 편집 모션 전이는 참조 비디오의 카메라 이동, 연기, 컷 편집 리듬을 가져오면서 피사체와 스타일은 다른 입력으로 구성할 수 있게 함 인플레이스 편집과 결합하면 한 번 생성하고 끝내는 대신 같은 샷을 반복 수정할 수 있어 ComfyUI 그래프 작업에 적합함 생성 예시 만화풍 예시는 두 장의 참조 프레임과 원본 오디오를 사용해 슈퍼히어로의 대사, 음성과 동기화된 타이포그래피, 휩 팬 전환, 메카 괴수의 포효와 충격 효과를 구성함 투명 게이밍 마우스 광고는 한 장의 참조 이미지에서 매크로 촬영과 저각도 ...

Read Entire Article