사진 한 장, 블록버스터: MiniMax(Hailuo AI) 멀티모달 생성 기술이 다시 혁신하다

소개 Hailuo AI

모든 사람은 영화에 대한 꿈을 품고 있다. 화면에서 삶을 경험하기 위해 다양한 역할을 맡는 것, 모든 숏을 구성하는 감독이 되는 것, 평행 우주에서 끝없는 가능성을 창조하는 시나리오 작가가 되는 것 등이다.

Hailuo AI 꿈의 기계처럼 작동하여 모든 사람에게 영화 같은 경험을 제공합니다. 새해를 맞아 Hailuo AI는 글로벌 사용자를 위한 새로운 크리에이티브 어시스턴트인 Subject Reference를 공개합니다.

MiniMax가 자체적으로 개발한 최신 S2V-01 비디오 모델은 단일 이미지 피사체 참조 프레임워크를 통해 정밀한 시각적 세부 사항 복원을 가능하게 합니다.

기존 솔루션에 비해 입력 및 컴퓨팅 비용이 1% 미만입니다.

간단히 이미지를 업로드하는 즉시, 정확도 높은 주제 일관성과 창의적인 자유를 바탕으로 고품질의 비디오가 즉시 생성됩니다.

현재, 주제 참조 기능은 전 세계적으로 사용할 수 있습니다.

사용자는 즉시 시도할 수 있습니다 Hailuo AI 비디오 창작 플랫폼.

사진, Hailuo AI와 함께 블록버스터

에서 AI 비디오 생성 현장에서 역동적인 영상 속 다양한 각도에서 캐릭터 얼굴의 사실감과 안정성을 유지하고, 연속되는 클립을 연결할 때 일관성을 보장하는 일은 항상 어려운 일이었습니다.

S2V-01 비디오 모델을 통해 사용자에게 최적의 솔루션을 제공합니다.

Hailuo AI에서 "주제 참조" 기능을 선택한 후 사용자는 단 하나의 이미지만 업로드하면 시스템이 주제 문자를 인식하고 잠급니다.

즉각적인 키워드를 입력하면 창의성의 일관성을 유지하면서 고품질의 비디오가 즉시 생성됩니다.

S2V-01 모델은 성별, 나이, 피부색, 얼굴 구조와 같은 얼굴 특징을 정확하게 식별하여 프레임 전체에서 안정성과 일관성을 보장합니다.

프롬프트: 희미하게 밝은 방에 있는 젊은 여성의 클로즈업, 그의 눈은 게임 콘솔의 빛나는 화면에 고정되어 있습니다. 카메라는 눈높이보다 약간 위에 위치하여 그의 손가락이 민첩하게 컨트롤러를 조작하는 동안 그의 집중된 표정에 초점을 맞춥니다. 게임 캐릭터가 나타나 화면의 한계에서 벗어납니다.

주제 참조+촉구: 한 남자 경찰관이 문을 열고 경찰차에서 내렸다. 카메라는 그 남자를 따라가며 클로즈업을 유지하며 그 남자의 얼굴에 초점을 맞추었다. 그 남자는 경찰복을 입고 있었다. 그 남자의 표정은 차분함에서 위협적으로 바뀌었다. 도시는 야경으로 둘러싸여 있었고, 주변에는 번쩍이는 불빛이 달린 경찰차가 여러 대 있었다.

주인공의 얼굴 표정 표현이 뛰어나며, 피사체가 없는 장면에서도 높은 영상 품질을 유지합니다.

현재 Hailuo AI는 단일 문자 참조를 지원하며, 식별 가능한 얼굴 특징을 입력으로 요구합니다. 향후 업데이트에서는 이 기능을 확장하여 여러 주체, 객체 및 장면을 포함할 것입니다.

더 낮은 비용, 컴퓨팅 비용 감소, Hailuo AI로 더 나은 경험

MiniMax(Hailuo AI)는 초창기 개발 이래 역할, 스타일 등에 대한 이미지 기반 참조를 탐색해 왔습니다.

광범위한 기술 연구를 거쳐, 주제 일관성을 위한 이미지 참조 솔루션이 높은 효과와 확장성을 제공하며, 어떤 경우에는 미세 조정된 LoRA 솔루션을 능가한다고 믿습니다.

우리의 목표는 현실 세계의 문제를 해결하는 동시에 광범위한 사용자 기반에 서비스를 제공하는 기술을 제공하는 것입니다.

주제 참조 솔루션은 하나의 이미지만 입력하므로 계산 및 대기 시간이 최소화됩니다.

이는 사용자 입력 비용과 계산 시간을 모두 대폭 줄여 우수한 사용자 경험을 제공합니다. 컴퓨팅 비용은 1% 이하로 감소합니다.

프롬프트: 화려한 가운과 흰 장갑을 낀 여성이 중세 성의 복도를 걸어간다. 그녀는 카메라에 등을 돌리고 달리다가 다시 카메라를 바라보는데, 그녀의 표정은 차분함에서 공포로 바뀐다. 복도 끝은 희미하게 밝다. 카메라는 그녀가 가까이 다가가자 그녀를 따라가고, 시야는 중간에서 클로즈업으로 바뀌며 여성의 얼굴에 초점을 맞춘다.

비디오에 필수적인 시각 정보(예: 얼굴 특징)만 저장되고 자세, 표정 또는 조명으로 인한 방해가 발생하지 않도록 하기 위해 MiniMax는 데이터 구조와 모델 아키텍처를 지속적으로 최적화합니다.

S2V-01 모델은 시각적 디테일의 정밀한 복원과 높은 창의적 자유도와 같은 핵심 효과를 달성하여 캐릭터가 어떤 포즈나 표정을 표현하고 어떤 환경에도 자연스럽게 어울리는 것을 가능하게 합니다.

주제 참조 기술을 사용하면 사용자는 일관성에 대한 걱정 없이 콘텐츠 제작에 집중할 수 있어 장시간 영상 제작의 효율성이 획기적으로 향상됩니다.

당신의 성격은 본질적으로 일관성이 있습니다.

Hailuo AI와 AI 공동 창조의 새로운 시대

AI 기술은 이미 마이크로필름, 광고, 버라이어티 쇼, CG 효과 등의 산업에 편의성을 가져다주었습니다.

그러나 영상 제작에 있어 가장 큰 과제는 피사체의 불안정성인데, 이로 인해 종종 일관성이 없거나 융통성이 없는 결과가 나옵니다.

주제 참조 기능은 전문 크리에이터에게 높은 일관성과 유연성을 제공하여 단편 콘텐츠 및 광고와 같은 비디오 산업에 파괴적 혁신을 가져옵니다.

MiniMax 플랫폼에는 이제 이 기능이 API 서비스로 포함되었으며, 다중 주제 참조로 확장할 계획입니다.

Hailuo AI는 비디오 모델을 출시한 이래로 업계의 주목을 받고 있습니다.

2024년 12월, MiniMax의 I2V-01-Live 이미지-비디오 모델은 폭넓은 호평을 받았으며 Hailuo AI의 해외 방문 2700만 돌파, 새로운 기록을 세우고 글로벌 AI 비디오 제품 순위에서 1위를 차지했습니다.

인간과 세상의 상호작용은 본질적으로 다중적 방식이며, 다중적 방식에 대한 이해와 생성은 AGI를 향해 나아가는 데 매우 중요합니다.