Une photo, un blockbuster : la technologie de génération multimodale MiniMax (Hailuo AI) innove à nouveau

Présentation de Hailuo AI

Tout le monde rêve de faire du cinéma, qu'il s'agisse d'endosser différents rôles pour expérimenter la vie à l'écran, de devenir un réalisateur qui cadre chaque plan ou un scénariste qui crée des possibilités infinies dans des univers parallèles.

Hailuo AI agit comme une machine à rêves, offrant à chacun une expérience cinématographique. Au début de la nouvelle année, Hailuo AI dévoile un nouvel assistant créatif pour les utilisateurs du monde entier : Subject Reference.

Le dernier modèle vidéo S2V-01 développé par MiniMax permet une restauration précise des détails visuels grâce à un cadre de référence de sujet à image unique.

Avec moins de 1% du coût d'entrée et de calcul des solutions traditionnelles.

Téléchargez simplement une image et la génération de vidéo de haute qualité commence instantanément, avec une cohérence de sujet très précise et une liberté de création.

Actuellement, la fonctionnalité de référence de sujet est disponible dans le monde entier.

Les utilisateurs peuvent l'essayer immédiatement sur le Vidéo de l'IA de Hailuo plateforme de création.

Une photo, un blockbuster avec Hailuo AI

Dans le Génération de vidéos par l'IA Sur le terrain, maintenir le réalisme et la stabilité des visages des personnages sous plusieurs angles dans des vidéos dynamiques et assurer la cohérence lors de l'assemblage de clips continus ont toujours été des défis.

Grâce à notre modèle vidéo S2V-01, nous offrons aux utilisateurs une solution optimale.

Après avoir sélectionné la fonction « Référence du sujet » dans Hailuo AI, les utilisateurs n'ont besoin que de télécharger une seule image et le système reconnaît et verrouille le caractère du sujet.

En saisissant des mots-clés rapides, une vidéo de haute qualité est générée immédiatement, préservant ainsi la cohérence créative.

Le modèle S2V-01 identifie avec précision les caractéristiques du visage telles que le sexe, l'âge, la couleur de la peau et la structure du visage, garantissant ainsi la stabilité et la cohérence entre les cadres.

prompt: Gros plan d'une jeune femme dans une pièce faiblement éclairée, les yeux fixés sur l'écran lumineux d'une console de jeu. La caméra est positionnée légèrement au-dessus du niveau des yeux, se concentrant sur son expression concentrée tandis que ses doigts manipulent avec agilité la manette. Un personnage de jeu apparaît, se libérant des limites de l'écran.

Référence du sujet + invite : Un policier a ouvert la porte et est sorti de la voiture de police. La caméra a suivi l'homme et est restée en gros plan, se concentrant sur son visage. L'homme portait un uniforme de police. L'expression de l'homme passe du calme à la menace. La ville est entourée d'une scène nocturne et il y a plusieurs voitures de police avec des gyrophares tout autour.

Il excelle dans le contrôle des expressions faciales du personnage principal, tout en conservant des visuels de haute qualité pour les scènes sans sujet.

Actuellement, Hailuo AI prend en charge les références à un seul caractère, nécessitant des traits du visage identifiables en entrée. Les futures mises à jour étendront cette capacité pour inclure plusieurs sujets, objets et scènes.

Coût réduit, dépenses informatiques réduites, meilleure expérience avec Hailuo AI

Depuis son développement initial, MiniMax (Hailuo AI) explore les références basées sur des images pour les rôles, les styles et plus encore.

Après des recherches techniques approfondies, nous pensons que les solutions de référence d'image pour la cohérence des sujets offrent une efficacité et une évolutivité élevées, surpassant les solutions LoRA affinées dans certains cas.

Notre objectif est de fournir une technologie qui sert une large base d’utilisateurs tout en résolvant des problèmes du monde réel.

La solution de référence du sujet ne nécessite qu'une seule image en entrée, avec un temps de calcul et d'attente minimal.

Cela réduit considérablement les coûts de saisie des utilisateurs et le temps de calcul, offrant ainsi une expérience utilisateur supérieure. Les dépenses de calcul seront réduites à moins de 1%.

Invite : Une femme vêtue d'une robe élaborée et d'une paire de gants blancs marche dans un couloir d'un château médiéval. Elle court dos à la caméra, puis regarde à nouveau la caméra, son expression passant du calme à l'horreur. Le bout du couloir est faiblement éclairé. La caméra suit la femme alors qu'elle se rapproche et la vue passe du plan moyen au plan rapproché, se concentrant sur le visage de la femme.

Pour garantir que la vidéo conserve uniquement les informations visuelles essentielles (comme les traits du visage) et évite les distractions liées à la posture, à l'expression ou à l'éclairage, MiniMax optimise en permanence ses structures de données et son architecture de modèle.

Le modèle S2V-01 permet d'obtenir des effets clés tels qu'une restauration précise des détails visuels et une grande liberté de création, permettant aux personnages d'exprimer n'importe quelle pose ou expression et de s'intégrer naturellement dans n'importe quel environnement.

Grâce à la technologie de référence de sujet, les utilisateurs peuvent se concentrer sur la création de contenu au lieu de se soucier de la cohérence, améliorant ainsi considérablement l'efficacité de la production de longues vidéos.

Votre personnage est intrinsèquement cohérent.

Nouvelle ère de co-création d'IA avec Hailuo AI

La technologie de l’IA a déjà facilité la tâche à des secteurs tels que les microfilms, la publicité, les émissions de variétés et les effets spéciaux CG.

Cependant, le plus grand défi dans la génération de vidéos est l’instabilité des sujets, qui conduit souvent à des résultats décousus ou inflexibles.

La fonctionnalité de référence de sujet offre aux créateurs professionnels une grande cohérence et une grande flexibilité, apportant une innovation disruptive aux industries vidéo telles que le contenu de courte durée et la publicité.

La plateforme MiniMax inclut désormais cette fonctionnalité en tant que service API, avec l'intention de l'étendre aux références multi-sujets.

Depuis le lancement de ses modèles vidéo, Hailuo AI est devenu un point central de l'industrie.

En décembre 2024, le modèle d'image-vidéo I2V-01-Live de MiniMax a reçu de nombreux éloges et les visites à l'étranger de Hailuo AI a dépassé les 27 millions, établissant un nouveau record et arrivant en tête du classement mondial des produits vidéo d'IA.

L’interaction humaine avec le monde est intrinsèquement multimodale, et la compréhension et la génération multimodales sont essentielles pour progresser vers l’AGI.