Matoleo Mapya ya ByteDance AI Video Model - Kwaheri Sora, Wakati Wako Umepita.

Hivi sasa, uzinduzi wa Injini ya Volcano ya ByteDance umekwisha.
Nimesisimka sana hivi sasa.
Ingawa uzinduzi umekamilika, ninahisi kuwa mwanzo mpya kabisa wa kuvuruga tasnia umefika rasmi.


ByteDance imetoa rasmi aina zao mbili mpya za video za AI:


Kizazi cha Video cha Doubao - Mfano wa PixelDance na mfano wa Mwani.
Nitazungumza zaidi juu ya mfano wa Mwani wakati ujao. Wakati huu, nataka kuzungumzia modeli hii ya Doubao PixelDance kwa sababu ni ya kustaajabisha, ya kustaajabisha sana, hivi kwamba niliitazama kwa mshangao wakati wote.

Wakati walipotangaza rasmi jambo hili, kulikuwa na makofi mengi sana hivi kwamba nilihisi kama ningepiga paa kutoka kwa skrini.
Kwa kweli, ikiwa ningelazimika kufanya muhtasari wa mfano huu wa Doubao PixelDance, itakuwa kwa maneno matatu:
Usogeo tata wa mfululizo wa wahusika, video ya mchanganyiko wa kamera nyingi, na udhibiti mkali wa kamera.
Inaonekana ngumu kidogo kuelewa, sivyo? Hakuna haraka, nitaelezea kwa undani.

Kwanza niliweka kesi chache, kuhisi mshtuko wa jambo hili:

Kweli, tasnia ya filamu na televisheni hapo awali, karibu haiwezi kutumia AI, ni kwa sababu, utendaji wa tabia ni takataka sana, na eneo na uthabiti wa tabia ni duni sana, operesheni ya kioo kuwa waaminifu sio nzuri.

Sasa, ByteDance imeingia na kuchukua video ya AI kwa kiwango kipya kabisa.


Umoja wa usumbufu wa tasnia umefika rasmi leo, katika uzinduzi huu.
Na mimi, baada ya kushikilia pumzi yangu kwa siku 4 kamili, mwishowe naweza kutuma nakala hii.
Ndio, siku 4 zilizopita, nilialikwa na ByteDance, nilipima mfano huu wa Doubao PixelDance mapema, wakati huo, nilishtuka zaidi ya maneno, unajua, kama mwanablogu, baada ya kupima kitu kama hicho, kwa asili nataka kuwa mara ya kwanza kuishiriki, lakini kwa sababu ya makubaliano ya usiri, siwezi kusema neno juu yake.
Kwa hivyo unajua jinsi ilivyokuwa ngumu kwangu kuishikilia katika siku hizi 4.
Na sasa yote yanakuja pamoja. Mwishowe naweza kuongea vibaya.
Rudi kwa vipengele vitatu muhimu zaidi:
Misogeo tata inayoendelea ya wahusika, video za mchanganyiko wa kamera nyingi, na udhibiti mkali wa kamera.

Wahusika wanaweza kufanya hatua inayoendelea


Hapo awali, video za AI zina hatua mbaya sana, yaani, zinaonekana kama uhuishaji wa PPT.


Iwe ni video ya Sora, au njia ya kurukia ndege, au Keling, n.k., mwendo wa amplitude, lakini amplitude ya lenzi pekee ndiyo kubwa, hakuna kamwe harakati changamano ya watu.
Siku kuu, geuka, au kimbia haraka, au wimbi, au kukumbatia. Kusema kweli, kukumbatiana pekee, sio video nyingi za AI zinaweza kufanya hivyo.
Na vipi ikiwa ungekuwa na msichana kwenye picha, vua miwani yake ya jua, simama, na uende kuelekea sanamu?


Video zote za AI, zote zimekufa kwa vitendo.
Na wakati huu Doubao PixelDance, ilifanya hivyo, halisi.


Kando na kumeta kidogo kwa saa kwenye mkono, idadi ya wahusika, miondoko, miguu na mikono, mwangaza, n.k., hazikuwa na dosari.
Mchezo wa kuigiza unaonekana mzuri, uigizaji wa hatua za watu, ndio muhimu zaidi ah.
Kwa mfano, katika filamu ya The King of Comedy, katika onyesho la mwisho, Yin Tian Xiu wa Stephen Chow, baada ya kupiga kelele kwa Liu Piao Piao kwa sauti ya kawaida ya “Nitakuunga mkono,” Liu Piao Piao anaketi kwenye gari la abiria linaloondoka na kulia kwa huzuni sana, anatazama pesa na saa mkononi mwake kwa muda, kisha anaviweka kwenye begi lake, na kujishughulisha na kitabu cha Maonyesho. imani yake, na analia kwa huzuni sana. Kujikuza kwa Mwigizaji, na kuikumbatia kwa huzuni kwa kifua chake.
Utendaji huu, ni endelevu. Ni kile kinachoendelea ambacho kina mvutano. Ni wakati tu unaweza kuhisi, kwamba hisia kuuma.

Na sasa, kwa AI, kuzalisha maonyesho ya wahusika ambayo yanaweza kufanya vitendo vya kuendelea sio mazungumzo matupu tena.


Angalia kesi nyingine ambapo mwanamume anakunywa kahawa, kisha anaiweka chini, na mwanamke anakuja kutoka nyuma.

Pia, maneno ya tabia ni dope, mzee anatabasamu na kucheka, kisha analia.


Nataka kulia pia, kwa kweli.
Nilipotengeneza trela ya Wandering Earth 3 Agosti mwaka jana, niliwaza kuhusu uwezekano milioni moja kwa AI kufanya uigizaji wa mhusika.
Sasa, mwaka mmoja tu baadaye, Doubao amenisaidia kutimiza ndoto hii kubwa zaidi.

Video ya mchanganyiko wa kamera nyingi


Uwezo wa kutengeneza video ya kamera nyingi yenye mtindo thabiti, tukio, na wahusika kutoka kwa picha moja + Prompt ni kitu ambacho nimeona tu ndani ya ofa ya Sora.
Ni ile video maarufu ya mbwa mwitu akiomboleza mwezi.


Kwa kweli, kusema ukweli, video hii wakati huo ilikuwa ya kushtua sana kuitazama, lakini ni sawa kuitazama sasa; mtindo, wahusika na matukio ni rahisi sana kwamba uthabiti hudumishwa vyema, na hakuna hadithi ngumu au sehemu ndogo.
Lakini ndivyo ilivyo, sasa, bado hakuna video yoyote ya AI inayoweza kupiga picha nyingi katika video moja na bado kuwa na uthabiti kamili.
Usinifanye hata nianze kwenye mambo ya studio ya LTX, hiyo ni sawa kwa ubao wa hadithi, lakini filamu inayoangaziwa? Osha punda wako, hata usizungumze kuhusu matukio, ni vigumu kuweka wahusika katika sare za panoramic, za kati na za karibu. Na ni mbaya sana.
Lakini sasa, Doubao PixelDance aliifanya, na uthabiti hauwezi kushindwa, kwa kweli.
Na inachukua picha moja tu + Prompt.
Kwa mfano, hii.

Haraka: kifo na scythe kinakaribia mwanamke. Uso wa mwanamke huyo huku akipiga kelele kwa hofu.


Udhibiti wa kamera uliokithiri


Uundaji wa Doubao PixelDance ndio wa kuchukiza na wa kupendeza zaidi ambao nimewahi kuona.
Sasa AI video Lens kudhibiti, bado kimsingi kulenga kamera + mwendo brashi mchanganyiko wa kazi mbili, lakini kuwa waaminifu, kikomo juu ni kweli mdogo, mengi ya Lens kubwa na zoom, tu haiwezi kufanyika.
Na Doubao PixelDance, athari ni mbaya sana.
Ni mtazamo gani wa jicho la ndege unaoza juu na kuzungusha aina hii ya upotoshaji wa msingi sisemi, muhimu ni, kwa neno moja, aina mbalimbali za digrii 360 kuzunguka somo la kuzunguka, mtazamo wa mbele na wa nyuma, kupiga rangi, kufuata lengo, kuinua na kupunguza lenzi ya kitu chochote kinachoweza kuwa.
Athari ni ya kushangaza nzuri, niliona kwa mara ya kwanza, katika video ya AI, kioo cha usafiri kinaweza kuwa cha kushangaza sana, kizuri sana.
Angalia kesi moja kwa moja.

Haraka: mwanamke anatabasamu na kupunguza kichwa chake, kamera inaondoka, na mwanamume mweupe anamtazama mwanamke.


Zoom ni ya asili sana na laini, haiwezi kushindwa, haiwezi kushindwa.
Na kisha kuna hii, 360-digrii kuporomoka wrap-kuzunguka dribbler.
Haraka: mtindo wa rangi nyeusi na nyeupe, kamera hupiga risasi karibu na mwanamke aliyevaa miwani ya jua, ikisonga kutoka upande wake hadi mbele, na hatimaye kuzingatia ukaribu wa uso wa mwanamke.

Hii ni picha, na kisha Prompt, unaweza kuamini? Aina hii ya mwendo, utulivu huu, kuliko uigizaji wa kutisha kutoka kwa ukali, nimeshawishika sana.
Unawezaje kuwaacha wapiga picha waendelee kucheza, wazimu ah...

Andika mwishoni


Sora a giant futures, kutoka tarehe 2.16 hadi siku hizi, imechelewa kuona alama yoyote.
Na kisha, 6.6, inaweza Ling kimya, rasmi online, kwa niaba ya pato la China Sora.
Na leo, 9.24, ByteDances tena video ya AI, iliyosukumwa hadi kiwango kipya kabisa, iko kwenye video ya utangazaji ya Sora, haiwezi kuona urefu.
Hadi sasa, China haihitaji Sora, mfano wa Doubao ni anga.
Doubao PixelDance pia haihitaji toleo lolote la Kichina la jina la utani la Sora, Doubao PixelDance ni Doubao PixelDance, sasa ni siku za video ya AI.
Pia kwa hatua hii, video ya AI si kitu cha kuchezea tena, lakini ni halisi, inaweza kuingia kwenye filamu na televisheni, utangazaji, mtiririko wa uhuishaji, kuleta mawazo mapya.
Risasi hii ilipigwa na sisi.
Leo hii mfano wa Doubao Pixeldance, itatoa kipaumbele kwa biashara kufungua mwaliko wa kujaribu, katika siku chache kwenye Sanduku la Volcano, kwa kuwa wakati wa mstari huo ndoto ya C-User kamili, inaweza kulazimika kungojea kwa kipindi cha wakati, baada ya yote, ni mpya sana, walisema kwamba bado wanataka kuboresha uwezo wa mfano.
Kweli, haijawahi kuwa na muujiza wowote, kila kitu ni mkusanyiko wa miaka mingi ya mvua, kila kitu ni kama ilivyoahidiwa.
Leo, naweza pia kupiga kelele kwa mstari huo:

Video Nyingine Iliyotolewa na PixelDance:

Hatimaye : Jinsi ya Kutuma Ombi la PixelDance SASA?

https://console.volcengine.com/ark/region:ark+cn-beijing/experience/vision?type=GenVideo

Kwanza Sajili akaunti yako:

账号登录-火山引擎 (volcengine.com)

Ingia na simu yako ya mkononi.

Omba ufikiaji hapa:

Sasa umefanya, plz nasubiri jibu