ByteDance Baru Merilis Model Video AI - Selamat Tinggal Sora, Waktumu Telah Berlalu.

Baru saja, peluncuran Volcano Engine dari ByteDance pada dasarnya telah berakhir.
Saya sedikit terlalu bersemangat sekarang.
Meskipun peluncurannya sudah berakhir, saya merasa bahwa awal yang benar-benar baru untuk mendisrupsi industri ini, pada saat ini, secara resmi telah tiba.


ByteDance secara resmi telah merilis dua model video AI baru mereka:


Pembuatan Video Doubao - Model PixelDance dan model Rumput Laut.
Saya akan berbicara lebih banyak tentang model Rumput Laut di lain waktu. Kali ini, saya ingin membicarakan tentang model Doubao PixelDance ini, karena model ini sangat mengagumkan, sangat mengagumkan, sehingga saya benar-benar terkagum-kagum sepanjang waktu.

Saat mereka secara resmi mengumumkan hal ini, ada begitu banyak tepuk tangan sehingga saya merasa seakan-akan akan meledakkan atap rumah dari layar kaca.
Sungguh, jika saya harus meringkas model Doubao PixelDance ini, hanya dalam tiga kata:
Pergerakan karakter yang kompleks dan terus menerus, video kombinasi multi-kamera, dan kontrol kamera yang ekstrem.
Kedengarannya agak sulit dipahami, bukan? Jangan terburu-buru, saya akan menjelaskannya secara rinci.

Pertama-tama saya menaruh beberapa casing, untuk merasakan guncangan benda ini:

Sungguh, industri film dan televisi sebelumnya, hampir tidak dapat menggunakan AI, karena, kinerja karakter terlalu sampah, dan konsistensi adegan dan karakter terlalu buruk, pengoperasian cermin sejujurnya tidak baik.

Sekarang, ByteDance telah masuk dan membawa video AI ke tingkat yang lebih tinggi.


Singularitas disrupsi industri telah tiba secara resmi hari ini, pada peluncuran ini.
Dan saya, setelah menahan napas selama 4 hari penuh, akhirnya bisa mengirimkan artikel ini.
Ya, 4 hari yang lalu, saya diundang oleh ByteDance, mengukur model Doubao PixelDance ini terlebih dahulu, pada saat itu, saya terkejut bukan kepalang, Anda tahu, sebagai blogger, setelah mengukur hal yang sombong seperti itu, tentu saja ingin menjadi yang pertama kali membagikannya, tetapi karena perjanjian kerahasiaan, saya hanya bisa diam saja.
Jadi, Anda tahu betapa sulitnya bagi saya untuk menahannya selama 4 hari ini.
Dan sekarang semuanya datang bersama-sama. Akhirnya aku bisa bicara.
Kembali ke tiga fitur yang paling penting:
Pergerakan karakter yang kompleks dan terus menerus, video kombinasi multi-kamera, dan kontrol kamera yang ekstrem.

Karakter dapat melakukan aksi terus menerus


Di masa lalu, video AI memiliki poin yang sangat fatal, yaitu, terlihat seperti animasi PPT.


Apakah itu video Sora, atau landasan pacu, atau Keling, dll., amplitudo gerakan, tetapi hanya amplitudo lensanya yang besar, tidak pernah ada gerakan orang yang kompleks.
Puncaknya, berbalik, atau berlari cepat, atau melambaikan tangan, atau memeluk. Jujur saja, hanya pelukan saja, tidak banyak video AI yang bisa melakukan itu.
Dan bagaimana jika Anda memiliki gadis dalam gambar, melepas kacamata hitamnya, berdiri, dan berjalan ke arah patung?


Semua video AI, semuanya beraksi.
Dan kali ini, Doubao PixelDance, berhasil melakukannya, secara harfiah.


Di samping beberapa kerlipan kecil arloji di tangan, proporsi karakter, gerakan, anggota tubuh, pencahayaan, dll., nyaris tanpa cela.
Sebuah drama terlihat bagus, penampilan aksi orang-orang, adalah yang paling penting.
Misalnya, dalam The King of Comedy, dalam adegan terakhir, Yin Tian Xiu yang diperankan oleh Stephen Chow, setelah meneriakkan kalimat klasik "Aku akan mendukungmu" kepada Liu Piao Piao, Liu Piao Piao duduk di dalam taksi yang akan berangkat dan menangis dengan sangat sedih, melihat uang dan arloji di tangannya untuk sementara waktu, lalu memasukkannya ke dalam tasnya, dan mengeluarkan buku "Pengembangan Diri Aktor", yang ia anggap sebagai keyakinannya, dan menangis dengan sangat sedih. Pengembangan Diri Aktor, dan memeluknya dengan sedih di dadanya.
Pertunjukan ini, terus menerus. Apa yang berkelanjutan itulah yang memiliki ketegangan. Hanya ketika Anda bisa merasakannya, emosi yang menyakitkan.

Dan sekarang, dengan AI, menghasilkan penampilan karakter yang dapat melakukan tindakan berkelanjutan tidak lagi menjadi omong kosong belaka.


Lihatlah kasus lain di mana seorang pria menyesap kopi, lalu meletakkannya, dan seorang wanita datang dari belakang.

Selain itu, ekspresi karakternya pun sangat menggemaskan, orang tua itu tersenyum dan tertawa, kemudian menangis.


Saya juga ingin menangis, sungguh.
Ketika saya membuat trailer untuk Wandering Earth 3 pada bulan Agustus lalu, saya berkhayal tentang sejuta kemungkinan untuk AI yang melakukan akting karakter.
Sekarang, hanya satu tahun kemudian, Doubao telah membantu saya mewujudkan impian terbesar ini.

Video kombinasi multi-kamera


Kemampuan untuk menghasilkan video multi-kamera dengan gaya, adegan, dan karakter yang konsisten dari satu gambar + Prompt adalah sesuatu yang hanya pernah saya lihat di dalam promo Sora.
Ini adalah video terkenal tentang serigala yang melolong ke arah bulan.


Sebenarnya, sejujurnya, video ini, pada saat itu, sangat mengejutkan untuk ditonton, tetapi sebenarnya tidak apa-apa untuk ditonton sekarang; gaya, karakter, dan adegannya sangat sederhana sehingga konsistensinya terjaga dengan baik, dan tidak ada cerita atau subplot yang rumit.
Tapi hanya itu saja, sekarang, masih belum ada video AI yang dapat melakukan beberapa bidikan dalam satu video dan masih memiliki konsistensi yang sempurna.
Jangan mulai dengan hal-hal yang berhubungan dengan studio LTX, itu tidak masalah untuk storyboard, tetapi untuk film fitur? Cuci pantat Anda, bahkan jangan bicara tentang adegan, sulit untuk menjaga agar karakter tetap seragam dalam panorama, medium, dan close-up. Dan itu benar-benar jelek.
Tapi sekarang, Doubao PixelDance berhasil, dan konsistensinya tidak terkalahkan, sungguh.
Dan hanya perlu satu gambar + Prompt.
Contohnya, yang satu ini.

Petunjuk: kematian dengan sabit mendekati wanita itu. Foto close-up wajah wanita tersebut saat ia berteriak ketakutan.


Kontrol kamera yang ekstrem


Pemodelan Doubao PixelDance adalah yang paling memukau dan mengagumkan yang pernah saya lihat.
Sekarang kontrol lensa video AI, pada dasarnya masih berfokus pada kamera + kombinasi kuas gerak dari dua fungsi, tetapi sejujurnya, batas atas benar-benar terbatas, banyak lensa besar dan zoom, tidak bisa dilakukan.
Dan Doubao PixelDance, efeknya sungguh luar biasa.
Apa yang dimaksud dengan tampilan mata burung yang memperbesar dan memutar manipulasi dasar semacam ini, saya tidak mengatakannya, kuncinya adalah, dengan kata lain, variasi 360 derajat di sekeliling subjek, zoom tampilan depan dan belakang, panning, mengikuti target, mengangkat dan menurunkan lensa apa pun yang bisa dilakukan.
Efeknya sangat bagus, saya melihat untuk pertama kalinya, dalam video AI, cermin transportasi bisa begitu mengagumkan, sangat keren.
Lihatlah langsung pada casingnya.

Petunjuk: wanita itu tersenyum dan menundukkan kepalanya, kamera menjauh, dan seorang pria kulit putih menatap wanita itu.


Zoom sangat alami dan mulus, tak terkalahkan, terlalu tak terkalahkan.
Dan kemudian ada yang satu ini, dribbler yang dapat berputar 360 derajat secara drastis.
Prompt: gaya hitam dan putih, kamera membidik sekeliling wanita yang mengenakan kacamata hitam, bergerak dari samping ke depan, dan akhirnya fokus pada close-up wajah wanita tersebut.

Ini adalah gambar, dan kemudian Prompt, dapatkah Anda mempercayainya? Rentang gerak ini, stabilitas ini, lebih baik daripada pemodelan yang keterlaluan, saya benar-benar yakin.
Bagaimana bisa Anda membiarkan para fotografer masih bermain, gila ah...

Tulis di bagian akhir


Sora adalah perusahaan berjangka raksasa, dari tahun 2.16 hingga saat ini, terlambat untuk melihat jejaknya.
Dan kemudian, 6.6, bisa Ling diam, secara resmi online, atas nama keluaran China Sora.
Dan hari ini, 9.24, ByteDances lagi-lagi video AI, didorong ke tingkat yang sama sekali baru, adalah video promosi Sora, tidak dapat melihat ketinggian.
Sejauh ini, Tiongkok tidak membutuhkan Sora, model Doubao adalah langit.
Doubao PixelDance juga tidak memerlukan nama panggilan Sora versi bahasa Mandarin, Doubao PixelDance adalah Doubao PixelDance, dia sekarang adalah zamannya video AI.
Juga hingga saat ini, video AI bukan lagi mainan, tetapi nyata, dapat memasuki film dan televisi, periklanan, alur kerja animasi, membawa imajinasi baru.
Tembakan ini dilakukan oleh kami.
Hari ini model Doubao PixelDance ini, akan memprioritaskan perusahaan untuk membuka undangan untuk menguji, dalam beberapa hari di bahtera gunung berapi, adapun saat di telepon yang diimpikan oleh pengguna C terbuka penuh, mungkin harus menunggu beberapa saat, bagaimanapun juga, terlalu baru, mereka mengatakan bahwa mereka masih ingin mengoptimalkan mengoptimalkan kemampuan model, stabil, kemudian langsung di telepon yang diimpikan, hingga terbuka penuh.
Sungguh, tidak pernah ada keajaiban, semuanya adalah akumulasi dari curah hujan selama bertahun-tahun, semuanya seperti yang dijanjikan.
Hari ini, saya juga bisa meneriakkan kalimat itu:

Video lain yang dihasilkan oleh PixelDance:

Akhirnya: Bagaimana Cara Mendaftar PixelDance SEKARANG?

https://console.volcengine.com/ark/region:ark+cn-beijing/experience/vision?type=GenVideo

Pertama Daftarkan akun Anda :

账号登录-火山引擎 (volcengine.com)

Masuk dengan ponsel Anda.

Ajukan akses di sini:

Sekarang Anda telah selesai, mohon tunggu balasannya