Pada hari Jumat, Meta mengumumkan pratinjau Jenderal Filmrangkaian model AI baru yang dirancang untuk membuat dan memanipulasi video, audio, dan gambar, termasuk membuat video realistis dari satu foto seseorang. Perusahaan tersebut mengklaim bahwa model tersebut mengungguli model sintesis video lainnya ketika dievaluasi oleh manusia, sehingga mendorong kita lebih dekat ke masa depan di mana siapa pun dapat mensintesis video lengkap tentang subjek apa pun sesuai permintaan.
Perusahaan ini belum memiliki rencana kapan atau bagaimana mereka akan merilis kemampuan ini ke publik, namun Meta mengatakan Movie Gen adalah alat yang memungkinkan orang untuk “meningkatkan kreativitas bawaan mereka” daripada menggantikan seniman dan animator manusia. Perusahaan membayangkan aplikasi masa depan seperti membuat dan mengedit video “sehari-hari” dengan mudah untuk platform media sosial atau menghasilkan animasi ucapan selamat ulang tahun yang dipersonalisasi.
Movie Gen dibangun berdasarkan karya Meta sebelumnya dalam sintesis video, setelah tahun 2022 Buat Adegan pembuat video dan Emu model sintesis gambar. Dengan menggunakan petunjuk teks sebagai panduan, sistem terbaru ini dapat menghasilkan video khusus dengan suara untuk pertama kalinya, mengedit dan menyisipkan perubahan ke dalam video yang sudah ada, dan mengubah gambar orang menjadi video personal yang realistis.
Video bayi kuda nil yang berenang di sekitar yang dihasilkan AI, dibuat dengan Meta Movie Gen.
Meta bukan satu-satunya permainan yang ada dalam hal sintesis video AI. Google memamerkan model baru yang disebut “Veo” pada bulan Mei, dan Meta mengatakan bahwa dalam pengujian preferensi manusia, keluaran Movie Gen-nya mengalahkan Sora dari OpenAI, Landasan Pacu Gen-3dan model video Tiongkok Kling.
Model pembuatan video Movie Gen dapat membuat video definisi tinggi 1080p hingga 16 detik pada 16 frame per detik dari deskripsi teks atau input gambar. Meta mengklaim model tersebut dapat menangani konsep kompleks seperti gerakan objek, interaksi subjek-objek, dan pergerakan kamera.
Video yang dihasilkan AI dari Meta Movie Gen dengan prompt: “Hantu dengan sprei putih menghadap cermin. Bayangan hantu itu terlihat di cermin. Hantu itu berada di loteng berdebu, dipenuhi balok-balok tua, furnitur berlapis kain . Loteng terpantul di cermin. Cahayanya sejuk dan alami. Hantu menari di depan cermin.”
Meski begitu, seperti yang telah kita lihat pada generator video AI sebelumnya, kemampuan Movie Gen untuk menghasilkan adegan koheren pada topik tertentu kemungkinan besar bergantung pada konsep yang ditemukan dalam contoh video yang digunakan Meta untuk melatih model sintesis videonya. Perlu diingat hal itu hasil yang dipetik ceri dari generator video seringkali berbeda secara dramatis dari hasil yang khas dan mendapatkan hasil yang koheren mungkin memerlukan banyak percobaan dan kesalahan.
