Adobe meluncurkan kemampuan pembuatan video untuk platform Firefly AI menjelang acara Adobe MAX pada hari Senin. Mulai hari ini, pengguna dapat menguji generator video Firefly untuk pertama kalinya di Adobe situs webatau coba fitur video baru yang didukung AI, Generative Extend, di aplikasi Premiere Pro beta.
Di situs web Firefly, pengguna dapat mencoba model teks-ke-video atau model gambar-ke-video, keduanya menghasilkan video yang dihasilkan AI hingga lima detik. (Web beta gratis untuk digunakan, tetapi kemungkinan besar memiliki batas kecepatan.)
Adobe mengatakan pihaknya melatih Firefly untuk membuat konten animasi dan media foto-realistis, bergantung pada spesifikasi prompt. Firefly juga mampu menghasilkan video dengan teks, setidaknya secara teori, yang secara historis sulit dihasilkan oleh generator gambar AI. Aplikasi web video Firefly mencakup pengaturan untuk mengubah posisi kamera, intensitas gerakan kamera, sudut, dan ukuran bidikan.
Pada aplikasi Premiere Pro beta, pengguna dapat mencoba fitur Generative Extend Firefly untuk memperpanjang klip video hingga dua detik. Fitur ini dirancang untuk menghasilkan ketukan ekstra dalam sebuah adegan, melanjutkan gerakan kamera dan pergerakan subjek. Audio latar belakang juga akan diperluas — model audio AI pertama yang diam-diam sedang dikerjakan oleh publik. Namun, alat perluasan audio latar belakang tidak akan menciptakan kembali suara atau musik, untuk menghindari tuntutan hukum hak cipta dari label rekaman.
Dalam demo yang dibagikan dengan TechCrunch sebelum peluncuran, fitur Generative Extend Firefly menghasilkan video yang lebih mengesankan daripada model text-to-video, dan tampak lebih praktis. Model teks-ke-video dan gambar-ke-video tidak memiliki faktor polesan atau wow yang sama dengan pesaing Adobe dalam video AI, seperti Runway's Gen-3 Alpha atau OpenAI's Sora (walaupun harus diakui, Sora belum mengirimkan). Adobe mengatakan mereka lebih fokus pada fitur pengeditan AI daripada menghasilkan video AI, yang mungkin akan menyenangkan basis penggunanya.
Fitur AI Adobe harus mencapai keseimbangan dengan audiens kreatifnya. Mereka mencoba memimpin di tengah ramainya startup AI dan perusahaan teknologi yang mendemonstrasikan model AI yang mengesankan. Di sisi lain, banyak pekerja kreatif tidak senang karena fitur AI akan segera menggantikan pekerjaan yang telah mereka lakukan dengan mouse, keyboard, dan stylus selama beberapa dekade. Itu sebabnya fitur video Firefly pertama Adobe, Generative Extend, menggunakan AI untuk memecahkan masalah yang ada pada editor video – klip Anda tidak cukup panjang – alih-alih membuat video baru dari awal.
“Pemirsa kami adalah pemirsa dengan piksel paling sempurna di dunia,” kata VP AI generatif Adobe, Alexandru Costin, dalam sebuah wawancara dengan TechCrunch. “Mereka ingin AI membantu memperluas aset yang mereka miliki, membuat variasi, atau mengeditnya, dibandingkan menghasilkan aset baru. Jadi bagi kami, sangat penting untuk melakukan pengeditan generatif terlebih dahulu, baru kemudian pembuatan generatif.”
Model video tingkat produksi yang membuat pengeditan lebih mudah: itulah resep kesuksesan awal Adobe untuk model gambar Firefly di Photoshop. Eksekutif Adobe sebelumnya mengatakan fitur Generative Fill Photoshop adalah salah satunya fitur baru yang paling banyak digunakan dalam dekade terakhirterutama karena hal ini melengkapi dan mempercepat alur kerja yang ada. Perusahaan berharap dapat meniru kesuksesan tersebut dengan video.
Kabarnya, Adobe sedang mencoba untuk memperhatikan materi iklan membayar fotografer dan artis $3 untuk setiap menit video yang mereka kirimkan untuk melatih model Firefly AI-nya. Meskipun demikian, banyak materi iklan yang masih ragu dalam menggunakan alat AI, atau takut alat tersebut akan menjadi usang. (Adobe juga mengumumkan alat AI bagi pengiklan untuk menghasilkan konten secara otomatis pada hari Senin.)
Costin mengatakan kepada para kreatif yang peduli bahwa alat AI generatif akan menciptakan lebih banyak permintaan terhadap pekerjaan mereka, bukan sebaliknya: “Jika Anda memikirkan kebutuhan perusahaan yang ingin membuat konten yang dipersonalisasi dan sangat dipersonalisasi untuk setiap pengguna yang berinteraksi dengan mereka, permintaannya tidak terbatas.”
Pimpinan AI di Adobe mengatakan masyarakat harus mempertimbangkan bagaimana revolusi teknologi lainnya telah memberikan manfaat bagi dunia kreatif, dengan membandingkan kemunculan alat AI dengan penerbitan digital dan fotografi digital. Ia mencatat bagaimana terobosan-terobosan ini awalnya dipandang sebagai ancaman, dan mengatakan jika para kreatif menolak AI, mereka akan mengalami kesulitan.
“Manfaatkan kemampuan generatif untuk meningkatkan, meningkatkan keterampilan, dan menjadi profesional kreatif yang dapat membuat konten 100 kali lebih banyak menggunakan alat ini,” kata Costin. “Kebutuhan akan konten ada, sekarang Anda bisa melakukannya tanpa mengorbankan hidup Anda. Rangkullah teknologinya. Ini adalah literasi digital baru.”
Firefly juga akan secara otomatis memasukkan tanda air “yang dihasilkan AI” ke dalam metadata video yang dibuat dengan cara ini. Meta menggunakan alat identifikasi di Instagram dan Facebook untuk memberi label pada media dengan label ini sebagai hasil buatan AI. Idenya adalah bahwa platform atau individu dapat menggunakan alat identifikasi AI seperti ini, selama konten berisi tanda air metadata yang sesuai, untuk menentukan mana yang asli dan mana yang tidak. Namun, video Adobe secara default tidak memilikinya bisa dilihat label yang mengklarifikasi bahwa itu dihasilkan oleh AI, dengan cara yang mudah dibaca oleh manusia.
Adobe secara khusus merancang Firefly untuk menghasilkan media yang “aman secara komersial”. Perusahaan tersebut mengatakan mereka tidak melatih Firefly tentang gambar dan video yang berisi narkoba, ketelanjangan, kekerasan, tokoh politik, atau materi berhak cipta. Secara teori, ini berarti pembuat video Firefly tidak akan membuat video yang “tidak aman”. Sekarang internet memiliki akses gratis ke model video Firefly, kita akan lihat apakah itu benar.
