Model video AI Adobe telah hadir dan sudah ada di dalam Premiere Pro

Adobe melakukan lompatan ke video AI generatif. milik perusahaan Model Video Kunang-kunangyang memiliki telah digoda sejak awal tahun ini, hari ini diluncurkan beberapa alat baru, termasuk beberapa alat yang ada di dalam Premiere Pro yang memungkinkan materi iklan memperluas rekaman dan menghasilkan video dari gambar diam dan perintah teks.

Alat pertama — Generative Extend — diluncurkan dalam versi beta untuk Premiere Pro. Ini dapat digunakan untuk memperpanjang bagian akhir atau awal rekaman yang agak terlalu pendek, atau membuat penyesuaian di tengah pengambilan gambar, seperti mengoreksi garis mata yang bergeser atau gerakan yang tidak terduga.

Klip hanya dapat diperpanjang selama dua detik, jadi Generative Extend hanya cocok untuk perubahan kecil, tetapi hal ini dapat menggantikan kebutuhan untuk mengambil ulang rekaman untuk memperbaiki masalah kecil. Klip yang diperluas dapat dihasilkan pada 720p atau 1080p pada 24 FPS. Ini juga dapat digunakan pada audio untuk membantu memperlancar pengeditan, meskipun dengan keterbatasan. Misalnya, ini akan memperpanjang efek suara dan “nada ruangan” sekitar hingga sepuluh detik, tetapi tidak untuk dialog lisan atau musik.

Dua alat pembuatan video lainnya diluncurkan di web. Alat Teks-ke-Video dan Gambar-ke-Video Adobe, yang pertama diumumkan pada bulan Septemberkini diluncurkan sebagai beta publik terbatas di aplikasi web Firefly.

Fungsi Text-to-Video mirip dengan generator video lainnya landasan pacu Dan Sora dari OpenAI — pengguna hanya perlu memasukkan deskripsi teks untuk apa yang ingin mereka hasilkan. Ini dapat meniru berbagai gaya seperti film “nyata” biasa, animasi 3D, dan gerakan berhenti, dan klip yang dihasilkan dapat lebih disempurnakan menggunakan pilihan “kontrol kamera” yang mensimulasikan hal-hal seperti sudut kamera, gerakan, dan jarak pengambilan gambar.

Image-to-Video melangkah lebih jauh dengan memungkinkan pengguna menambahkan gambar referensi di samping perintah teks untuk memberikan kontrol lebih besar atas hasilnya. Adobe menyarankan ini dapat digunakan untuk membuat b-roll dari gambar dan foto, atau membantu memvisualisasikan pemotretan ulang dengan mengunggah gambar diam dari video yang sudah ada. Contoh sebelum dan sesudah di bawah ini menunjukkan bahwa ini tidak benar-benar mampu menggantikan pemotretan ulang secara langsung, karena beberapa kesalahan seperti kabel yang bergoyang dan pergeseran latar belakang terlihat pada hasilnya.

Anda juga tidak akan membuat seluruh film dengan teknologi ini dalam waktu dekat. Panjang maksimum klip Text-to-Video dan Image-to-Video saat ini adalah lima detik, dan kualitasnya mencapai 720p dan 24 frame per detik. Sebagai perbandingan, OpenAI mengatakan bahwa Sora dapat menghasilkan video berdurasi hingga satu menit “sambil menjaga kualitas visual dan kepatuhan terhadap perintah pengguna” — tapi itu tidak berarti apa-apa. belum tersedia untuk umum meskipun diumumkan beberapa bulan sebelum alat Adobe.

Pembuatan Teks-ke-Video, Gambar-ke-Video, dan Perpanjangan Generatif semuanya membutuhkan waktu sekitar 90 detik, namun Adobe mengatakan sedang mengerjakan “mode turbo” untuk menguranginya. Meskipun terbatas, Adobe mengatakan alat-alatnya yang didukung oleh model video AI-nya “aman secara komersial” karena mereka dilatih tentang konten yang diizinkan untuk digunakan oleh raksasa perangkat lunak kreatif tersebut. Mengingat model dari penyedia lain seperti Runway sedang diteliti karena diduga sedang dilatih ribuan video YouTube yang diambil — atau dalam kasus Meta, bahkan mungkin milikmu pribadi video — kelayakan komersial dapat menjadi kendala bagi sebagian pengguna.

Salah satu manfaat lainnya adalah video yang dibuat atau diedit menggunakan model video Firefly Adobe dapat digunakan tertanam dengan Kredensial Konten untuk membantu mengungkapkan penggunaan dan hak kepemilikan AI saat dipublikasikan secara online. Tidak jelas kapan alat ini akan keluar dari versi beta, tapi setidaknya sudah tersedia untuk umum — lebih dari yang bisa kami katakan untuk saat ini. Sora dari OpenAI, Jenderal Film MetaDan Veo Google generator.

Peluncuran video AI diumumkan hari ini di konferensi MAX Adobe, di mana perusahaan juga memperkenalkannya sejumlah fitur bertenaga AI lainnya di seluruh aplikasi kreatifnya.