Meta menampilkan model Movie Gen AI yang menggabungkan video dan audio

Meta telah meluncurkan Movie Gen, model AI generatif yang berfokus pada media yang dirancang untuk membantu dan menginspirasi pembuat film terlepas dari ukuran proyeknya.

Perintah teks sedang diubah menjadi video dengan audio tetapi calon pengguna yang tertarik harus menunggu beberapa saat karena belum ada rilis publik yang terlihat.

Meskipun demikian, Mengaku mati Pada hari Jumat (4 Oktober) “Kami membagikan penelitian ini karena kami percaya pada kekuatan teknologi ini untuk membantu orang mengekspresikan diri mereka dengan cara baru dan memberikan peluang bagi orang-orang yang mungkin tidak memiliki peluang ini.”

Perusahaan tersebut mengatakan pihaknya berharap suatu hari orang akan dapat “mewujudkan visi artistik mereka” dengan akses universal terhadap perangkat lunak tersebut.

Movie Gen Meta tidak hanya terdiri dari satu model lanjutan karena ia menggabungkan “kit” model dasar dan yang paling kuat di antaranya adalah komponen teks ke video. Dalam produksi video AI, audio dibuat agar sesuai dengan setting atau tema video.

Ini bisa berupa suara kereta yang meninggalkan peron stasiun, atau suara hujan deras saat terjadi badai petir. Musik juga akan ditambahkan jika dianggap perlu.

Bagaimana Movie Gen Meta dilatih?

Movie Gen dan keempat kemampuannya (Pembuatan Video, Pembuatan Video Kustom, Pengeditan Video Presisi, dan Pembuatan Audio) dikatakan telah dilatih menggunakan “berbagai kumpulan data berlisensi dan tersedia untuk umum”, dengan konten video yang berpotensi bersumber dari platform Meta seperti Facebook dan Instagram.

Batu sandungan sebelumnya bagi pembuat video adalah kemampuan mengedit. Hal ini sampai batas tertentu telah diatasi oleh perusahaan Mark Zuckerberg.

Movie Gen menawarkan metode pengeditan berbasis teks yang dapat Anda gunakan untuk pengeditan dasar. Ini bisa berupa “Ubah latar belakang langit malam di lanskap kota”, namun ini hanya akan membuat perubahan tertentu.

Generator AI dapat menghasilkan konten video hingga 16 detik, dengan kecepatan 16fps yang mengesankan, atau sebagai alternatif, Anda bisa mendapatkan video berdurasi 10 detik dengan kecepatan 24fps.

Output videonya memiliki lebar 768p, yang mengingatkan kita pada masa 1024 x 768 tetapi itu lebih dari cukup untuk digabungkan dengan format HD lainnya.

Beberapa orang mungkin mengharapkan pembuatan audio, tetapi ada alasan bagus mengapa Meta tidak mengambil langkah ini. Pembuatan pidato sangat sulit untuk dikuasai, dan juga kontroversial, dengan maraknya deepfake.

Faktor risiko ini meningkat menjelang pemilihan presiden akhir tahun ini dan iklim politik saat ini.

Meta telah menetapkan niatnya dengan menerbitkan penelitiannya tentang pembuatan video AI dan kemampuannya saat ini.

Kredit gambar: Meta

Pos Meta Menampilkan Model AI Gen Film, Menggabungkan Video dan Audio, muncul pertama kali di ReadWrite.



Sumber