Para Peneliti UCF Mengembangkan Teknologi Pengeditan Video Berbasis Kecerdasan Buatan
Liga335 daftar – Di era kecerdasan buatan (AI), pengeditan foto yang rumit dapat dilakukan hanya dengan sekali klik. Baik Anda ingin menghapus objek dari latar belakang, mengubah warna kemeja, atau membuat wajah Anda tampak sempurna, AI dapat mengubah foto Anda dengan perintah teks-ke-gambar yang sederhana. Namun, mengedit video dengan perintah AI yang sama tidaklah semudah itu; para peneliti UCF di Fakultas Teknik dan Ilmu Komputer berupaya mengubah hal tersebut.
Profesor Nazanin Rahnavard, Associate Professor Chen Chen, serta alumni UCF Nazmul Karim ’20MS ’23PhD dan Umar Khalid ’20MS ’23PhD telah mengembangkan teknologi AI teks-ke-video inovatif yang dapat mengubah video secara dramatis dalam hitungan menit. “Sistem kami mengambil ‘otak’ dari AI yang sudah mahir dalam menghasilkan gambar dari teks dan menyesuaikannya untuk video, tanpa kehilangan daya kreatif yang membuatnya efektif sejak awal,” kata Rahnavard. “Terobosan kami berasal dari pengenalan ketidakefisienan mendasar dalam pengeditan teks-ke-video yang ada pendekatan.
Sistem yang ada saat ini membutuhkan kumpulan data teks-ke-video dalam jumlah besar untuk pelatihan atau mengandalkan adaptasi model teks-ke-gambar per video yang memakan banyak sumber daya komputasi. Kami yakin pasti ada solusi yang lebih efisien dan elegan.” Dengan latar belakang Rahnavard di bidang teknik elektro dan Chen di bidang ilmu komputer, tim ini menggunakan teknik aljabar linier untuk menganalisis parameter numerik model AI yang dioptimalkan dan disesuaikan saat mempelajari tugas baru.
Mereka menyadari bahwa alih-alih menyesuaikan seluruh set parameter, mereka dapat memperbarui hanya nilai singular, sehingga mempertahankan kemampuan model AI untuk generalisasi sambil mempercepat waktu adaptasinya. “Kuncinya adalah mengetahui bagian mana dari ‘memori’ AI yang perlu disesuaikan, dan bagian mana yang harus dipertahankan,” kata Rahnavard. “Dengan berfokus hanya pada elemen-elemen paling esensial dan membiarkan sisanya tetap utuh, kami menciptakan metode yang beradaptasi jauh lebih cepat dan efisien sambil tetap menghasilkan hasil berkualitas tinggi dan ekspresif.
” A Model ini bekerja paling baik pada klip video yang sudah ada dan dapat mengeditnya dalam hitungan menit. Model ini dapat mengubah warna pakaian, mengganti kucing dengan anjing, atau mengubah klip menjadi kartun. Semakin rumit perintahnya, semakin lama waktu pengeditannya.
Namun, Rahnavard mengatakan proses tersebut tetap dapat diselesaikan dalam hitungan menit, bukan jam. Universitas tersebut baru-baru ini memperoleh paten untuk teknologi ini, yang dapat dimanfaatkan oleh studio film dan perusahaan media sosial. “Teknologi ini berpotensi merevolusi pengeditan video di berbagai industri,” kata Rahnavard.
“Studio film dapat menggunakannya untuk modifikasi adegan secara cepat tanpa perlu pengambilan ulang yang mahal, sementara platform media sosial dapat menawarkan filter video instan dan sangat canggih kepada penggunanya, jauh melampaui apa yang tersedia saat ini.
