Peneliti UCF Ciptakan Teknologi Pengeditan Video AI
Liga335 daftar – Di era kecerdasan buatan (AI), pengeditan foto yang rumit bisa dilakukan hanya dengan mengklik tombol. Apakah Anda ingin menghilangkan objek dari latar belakang, mengubah warna baju atau membuat wajah Anda tampak tanpa cela, AI dapat mengubah gambar Anda dengan perintah teks-ke-gambar yang sederhana. Mengedit video dengan perintah AI yang sama tidaklah sesederhana itu, namun para peneliti UCF di College of Engineering and Computer Science ingin mengubahnya.
Profesor Nazanin Rahnavard, Associate Professor Chen Chen, dan alumni UCF Nazmul Karim ’20MS ’23PhD dan Umar Khalid ’20MS ’23PhD telah mengembangkan teknologi AI teks-ke-video baru yang dapat mengubah video secara dramatis dalam hitungan menit. “Sistem kami mengambil ‘otak’ AI yang sudah terampil dalam menghasilkan gambar dari teks dan mengadaptasinya untuk video, tanpa kehilangan kekuatan kreatif yang membuatnya efektif sejak awal,” kata Rahnavard. “Terobosan kami datang dari kesadaran akan ketidakefisienan mendasar dalam pengeditan teks-ke-video yang sudah ada pendekatan.
Sistem yang ada saat ini memerlukan kumpulan data teks-ke-video yang sangat besar untuk pelatihan atau mengandalkan adaptasi model teks-ke-gambar yang mahal secara komputasi per video. Kami yakin harus ada solusi yang lebih efisien dan elegan.” Dengan latar belakang Rahnavard di bidang teknik elektro dan Chen di bidang ilmu komputer, tim ini menggunakan teknik aljabar linier untuk memeriksa parameter numerik model AI yang dioptimalkan dan disesuaikan saat mempelajari tugas baru.
Mereka menyadari bahwa alih-alih menyempurnakan seluruh set parameter, mereka hanya dapat memperbarui nilai tunggal, mempertahankan kemampuan model AI untuk menggeneralisasi sekaligus mempercepat waktu adaptasinya. “Kuncinya adalah mempelajari bagian mana dari ‘memori’ AI yang perlu disesuaikan, dan mana yang perlu dipertahankan,” kata Rahnavard. “Dengan hanya berfokus pada elemen yang paling penting dan membiarkan sisanya tidak tersentuh, kami menciptakan metode yang beradaptasi lebih cepat dan lebih efisien, namun tetap menghasilkan hasil yang berkualitas tinggi dan ekspresif.”
A I Model bekerja paling baik pada klip video yang sudah ada dan dapat mengeditnya dalam hitungan menit. Aplikasi ini dapat mengubah warna pakaian, menukar kucing dengan anjing, atau mengubah klip menjadi kartun. Semakin rumit perintahnya, semakin lama waktu pengeditannya.
Namun Rahnavard mengatakan bahwa prosesnya masih dapat diselesaikan dalam hitungan menit, bukan jam. Universitas ini baru-baru ini dianugerahi paten untuk teknologi ini, yang dapat digunakan oleh studio film dan perusahaan media sosial. “Teknologi ini memiliki potensi untuk merevolusi pengeditan video di berbagai industri,” kata Rahnavard.
“Studio film dapat menggunakannya untuk modifikasi adegan secara cepat tanpa perlu melakukan pengambilan gambar ulang yang mahal, sementara platform media sosial dapat menawarkan filter video yang instan dan sangat canggih kepada para penggunanya, jauh melampaui apa yang tersedia saat ini.”
