Microsoft kembangkan alat AI yang dapat mengubah foto menjadi video realistis dan bisa bernyanyi

20/04/2024, 23:55 WIB Yani Andriansyah
Microsoft kembangkan alat AI yang dapat mengubah foto menjadi video realistis dan bisa bernyanyi

foto: microsoft

Techno.id - Microsoft Research Asia telah meluncurkan alat AI eksperimental baru bernama VASA-1 yang dapat mengambil gambar diam seseorang dan file audio yang ada untuk membuat wajah berbicara secara real time.

Alat ini memiliki kemampuan untuk menghasilkan ekspresi wajah dan gerakan kepala untuk gambar diam yang ada dan gerakan bibir yang sesuai untuk mencocokkan pidato atau lagu. Para peneliti mengunggah banyak sekali contoh di halaman proyek mereka, dan hasilnya terlihat cukup bagus sehingga mereka dapat meyakini orang dengan berpikir bahwa itu nyata.

You May Know

Sementara gerakan bibir dan kepala dalam contoh masih bisa terlihat sedikit robotik dan tidak sinkron setelah diperiksa lebih dekat. Masih jelas bahwa teknologi tersebut dapat disalahgunakan untuk membuat video deepfake dengan mudah dan cepat dari orang sungguhan.

Para peneliti menyadari potensi itu dan telah memutuskan untuk tidak merilis demo online, API, produk, detail implementasi tambahan, atau penawaran terkait apa pun sampai mereka yakin bahwa teknologi tersebut akan digunakan secara bertanggung jawab dan sesuai dengan peraturan yang tepat.

Namun, mereka tidak mengatakan apakah berencana menerapkan pengamanan tertentu untuk mencegah orang tidak bertanggungjawab menggunakannya untuk tujuan jahat, seperti membuat pornografi deepfake atau kampanye informasi yang salah.

Para peneliti percaya teknologi mereka memiliki banyak manfaat meskipun berpotensi disalahgunakan. Mereka mengatakan itu dapat digunakan untuk meningkatkan kesetaraan pendidikan, serta untuk meningkatkan aksesibilitas bagi mereka yang memiliki tantangan komunikasi, mungkin dengan memberi mereka akses ke avatar yang dapat berkomunikasi untuk mereka.

Menurut makalah yang diterbitkan dengan pengumuman tersebut, VASA-1 dilatih pada Kumpulan Data VoxCeleb2, yang berisi lebih dari 1 juta ucapan untuk 6.112 selebritas yang diambil dari video YouTube. Meskipun alat ini dilatih pada wajah asli, alat ini juga berfungsi pada foto artistik seperti Mona Lisa, yang secara lucu digabungkan oleh para peneliti dengan file audio dari video viral Anne Hathaway tentang Paparazzi Lil Wayne.

(brl/red)

RECOMMENDED ARTICLE

  1. Adobe kembangkan GenAI, alat yang bisa mengubah permintaan teks menjadi musik  
  2. 6 AI generator untuk menghasilkan gambar paling fotorealistik yang layak dicoba
  3. 4 Cara menggunakan AI agar dapat mempermudah kamu bekerja dengan file PDF
  4. 5 Fitur Character AI yang harus dicoba, bisa ngobrol bareng superstar sampai mendiang tokoh terkenal
  5. Meta luncurkan Llama 3 yang diklaim sebagai raja AI dan akan terintegrasi dengan media sosial

HOW TO

TECHTAGS

TECHPEDIA

LATEST ARTICLE

9 Tips memaksimalkan rekaman audio cuma dengan menggunakan ponsel
9 Tips memaksimalkan rekaman audio cuma dengan menggunakan ponsel
Upgrade ponsel Android bakal lebih mudah berkat fitur baru ini, migrasi data nggak ribet lagi
Upgrade ponsel Android bakal lebih mudah berkat fitur baru ini, migrasi data nggak ribet lagi
8 Penyebab charger ponsel mudah panas, jangan pakai adaptor abal-abal
8 Penyebab charger ponsel mudah panas, jangan pakai adaptor abal-abal
Suara canggih ChatGPT kini hadir di browser web, kamu bisa bicara dengan robot layaknya teman lama
Suara canggih ChatGPT kini hadir di browser web, kamu bisa bicara dengan robot layaknya teman lama
Telkomsel hadirkan program loyalitas, hadiahnya dari nonton F1 sampai liburan seru
Telkomsel hadirkan program loyalitas, hadiahnya dari nonton F1 sampai liburan seru

TECHPEDIA Selengkapnya >