Microsoft kembangkan alat AI yang dapat mengubah foto menjadi video realistis dan bisa bernyanyi

20/04/2024, 23:55 WIB Yani Andriansyah
Microsoft kembangkan alat AI yang dapat mengubah foto menjadi video realistis dan bisa bernyanyi

foto: microsoft

Techno.id - Microsoft Research Asia telah meluncurkan alat AI eksperimental baru bernama VASA-1 yang dapat mengambil gambar diam seseorang dan file audio yang ada untuk membuat wajah berbicara secara real time.

Alat ini memiliki kemampuan untuk menghasilkan ekspresi wajah dan gerakan kepala untuk gambar diam yang ada dan gerakan bibir yang sesuai untuk mencocokkan pidato atau lagu. Para peneliti mengunggah banyak sekali contoh di halaman proyek mereka, dan hasilnya terlihat cukup bagus sehingga mereka dapat meyakini orang dengan berpikir bahwa itu nyata.

You May Know

Sementara gerakan bibir dan kepala dalam contoh masih bisa terlihat sedikit robotik dan tidak sinkron setelah diperiksa lebih dekat. Masih jelas bahwa teknologi tersebut dapat disalahgunakan untuk membuat video deepfake dengan mudah dan cepat dari orang sungguhan.

Para peneliti menyadari potensi itu dan telah memutuskan untuk tidak merilis demo online, API, produk, detail implementasi tambahan, atau penawaran terkait apa pun sampai mereka yakin bahwa teknologi tersebut akan digunakan secara bertanggung jawab dan sesuai dengan peraturan yang tepat.

Namun, mereka tidak mengatakan apakah berencana menerapkan pengamanan tertentu untuk mencegah orang tidak bertanggungjawab menggunakannya untuk tujuan jahat, seperti membuat pornografi deepfake atau kampanye informasi yang salah.

Para peneliti percaya teknologi mereka memiliki banyak manfaat meskipun berpotensi disalahgunakan. Mereka mengatakan itu dapat digunakan untuk meningkatkan kesetaraan pendidikan, serta untuk meningkatkan aksesibilitas bagi mereka yang memiliki tantangan komunikasi, mungkin dengan memberi mereka akses ke avatar yang dapat berkomunikasi untuk mereka.

Menurut makalah yang diterbitkan dengan pengumuman tersebut, VASA-1 dilatih pada Kumpulan Data VoxCeleb2, yang berisi lebih dari 1 juta ucapan untuk 6.112 selebritas yang diambil dari video YouTube. Meskipun alat ini dilatih pada wajah asli, alat ini juga berfungsi pada foto artistik seperti Mona Lisa, yang secara lucu digabungkan oleh para peneliti dengan file audio dari video viral Anne Hathaway tentang Paparazzi Lil Wayne.

(brl/red)

RECOMMENDED ARTICLE

  1. Adobe kembangkan GenAI, alat yang bisa mengubah permintaan teks menjadi musik  
  2. 6 AI generator untuk menghasilkan gambar paling fotorealistik yang layak dicoba
  3. 4 Cara menggunakan AI agar dapat mempermudah kamu bekerja dengan file PDF
  4. 5 Fitur Character AI yang harus dicoba, bisa ngobrol bareng superstar sampai mendiang tokoh terkenal
  5. Meta luncurkan Llama 3 yang diklaim sebagai raja AI dan akan terintegrasi dengan media sosial

HOW TO

TECHTAGS

TECHPEDIA

LATEST ARTICLE

10 Langkah mudah membuat kartu ucapan lebaran digital dengan AI, bisa pakai smartphone aja!
10 Langkah mudah membuat kartu ucapan lebaran digital dengan AI, bisa pakai smartphone aja!
Kenapa HP mudah panas saat dipakai Google Maps pas mudik? ini 10 solusinya biar tetap adem
Kenapa HP mudah panas saat dipakai Google Maps pas mudik? ini 10 solusinya biar tetap adem
10 Game offline HP seru untuk main bareng bocah cilik saat lebaran di kampung
10 Game offline HP seru untuk main bareng bocah cilik saat lebaran di kampung
8 Cara praktis kirim angpau lebaran secara digital, jarak kini bukan jurang pemisah!
8 Cara praktis kirim angpau lebaran secara digital, jarak kini bukan jurang pemisah!
10 Langkah mudah mendownload peta offline di Google Maps untuk mudik, jaga-jaga saat tak ada signal
10 Langkah mudah mendownload peta offline di Google Maps untuk mudik, jaga-jaga saat tak ada signal

TECHPEDIA Selengkapnya >