Microsoft Patenkan AI Pengubah Kata dan Wajah di Video Live

Telset.id – Microsoft mengajukan paten untuk produk AI yang mampu mengubah video siaran langsung secara near real-time, termasuk mengedit kata yang diucapkan pembicara sekaligus menyesuaikan wajah dan mulut agar sesuai dengan perubahan tersebut. Paten ini pertama kali ditemukan oleh pelacak paten Patentlyze dan menyoroti bagaimana siaran langsung berpotensi tidak lagi sepenuhnya “live” di masa depan.

Dalam dokumen paten tersebut, para penemu mendeskripsikan sistem ini sebagai “near real-time artificial intelligence (AI) enhancement of video or augmented reality (AR) presentations of live events.” Sistem bekerja menggunakan AI agents yang mengidentifikasi lalu mengubah atau menghapus kata tertentu, sambil mengedit wajah dan mulut pembicara agar selaras dengan perubahan itu.

AI agents tersebut akan mengacu pada parameter yang telah ditetapkan atau profil pengguna untuk melakukan perubahan. Sistem juga dirancang mengedit video dan audio tepat sebelum dan sesudah kata yang dihapus atau diganti, sehingga transisi tetap mulus.

Langkah Microsoft ini muncul di tengah lanskap media dan internet yang kian diwarnai deepfake berbasis AI, disinformasi, serta konten yang mengaburkan informasi. Sistem yang dijelaskan dalam paten ini digambarkan sebagai generasi baru alat penyaring yang mengubah realitas secara halus saat peristiwa berlangsung, dalam hal ini pada level yang sangat personal. Penonton, menurut paten tersebut, bisa mengikuti peristiwa langsung apa pun tanpa harus mendengar hal yang tidak ingin mereka dengar.

Dari Terjemahan hingga Penghapusan Kata

Paten ini memuat sejumlah kemungkinan penggunaan. Salah satunya adalah terjemahan real-time, yang memungkinkan siaran dan rekaman langsung didengar serta dilihat dalam bahasa pilihan penonton. Selain itu, alat ini disebut dapat menghapus kata pengisi seperti “um” atau “ah” dari ucapan langsung, atau menghapus gagap dan gangguan bicara.

Namun, sejumlah penggunaan lain melangkah jauh lebih jauh. Menurut paten, sistem dapat digunakan untuk memangkas “personal words or phrases” seperti istilah ciptaan sendiri, serta “colloquial terms” seperti kata “y’all” atau frasa “bite the bullet.” Paten juga mengklaim sistem mampu menghilangkan “mumbled words, mispronounced words, misused words, misspoken words, offensive words, insensitive words, or inappropriate words.” Kata pengganti, tambahnya, dapat berasal dari “internet search.”

Dengan kemampuan tersebut, siaran langsung berpotensi tidak lagi benar-benar langsung. Dubbing memang sudah ada sejak lama, dan rekaman video memang rutin diedit, baik untuk alasan wajar maupun untuk tujuan yang tidak baik. Namun mengedit video langsung secara otomatis dengan bantuan AI agents seperti ini dapat mengubah cara audiens berinteraksi dengan konten live.

Saat ini, jika penonton tidak menyukai apa yang mereka dengar, mereka cukup mematikan siaran. Sistem yang digariskan Microsoft justru menggambarkan lingkungan di mana penonton dapat menyesuaikan ucapan orang lain sesuai selera pribadi mereka.

Risiko Gelembung Personal dan Rekaman Asli

Selain terjemahan bahasa, penggunaan alat yang menghapus kesalahan atau menghapus kata dan frasa yang terkait dialek lokal seseorang memunculkan pertanyaan tentang gelembung personal. Pertanyaan yang diangkat dalam pembahasan paten ini: apa salahnya mendengar seseorang dari wilayah Selatan Amerika mengatakan “y’all”?

Untuk itu, paten menyebutkan bahwa video dan audio langsung asli dari sebuah acara dapat direkam dan disimpan sebagai “ground truth,” mengisyaratkan potensi penyalahgunaan dan kebingungan yang bisa timbul dari alat semacam ini.

Jenis rekaman langsung yang dapat diubah oleh sistem ini mencakup kuliah, presentasi, berbagai produksi televisi seperti acara penghargaan, acara permainan dan memasak, hingga olahraga langsung, di antara sejumlah lainnya.

Paten ini menambah deretan panjang langkah Microsoft di ranah AI dan layanannya. Sebelumnya, perusahaan juga tercatat melakukan sejumlah kebijakan pada lini produknya, seperti pembatasan penyimpanan pada Microsoft 365 Family. Di sisi lain, keamanan layanan kolaborasi Microsoft juga sempat menjadi sorotan, termasuk insiden hacker bajak Microsoft Teams yang mencatat lebih dari 400 insiden penipuan IT palsu.

Hingga berita ini diturunkan, Microsoft belum memberikan tanggapan atas permintaan komentar terkait paten tersebut. Paten ini sendiri baru sebatas pengajuan, dan belum ada keterangan resmi mengenai apakah teknologi ini akan benar-benar diwujudkan menjadi produk komersial.