Meta AI mendapat terjemahan lip-synced dan suara selebriti, seperti Judi Dench dan John Cena

Asisten AI Meta, Meta AI, sedang mendapatkan mode suara baru dengan berbagai jenis. Pada konferensi pengembang Meta Connect 2024 di Menlo Park pada hari Rabu pagi, Meta mengumumkan bahwa Meta AI sekarang dapat menjawab pertanyaan dengan suara di berbagai platform tempat tersedia: Instagram, Messenger, WhatsApp, dan Facebook. Anda dapat memilih dari beberapa suara, termasuk klon AI selebriti yang Meta sewa untuk tujuan tersebut: Awkwafina, Dame Judi Dench, John Cena, Keegan-Michael Key, dan Kristen Bell. Fitur suara baru Meta AI tidak seperti Mode Suara Lanjutan ChatGPT dari OpenAI, yang sangat ekspresif dan dapat menangkap nada emosional dalam suara seseorang. Sebaliknya, ini mirip dengan Gemini Live yang baru diluncurkan oleh Google, yang mentranskripsi ucapan sebelum memiliki AI menjawabnya dan membacakan jawabannya dengan suara sintetis. Meta bertaruh bahwa bakat terkenal akan membuat perbedaan; menurut The Wall Street Journal, Meta membayar jutaan dolar untuk penggunaan kemiripan selebriti tersebut. Walaupun kami skeptis, kita akan menahan penilaian sampai kita mencobanya sendiri. Di pembaruan Meta AI lainnya, asisten sekarang dapat menganalisis gambar berkat peningkatan pada model AI yang mendasari pengalaman tersebut. Di wilayah yang didukung, Anda, misalnya, dapat membagikan gambar bunga yang Anda lihat dan bertanya kepada Meta AI jenis apakah itu. Atau Anda dapat mengunggah foto hidangan dan meminta instruksi cara membuatnya. (Ingat bahwa kadang-kadang Anda akan mendapatkan jawaban yang salah.) Meta juga mengatakan bahwa mereka sedang menguji alat terjemahan Meta AI untuk secara otomatis menerjemahkan suara di Instagram Reels. Alat ini mendubbing pidato kreator dan secara otomatis melakukan lip-sync, mensimulasikan suara dalam bahasa lain dan memastikan gerakan bibir cocok. Meta mengatakan bahwa mereka mulai dengan "pengujian kecil" terjemahan Reels di Instagram dan Facebook, hanya dengan video-video beberapa kreator dari Amerika Latin di AS dalam bahasa Inggris dan Spanyol untuk saat ini.