Alibaba Cloud Luncurkan Aplikasi Penerjemah Bahasa Isyarat Virtual, untuk Asian Games Hangzhou

Avatar Digital untuk Memfasilitasi Komunikasi bagi Penyandang Gangguan Pendengaran

 

Menurut Organisasi Kesehatan Dunia (WHO [1] ), saat ini lebih dari 1,5 miliar orang (hampir 20% populasi global) hidup dengan gangguan pendengaran. Untuk mendorong inklusivitas di Asian Paralympic Games yang akan diadakan antara tanggal 22 hingga 28 Oktober, Alibaba Cloud memperkenalkan avatar digitalnya, Xiaomo, yang berfungsi sebagai penerjemah bahasa isyarat bagi individu dengan gangguan pendengaran.

 

Pelopor cloud ini mengintegrasikan avatar digital Xiaomo ke dalam aplikasi mini di platform pembayaran Alipay. Aplikasi mini ini mendukung terjemahan dua arah antara bahasa isyarat dan bahasa lisan Tiongkok. Pengguna dapat memasukkan pesan suara, yang mana karakter virtual akan menerjemahkannya ke dalam bahasa isyarat untuk individu dengan gangguan pendengaran. Sebaliknya, aplikasi mini ini dapat menerjemahkan bahasa isyarat ke dalam bahasa lisan, sehingga memfasilitasi komunikasi yang lancar antara individu dengan gangguan pendengaran dan gangguan pendengaran.

 

BACA JUGA:Pakai QRIS SEABANK, Dapatkan Cashback 100 Persen Belanja Menu HokBen

BACA JUGA: Mau Beli Emas Aman, Langsung ke Antam! Mereka Jual Emas Batangan

 

Bahasa isyarat, dengan perpaduan unik antara gerak tubuh, ekspresi, dan gerakan tubuh, memiliki fonetik, kosa kata, dan tata bahasa tersendiri yang berbeda dengan bahasa lisan. Untuk mengakomodasi kompleksitas ini, Alibaba Cloud mengumpulkan kumpulan data terjemahan bahasa isyarat Tiongkok yang berisi 25.000 tanda yang dikumpulkan dan dianotasi dari praktisi bahasa isyarat dan orang-orang dengan gangguan pendengaran di seluruh provinsi Zhejiang di Tiongkok.

 

Alibaba Cloud memanfaatkan algoritma pengenalan visual yang canggih dan kemampuan pelacakan gerakannya untuk menangkap gerakan para penyandang tunarungu dan menerjemahkan bahasa isyarat ke dalam bahasa alami dengan model terjemahan bahasa yang canggih. Untuk mengubah bahasa alami menjadi bahasa isyarat, Alibaba Cloud juga mengembangkan jaringan saraf mendalam dan modul pembuatan gerakan bibir, yang memungkinkan karakter virtual melakukan gerakan bahasa isyarat secara akurat.

 

“Melalui integrasi teknologi pemrosesan bahasa alami, visi komputer, dan pembelajaran mesin, kami telah mengembangkan sistem terjemahan bahasa isyarat. Inovasi ini bertujuan untuk menjadikan Asian Paralympic Games lebih inklusif dan mudah diakses oleh mereka yang mengalami gangguan pendengaran,” kata Matt Zhang, algoritma insinyur di Alibaba Cloud.

 

Sumber: asian games pertama di cloud lebih berkelanjutan dan inklusif