Sony Nagpapakita ng Pambihirang Pambihirang Pagsasalin: In-Game AI Language Translator

Naghain ang Sony ng patent application para magbigay ng mas mahusay na mga feature ng accessibility sa paglalaro para sa mga bingi at mute na gamer. Ipinapakita ng patent kung paano isalin ang isang sign language sa isa pang in-game na wika sa real time.

Sony Patent: Pagbuo ng American Sign Language sa Japanese Sign Language na tagasalin para sa mga video game

Plano itong gumamit ng VR equipment at gumana sa pamamagitan ng cloud games

Naghain ang Sony ng patent application para magdagdag ng real-time na pagsasalin ng sign language sa mga video game. Ang patent, na pinamagatang "Sign Language Interpretation in Virtual Environments," ay nagpapakita ng teknolohiya na maaaring magsalin ng American Sign Language (ASL) sa Japanese Sign Language (JSL) na mauunawaan ng mga Japanese speaker.

Sabi ng Sony, ang layunin nito ay bumuo ng isang sistema na tumutulong sa mga bingi na manlalaro sa pamamagitan ng pagsasalin ng sign language sa real time sa panahon ng mga pag-uusap sa laro. Ang teknolohiyang inilarawan sa patent ay magbibigay-daan sa mga virtual indicator o avatar na ipinapakita sa screen na makipag-usap sa sign language sa real time. Ita-translate muna ng system ang mga galaw sa isang wika sa text, pagkatapos ay iko-convert ang text sa isa pang tinukoy na wika, at sa wakas ay isasalin ang natanggap na data sa mga galaw sa ibang wika.

"Ang mga embodiment ng kasalukuyang pagsisiwalat ay nauugnay sa mga pamamaraan at sistema para sa pagkuha ng sign language ng isang user (hal., Japanese person) at pagsasalin ng sign language sa isa pang user (hal., English speaker)," paglalarawan ni Sony sa patent. "Dahil ang mga sign language ay nag-iiba ayon sa rehiyong pinanggalingan, ang mga sign language ay hindi unibersal na mga wika. Nangangailangan ito ng naaangkop na pagkuha ng sign language ng isang user, pag-unawa sa kanilang katutubong wika, at pagbuo ng bagong sign language para sa isa pang user bilang output sa kanilang katutubong sign language. ."

Ipinaliwanag ng Sony ang isang posibleng pagpapatupad ng system, iyon ay, sa tulong ng VR equipment o head-mounted displays (HMD). "Sa ilang embodiment, kumokonekta ang HMD sa isang device ng user, gaya ng personal na computer, game console, o iba pang computing device, sa pamamagitan ng wired o wireless na koneksyon," detalye ng Sony. "Sa ilang embodiment, nagre-render ang device ng user ng mga graphics na ipinapakita sa pamamagitan ng HMD, na nagbibigay sa user ng nakaka-engganyong karanasan sa panonood ng virtual na kapaligiran."

Iminungkahi pa ng Sony na ang isang user device ay maaaring makipag-usap nang walang putol sa isa pang user device sa server ng laro sa pamamagitan ng network. "Sa ilang mga embodiment, ang server ng laro ay gumaganap ng isang nakabahaging sesyon ng video game, pinapanatili ang canonical na estado ng video game at ang virtual na kapaligiran nito," sabi ng Sony, "at ang device ng user ay nagsi-synchronize dito kaugnay ng estado ng virtual na kapaligiran. ."

Sa setup na ito, maaaring magbahagi at makipag-ugnayan ang mga user sa parehong virtual na kapaligiran (ibig sabihin, laro) sa isang nakabahaging network o server. Idinagdag din ng Sony na sa ilang pagpapatupad ng system, ang server ng laro ay maaaring maging bahagi ng isang cloud gaming system na "nagre-render at nag-stream ng video" sa pagitan ng bawat device ng user.