Sony เผยโฉมความก้าวหน้า: เครื่องมือแปลภาษา AI ในเกม

Sony ได้ยื่นคำขอรับสิทธิบัตรเพื่อมอบคุณสมบัติการเข้าถึงเกมที่ดีขึ้นสำหรับนักเล่นเกมที่หูหนวกและเป็นใบ้ สิทธิบัตรนี้แสดงวิธีการแปลภาษามือหนึ่งเป็นภาษาอื่นในเกมแบบเรียลไทม์ <>

สิทธิบัตรของ Sony: การพัฒนาภาษามืออเมริกันให้เป็นนักแปลภาษามือภาษาญี่ปุ่นสำหรับวิดีโอเกม

มีแผนจะใช้อุปกรณ์ VR และดำเนินการผ่านเกมบนคลาวด์

Sony ได้ยื่นคำขอรับสิทธิบัตรเพื่อเพิ่มการแปลภาษามือแบบเรียลไทม์ให้กับวิดีโอเกม สิทธิบัตรชื่อ "การตีความภาษามือในสภาพแวดล้อมเสมือนจริง" สาธิตเทคโนโลยีที่สามารถแปลภาษามืออเมริกัน (ASL) เป็นภาษามือภาษาญี่ปุ่น (JSL) ซึ่งผู้พูดชาวญี่ปุ่นสามารถเข้าใจได้ <> Sony กล่าวว่าเป้าหมายคือการสร้างระบบที่ช่วยผู้เล่นที่หูหนวกด้วยการแปลภาษามือแบบเรียลไทม์ระหว่างการสนทนาในเกม เทคโนโลยีที่อธิบายไว้ในสิทธิบัตรจะช่วยให้ตัวบ่งชี้หรืออวตารเสมือนที่แสดงบนหน้าจอสามารถสื่อสารด้วยภาษามือแบบเรียลไทม์ ขั้นแรกระบบจะแปลท่าทางในภาษาหนึ่งเป็นข้อความ จากนั้นแปลงข้อความเป็นภาษาอื่นที่ระบุ และสุดท้ายจะแปลข้อมูลที่ได้รับเป็นท่าทางในภาษาอื่น <>

"รูปลักษณ์ของการเปิดเผยปัจจุบันเกี่ยวข้องกับวิธีการและระบบในการจับภาพภาษามือของผู้ใช้รายหนึ่ง (เช่น คนญี่ปุ่น) และการแปลภาษามือไปยังผู้ใช้รายอื่น (เช่น ผู้พูดภาษาอังกฤษ)" Sony อธิบายไว้ใน สิทธิบัตร. "เนื่องจากภาษามือแตกต่างกันไปตามแหล่งกำเนิดของภูมิภาค ภาษามือจึงไม่ใช่ภาษาสากล ซึ่งต้องมีการจับภาษามือของผู้ใช้คนหนึ่งอย่างเหมาะสม ทำความเข้าใจภาษาแม่ของตน และสร้างภาษามือใหม่ให้กับผู้ใช้รายอื่นเป็นผลลัพธ์ในภาษามือของตนเอง ."

Sony ได้อธิบายการใช้งานระบบที่เป็นไปได้ กล่าวคือ ด้วยความช่วยเหลือของอุปกรณ์ VR หรือจอแสดงผลแบบสวมศีรษะ (HMD) “ในบางรูปลักษณ์ HMD เชื่อมต่อกับอุปกรณ์ของผู้ใช้ เช่น คอมพิวเตอร์ส่วนบุคคล คอนโซลเกม หรืออุปกรณ์คอมพิวเตอร์อื่นๆ ผ่านการเชื่อมต่อแบบมีสายหรือไร้สาย” โซนี่ให้รายละเอียด "ในบางรูปลักษณ์ อุปกรณ์ของผู้ใช้จะเรนเดอร์กราฟิกที่แสดงผ่าน HMD ทำให้ผู้ใช้ได้รับประสบการณ์การรับชมที่ดื่มด่ำของสภาพแวดล้อมเสมือนจริง"

Sony เสนอเพิ่มเติมว่าอุปกรณ์ผู้ใช้หนึ่งเครื่องสามารถสื่อสารกับอุปกรณ์ผู้ใช้อีกเครื่องหนึ่งบนเซิร์ฟเวอร์เกมผ่านเครือข่ายได้อย่างราบรื่น "ในบางรูปลักษณ์ เซิร์ฟเวอร์เกมดำเนินการเซสชั่นที่ใช้ร่วมกันของวิดีโอเกม รักษาสถานะมาตรฐานของวิดีโอเกมและสภาพแวดล้อมเสมือนของมัน" โซนี่กล่าว "และอุปกรณ์ผู้ใช้จะซิงโครไนซ์กับสิ่งนั้นด้วยความเคารพต่อสถานะของสภาพแวดล้อมเสมือน ."

ด้วยการตั้งค่านี้ ผู้ใช้สามารถแบ่งปันและโต้ตอบในสภาพแวดล้อมเสมือนเดียวกัน (เช่น เกม) บนเครือข่ายหรือเซิร์ฟเวอร์ที่ใช้ร่วมกัน Sony ยังเสริมด้วยว่าในการใช้งานระบบบางอย่าง เซิร์ฟเวอร์เกมอาจเป็นส่วนหนึ่งของระบบเกมบนคลาวด์ที่ "เรนเดอร์และสตรีมวิดีโอ" ระหว่างอุปกรณ์ของผู้ใช้แต่ละเครื่อง <>