Sony Opracowanie interpretera AI w grze dla języka migowego

Przełomowy patent Sony skupia się na zwiększeniu dostępności dla niesłyszących graczy poprzez wprowadzenie tłumaczenia języka migowego w czasie rzeczywistym w grach. Ta innowacyjna technologia ma na celu wypełnienie luk komunikacyjnych pomiędzy graczami posługującymi się różnymi językami migowymi.

Sony patentuje tłumaczenie języka migowego w czasie rzeczywistym dla gier wideo

Wykorzystywanie technologii VR i gier w chmurze

Patent zatytułowany „TŁUMACZENIE JĘZYKA MIGOWEGO W ŚRODOWISKU WIRTUALNYM” szczegółowo opisuje system umożliwiający tłumaczenie w czasie rzeczywistym między językami migowymi, takimi jak amerykański język migowy (ASL) i japoński język migowy (JSL). Sony widzi przyszłość, w której niesłyszący gracze będą mogli bezproblemowo komunikować się podczas interakcji w grach.

Proponowana technologia wykorzystuje ekranowe awatary lub wskaźniki do wyświetlania przetłumaczonego języka migowego w czasie rzeczywistym. Proces ten obejmuje trzyetapowe tłumaczenie: gesty migowe są najpierw konwertowane na tekst, następnie tłumaczone na język docelowy, a na koniec renderowane jako gesty migowe w docelowym języku migowym.

Jak stwierdzono w patencie, „Wdrożenia niniejszego ujawnienia dotyczą metod i systemów przechwytywania języka migowego od jednego użytkownika i tłumaczenia go dla innego użytkownika na jego rodzimy język migowy”. Podkreśla to kluczową potrzebę dokładnego tłumaczenia, biorąc pod uwagę różnice geograficzne w językach migowych.

Sony sugeruje używanie gogli VR (HMD) jako podstawowej metody wprowadzania danych. Patent wyjaśnia: „W niektórych wdrożeniach HMD łączy się z urządzeniem użytkownika (komputerem PC, konsolą do gier itp.), aby zapewnić wciągające oglądanie środowiska wirtualnego”.

Sony proponuje ponadto system, w którym urządzenia użytkowników komunikują się między sobą oraz serwerem gier za pośrednictwem sieci. Serwer gry utrzymuje stan gry, zapewniając synchronizację pomiędzy wszystkimi podłączonymi graczami. Architekturę tę można również zintegrować z platformami gier w chmurze, umożliwiając „renderowanie i przesyłanie strumieniowe wideo” między urządzeniami użytkowników.

To innowacyjne podejście pozwala na wspólne środowiska wirtualne i płynną interakcję między graczami, niezależnie od ich rodzimego języka migowego, wykorzystując potencjał technologii gier w chmurze w celu zwiększenia dostępności.