Sony Udostępnia tłumacza w grze, który przełamuje bariery językowe

Przełomowy patent Sony obejmuje wbudowany w grę tłumacz języka migowego, rewolucjonizujący dostępność dla niesłyszących graczy. Ta innowacyjna technologia, opisana szczegółowo w patencie „TŁUMACZENIE JĘZYKA MIGOWEGO W ŚRODOWISKU WIRTUALNYM”, koncentruje się na tłumaczeniu w czasie rzeczywistym pomiędzy różnymi językami migowymi – na przykład na konwersji amerykańskiego języka migowego (ASL) na japoński język migowy (JSL).

System ma na celu wypełnienie luk komunikacyjnych podczas rozgrywki. Działa poprzez wstępne przechwytywanie gestów języka migowego, konwertowanie ich na tekst, tłumaczenie tekstu na język docelowy, a na koniec renderowanie przetłumaczonego tekstu z powrotem na odpowiednie gesty języka migowego wyświetlane za pomocą awatarów na ekranie lub wirtualnych wskaźników. Proces ten zapewnia płynną komunikację w grze pomiędzy graczami posługującymi się różnymi językami migowymi.

Sony podkreśla ogromne zapotrzebowanie na tę technologię, podkreślając brak uniwersalności w językach migowych. Patent podkreśla znaczenie dokładnego uchwycenia języka źródłowego, zrozumienia jego niuansów oraz generowania dokładnych i odpowiednich wyników w docelowym języku migowym.

Wdrożenie może wykorzystywać gogle VR lub wyświetlacze nagłowne (HMD) i łączyć się bezprzewodowo lub przewodowo z komputerem, konsolą do gier lub podobnym urządzeniem. System można zintegrować z platformami gier w chmurze, umożliwiając użytkownikom płynną interakcję we współdzielonych środowiskach wirtualnych, a serwer gier zarządza stanem gry i synchronizuje urządzenia użytkowników. To podejście oparte na chmurze zwiększa dostępność i umożliwia tłumaczenie w czasie rzeczywistym w sieci graczy. Potencjał zwiększonej integracji w społeczności graczy jest znaczący.