Sony Ujawnia patent na tłumacza języka migowego w grach

Sony złożyło patent, którego celem jest zapewnienie dodatkowej dostępności dla niesłyszących graczy. Patent Sony ilustruje, w jaki sposób niektóre języki migowe można przetłumaczyć w grze na inny.

Sony patentuje tłumacza ASL na JSL dla gier wideoProponowany do korzystania z urządzeń VR i pracy w grach w chmurze

Sony złożyło patent, który dodaje do gier wideo tłumacza języka migowego działającego w czasie rzeczywistym. Patent zatytułowany „TŁUMACZENIE JĘZYKA MIGOWEGO W ŚRODOWISKU WIRTUALNYM” ilustruje technologię, dzięki której amerykański język migowy (ASL) może być komunikowany japońskiemu użytkownikowi za pomocą japońskiego języka migowego (JSL).

Sony oświadczyło, że ma na celu wdrożenie systemu, który będzie mógł pomagać niesłyszącym graczom poprzez tłumaczenie języków migowych w czasie rzeczywistym podczas rozmów w grze. Technologia opisana w patencie umożliwiłaby wyświetlanie na ekranie wirtualnych wskaźników lub awatarów komunikowanie się w języku migowym w czasie rzeczywistym. System początkowo przetłumaczy gesty migowe jednego języka na tekst, następnie przekonwertuje tekst na inny określony język, a na koniec przetłumaczy otrzymane dane na gesty migowe drugiego języka.

"Wdrożenia niniejszego ujawnienia odnoszą się do metod i systemów przechwytywania języka migowego jednego użytkownika (np. japońskiego) i tłumaczenia języka migowego innemu użytkownikowi (np. angielskiego)” – opisała firma Sony w patencie. „Ponieważ języki migowe różnią się w zależności od pochodzenia geograficznego, język migowy nie jest uniwersalny. Stwarza to potrzebę odpowiedniego uchwycenia języka migowego jednego użytkownika, zrozumienia języka ojczystego i wygenerowania nowego języka migowego jako wyjścia dla innego użytkownika w jego ojczystym języku migowym .”

Jednym ze sposobów wdrożenia tego systemu, jak pokazano Sony, byłoby użycie urządzenia typu VR lub montażu na głowie wyświetlacz (HMD). „W niektórych wdrożeniach HMD łączy się za pomocą połączenia przewodowego lub bezprzewodowego z urządzeniem użytkownika, takim jak komputer osobisty, konsola do gier lub inne urządzenie komputerowe” – szczegółowo wyjaśnił Sony. „W niektórych implementacjach urządzenie użytkownika renderuje grafikę do wyświetlenia za pośrednictwem HMD, co zapewnia użytkownikowi wciągające oglądanie środowiska wirtualnego.”

Sony zaproponowała ponadto, że jedno urządzenie użytkownika mogłoby bezproblemowo komunikować się z innym urządzeniem użytkownika za pośrednictwem sieci z serwerem gier. „W niektórych wdrożeniach serwer gry wykonuje wspólną sesję gry wideo, zachowując stan kanoniczny gry wideo i jej środowiska wirtualnego” – powiedział Sony – „i z którą urządzenia użytkowników są synchronizowane pod względem stan środowiska wirtualnego.”

Dzięki tej konfiguracji użytkownicy mogą udostępniać treści i wchodzić w interakcje ze sobą w tym samym środowisku wirtualnym, w grze aka, za pośrednictwem współdzielonej sieci lub serwera. Sony stwierdziło dodatkowo, że w niektórych wdrożeniach systemu serwer gier może być częścią systemu gier w chmurze, który „renderuje i przesyła strumieniowo wideo” pomiędzy każdym urządzeniem użytkownika.