Tłumaczenie języka migowego w czasie rzeczywistym

Ostatnia aktualizacja: 14 września, 2021

tłumaczenie języka migowego

Kolejne zastosowanie sztucznej inteligencji

Spółka SoftBank już niebawem udostępni szerokiej publiczności rozwiązanie do tłumaczenia języka migowego w czasie rzeczywistym oparte na algorytmach sztucznej inteligencji. Jak taki migowy tłumacz działa w praktyce? Jakie firma ma plany na jego rozwój? Czy sztuczna inteligencja po raz kolejny zrewolucjonizuje branżę tłumaczeniową?

Migowy tłumacz na algorytmach

Aplikacja Softbank do nauki języka migowego wykorzystuje sztuczną inteligencję w celu konwersji znaków migowych na tekst w języku japońskim, umożliwiając osobom niedosłyszącym rozmowę z ludźmi, którzy nie znają ich metod komunikacji. Ciężko o lepszy przykład tego, w jaki sposób nowoczesne technologie mogą służyć społeczeństwu i przyczyniać się do ograniczania wykluczenia.

Załoga spółki SoftBank uważa, że to rozwiązanie tłumaczeniowe oparte na sztucznej inteligencji będzie dostępne już w 2024 roku w formie aplikacji na telefon. Według szacunków, w Japonii mieszka ponad 300 000 osób, których dotyczą problemy ze słuchem. Powstanie aplikacji umożliwiającej konwersję aż 5 000 znaków migowych w tekst podczas jednej sekundy będzie dla nich prawdziwym zbawieniem.

Celem działań firmy jest promowanie płynnej komunikacji pomiędzy osobami niesłyszącymi i niedosłyszącymi, a resztą społeczeństwa, co ma służyć znoszeniu barier i ograniczaniu wykluczenia. Poza oczywistymi kwestiami społecznymi, dla wielu firm oznacza to także otwarcie nowego rynku.

real time translation, tłumaczenie języka migowego

Real Time Translation – jak to działa?

Podczas rozmowy wideo, system wykorzystuje technologię sztucznej inteligencji do wykrywania znaków języka migowego i ich konwersji na pisany język japoński. Artificial intelligence dodaje również partykuły postpozycyjne, które są niezbędne, aby utworzyć pełne zdania w języku japońskim. Z kolei kiedy mówi osoba słysząca, algorytmy automatycznie zamieniają jej słowa w tekst wyświetlany na ekranie.

Taką płynną komunikacją (w ramach próby), bez konieczności pisania na klawiaturze mogą cieszyć się już beneficjenci organizacji, zrzeszających osoby niepełnosprawne w Tokio i prefekturze Fukushima. Wkrótce jednak japońska firma telekomunikacyjna zamierza rozszerzyć grono odbiorców – w najbliższych latach aplikacja ma zostać udostępniona dla dziewięciu gmin w całej Japonii, a następnie placówek ochrony zdrowia i przedsiębiorstw transportu publicznego.

Badania nad systemem rozpoznawania języka migowego prowadzone są od 2017 roku we współpracy z Uniwersytetem w Tokio oraz tokijskim startupem AI Abeja, za którym stoi rynkowy gigant w dziedzinie sztucznej inteligencji – firma Google. Algorytmy AI uczą się z bazy obejmującej 50 tysięcy filmów wideo w języku migowym, dzięki czemu są w stanie wykrywać charakterystyczne ruchy przypisane do każdego słowa.

tłumacz język migowy

Tłumacz języka migowego i wyzwania przyszłości

Większość społeczeństwa będzie musiała uzbroić się w cierpliwość, ponieważ firma SoftBank planuje oficjalnie wypuścić swoje rozwiązanie na rynek dopiero w 2024 roku. W tej chwili specjaliści koncentrują się na poprawie dokładności algorytmów. Podobnie, jak w przypadku mowy, osoby komunikujące się za pomocą języka migowego, wypowiadają się w różnym tempie. Zmianie ulega również pozycja ich rąk i ramion. Jednak bez gruntownego przeszkolenia dokładność sztucznej inteligencji może spaść poniżej 50%. To stanowczo zbyt mało, by można było traktować takie rozwiązanie jako pewne i przydatne. Aby podnieść tempo rozpoznawania znaków, konieczne jest przeszkolenie algorytmów na próbie co najmniej 100 osób, wyrażających w języku migowym to samo słowo.

Na szczęście firma SoftBank wydaje się wiedzieć, z czym przyszło jej się zmierzyć. W lipcu wypuszczona została aplikacja, za pomocą której wszyscy chętni mogą zarejestrować próbki swojego języka migowego, pomagając w ten sposób w ulepszaniu systemu.

Aplikacja do tłumaczenia języka migowego w czasie rzeczywistym to najlepszy przykład na to, jak za pomocą sieci neuronowych i sztucznej inteligencji możemy podnosić jakość życia ludzi z całego świata. Mimo iż w najbliższym czasie program oferować będzie usługi tylko w języku japońskim, już wkrótce pojawią się naśladowcy, którzy przełożą ten sukces na swoje rodzime języki.

Jeśli zainteresował Cię ten artykuł, przeczytaj także news na temat najnowszych technologii opartych na sztucznej inteligencji oraz kilka słów na temat automatycznego tłumaczenia od giganta rynkowego – marki Apple.

Powiązane wpisy

Summa Linguae korzysta z plików cookie dla lepszego rozumienia sposobu korzystania ze strony internetowej. Dalsze korzystanie z tej strony internetowej jest równoznaczne z wyrażeniem zgody na politykę cookies.

Więcej