Na międzynarodowej konferencji pt. 32nd International Conference on Information Systems Development (ISD2024) w Gdańsku, w dniach 26–28 sierpnia 2024 r., pracownicy WT w zespole Łukasz Lemieszewski, Marek Nowak i Jarosław Becker zaprezentowali wyniki badań pt. “Polish Sign Language Gestures to Text Conversion Using Machine Learning”.

W referacie autorzy przedstawili innowacyjne podejście do problemu tłumaczenia gestów Polskiego Języka Migowego (PJM) na tekst. Podkreślili, że choć w Polsce żyje około 50–100 tysięcy osób niesłyszących, brakuje efektywnych narzędzi do konwersji PJM na tekst, co utrudnia ich komunikację z resztą społeczeństwa.

Podczas wystąpienia Łukasz Lemieszewski omówił koncepcję inteligentnej aplikacji, która ma za zadanie przetwarzać PJM z nagrań wideo lub transmisji na żywo, wykorzystując hybrydowe modele głębokich sieci neuronowych. Badania bazowały na wcześniejszych rozwiązaniach dotyczących innych języków migowych, a następnie wybrano i przeszkolono najlepszy model na zbiorze danych PJM (Polskiego Języka Migowego), wykorzystując techniki transferu wiedzy z MS American Sign Language.