Naukowcy z uniwersytetu w Bostonie (BU) pracują nad dającym się przeszukiwać elektronicznym słownikiem języka migowego, dzięki któremu użytkownik tłumaczyłby gesty z wykorzystaniem kamery podłączonej do komputera. Pozbawiony czujników system mógłby być wykorzystywany przez każdego chętnego z odpowiednio wyposażonym laptopem i łączem internetowym – informuje magazyn "Technology Review"."Jeśli widzimy jakieś gesty języka migowego w serwisie YouTube, musimy szukać ich znaczenia w mowie pisanej" – zauważa Stan Sclaroff, profesor nauk komputerowych na Uniwersytecie Bostońskim. "To tak, jakbyśmy szukali tekstu po hiszpańsku, wprowadzając jego tłumaczenie po angielsku".
Sclaroff tworzy swój słownik we współpracy z Carol Neidle, profesor lingwistyki na BU i Vassilisem Athitsosem z Instytutu Nauk Komputerowych i Inżynieryjnych na teksańskim uniwersytecie stanowym w Arlington. Jeśli tylko użytkownik przedstawi jakiś gest, zostanie on przeanalizowany przez oprogramowanie, a komputer pokaże pięć najbardziej zbliżonych gestów i ich znaczenie. Ze względu na swój zakres projekt jest uważany za jedyne tego typu przedsięwzięcie w badaniach nad rozpoznawaniem gestów.
Aby zapewnić algorytmom odpowiednią ilość danych do obróbki, ekipa z BU zaprosiła do studia wielu ludzi posługujących się językiem migowym. Każdy z nich musiał zaprezentować przed kamerą szczegółowo 3000 znaków klasycznego amerykańskiego języka migowego (American Sign Language, ASL). Cztery dużej prędkości kamery, rejestrujące obraz o wysokiej rozdzielczości, nagrywały prezentowane przez nich gesty od przodu i z boków, zapisując przy tym różne wyrazy twarzy, które mogły podkreślić znaczenie gestów. Sclaroff ma nadzieję, że jego technologia w przyszłości będzie mogła być używana także do surfowania w Internecie za pomocą języka migowego.
źródło: http://www.heise-online.pl/news/Laptop-przetlumaczy-jezyk-migowy--/7312
Aby zapewnić algorytmom odpowiednią ilość danych do obróbki, ekipa z BU zaprosiła do studia wielu ludzi posługujących się językiem migowym. Każdy z nich musiał zaprezentować przed kamerą szczegółowo 3000 znaków klasycznego amerykańskiego języka migowego (American Sign Language, ASL). Cztery dużej prędkości kamery, rejestrujące obraz o wysokiej rozdzielczości, nagrywały prezentowane przez nich gesty od przodu i z boków, zapisując przy tym różne wyrazy twarzy, które mogły podkreślić znaczenie gestów. Sclaroff ma nadzieję, że jego technologia w przyszłości będzie mogła być używana także do surfowania w Internecie za pomocą języka migowego.
źródło: http://www.heise-online.pl/news/Laptop-przetlumaczy-jezyk-migowy--/7312
