Kinect rozpozna i przetłumaczy język migowy
Kinect rozpozna, a następnie przetłumaczy język migowy - a wszystko to dzięki projektowi autorstwa Polaków - .
Lucas-AT @ 19.07.2013, 20:48
To ja
Łukasz "Lucas-AT" Matłoka
pc
Kinect rozpozna, a następnie przetłumaczy język migowy - a wszystko to dzięki projektowi autorstwa Polaków - Migam.pl - który powstał po to, by ułatwiać życie wszystkim niesłyszącym. W tym celu zostanie zastosowany również kontroler ruchowy firmy Microsoft, początkowo stworzony z myślą o grach dedykowanych konsolom Xbox 360.
KinecTranslator to elektroniczny tłumacz, który za pośrednictwem Kinecta rozpozna ruchy naszego ciała, a następnie przetłumaczy je na tekst lub mowę. Co istotne, zadziała to także w drugą stronę - korzystając z systemu rozpoznawania mowy, program przełoży nasze słowa na język migowy za pomocą animowanego awatara, wyświetlanego na ekranie monitora.
"Recorder zbiera dane o najważniejszych punktach na ciele. Analizuje ich ruch i zapisuje współrzędne XYZ z prędkością od 12 do 30 klatek na sekundę w zależności od rozdzielczości. Dane te zapisujemy do bazy danych w celu późniejszej analizy.
System zbiera dane na potrzeby nauki algorytmów SI, które wykorzystujemy do rozpoznawania gestów. Dane są rozdzielane na prawidłowe i nieprawidłowe.
Aplikacja pozwala na analizowanie nagrania w czasie rzeczywistym, klatka po klatce, a w późniejszej wersji na odtwarzanie nagranych danych oraz analizę zachowania algorytmów. " - czytamy na oficjalnej stronie internetowej KinecTranslator.
KinecTranslator trafi do Windows Store pod koniec bieżącego roku i zadziała tylko na komputerach wyposażonych w system Windows 8. W sierpniu natomiast rozpoczną się beta testy aplikacji (chętni zapiszą się pod tym adresem). W przyszłości będą go mogli również pobrać właściciele urządzeń mobilnych. Na papierze całość wygląda imponująco i na pewno przyczyni się do pomocy wszystkim niesłyszącym. Trzymamy kciuki, by wszystko poszło tak, jak należy.
Pomysłodawcą i osobą zarządzającą projektem jest Przemek Kuśmierek, z zawodu Project Manager, który zostawił pracę w korporacji i poświecił się całkowicie temu projektowi. Zebrał on zespół 12 osób, w skład, którego wchodzą osoby merytoryczne związane z językiem migowym, osoby niesłyszące, kamerzyści, programiści, graficy i administratorzy. Biuro projektu, oraz studio nagrań znajduje się w Warszawie. Duża część prac, szczególnie informatycznych, wykonywana jest zdalnie, głównie ze względu na niewystarczające zasoby lokalowe, oraz miejsce zamieszkania członków zespołu - Wrocław, Poznań, Warszawa i Jelenia Góra.
PodglądBICodeURLIMGCytatSpoiler