Interaktív eszközök - Kinect

Francia kutatók teljesen új távlatokat nyitottak meg a jelnyelvet használók előtt, ugyanis némi módosítással lehetővé tették, hogy a Kinect támogassa azt. - írja az SG.hu.  Egy ilyen rendszer új távlatokat nyithat meg az SNI (siketek) oktatásban is...

Ugyan a Microsoft terméke alapvetően nem támogatja a jelnyelvek felismerését, azonban technikailag alkalmassá tehető erre, ismerték fel az ESIEA francia főiskola munkatársai. Két kutató gyakorlatilag feltörte a Kinect rendszerét, majd megtanította neki a helló és a sajnálom szavak jelnyelvi megfelelőjét. "Abból indulunk ki, hogy egy neurális hálózatot nagyon sok jel felismerésére és gyakorlati alkalmazására taníthatunk meg" - nyilatkozta Hubert Wassner, az ESIEA professzora. Jelenleg a legnagyobb problémát az jelenti, hogy a mozgásérzékelő eszköz helyesen értelmezze a felhasználók ujj- és kézmozdulatait.

Technikailag megvalósítható az ötlet, ezt bebizonyította Wassner és a kollégája is. A két informatikus már fel is töltötte a YouTube-ra az első sikeres kísérleteket bemutató videót. A sikerhez az is kellett, hogy a kutatók a jelnyelvben viszonylag egyszerűnek számító szavakat választottak, melyeknél az ujjtartás nem játszik nagyon fontos szerepet. Sokkal nehezebb lenne megtanítani a számítógépet például a számok felismerésére.



Az ESIEA csapata a nyílt forráskódú OpenNI-meghajtókat használta a tesztrendszer elkészítésére. Ezek komoly hátránya azonban, hogy nem ismerik fel az ujjakat és az ujjmozgásokat. "Úgy vélem, hogy az ujjak felismerése előbb vagy utóbb biztosan elérhető lesz" - közölte Wassner. A megoldás rendkívül egyszerűen használható, számos új jel felismerésére is megtanítható. Wassner azt ugyanakkor nem tudta megmondani, hogy a rendszer legfeljebb hány jelet tud értelmezni, mindez ugyanis attól is függ, hogy az adott jelekhez milyen és mennyire bonyolult ujj- és kézmozdulatok tartoznak. "Minél inkább különböznek az egyes jelek, annál egyszerűbb a felismerésük" - emelte ki a szakember.

Az egyszeri embernek egyből adódik a kérdés, hogy mi értelme az egésznek, hiszen a siketek a billentyűzeten keresztül is tudnak kommunikálni a számítógéppel. Azonban a nyelvtudásuk és beszélőképességük nagy mértékben változó: a hallásukat még az anyanyelv elsajátítása előtt elveszített emberek jellemzően nem tudnak jól magyarul sem szóban, sem írásban. A Wikipedia szerint  ...

Tovább a teljes cikkhez >>> A jelnyelvet is támogathatja a jövőben a Kinect (SG.hu)

***

Kapcsolódó cikkek:




Hozzászólás

Név:
E-mail cím:
Weblap:
Tárgy:
Hozzászólás: