Multi-modal dialogue system with sign language capabilities
Date issued
2011
Journal Title
Journal ISSN
Volume Title
Publisher
Association for Computing Machinery (ACM)
Abstract
Tento článek popisuje návrh multimodálního dialogového systému s podporou znakové řeči. Jeho funkčnost byla testována na prototypu informačního kiosku pro neslyšící osoby, který poskytuje informace o vlakových spojeních. Systém využívá tyto vstupní modality: počítačové vidění, rozpoznávání znakového jazyka, automatické rozpoznávání řeči a dotykovou obrazovku. Výstupní modalitu představují 3D animace avatara na jedné obrazovce a grafické uživatelské rozhraní na druhé dotykové obrazovce. Informační kiosek může být použit pro sluchově postižené a neslyšící uživatelé v několika jazycích. Článek je zaměřen na popis vstupních a výstupních modalit vyjádřených znakovým jazykem.
Description
Subject(s)
znaková řeč, sledování v obraze, kategorizace znaků
Citation
HRÚZ, Marek; CAMPR, Pavel; KRŇOUL, Zdeněk; ŽELEZNÝ, Miloš; ARAN, Oya; SANTEMIZ, Pinar. Multi-modal dialogue system with sign language capabilities. In: The proceedings of the 13th international ACM SIGACCESS conference on computers and accessibility. New York: ACM, 2011, p. 265-266. ISBN 978-1-4503-0920-2.