Multi-modal dialogue system with sign language capabilities
| dc.contributor.author | Hrúz, Marek | |
| dc.contributor.author | Campr, Pavel | |
| dc.contributor.author | Krňoul, Zdeněk | |
| dc.contributor.author | Železný, Miloš | |
| dc.contributor.author | Aran, Oya | |
| dc.contributor.author | Santemiz, Pinar | |
| dc.date.accessioned | 2016-01-08T08:53:44Z | |
| dc.date.available | 2016-01-08T08:53:44Z | |
| dc.date.issued | 2011 | |
| dc.description.abstract | Tento článek popisuje návrh multimodálního dialogového systému s podporou znakové řeči. Jeho funkčnost byla testována na prototypu informačního kiosku pro neslyšící osoby, který poskytuje informace o vlakových spojeních. Systém využívá tyto vstupní modality: počítačové vidění, rozpoznávání znakového jazyka, automatické rozpoznávání řeči a dotykovou obrazovku. Výstupní modalitu představují 3D animace avatara na jedné obrazovce a grafické uživatelské rozhraní na druhé dotykové obrazovce. Informační kiosek může být použit pro sluchově postižené a neslyšící uživatelé v několika jazycích. Článek je zaměřen na popis vstupních a výstupních modalit vyjádřených znakovým jazykem. | cs |
| dc.description.abstract-translated | This paper presents the design of a multimodal sign-language-enabled dialogue system. Its functionality was tested on a prototype of an information kiosk for the deaf people providing information about train connections. We use an automatic computer-vision-based sign language recognition, automatic speech recognition and touchscreen as input modalities. The outputs are shown on a screen displaying 3D signing avatar and on a touchscreen displaying graphical user interface. The information kiosk can be used both by hearing users and deaf users in several languages. We focus on description of sign language input and output modality. | en |
| dc.format | 2 s. | cs |
| dc.format.mimetype | application/pdf | |
| dc.identifier.citation | HRÚZ, Marek; CAMPR, Pavel; KRŇOUL, Zdeněk; ŽELEZNÝ, Miloš; ARAN, Oya; SANTEMIZ, Pinar. Multi-modal dialogue system with sign language capabilities. In: The proceedings of the 13th international ACM SIGACCESS conference on computers and accessibility. New York: ACM, 2011, p. 265-266. ISBN 978-1-4503-0920-2. | en |
| dc.identifier.doi | 10.1145/2049536.2049599 | |
| dc.identifier.isbn | 978-1-4503-0920-2 | |
| dc.identifier.uri | http://www.kky.zcu.cz/cs/publications/HruzMarek_2011_Multi-modaldialogue | |
| dc.identifier.uri | http://hdl.handle.net/11025/17182 | |
| dc.language.iso | en | en |
| dc.publisher | Association for Computing Machinery (ACM) | en |
| dc.rights | © Marek Hrúz - Pavel Campr - Zdeněk Krňoul - Miloš Železný - Oya Aran - Pinar Santemiz | cs |
| dc.rights.access | openAccess | en |
| dc.subject | znaková řeč | cs |
| dc.subject | sledování v obraze | cs |
| dc.subject | kategorizace znaků | cs |
| dc.subject.translated | sign language | en |
| dc.subject.translated | visual tracking | en |
| dc.subject.translated | signs categorization | en |
| dc.title | Multi-modal dialogue system with sign language capabilities | en |
| dc.title.alternative | Multimodální dialogový systém s podporou znakového jazyka | cs |
| dc.type | článek | cs |
| dc.type | article | en |
| dc.type.status | Peer-reviewed | en |
| dc.type.version | publishedVersion | en |
Files
Original bundle
1 - 1 out of 1 results
No Thumbnail Available
- Name:
- HruzMarek_2011_Multi-modaldialogue.pdf
- Size:
- 496.68 KB
- Format:
- Adobe Portable Document Format
- Description:
- Plný text
License bundle
1 - 1 out of 1 results
No Thumbnail Available
- Name:
- license.txt
- Size:
- 1.71 KB
- Format:
- Item-specific license agreed upon to submission
- Description: