Analysis of Technologies and Resources for Multimodal Information Kiosk for Deaf Users

Result code in IS VaVaI

<a href="https://www.isvavai.cz/riv?ss=detail&h=RIV%2F49777513%3A23520%2F08%3A00500097" target="_blank" >RIV/49777513:23520/08:00500097 - isvavai.cz</a>

Result on the web

—

DOI - Digital Object Identifier

—

Result language

angličtina

Original language name

Analysis of Technologies and Resources for Multimodal Information Kiosk for Deaf Users

Original language description

This paper presents an analysis of technologies and resources needed for building of a multimodal information kiosk for deaf people. The considered information kiosk will use sign language as main communication means, since it is main language of communication of deaf users. Thus, the sign language synthesis and recognition modules will be main part of the kiosk. Additional modules include lip-reading support for sign language recognition (since sign language is accompanied by lip articulation), touch screen input, and graphical user interface. To design and build the mentioned modules, large amounts of data are needed for training, especially in the case of recognition modules. The information kiosk is intended for use for provididng/gathering information to/from deaf users, such us train connection or communication with authorities.

Czech name

Analýza technologií a drojů pro multimodální informační kiosek pro hluché uživatele

Czech description

Tento článek prezentuje analýzu technoogií a zdrojů potřebných pro vyvinutí multimodálního informačního kiosku pro hluché osoby. Uvažovaný informační kiosek bude používat znakovou řeč jako hlavní komunikační prostředek, protože to je hlavní komunikační jazyk hluchých uživatelů. Takže moduly syntézy a rozpoznávání znakové řeči budou hlavními částmi kiosku. Další moduly zahrnují podporu odezírání ze rtů pro rozpoznávání znakové řeči, dotykový vstup a grafické uživatelské rozhraní. Pro návrh a vývoj těchtomodulů je třeba velké množství dat pro trénování. použití informačního kiosku je míněno především pro poskytování/získávání informací hluchým uživatelům, jako např. informace o vlakových spojeních nebo komunikace s úřady.

Type

D - Article in proceedings

CEP classification

JD - Use of computers, robotics and its application

OECD FORD branch

—

Project

Result was created during the realization of more than one project. More information in the Projects tab.

Continuities

P - Projekt vyzkumu a vyvoje financovany z verejnych zdroju (s odkazem do CEP)

Publication year

2008

Confidentiality

S - Úplné a pravdivé údaje o projektu nepodléhají ochraně podle zvláštních právních předpisů

Article name in the collection

International Conference on Auditory-Visual Speech Processing 2008

ISBN

978-0-646-49503-3

ISSN

—

e-ISSN

—

Number of pages

6

Pages from-to

—

Publisher name

Causal Productions

Place of publication

[S.l.]

Event location

Tangalooma, Australia

Event date

Sep 29, 2008

Type of event by nationality

WRD - Celosvětová akce

UT code for WoS article

—