Přejít na obsah

Publikace

Detail publikace

Citace

Krňoul Zdeněk and Hrúz Marek and Campr Pavel : Correlation analysis of facial features and sign gestures . 2010 IEEE 10th International Conference on Signal Processing Proceedings, vol. 2010, p. 732-735, Institute of Electrical and Electronics Engineers, Inc., Beijing, 2010.

PDF ke stažení

PDF

Abstrakt

In this paper we focus on the potential correlation of the manual and the non-manual component of sign language. This information is useful for sign language analysis, recognition and synthesis. We are mainly concerned with the application for sign synthesis. First we extracted features that represent the manual and non-manual component. We present a simple but robust method for the hand tracking to obtain a 2D trajectory representing a portion of the manual component. The head is tracked via Active Appearance Model. We introduce initial experiments to reveal the relationship between these features. The procedure is verified on the corpus of isolated signs from Czech Sign Language. The results imply that the components of sign language are correlated. The most correlated signals are the vertical movement of head and hands.

Abstrakt v češtině

Tento článek analyzuje korelaci signálů produkovaných manuální a nemanuální složkou znakové řeči. Analýza je potřebná při dalším studiu problémů počítačového rozpoznání a syntézy znakové řeči. Nejprve jsou extrahovány příznaky z před-zaznamenaných obrazových dat. V článku je použita jednoduchá a robustní metoda pro sledování rukou, jejímž výsledkem je 2D trajektorie části manuální složky. Sledování pohybu a výrazu tváře je zajištěno pomocí Active Appearance Modelu. V článku jsou prezentovány prvotní výsledky provedených experimentů na korpusu izolovaných znaků z české znakové řeči. Z výsledků vyplývá, že manuální a nemanuální složky jsou korelované s největší shodou pro vertikální pohyb dominantní ruky a pohybu hlavy.

Detail publikace

Název: Correlation analysis of facial features and sign gestures
Autor: Krňoul Zdeněk ; Hrúz Marek ; Campr Pavel
Název - česky: Analýza korelace výrazu tváře a gest znakové řeči
Jazyk publikace: anglicky
Rok vydání: 2010
Typ publikace: Stať ve sborníku
Název časopisu / knihy: 2010 IEEE 10th International Conference on Signal Processing Proceedings
Číslo vydání: 2010
Strana: 732 - 735
DOI: 10.1109/ICOSP.2010.5655761
ISBN: 978-1-4244-5898-1
Nakladatel: Institute of Electrical and Electronics Engineers, Inc.
Místo vydání: Beijing
Datum: 28.10.2010
2011-03-15 16:21:56 / 2012-11-07 10:38:14 / 1

Klíčová slova

sign language, image processing, correlation analysis

BibTeX

@INPROCEEDINGS{KrnoulZdenek_2010_Correlationanalysis,
 author = {Kr\v{n}oul Zden\v{e}k and Hr\'{u}z Marek and Campr Pavel},
 title = {Correlation analysis of facial features and sign gestures},
 year = {2010},
 publisher = {Institute of Electrical and Electronics Engineers, Inc.},
 journal = {2010 IEEE 10th International Conference on Signal Processing Proceedings},
 address = {Beijing},
 volume = {2010},
 pages = {732-735},
 ISBN = {978-1-4244-5898-1},
 doi = {10.1109/ICOSP.2010.5655761},
 url = {http://www.kky.zcu.cz/en/publications/KrnoulZdenek_2010_Correlationanalysis},
}