時空間特徴量を用いた手話単語認識における未知単語判定手法の検討

LanguageJapanese
TypeProceedings of Japanese Conferences
Authors山田 大記, 井上 勝文, 岩村 雅一, Partha Pratim Roy, 吉岡 理文
Title時空間特徴量を用いた手話単語認識における未知単語判定手法の検討
Journal情報処理学会 研究報告コンピュータビジョンとイメージメディア(CVIM)
Vol.2022-CVIM-230
No.14
Pagespp.1-8
Location豊田工業大学 (ハイブリッド開催)
ReviewedNot reviewed
Presentation typePoster
DateMay 2022
Research fieldsSign Language Recognition
URLhttp://id.nii.ac.jp/1001/00217719/
KeyYamada2022 (id=1949)

Abstract

手話単語認識にはラベル付き学習用データが必要となる.しかし,手話動画のラベル付けには専門知識が必要なため,データには限りがある.そのため,自動で手話単語動画をラベル付けする手法が求められるが,これを実現するには高精度な認識モデルが必要であるというジレンマがある.学習済み単語 (既知単語) のデータ数増加に対しては,既存モデルを活用できるかもしれないが,学習外単語 (未知単語)に対しては,既知単語のいずれかに認識しようとする既存モデルの活用は困難である.この問題に対応するためには,既知単語か未知単語かで処理が異なるため,まずラベルの付いていない手話単語動画の手話動作が既知単語か未知単語かを区別する必要がある.本研究では,未知単語動画の有効活用のために,ラベルの付いていない手話単語動画が未知単語かを判定する手法を提案する.具体的には,3DCNN ベースの手法により手話動作を時空間特徴量列で表し,特徴量同士の類似度を求めることで,未知単語かを判定する.

Export this publication

Format definition
Edits apply immediately and stay in effect until you pick a style again or reset. First line is the default; add lines like "book: …" to override per type.
How to write the definition

Insert a field with braces like {authors}. A part enclosed in [ ... ] is omitted entirely when any field inside it is empty. Available fields:

{authors}{authors_and}{authors_ja}{authors_ja_tight}{authors_en}{authors_en_and}{authors_tight}{first_author}{title}{title_ja}{title_en}{journal}{journal_ja}{journal_en}{book_title}{volume}{number}{series}{presen_id}{pages}{pp}{num_pages}{year}{month}{month_en}{month_short}{ym}{date}{date_ja}{date_en}{publisher}{address}{location}{review}{review_ja}{review_en}{reviewed_mark}{presen_type}{type}{type_label}{doi}{url}{key}{awards}

← Back to list