時空間特徴量を用いた手話単語認識における未知単語判定手法の検討

言語日本語
種類研究会等の予稿
著者山田 大記,井上 勝文,岩村 雅一,Partha Pratim Roy,吉岡 理文
論文名時空間特徴量を用いた手話単語認識における未知単語判定手法の検討
論文誌名情報処理学会 研究報告コンピュータビジョンとイメージメディア(CVIM)
Vol.2022-CVIM-230
No.14
ページpp.1-8
発表場所豊田工業大学 (ハイブリッド開催)
査読の有無無
発表の種類ポスター発表
年月2022年5月
分野手話認識
URLhttp://id.nii.ac.jp/1001/00217719/
キーYamada2022 (id=1949)

要約

手話単語認識にはラベル付き学習用データが必要となる.しかし,手話動画のラベル付けには専門知識が必要なため,データには限りがある.そのため,自動で手話単語動画をラベル付けする手法が求められるが,これを実現するには高精度な認識モデルが必要であるというジレンマがある.学習済み単語 (既知単語) のデータ数増加に対しては,既存モデルを活用できるかもしれないが,学習外単語 (未知単語)に対しては,既知単語のいずれかに認識しようとする既存モデルの活用は困難である.この問題に対応するためには,既知単語か未知単語かで処理が異なるため,まずラベルの付いていない手話単語動画の手話動作が既知単語か未知単語かを区別する必要がある.本研究では,未知単語動画の有効活用のために,ラベルの付いていない手話単語動画が未知単語かを判定する手法を提案する.具体的には,3DCNN ベースの手法により手話動作を時空間特徴量列で表し,特徴量同士の類似度を求めることで,未知単語かを判定する.

この文献を出力

書式の定義
書き換えるとすぐ出力に反映されます(書式を選び直すか「既定に戻す」を押すまで有効).1 行目が既定,種類別に変えるには「book: …」のような行を追加
書式の定義の書き方

{authors} のように波括弧でフィールドを挿入します.[ ... ] で囲んだ部分は,その中のフィールドが空のとき丸ごと省略されます.使えるフィールド:

{authors}{authors_and}{authors_ja}{authors_ja_tight}{authors_en}{authors_en_and}{authors_tight}{first_author}{title}{title_ja}{title_en}{journal}{journal_ja}{journal_en}{book_title}{volume}{number}{series}{presen_id}{pages}{pp}{num_pages}{year}{month}{month_en}{month_short}{ym}{date}{date_ja}{date_en}{publisher}{address}{location}{review}{review_ja}{review_en}{reviewed_mark}{presen_type}{type}{type_label}{doi}{url}{key}{awards}

← 一覧に戻る