未知手話単語獲得に向けた手話動作特徴量空間の検討

言語日本語
種類研究会等の予稿
著者山田 大記,井上 勝文,Partha Prathim Roy,岩村 雅一,吉岡 理文
論文名未知手話単語獲得に向けた手話動作特徴量空間の検討
論文誌名電子情報通信学会 技術研究報告
Vol.123
No.409
発表番号PRMU2023-52
ページpp.7-12
ページ数6
発表場所広島大学 東広島キャンパス
査読の有無無
発表の種類口頭ならびにポスター発表
年月2024年3月
分野手話認識
URLhttps://ken.ieice.org/ken/paper/20240303Zcbs/
キーYamada2024 (id=1961)

要約

近年,様々な手法が提案されている手話認識研究において大きな課題となるのが,データセット内の手話動画の語彙の不足である.この課題に対し,特に未学習の手話単語(未知単語)のデータに対して自動で学習動画の収集とラベル付けする手法が求められている.幸いYoutube等に多数字幕情報のついた手話動画が存在するため,これらの内,特定の未知単語が含まれる複数の動画より類似する動作を抽出することで,未知単語を自動獲得できるのではないかと期待されている.これを実現するために必要となりえる要素技術は,(1)類似の手話動作を精確に表現できる動作特徴量と,(2)その特徴量に基づいて,手話動画から目的の単語の部分を精確に切り出す処理である.本研究では,これの実現の第一歩として,手話単語の細かな動作を一つ一つ記述可能な3DCNNであるI3Dを用いて手話単語を表現する特徴量について検討する.本稿では,この特徴量表現の良し悪しを評価するテストヘッドとして,既知単語と未知単語を判別する問題を考え,特徴量の識別性能について評価した結果について述べる.

関連ファイル

この文献を出力

書式の定義
書き換えるとすぐ出力に反映されます(書式を選び直すか「既定に戻す」を押すまで有効).1 行目が既定,種類別に変えるには「book: …」のような行を追加
書式の定義の書き方

{authors} のように波括弧でフィールドを挿入します.[ ... ] で囲んだ部分は,その中のフィールドが空のとき丸ごと省略されます.使えるフィールド:

{authors}{authors_and}{authors_ja}{authors_ja_tight}{authors_en}{authors_en_and}{authors_tight}{first_author}{title}{title_ja}{title_en}{journal}{journal_ja}{journal_en}{book_title}{volume}{number}{series}{presen_id}{pages}{pp}{num_pages}{year}{month}{month_en}{month_short}{ym}{date}{date_ja}{date_en}{publisher}{address}{location}{review}{review_ja}{review_en}{reviewed_mark}{presen_type}{type}{type_label}{doi}{url}{key}{awards}

← 一覧に戻る