未知手話単語獲得に向けた手話動作特徴量空間の検討

LanguageJapanese
TypeProceedings of Japanese Conferences
Authors山田 大記, 井上 勝文, Partha Prathim Roy, 岩村 雅一, 吉岡 理文
Title未知手話単語獲得に向けた手話動作特徴量空間の検討
JournalIEICE Technical Report
Vol.123
No.409
Presentation numberPRMU2023-52
Pagespp.7-12
Number of pages6
Location広島大学 東広島キャンパス
ReviewedNot reviewed
Presentation typeOral and Poster
DateMarch 2024
Research fieldsSign Language Recognition
URLhttps://ken.ieice.org/ken/paper/20240303Zcbs/
KeyYamada2024 (id=1961)

Abstract

近年,様々な手法が提案されている手話認識研究において大きな課題となるのが,データセット内の手話動画の語彙の不足である.この課題に対し,特に未学習の手話単語(未知単語)のデータに対して自動で学習動画の収集とラベル付けする手法が求められている.幸いYoutube等に多数字幕情報のついた手話動画が存在するため,これらの内,特定の未知単語が含まれる複数の動画より類似する動作を抽出することで,未知単語を自動獲得できるのではないかと期待されている.これを実現するために必要となりえる要素技術は,(1)類似の手話動作を精確に表現できる動作特徴量と,(2)その特徴量に基づいて,手話動画から目的の単語の部分を精確に切り出す処理である.本研究では,これの実現の第一歩として,手話単語の細かな動作を一つ一つ記述可能な3DCNNであるI3Dを用いて手話単語を表現する特徴量について検討する.本稿では,この特徴量表現の良し悪しを評価するテストヘッドとして,既知単語と未知単語を判別する問題を考え,特徴量の識別性能について評価した結果について述べる.

Files

Export this publication

Format definition
Edits apply immediately and stay in effect until you pick a style again or reset. First line is the default; add lines like "book: …" to override per type.
How to write the definition

Insert a field with braces like {authors}. A part enclosed in [ ... ] is omitted entirely when any field inside it is empty. Available fields:

{authors}{authors_and}{authors_ja}{authors_ja_tight}{authors_en}{authors_en_and}{authors_tight}{first_author}{title}{title_ja}{title_en}{journal}{journal_ja}{journal_en}{book_title}{volume}{number}{series}{presen_id}{pages}{pp}{num_pages}{year}{month}{month_en}{month_short}{ym}{date}{date_ja}{date_en}{publisher}{address}{location}{review}{review_ja}{review_en}{reviewed_mark}{presen_type}{type}{type_label}{doi}{url}{key}{awards}

← Back to list