一人称視点動画を用いたマルチモーダル作業支援システムの提案
Proposal for a multimodal work support system using first-person video

概要

実験や料理など,作業者が手順書に従って作業を行う状況において,不安のある手順や不明瞭な手順を映像として確認できることは作業の再現性向上に有効に働くと考えられる.また,映像中の作業者の視線情報や手元の細かな動作を確認できる点において,実際の作業者が確認する映像として一人称視点動画を用いることはメリットがある.本研究では広く人手で行う作業の再現性向上を目的とし,テキストと音声による入力機能を持った一人称視点動画を用いたマルチモーダル作業支援システムを提案する.

産業界への展開例・適用分野

作業者支援システムとして、科学実験、組み立て作業など様々な分野への応用が考えられる。

研究者

氏名 コース 研究室 役職/学年
梶村 恵矢 知能情報学コース テキストメディア分野 修士1回生
西村 太一 その他の専攻・大学 その他: その他
羽路 悠斗 知能情報学コース テキストメディア分野 修士1回生
山本 航輝 知能情報学コース テキストメディア分野 修士2回生
崔 泰毓 知能情報学コース テキストメディア分野 修士1回生
亀甲 博貴 学術情報メディアセンター 大規模テキストアーカイブ研究分野 助教
森 信介 学術情報メディアセンター 大規模テキストアーカイブ研究分野 教授