| 講演抄録/キーワード |
| 講演名 |
2020-09-02 10:30
車載カメラ映像と動き情報による近未来キャプション生成 ○森 優樹・平川 翼・山下隆義・藤吉弘亘(中部大) PRMU2020-10 |
| 抄録 |
(和) |
画像キャプション生成は,入力画像に対する説明文を生成するタスクであり,ニュース文の自動生成や画 像検索のタグ生成などに利用されている.また,自動運転においては,搭乗者の心理的負担を軽減するために,運転 制御の判断根拠の言語的説明への応用も期待されている.一方で,これまでの画像キャプション生成は,入力された 画像に対するキャプション生成に留まっており,近未来に起きうるイベントに対するキャプションを生成していない. 自動運転においては,事故防止や搭乗者への注意喚起には,現時刻よりも今後起きうる近未来のイベントに対するキャ プション生成が重要となる.本研究では,近未来キャプション生成という新たなタスクを提案するとともに,車載カ メラ映像からの近未来キャプション生成に適したモデルの提案を行う.Berkeley Deep Drive eXplanation Dataset を用 いた評価実験では,近未来キャプション生成が可能であることを示した. |
| (英) |
Image caption generation is a task to generate explanatory text for input images, which is used for automatic generation of news sentences and tags for image search. In addition, in order to reduce the psychological burden on passengers, automonous driving is also expected to be applied to provide verbal explanations of the decision-making basis for driving control. On the other hand, the image caption generation so far has been limited to captions for the input images and has not generated captions that can occur in the near future. In automonous driving, it is more important to generate captions for events in the near future than for the current time to prevent accidents and alert passengers. In this paper, we propose a new task of near-future caption generation and a model suitable for generating near-future captions from images captured by in-vehicle cameras. We showed that near-future caption generation is possible in evaluation experiments using the Berkeley Deep Drive eXplanation Dataset. |
| キーワード |
(和) |
画像キャプション生成 / image captioning / LSTM / CNN / 車載カメラ映像 / in-vehicle camera / 近未来 / near-future |
| (英) |
image captioning / LSTM / CNN / in-vehicle camera / near future / / / |
| 文献情報 |
信学技報, vol. 120, no. 154, PRMU2020-10, pp. 13-18, 2020年9月. |
| 資料番号 |
PRMU2020-10 |
| 発行日 |
2020-08-26 (PRMU) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
PRMU2020-10 |
| 研究会情報 |
| 研究会 |
PRMU |
| 開催期間 |
2020-09-02 - 2020-09-02 |
| 開催地(和) |
オンライン開催 |
| 開催地(英) |
Online |
| テーマ(和) |
マルチモーダル・クロスモーダル |
| テーマ(英) |
Multi-modal, Cross-modal |
| 講演論文情報の詳細 |
| 申込み研究会 |
PRMU |
| 会議コード |
2020-09-PRMU |
| 本文の言語 |
日本語 |
| タイトル(和) |
車載カメラ映像と動き情報による近未来キャプション生成 |
| サブタイトル(和) |
|
| タイトル(英) |
Image Captioning in Near-Future from Vehicle Camera images and motion information |
| サブタイトル(英) |
|
| キーワード(1)(和/英) |
画像キャプション生成 / image captioning |
| キーワード(2)(和/英) |
image captioning / LSTM |
| キーワード(3)(和/英) |
LSTM / CNN |
| キーワード(4)(和/英) |
CNN / in-vehicle camera |
| キーワード(5)(和/英) |
車載カメラ映像 / near future |
| キーワード(6)(和/英) |
in-vehicle camera / |
| キーワード(7)(和/英) |
近未来 / |
| キーワード(8)(和/英) |
near-future / |
| 第1著者 氏名(和/英/ヨミ) |
森 優樹 / Yuki Mori / モリ ユウキ |
| 第1著者 所属(和/英) |
中部大学 (略称: 中部大)
Chubu University (略称: Chubu Univ.) |
| 第2著者 氏名(和/英/ヨミ) |
平川 翼 / Tsubasa Hirakawa / ヒラカワ ツバサ |
| 第2著者 所属(和/英) |
中部大学 (略称: 中部大)
Chubu University (略称: Chubu Univ.) |
| 第3著者 氏名(和/英/ヨミ) |
山下 隆義 / Takayoshi Yamashita / ヤマシタ タカヨシ |
| 第3著者 所属(和/英) |
中部大学 (略称: 中部大)
Chubu University (略称: Chubu Univ.) |
| 第4著者 氏名(和/英/ヨミ) |
藤吉 弘亘 / Hironobu Fujiyoshi / フジヨシ ヒロノブ |
| 第4著者 所属(和/英) |
中部大学 (略称: 中部大)
Chubu University (略称: Chubu Univ.) |
| 第5著者 氏名(和/英/ヨミ) |
/ / |
| 第5著者 所属(和/英) |
(略称: )
(略称: ) |
| 第6著者 氏名(和/英/ヨミ) |
/ / |
| 第6著者 所属(和/英) |
(略称: )
(略称: ) |
| 第7著者 氏名(和/英/ヨミ) |
/ / |
| 第7著者 所属(和/英) |
(略称: )
(略称: ) |
| 第8著者 氏名(和/英/ヨミ) |
/ / |
| 第8著者 所属(和/英) |
(略称: )
(略称: ) |
| 第9著者 氏名(和/英/ヨミ) |
/ / |
| 第9著者 所属(和/英) |
(略称: )
(略称: ) |
| 第10著者 氏名(和/英/ヨミ) |
/ / |
| 第10著者 所属(和/英) |
(略称: )
(略称: ) |
| 第11著者 氏名(和/英/ヨミ) |
/ / |
| 第11著者 所属(和/英) |
(略称: )
(略称: ) |
| 第12著者 氏名(和/英/ヨミ) |
/ / |
| 第12著者 所属(和/英) |
(略称: )
(略称: ) |
| 第13著者 氏名(和/英/ヨミ) |
/ / |
| 第13著者 所属(和/英) |
(略称: )
(略称: ) |
| 第14著者 氏名(和/英/ヨミ) |
/ / |
| 第14著者 所属(和/英) |
(略称: )
(略称: ) |
| 第15著者 氏名(和/英/ヨミ) |
/ / |
| 第15著者 所属(和/英) |
(略称: )
(略称: ) |
| 第16著者 氏名(和/英/ヨミ) |
/ / |
| 第16著者 所属(和/英) |
(略称: )
(略称: ) |
| 第17著者 氏名(和/英/ヨミ) |
/ / |
| 第17著者 所属(和/英) |
(略称: )
(略称: ) |
| 第18著者 氏名(和/英/ヨミ) |
/ / |
| 第18著者 所属(和/英) |
(略称: )
(略称: ) |
| 第19著者 氏名(和/英/ヨミ) |
/ / |
| 第19著者 所属(和/英) |
(略称: )
(略称: ) |
| 第20著者 氏名(和/英/ヨミ) |
/ / |
| 第20著者 所属(和/英) |
(略称: )
(略称: ) |
| 第21著者 氏名(和/英/ヨミ) |
/ / |
| 第21著者 所属(和/英) |
(略称: )
(略称: ) |
| 第22著者 氏名(和/英/ヨミ) |
/ / |
| 第22著者 所属(和/英) |
(略称: )
(略称: ) |
| 第23著者 氏名(和/英/ヨミ) |
/ / |
| 第23著者 所属(和/英) |
(略称: )
(略称: ) |
| 第24著者 氏名(和/英/ヨミ) |
/ / |
| 第24著者 所属(和/英) |
(略称: )
(略称: ) |
| 第25著者 氏名(和/英/ヨミ) |
/ / |
| 第25著者 所属(和/英) |
(略称: )
(略称: ) |
| 第26著者 氏名(和/英/ヨミ) |
/ / |
| 第26著者 所属(和/英) |
(略称: )
(略称: ) |
| 第27著者 氏名(和/英/ヨミ) |
/ / |
| 第27著者 所属(和/英) |
(略称: )
(略称: ) |
| 第28著者 氏名(和/英/ヨミ) |
/ / |
| 第28著者 所属(和/英) |
(略称: )
(略称: ) |
| 第29著者 氏名(和/英/ヨミ) |
/ / |
| 第29著者 所属(和/英) |
(略称: )
(略称: ) |
| 第30著者 氏名(和/英/ヨミ) |
/ / |
| 第30著者 所属(和/英) |
(略称: )
(略称: ) |
| 第31著者 氏名(和/英/ヨミ) |
/ / |
| 第31著者 所属(和/英) |
(略称: )
(略称: ) |
| 第32著者 氏名(和/英/ヨミ) |
/ / |
| 第32著者 所属(和/英) |
(略称: )
(略称: ) |
| 第33著者 氏名(和/英/ヨミ) |
/ / |
| 第33著者 所属(和/英) |
(略称: )
(略称: ) |
| 第34著者 氏名(和/英/ヨミ) |
/ / |
| 第34著者 所属(和/英) |
(略称: )
(略称: ) |
| 第35著者 氏名(和/英/ヨミ) |
/ / |
| 第35著者 所属(和/英) |
(略称: )
(略称: ) |
| 第36著者 氏名(和/英/ヨミ) |
/ / |
| 第36著者 所属(和/英) |
(略称: )
(略称: ) |
| 講演者 |
第1著者 |
| 発表日時 |
2020-09-02 10:30:00 |
| 発表時間 |
15分 |
| 申込先研究会 |
PRMU |
| 資料番号 |
PRMU2020-10 |
| 巻番号(vol) |
vol.120 |
| 号番号(no) |
no.154 |
| ページ範囲 |
pp.13-18 |
| ページ数 |
6 |
| 発行日 |
2020-08-26 (PRMU) |