| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2020-03-16 11:00 意味と形状の分離によるマルチモーダルレシピ検索及び画像生成 ○杉山 優・柳井啓司（電通大）  PRMU2019-70 |
|
| 抄録 | （和） | 近年のレシピに関する情報技術は大きく発展しており，CookpadやAllRecipesなど，レシピ投稿サイトが多く存在している．この膨大なデータを利用したディープラーニングによるレシピ検索が広く研究されている．特にRecipe1Mデータセットが提供されてからは大規模なテキストと画像を利用した検索手法が多く提案されている． 本研究ではこのマルチモーダル検索タスクに対して，テキスト情報と画像情報の両者同じ空間へのエンベッディングを行い，さらに画像生成を用いることで高精度で中間表現が確認できる検索を可能にする手法であるRDEGAN(Recipe Disentangled Embedding GAN)を提案した．マルチモーダル検索を共有空間へのエンベッディングを通して行うことで，テキストと画像の双方向の検索が可能になる． また，学習の過程において，料理画像の形状と意味を分離することで，検索の精度を改善するとともに生成する画像を実画像により近づけた．さらに，生成した形状と意味の画像中間表現が意味空間において連続的であることを実験で示した． |
| （英） | (Not available yet) | |
| キーワード | （和） | マルチモーダル検索 / 画像生成 / 画像特徴の意味と形状の分離 / / / / / |
| （英） | / / / / / / / | |
| 文献情報 | 信学技報, vol. 119, no. 481, PRMU2019-70, pp. 27-32, 2020年3月. | |
| 資料番号 | PRMU2019-70 | |
| 発行日 | 2020-03-09 (PRMU) | |
| ISSN | Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | PRMU2019-70 |
|
| 研究会情報 | |
| 研究会 | PRMU IPSJ-CVIM |
| 開催期間 | 2020-03-16 - 2020-03-17 |
| 開催地（和） | 京都大学 |
| 開催地（英） | |
| テーマ（和） | 安全安心、セキュリティ・防災 |
| テーマ（英） | |
| 講演論文情報の詳細 | |
| 申込み研究会 | PRMU |
| 会議コード | 2020-03-PRMU-CVIM |
| 本文の言語 | 日本語 |
| タイトル（和） | 意味と形状の分離によるマルチモーダルレシピ検索及び画像生成 |
| サブタイトル（和） | |
| タイトル（英） | Multimodal Recipe Search and Image Generation by Disentangling Contents and Styles |
| サブタイトル（英） | |
| キーワード(1)（和/英） | マルチモーダル検索 / |
| キーワード(2)（和/英） | 画像生成 / |
| キーワード(3)（和/英） | 画像特徴の意味と形状の分離 / |
| キーワード(4)（和/英） | / |
| キーワード(5)（和/英） | / |
| キーワード(6)（和/英） | / |
| キーワード(7)（和/英） | / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 杉山 優 / Yu Sugiyama / スギヤマ ユウ |
| 第1著者 所属（和/英） | 電気通信大学 (略称： 電通大) The University of Electro-Communications, Tokyo (略称： UEC) |
| 第2著者 氏名（和/英/ヨミ） | 柳井 啓司 / Keiji Yanai / ヤナイ ケイジ |
| 第2著者 所属（和/英） | 電気通信大学 (略称： 電通大) The University of Electro-Communications, Tokyo (略称： UEC) |
| 講演者 | 第1著者 |
| 発表日時 | 2020-03-16 11:00:00 |
| 発表時間 | 15分 |
| 申込先研究会 | PRMU |
| 資料番号 | PRMU2019-70 |
| 巻番号（vol） | vol.119 |
| 号番号（no） | no.481 |
| ページ範囲 | pp.27-32 |
| ページ数 | 6 |
| 発行日 | 2020-03-09 (PRMU) |
[研究会発表申込システムのトップページに戻る]