| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2023-02-21 13:45 一人称視点の食事映像からの食行動レポートの自動生成 ○佐藤賢志郎・山肩洋子・相澤清晴（東大）  ITS2022-50 IE2022-67 |
|
| 抄録 | （和） | 栄養士が食事指導に使う食事レポートを、ウェアラブルカメラで食事を収録した映像から自動生成することで、従来難しかった食べる速さや、食べる順番に対する指導ができる。 そのために、本研究では食事の開始から終了までを撮影した一人称視点映像から、食事領域を検出し、同じ料理をトラッキングし、各食事において「食べられたタイミング」を検出することを目的とする。以上を実現するために、最初に我々が構築したデータセットに基づいてYolov7により食事領域を検出する。続いて、k-means法を応用したFeature clustering により同一の映像に登場する食事アイテムごとに分類する。最後に、同一食事アイテムの2フレーム間の前後を予測するモデルを学習し、それを転用することで「食べられたタイミング」を予測する。 |
| （英） | By automatically generating meal reports used by dietitians for dietary guidance from video footage of meals recorded by wearable cameras, it is possible to provide guidance on the speed and order of eating, which has been difficult in the past. For this purpose, the objective of this research is to detect the meal area from the first-person video taken from the beginning to the end of the meal, track the same dishes, and detect the "timing of being eaten" at each meal. To achieve the above, we first detect the meal region by Yolov7 based on our constructed dataset. Next, we use feature clustering based on the k-means method to classify each meal item that appears in the same video. Finally, we learn a model that predicts the before/after the timing of the same meal item between two frames, and apply it to predict "when the meal was eaten." |
|
| キーワード | （和） | 食事動画データセット / 一人称視点映像 / 食事行動 / 食品追跡 / / / / |
| （英） | dietary record video dataset / first-person video / eating behavior / food region tracking / / / / | |
| 文献情報 | 信学技報, vol. 122, no. 385, IE2022-67, pp. 41-46, 2023年2月. | |
| 資料番号 | IE2022-67 | |
| 発行日 | 2023-02-14 (ITS, IE) | |
| ISSN | Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | ITS2022-50 IE2022-67 |
|
| 研究会情報 | |
| 研究会 | IE ITS ITE-MMS ITE-ME ITE-AIT |
| 開催期間 | 2023-02-21 - 2023-02-22 |
| 開催地（和） | 北海道大学 |
| 開催地（英） | Hokkaido Univ. |
| テーマ（和） | 画像処理，一般 |
| テーマ（英） | Image Processing, etc. |
| 講演論文情報の詳細 | |
| 申込み研究会 | IE |
| 会議コード | 2023-02-IE-ITS-MMS-ME-AIT |
| 本文の言語 | 日本語 |
| タイトル（和） | 一人称視点の食事映像からの食行動レポートの自動生成 |
| サブタイトル（和） | |
| タイトル（英） | Automatic generation of eating order reports from first-person eating videos |
| サブタイトル（英） | |
| キーワード(1)（和/英） | 食事動画データセット / dietary record video dataset |
| キーワード(2)（和/英） | 一人称視点映像 / first-person video |
| キーワード(3)（和/英） | 食事行動 / eating behavior |
| キーワード(4)（和/英） | 食品追跡 / food region tracking |
| キーワード(5)（和/英） | / |
| キーワード(6)（和/英） | / |
| キーワード(7)（和/英） | / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 佐藤 賢志郎 / Kenshiro Sato / サトウ ケンシロウ |
| 第1著者 所属（和/英） | 東京大学 (略称： 東大) The University (略称： UTokyo) |
| 第2著者 氏名（和/英/ヨミ） | 山肩 洋子 / Yoko Yamakata / ヤマカタ ヨオコ |
| 第2著者 所属（和/英） | 東京大学 (略称： 東大) The University (略称： UTokyo) |
| 第3著者 氏名（和/英/ヨミ） | 相澤 清晴 / Kiyoharu Aizawa / アイザワ キヨハル |
| 第3著者 所属（和/英） | 東京大学 (略称： 東大) The University (略称： UTokyo) |
| 第4著者 氏名（和/英/ヨミ） | / / |
| 第4著者 所属（和/英） | (略称： ) (略称： ) |
| 第5著者 氏名（和/英/ヨミ） | / / |
| 第5著者 所属（和/英） | (略称： ) (略称： ) |
| 第6著者 氏名（和/英/ヨミ） | / / |
| 第6著者 所属（和/英） | (略称： ) (略称： ) |
| 第7著者 氏名（和/英/ヨミ） | / / |
| 第7著者 所属（和/英） | (略称： ) (略称： ) |
| 第8著者 氏名（和/英/ヨミ） | / / |
| 第8著者 所属（和/英） | (略称： ) (略称： ) |
| 第9著者 氏名（和/英/ヨミ） | / / |
| 第9著者 所属（和/英） | (略称： ) (略称： ) |
| 第10著者 氏名（和/英/ヨミ） | / / |
| 第10著者 所属（和/英） | (略称： ) (略称： ) |
| 第11著者 氏名（和/英/ヨミ） | / / |
| 第11著者 所属（和/英） | (略称： ) (略称： ) |
| 第12著者 氏名（和/英/ヨミ） | / / |
| 第12著者 所属（和/英） | (略称： ) (略称： ) |
| 第13著者 氏名（和/英/ヨミ） | / / |
| 第13著者 所属（和/英） | (略称： ) (略称： ) |
| 第14著者 氏名（和/英/ヨミ） | / / |
| 第14著者 所属（和/英） | (略称： ) (略称： ) |
| 第15著者 氏名（和/英/ヨミ） | / / |
| 第15著者 所属（和/英） | (略称： ) (略称： ) |
| 第16著者 氏名（和/英/ヨミ） | / / |
| 第16著者 所属（和/英） | (略称： ) (略称： ) |
| 第17著者 氏名（和/英/ヨミ） | / / |
| 第17著者 所属（和/英） | (略称： ) (略称： ) |
| 第18著者 氏名（和/英/ヨミ） | / / |
| 第18著者 所属（和/英） | (略称： ) (略称： ) |
| 講演者 | 第1著者 |
| 発表日時 | 2023-02-21 13:45:00 |
| 発表時間 | 15分 |
| 申込先研究会 | IE |
| 資料番号 | ITS2022-50, IE2022-67 |
| 巻番号（vol） | vol.122 |
| 号番号（no） | no.384(ITS), no.385(IE) |
| ページ範囲 | pp.41-46 |
| ページ数 | 6 |
| 発行日 | 2023-02-14 (ITS, IE) |
[研究会発表申込システムのトップページに戻る]