| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2018-11-01 11:00 顔画像からの感情抽出とその数値化・可視化 ～ 音楽鑑賞・落語鑑賞における評価実験 ～ ○藤堂聖真・辻岡哲夫・岡崎和伸・小田中章浩（阪市大）  CS2018-63 |
|
| 抄録 | （和） | 近年，機械学習，とりわけ深層学習の分野の研究が活発である．その応用例の一つとして，顔画像からの感情抽出が注目されている．本研究では，深層学習の芸術への応用を目的として，音楽鑑賞・落語鑑賞における観客の顔画像から感情を抽出することを試みる．実際に，28人及び30人の被験者による評価実験を実施し，西洋クラシック音楽，ガムラン音楽，即興音楽，落語を鑑賞中の被験者を30台のビデオカメラで撮影し，深層学習エンジンに入力して感情の数値化を行った．同時に，被験者の心拍数の取得，LF/HFの計算，緊張/リラックスの状態遷移の分析も行った．実験結果を，演奏中・上演中の映像と同期させて可視化し，鑑賞中の被験者の感情の遷移と緊張/リラックス度の遷移を映像化した．更に，Happinessの感情に着目し，観客間での相関性を調べ，人による目視だけでは難しかった被験者の感情の類似性を定量的に示せることを確認した． |
| （英） | Nowadays, machine learning, especially a deep learning technique for image classification, has been one of attractive research areas. Emotion extraction from human face image also has numch attention as one of applications of the deep learning technique. In our research, for the purpose of application of deep learning technique to art (thus, fusion of art and engineering), we have tried to make emotion extraction from face images of audience in music concerts and rakugo performance. Experimental evaluations have been practically made with 28-30 subjects, in classic music, gamelan music, improvising misic and rakugo (comic story telling) performance. The video of all the subjects' faces has been recorded, the face images has been cliped from the video every one seconds, and quantification of emotion has been made by inputing them to a deep learning engine. In the experiment, heart rate also has been measured for all the subjects simultaneously, for analysis of state of stress / relax based on LF/HF evaluation. For visualization, we have created the experimental results by colored face animation videos, synchronously together with the performer's video, and then emotion transitions and stress / relax state transtions. In additional analysis of correlation of emotion of happiness between the subjects, it is cleared that similarity of emotion between subjects can be quantitatively-expressible and detectable. | |
| キーワード | （和） | 機械学習 / 深層学習 / 顔画像 / 感情抽出 / 芸術と工学の融合 / 音楽 / 落語 / |
| （英） | Machine learning / Deep learning / Face image / Emotion extraction / Fusion of art and engineering / Music concert / Comic story telling / | |
| 文献情報 | 信学技報, vol. 118, no. 275, CS2018-63, pp. 43-49, 2018年11月. | |
| 資料番号 | CS2018-63 | |
| 発行日 | 2018-10-25 (CS) | |
| ISSN | Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| 査読に ついて |
本技術報告は査読を経ていない技術報告であり，推敲を加えられていずれかの場に発表されることがあります． | |
| PDFダウンロード | CS2018-63 |
|
| 研究会情報 | |
| 研究会 | CS |
| 開催期間 | 2018-11-01 - 2018-11-02 |
| 開催地（和） | 子規記念館博物館（道後温泉） |
| 開催地（英） | The Shiki Museum |
| テーマ（和） | ブロードバンドアクセス，ホームネットワーク，ネットワークサービス，通信利用アプリケーション，一般 |
| テーマ（英） | Broadband Access Systems, Home Networks, Network Services, Applications for Communications, etc. |
| 講演論文情報の詳細 | |
| 申込み研究会 | CS |
| 会議コード | 2018-11-CS |
| 本文の言語 | 日本語 |
| タイトル（和） | 顔画像からの感情抽出とその数値化・可視化 |
| サブタイトル（和） | 音楽鑑賞・落語鑑賞における評価実験 |
| タイトル（英） | Emotion Extraction from Face Images and its Quantification/Visualization |
| サブタイトル（英） | Experimental Evaluation in Music Concerts and Rakugo Performance |
| キーワード(1)（和/英） | 機械学習 / Machine learning |
| キーワード(2)（和/英） | 深層学習 / Deep learning |
| キーワード(3)（和/英） | 顔画像 / Face image |
| キーワード(4)（和/英） | 感情抽出 / Emotion extraction |
| キーワード(5)（和/英） | 芸術と工学の融合 / Fusion of art and engineering |
| キーワード(6)（和/英） | 音楽 / Music concert |
| キーワード(7)（和/英） | 落語 / Comic story telling |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 藤堂 聖真 / Seima Todo / トウドウ セイマ |
| 第1著者 所属（和/英） | 大阪市立大学 (略称： 阪市大) Osaka City University (略称： Osaka City Univ.) |
| 第2著者 氏名（和/英/ヨミ） | 辻岡 哲夫 / Tetsuo Tsujioka / ツジオカ テツオ |
| 第2著者 所属（和/英） | 大阪市立大学 (略称： 阪市大) Osaka City University (略称： Osaka City Univ.) |
| 第3著者 氏名（和/英/ヨミ） | 岡崎 和伸 / Kazunobu Okazaki / オカザキ カズノブ |
| 第3著者 所属（和/英） | 大阪市立大学 (略称： 阪市大) Osaka City University (略称： Osaka City Univ.) |
| 第4著者 氏名（和/英/ヨミ） | 小田中 章浩 / Akihiro Odanaka / オダナカ アキヒロ |
| 第4著者 所属（和/英） | 大阪市立大学 (略称： 阪市大) Osaka City University (略称： Osaka City Univ.) |
| 講演者 | 第1著者 |
| 発表日時 | 2018-11-01 11:00:00 |
| 発表時間 | 20分 |
| 申込先研究会 | CS |
| 資料番号 | CS2018-63 |
| 巻番号（vol） | vol.118 |
| 号番号（no） | no.275 |
| ページ範囲 | pp.43-49 |
| ページ数 | 7 |
| 発行日 | 2018-10-25 (CS) |
[研究会発表申込システムのトップページに戻る]