ご案内 入会して研究会活動をもっとお得に!研究会参加費・年間登録費が会員価格になります。
お知らせ 【重要】研究会参加費の支払いおよび原稿アップロード手続きの変更に関するご案内【1種研のみ】
電子情報通信学会 研究会発表申込システム
講演論文 詳細
技報閲覧サービス
[ログイン]
技報アーカイブ
 トップに戻る 前のページに戻る   [Japanese] / [English] 

講演抄録/キーワード
講演名 2026-03-16 11:25
音楽感情認識に基づく聴覚障害者向け視覚提示システムの設計と評価
○武田晴彦・大川 学(筑波技大) WIT2025-29
抄録 (和) ろう・難聴者にとって,聴者と同様に音楽を鑑賞することは困難であり,特に音楽が喚起する「情緒的情報」の欠落に対する情報保障は十分とは言えない.本研究では,深層学習による音楽感情認識と色彩心理物理学を統合した,新たな視覚提示システムを提案する.提案システムでは,歌手の表情や歌声といった補助情報を利用できない最も困難なピアノ楽曲を対象とし,データセット EMOPIA を用いて学習した Short-chunk ResNet により,ラッセルの円環モデルに基づく4象限の感情推定を行う.推定した感情値と楽曲特徴量を,色相・明度・彩度の3属性へリアルタイムに変換し,音楽可視化映像として提示する.さらに,提案システムの有効性を検証するため,ろう・難聴学生13名を対象に評価実験を実施した結果,満足度・感情伝達・アクセシビリティの指標において統計的に有意な改善が確認された.また,感情識別では「悲しみ」および「怒り」において高い識別率が得られ,音楽鑑賞のアクセシビリティ向上に対する有効性が示された. 
(英) For deaf and hard of hearing, appreciating music in the same manner as hearing individuals is difficult, and the information accessibility regarding the lack of "emotional information" evoked by music, in particular, cannot be said to be sufficient. In this study, we propose a new visual presentation system that integrates music emotion recognition via deep learning with color psychophysics.
The proposed system targets piano compositions, which are the most difficult as auxiliary information such as the facial expressions or singing voices of vocalists cannot be utilized. Using a Short-chunk ResNet trained on the EMOPIA dataset, the system performs emotion estimation across four quadrants based on Russell's circumplex model. The estimated emotional values and musical features are converted in real time into the three attributes of hue, lightness, and saturation, and presented as music visualization video. Furthermore, to verify the effectiveness of the proposed system, an evaluation experiment was conducted with thirteen deaf and hard of hearing students. As a result, statistically significant improvements were confirmed in the indices of satisfaction, emotion transmission, and accessibility. Additionally, in emotion identification, high identification rates were obtained for "sadness" and "anger," demonstrating the effectiveness of the system for improving the accessibility of music appreciation.
キーワード (和) 音楽感情認識 / 音楽可視化 / 深層学習 / 情報保障 / ろう・難聴者 / / /  
(英) Music Emotion Recognition / Music Visualization / Deep Learning / Information Accessibility / Deaf and hard-of-hearing / / /  
文献情報 信学技報, vol. 125, no. 403, WIT2025-29, pp. 53-58, 2026年3月.
資料番号 WIT2025-29 
発行日 2026-03-08 (WIT) 
ISSN Online edition: ISSN 2432-6380
著作権に
ついて
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034)
PDFダウンロード WIT2025-29

研究会情報
研究会 WIT IPSJ-AAC  
開催期間 2026-03-15 - 2026-03-16 
開催地(和) 筑波技術大学春日キャンパス 
開催地(英)  
テーマ(和) 聴覚・視覚障害者支援、一般 
テーマ(英)  
講演論文情報の詳細
申込み研究会 WIT 
会議コード 2026-03-WIT-AAC 
本文の言語 日本語 
タイトル(和) 音楽感情認識に基づく聴覚障害者向け視覚提示システムの設計と評価 
サブタイトル(和)  
タイトル(英) Visual System for Deaf and Hard-of-Hearing Users Based on Music Emotion Recognition 
サブタイトル(英)  
キーワード(1)(和/英) 音楽感情認識 / Music Emotion Recognition  
キーワード(2)(和/英) 音楽可視化 / Music Visualization  
キーワード(3)(和/英) 深層学習 / Deep Learning  
キーワード(4)(和/英) 情報保障 / Information Accessibility  
キーワード(5)(和/英) ろう・難聴者 / Deaf and hard-of-hearing  
キーワード(6)(和/英) /  
キーワード(7)(和/英) /  
キーワード(8)(和/英) /  
第1著者 氏名(和/英/ヨミ) 武田 晴彦 / Haruhiko Takeda / タケダ ハルヒコ
第1著者 所属(和/英) 筑波技術大学 (略称: 筑波技大)
Tsukuba University of Technology (略称: TUT)
第2著者 氏名(和/英/ヨミ) 大川 学 / Manabu Okawa / オオガワ マナブ
第2著者 所属(和/英) 筑波技術大学 (略称: 筑波技大)
Tsukuba University of Technology (略称: TUT)
第3著者 氏名(和/英/ヨミ) / /
第3著者 所属(和/英) (略称: )
(略称: )
第4著者 氏名(和/英/ヨミ) / /
第4著者 所属(和/英) (略称: )
(略称: )
第5著者 氏名(和/英/ヨミ) / /
第5著者 所属(和/英) (略称: )
(略称: )
第6著者 氏名(和/英/ヨミ) / /
第6著者 所属(和/英) (略称: )
(略称: )
第7著者 氏名(和/英/ヨミ) / /
第7著者 所属(和/英) (略称: )
(略称: )
第8著者 氏名(和/英/ヨミ) / /
第8著者 所属(和/英) (略称: )
(略称: )
第9著者 氏名(和/英/ヨミ) / /
第9著者 所属(和/英) (略称: )
(略称: )
第10著者 氏名(和/英/ヨミ) / /
第10著者 所属(和/英) (略称: )
(略称: )
第11著者 氏名(和/英/ヨミ) / /
第11著者 所属(和/英) (略称: )
(略称: )
第12著者 氏名(和/英/ヨミ) / /
第12著者 所属(和/英) (略称: )
(略称: )
第13著者 氏名(和/英/ヨミ) / /
第13著者 所属(和/英) (略称: )
(略称: )
第14著者 氏名(和/英/ヨミ) / /
第14著者 所属(和/英) (略称: )
(略称: )
第15著者 氏名(和/英/ヨミ) / /
第15著者 所属(和/英) (略称: )
(略称: )
第16著者 氏名(和/英/ヨミ) / /
第16著者 所属(和/英) (略称: )
(略称: )
第17著者 氏名(和/英/ヨミ) / /
第17著者 所属(和/英) (略称: )
(略称: )
第18著者 氏名(和/英/ヨミ) / /
第18著者 所属(和/英) (略称: )
(略称: )
第19著者 氏名(和/英/ヨミ) / /
第19著者 所属(和/英) (略称: )
(略称: )
第20著者 氏名(和/英/ヨミ) / /
第20著者 所属(和/英) (略称: )
(略称: )
第21著者 氏名(和/英/ヨミ) / /
第21著者 所属(和/英) (略称: )
(略称: )
第22著者 氏名(和/英/ヨミ) / /
第22著者 所属(和/英) (略称: )
(略称: )
第23著者 氏名(和/英/ヨミ) / /
第23著者 所属(和/英) (略称: )
(略称: )
第24著者 氏名(和/英/ヨミ) / /
第24著者 所属(和/英) (略称: )
(略称: )
第25著者 氏名(和/英/ヨミ) / /
第25著者 所属(和/英) (略称: )
(略称: )
第26著者 氏名(和/英/ヨミ) / /
第26著者 所属(和/英) (略称: )
(略称: )
第27著者 氏名(和/英/ヨミ) / /
第27著者 所属(和/英) (略称: )
(略称: )
第28著者 氏名(和/英/ヨミ) / /
第28著者 所属(和/英) (略称: )
(略称: )
第29著者 氏名(和/英/ヨミ) / /
第29著者 所属(和/英) (略称: )
(略称: )
第30著者 氏名(和/英/ヨミ) / /
第30著者 所属(和/英) (略称: )
(略称: )
第31著者 氏名(和/英/ヨミ) / /
第31著者 所属(和/英) (略称: )
(略称: )
第32著者 氏名(和/英/ヨミ) / /
第32著者 所属(和/英) (略称: )
(略称: )
第33著者 氏名(和/英/ヨミ) / /
第33著者 所属(和/英) (略称: )
(略称: )
第34著者 氏名(和/英/ヨミ) / /
第34著者 所属(和/英) (略称: )
(略称: )
第35著者 氏名(和/英/ヨミ) / /
第35著者 所属(和/英) (略称: )
(略称: )
第36著者 氏名(和/英/ヨミ) / /
第36著者 所属(和/英) (略称: )
(略称: )
講演者 第1著者 
発表日時 2026-03-16 11:25:00 
発表時間 25分 
申込先研究会 WIT 
資料番号 WIT2025-29 
巻番号(vol) vol.125 
号番号(no) no.403 
ページ範囲 pp.53-58 
ページ数 6 
発行日 2026-03-08 (WIT) 


[研究会発表申込システムのトップページに戻る]

[電子情報通信学会ホームページ]

(日本語ページの行間係数: 1)

IEICE / 電子情報通信学会