講演抄録/キーワード |
講演名 |
2024-02-23 16:00
連続手指画像の機械学習に基づく指の重なりに対応したピアノ運指認識手法 ○矢川拓斗・三好 遼・秋月秀一・橋本 学(中京大) HIP2023-111 |
抄録 |
(和) |
本研究は,ピアノ演奏の学習支援や熟練者解析のための,運指認識手法の提案を目的とする.運指認識において,指の重なりは,打鍵している指そのものが観測不可となることから問題視されている.しかし,人間の手の構造的に,打鍵の瞬間における手には,各指によって傾向が存在すると考えられる.そこで,各指による打鍵のようすを分析したところ,それらの傾向は,打鍵した鍵盤の周辺領域における,打鍵前後の動きとして確認された.本研究ではこれに着目し,鍵盤周辺における,打鍵前後の連続した画像を学習することによって,指の重なりに対応した運指認識手法を提案した.実演奏における実験では,25008回分の打鍵によるデータを学習し,重なりありの打鍵に対して90.2%の認識成功率を確認した. |
(英) |
The purpose of this study is to propose a piano-fingering recognition method for educating beginners and analyzing experts in piano player. In fingering recognition, overlapped fingers are considered a problem because the fingers are unobservable. However, the movement of hand have a tendency for each finger in keystroke due to the structure of the hand. We analyzed the appearance in keystroke for each finger and found that these tendencies were observed as before and after movements around the keyboard that was stroked. In this study, we proposed a fingering recognition method for overlapped fingers based on machine learning of sequential hand images around the keyboard that was stroked. In the experiment, after learning 25008 keystrokes, the proposed method achieves a recognition success rate of 90.2% for overlapped fingers. |
キーワード |
(和) |
ピアノ運指認識 / ヒューマンセンシング / オクルージョン / CNN / 音楽 / / / |
(英) |
Piano-Fingering Recognition / Human-sensing / Overlapped / CNN / Music / / / |
文献情報 |
信学技報, vol. 123, no. 386, HIP2023-111, pp. 90-94, 2024年2月. |
資料番号 |
HIP2023-111 |
発行日 |
2024-02-15 (HIP) |
ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
HIP2023-111 |
研究会情報 |
研究会 |
HIP ITE-HI VRPSY ASJ-H |
開催期間 |
2024-02-22 - 2024-02-23 |
開催地(和) |
那覇市ぶんかテンブス館 |
開催地(英) |
|
テーマ(和) |
VR心理,ヒューマン情報処理,視覚,聴覚,マルチモーダル,一般 |
テーマ(英) |
|
講演論文情報の詳細 |
申込み研究会 |
HIP |
会議コード |
2024-02-HIP-HI |
本文の言語 |
日本語 |
タイトル(和) |
連続手指画像の機械学習に基づく指の重なりに対応したピアノ運指認識手法 |
サブタイトル(和) |
|
タイトル(英) |
A Piano-Fingering Recognition Method for Overlapped Fingers based on Machine Learning of Sequential Hand Images |
サブタイトル(英) |
|
キーワード(1)(和/英) |
ピアノ運指認識 / Piano-Fingering Recognition |
キーワード(2)(和/英) |
ヒューマンセンシング / Human-sensing |
キーワード(3)(和/英) |
オクルージョン / Overlapped |
キーワード(4)(和/英) |
CNN / CNN |
キーワード(5)(和/英) |
音楽 / Music |
キーワード(6)(和/英) |
/ |
キーワード(7)(和/英) |
/ |
キーワード(8)(和/英) |
/ |
第1著者 氏名(和/英/ヨミ) |
矢川 拓斗 / Takuto Yagawa / ヤガワ タクト |
第1著者 所属(和/英) |
中京大学 (略称: 中京大)
Chukyo University (略称: Chukyo Univ.) |
第2著者 氏名(和/英/ヨミ) |
三好 遼 / Ryo Miyoshi / ミヨシ リョウ |
第2著者 所属(和/英) |
中京大学 (略称: 中京大)
Chukyo University (略称: Chukyo Univ.) |
第3著者 氏名(和/英/ヨミ) |
秋月 秀一 / Shuichi Akizuki / アキヅキ シュウイチ |
第3著者 所属(和/英) |
中京大学 (略称: 中京大)
Chukyo University (略称: Chukyo Univ.) |
第4著者 氏名(和/英/ヨミ) |
橋本 学 / Manabu Hashimoto / ハシモト マナブ |
第4著者 所属(和/英) |
中京大学 (略称: 中京大)
Chukyo University (略称: Chukyo Univ.) |
第5著者 氏名(和/英/ヨミ) |
/ / |
第5著者 所属(和/英) |
(略称: )
(略称: ) |
第6著者 氏名(和/英/ヨミ) |
/ / |
第6著者 所属(和/英) |
(略称: )
(略称: ) |
第7著者 氏名(和/英/ヨミ) |
/ / |
第7著者 所属(和/英) |
(略称: )
(略称: ) |
第8著者 氏名(和/英/ヨミ) |
/ / |
第8著者 所属(和/英) |
(略称: )
(略称: ) |
第9著者 氏名(和/英/ヨミ) |
/ / |
第9著者 所属(和/英) |
(略称: )
(略称: ) |
第10著者 氏名(和/英/ヨミ) |
/ / |
第10著者 所属(和/英) |
(略称: )
(略称: ) |
第11著者 氏名(和/英/ヨミ) |
/ / |
第11著者 所属(和/英) |
(略称: )
(略称: ) |
第12著者 氏名(和/英/ヨミ) |
/ / |
第12著者 所属(和/英) |
(略称: )
(略称: ) |
第13著者 氏名(和/英/ヨミ) |
/ / |
第13著者 所属(和/英) |
(略称: )
(略称: ) |
第14著者 氏名(和/英/ヨミ) |
/ / |
第14著者 所属(和/英) |
(略称: )
(略称: ) |
第15著者 氏名(和/英/ヨミ) |
/ / |
第15著者 所属(和/英) |
(略称: )
(略称: ) |
第16著者 氏名(和/英/ヨミ) |
/ / |
第16著者 所属(和/英) |
(略称: )
(略称: ) |
第17著者 氏名(和/英/ヨミ) |
/ / |
第17著者 所属(和/英) |
(略称: )
(略称: ) |
第18著者 氏名(和/英/ヨミ) |
/ / |
第18著者 所属(和/英) |
(略称: )
(略称: ) |
第19著者 氏名(和/英/ヨミ) |
/ / |
第19著者 所属(和/英) |
(略称: )
(略称: ) |
第20著者 氏名(和/英/ヨミ) |
/ / |
第20著者 所属(和/英) |
(略称: )
(略称: ) |
講演者 |
第1著者 |
発表日時 |
2024-02-23 16:00:00 |
発表時間 |
20分 |
申込先研究会 |
HIP |
資料番号 |
HIP2023-111 |
巻番号(vol) |
vol.123 |
号番号(no) |
no.386 |
ページ範囲 |
pp.90-94 |
ページ数 |
5 |
発行日 |
2024-02-15 (HIP) |