| 講演抄録/キーワード |
| 講演名 |
2025-03-07 13:40
GANを用いたMIDI再生音楽から実演奏風音楽へのスタイル変換 ○村山裕太郎・堀 幹矢・荒川 薫(明大) SIS2024-61 |
| 抄録 |
(和) |
近年、計算機による音楽演奏が普及しているが、演奏表情を含む音楽の生成は現状普及していない。本稿では演奏表情が付与された音楽を敵対的生成ネットワークの一つであるCycleGANによって生成する手法を提案する。本方式では、コンピュータによるMIDI再生音楽のメルスペクトログラムが、実際に人が演奏した音楽のメルスペクトログラムにスタイル変換されるように、CycleGANを学習する。その結果として、MIDI再生音楽をCycleGANのGANの生成器に入力することで、そのメルスペクトログラムは実演奏風のメルスペクトログラムに変換され、最終的に実演奏風音楽が出力される。ここで、CycleGANによる変換のみでは低周波数帯に不自然な音程のずれが発生するので、低周波数帯をMIDI再生音楽の低周波数帯に置き換えることで、この音程のずれを軽減する。主観評価の結果、従来のMIDI再生音楽と比較してより人間らしい演奏表情を持つことが示された。 |
| (英) |
In recent years, computer-generated music performances have become widespread, but the generation of music with expressive performance nuances has not yet been widely adopted. In this article, a method for generating music with expressive performance using CycleGAN is proposed. In this method, CycleGAN is trained so that the mel spectrogram of MIDI music be close to that of music performed by a human. As a result, the generator converts the style of the mel spectrogram of MIDI music to a realistic performed style, ultimately generating performance-like music from a given MIDI music. Here, since CycleGAN causes some unnatural pitch shifts in the low frequency range of the generated music, a method to replace the low frequency range with that of the MIDI music is proposed in order reduce them. Subjective evaluation indicate that the generated music exhibits more human-like expressive qualities compared to original MIDI music. |
| キーワード |
(和) |
深層学習 / CycleGAN / MIDI / 演奏表情 / ニューラルボコーダ / スタイル変換 / / |
| (英) |
Deep learning / CycleGAN / MIDI / performance expression / neural vocoder / style transfer / / |
| 文献情報 |
信学技報, vol. 124, no. 418, SIS2024-61, pp. 89-93, 2025年3月. |
| 資料番号 |
SIS2024-61 |
| 発行日 |
2025-02-27 (SIS) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
SIS2024-61 |
| 研究会情報 |
| 研究会 |
SIS |
| 開催期間 |
2025-03-06 - 2025-03-07 |
| 開催地(和) |
機械振興会館 |
| 開催地(英) |
Kikai-Shinko-Kaikan Bldg. |
| テーマ(和) |
ソフトコンピューティング,一般 |
| テーマ(英) |
Soft computing, etc. |
| 講演論文情報の詳細 |
| 申込み研究会 |
SIS |
| 会議コード |
2025-03-SIS |
| 本文の言語 |
日本語 |
| タイトル(和) |
GANを用いたMIDI再生音楽から実演奏風音楽へのスタイル変換 |
| サブタイトル(和) |
|
| タイトル(英) |
Style Transfer from MIDI Music to Realistic Performance-Style Music Using GANs |
| サブタイトル(英) |
|
| キーワード(1)(和/英) |
深層学習 / Deep learning |
| キーワード(2)(和/英) |
CycleGAN / CycleGAN |
| キーワード(3)(和/英) |
MIDI / MIDI |
| キーワード(4)(和/英) |
演奏表情 / performance expression |
| キーワード(5)(和/英) |
ニューラルボコーダ / neural vocoder |
| キーワード(6)(和/英) |
スタイル変換 / style transfer |
| キーワード(7)(和/英) |
/ |
| キーワード(8)(和/英) |
/ |
| 第1著者 氏名(和/英/ヨミ) |
村山 裕太郎 / Yutaro Murayama / ムラヤマ ユウタロウ |
| 第1著者 所属(和/英) |
明治大学 (略称: 明大)
Meiji University (略称: Meiji Univ.) |
| 第2著者 氏名(和/英/ヨミ) |
堀 幹矢 / Mikiya Hori / ホリ ミキヤ |
| 第2著者 所属(和/英) |
明治大学 (略称: 明大)
Meiji University (略称: Meiji Univ.) |
| 第3著者 氏名(和/英/ヨミ) |
荒川 薫 / Kaoru Arakawa / アラカワ カオル |
| 第3著者 所属(和/英) |
明治大学 (略称: 明大)
Meiji University (略称: Meiji Univ.) |
| 第4著者 氏名(和/英/ヨミ) |
/ / |
| 第4著者 所属(和/英) |
(略称: )
(略称: ) |
| 第5著者 氏名(和/英/ヨミ) |
/ / |
| 第5著者 所属(和/英) |
(略称: )
(略称: ) |
| 第6著者 氏名(和/英/ヨミ) |
/ / |
| 第6著者 所属(和/英) |
(略称: )
(略称: ) |
| 第7著者 氏名(和/英/ヨミ) |
/ / |
| 第7著者 所属(和/英) |
(略称: )
(略称: ) |
| 第8著者 氏名(和/英/ヨミ) |
/ / |
| 第8著者 所属(和/英) |
(略称: )
(略称: ) |
| 第9著者 氏名(和/英/ヨミ) |
/ / |
| 第9著者 所属(和/英) |
(略称: )
(略称: ) |
| 第10著者 氏名(和/英/ヨミ) |
/ / |
| 第10著者 所属(和/英) |
(略称: )
(略称: ) |
| 第11著者 氏名(和/英/ヨミ) |
/ / |
| 第11著者 所属(和/英) |
(略称: )
(略称: ) |
| 第12著者 氏名(和/英/ヨミ) |
/ / |
| 第12著者 所属(和/英) |
(略称: )
(略称: ) |
| 第13著者 氏名(和/英/ヨミ) |
/ / |
| 第13著者 所属(和/英) |
(略称: )
(略称: ) |
| 第14著者 氏名(和/英/ヨミ) |
/ / |
| 第14著者 所属(和/英) |
(略称: )
(略称: ) |
| 第15著者 氏名(和/英/ヨミ) |
/ / |
| 第15著者 所属(和/英) |
(略称: )
(略称: ) |
| 第16著者 氏名(和/英/ヨミ) |
/ / |
| 第16著者 所属(和/英) |
(略称: )
(略称: ) |
| 第17著者 氏名(和/英/ヨミ) |
/ / |
| 第17著者 所属(和/英) |
(略称: )
(略称: ) |
| 第18著者 氏名(和/英/ヨミ) |
/ / |
| 第18著者 所属(和/英) |
(略称: )
(略称: ) |
| 第19著者 氏名(和/英/ヨミ) |
/ / |
| 第19著者 所属(和/英) |
(略称: )
(略称: ) |
| 第20著者 氏名(和/英/ヨミ) |
/ / |
| 第20著者 所属(和/英) |
(略称: )
(略称: ) |
| 第21著者 氏名(和/英/ヨミ) |
/ / |
| 第21著者 所属(和/英) |
(略称: )
(略称: ) |
| 第22著者 氏名(和/英/ヨミ) |
/ / |
| 第22著者 所属(和/英) |
(略称: )
(略称: ) |
| 第23著者 氏名(和/英/ヨミ) |
/ / |
| 第23著者 所属(和/英) |
(略称: )
(略称: ) |
| 第24著者 氏名(和/英/ヨミ) |
/ / |
| 第24著者 所属(和/英) |
(略称: )
(略称: ) |
| 第25著者 氏名(和/英/ヨミ) |
/ / |
| 第25著者 所属(和/英) |
(略称: )
(略称: ) |
| 第26著者 氏名(和/英/ヨミ) |
/ / |
| 第26著者 所属(和/英) |
(略称: )
(略称: ) |
| 第27著者 氏名(和/英/ヨミ) |
/ / |
| 第27著者 所属(和/英) |
(略称: )
(略称: ) |
| 第28著者 氏名(和/英/ヨミ) |
/ / |
| 第28著者 所属(和/英) |
(略称: )
(略称: ) |
| 第29著者 氏名(和/英/ヨミ) |
/ / |
| 第29著者 所属(和/英) |
(略称: )
(略称: ) |
| 第30著者 氏名(和/英/ヨミ) |
/ / |
| 第30著者 所属(和/英) |
(略称: )
(略称: ) |
| 第31著者 氏名(和/英/ヨミ) |
/ / |
| 第31著者 所属(和/英) |
(略称: )
(略称: ) |
| 第32著者 氏名(和/英/ヨミ) |
/ / |
| 第32著者 所属(和/英) |
(略称: )
(略称: ) |
| 第33著者 氏名(和/英/ヨミ) |
/ / |
| 第33著者 所属(和/英) |
(略称: )
(略称: ) |
| 第34著者 氏名(和/英/ヨミ) |
/ / |
| 第34著者 所属(和/英) |
(略称: )
(略称: ) |
| 第35著者 氏名(和/英/ヨミ) |
/ / |
| 第35著者 所属(和/英) |
(略称: )
(略称: ) |
| 第36著者 氏名(和/英/ヨミ) |
/ / |
| 第36著者 所属(和/英) |
(略称: )
(略称: ) |
| 講演者 |
第1著者 |
| 発表日時 |
2025-03-07 13:40:00 |
| 発表時間 |
20分 |
| 申込先研究会 |
SIS |
| 資料番号 |
SIS2024-61 |
| 巻番号(vol) |
vol.124 |
| 号番号(no) |
no.418 |
| ページ範囲 |
pp.89-93 |
| ページ数 |
5 |
| 発行日 |
2025-02-27 (SIS) |