| 講演抄録/キーワード |
| 講演名 |
2024-05-22 14:55
環境音の模倣音声を利用した環境音合成とデータセット構築 ○岡本悠希(立命館大)・井本桂右(同志社大)・高道慎之介(東大/慶大)・永瀬亮太郎・福森隆寛・山下洋一(立命館大) EA2024-5 |
| 抄録 |
(和) |
環境音の特徴を表現する方法の一つに,人間の声によって環境音を模倣した音声(以下,模倣音声)が挙げられる.従来の環境音合成における入力情報(画像,テキストなど)では,環境音の音高やリズムの特徴を表現できない.一方で模倣音声は,環境音の音高やリズムを表現するために有効である.そこで本論文では,環境音に対する模倣音声を収録したデータセットを構築する.また,構築したデータセットを用いた環境音合成手法を提案する.環境音合成モデルの入力に模倣音声と音響イベントラベルを用いることで,合成音の音源の種類,音高,リズムの制御が期待できる.評価実験より,模倣音声の利用が,合成音の音高やリズムの制御に有効であることを示した. |
| (英) |
One way to represent the characteristics of environmental sounds is to imitate the environmental sounds by human voice called vocal imitation. The input information (e.g., image, text, etc.) in conventional environmental sound synthesis cannot represent the pitch and rhythm of environmental sounds.On the other hand, vocal imitation is effective in representing the pitch and rhythm of environmental sounds.We thus create a dataset of vocal imitations of environmental sounds.We also propose an environmental sound synthesis method using vocal imitation of environmental sounds.Using vocal imitations and sound event labels as input to the environmental sound synthesis model, we can control the pitch, rhythm, and sound event of the synthesized sounds.Experimental results show that using vocal imitations effectively controls the pitch and rhythm of synthesized sounds. |
| キーワード |
(和) |
環境音合成 / 環境音変換 / 音声模倣 / 音響イベントラベル / / / / |
| (英) |
Environmental sound synthesis / Environmental sound conversion / Vocal imitation / Sound event label / / / / |
| 文献情報 |
信学技報, vol. 124, no. 42, EA2024-5, pp. 22-22, 2024年5月. |
| 資料番号 |
EA2024-5 |
| 発行日 |
2024-05-15 (EA) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
EA2024-5 |