| 講演抄録/キーワード |
| 講演名 |
2025-03-04 09:30
CLaSP: 時系列信号と自然言語によるマルチモーダル基盤モデル ○伊藤 葵(日立/法政大)・土肥宏太・川口洋平(日立) EA2024-124 SIP2024-159 SP2024-65 |
| 抄録 |
(和) |
本論文では,時系列信号パターンを記述する自然言語をクエリとして時系列信号を検索可能な基盤モデル「CLaSP」を提案する.従来課題であった時系列信号パターンのクラス設計や同義語辞書の事前定義の問題を克服するため,時系列信号データと対応する自然言語表現を用いた対照学習を行う.これにより,モダリティ間の意味的距離を反映した共通の埋め込み空間を形成する.実験を通じて,CLaSPは自然言語による表現をクエリとした時系列信号データの検索が可能であることが示された. |
| (英) |
This paper proposes a foundational model, "CLaSP,″capable of retrieving time-series signal data using natural language descriptions of the signal characteristics as queries.
To address the conventional challenges associated with classifying time-series signal patterns and the need for predefined synonym dictionaries, we employ contrastive learning with time-series data and their corresponding natural language descriptions.
This approach creates a shared embedding space that mirrors the semantic distances between modalities.
Experimental results indicate that the CLaSP effectively retrieves time-series signal data using queries expressed in natural language. |
| キーワード |
(和) |
時系列データ処理 / 信号処理 / 対照学習 / / / / / |
| (英) |
Time-Series Data Processing / Signal Processing / Contrastive Learning / / / / / |
| 文献情報 |
信学技報, vol. 124, no. 390, SIP2024-159, pp. 289-294, 2025年3月. |
| 資料番号 |
SIP2024-159 |
| 発行日 |
2025-02-23 (EA, SIP, SP) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
EA2024-124 SIP2024-159 SP2024-65 |
| 研究会情報 |
| 研究会 |
EA SIP SP IPSJ-SLP |
| 開催期間 |
2025-03-02 - 2025-03-04 |
| 開催地(和) |
沖縄県青年会館 |
| 開催地(英) |
|
| テーマ(和) |
応用/電気音響, 信号処理,音声,一般 |
| テーマ(英) |
|
| 講演論文情報の詳細 |
| 申込み研究会 |
SIP |
| 会議コード |
2025-03-EA-SIP-SP-SLP |
| 本文の言語 |
日本語 |
| タイトル(和) |
CLaSP: 時系列信号と自然言語によるマルチモーダル基盤モデル |
| サブタイトル(和) |
|
| タイトル(英) |
CLaSP: Multimodal Foundation Model Using Time Series Signal Data and Natural Language |
| サブタイトル(英) |
|
| キーワード(1)(和/英) |
時系列データ処理 / Time-Series Data Processing |
| キーワード(2)(和/英) |
信号処理 / Signal Processing |
| キーワード(3)(和/英) |
対照学習 / Contrastive Learning |
| キーワード(4)(和/英) |
/ |
| キーワード(5)(和/英) |
/ |
| キーワード(6)(和/英) |
/ |
| キーワード(7)(和/英) |
/ |
| キーワード(8)(和/英) |
/ |
| 第1著者 氏名(和/英/ヨミ) |
伊藤 葵 / Aoi Ito / イトウ アオイ |
| 第1著者 所属(和/英) |
株式会社 日立製作所 中央研究所/法政大学 (略称: 日立/法政大)
Hitachi Limited/Hosei University (略称: Hitachi Ltd./Hosei Univ.) |
| 第2著者 氏名(和/英/ヨミ) |
土肥 宏太 / Kota Dohi / ドヒ コウタ |
| 第2著者 所属(和/英) |
株式会社 日立製作所 中央研究所 (略称: 日立)
Hitachi Limited (略称: Hitachi Ltd.) |
| 第3著者 氏名(和/英/ヨミ) |
川口 洋平 / Yohei Kawaguchi / カワグチ ヨウヘイ |
| 第3著者 所属(和/英) |
株式会社 日立製作所 中央研究所 (略称: 日立)
Hitachi Limited (略称: Hitachi Ltd.) |
| 第4著者 氏名(和/英/ヨミ) |
/ / |
| 第4著者 所属(和/英) |
(略称: )
(略称: ) |
| 第5著者 氏名(和/英/ヨミ) |
/ / |
| 第5著者 所属(和/英) |
(略称: )
(略称: ) |
| 第6著者 氏名(和/英/ヨミ) |
/ / |
| 第6著者 所属(和/英) |
(略称: )
(略称: ) |
| 第7著者 氏名(和/英/ヨミ) |
/ / |
| 第7著者 所属(和/英) |
(略称: )
(略称: ) |
| 第8著者 氏名(和/英/ヨミ) |
/ / |
| 第8著者 所属(和/英) |
(略称: )
(略称: ) |
| 第9著者 氏名(和/英/ヨミ) |
/ / |
| 第9著者 所属(和/英) |
(略称: )
(略称: ) |
| 第10著者 氏名(和/英/ヨミ) |
/ / |
| 第10著者 所属(和/英) |
(略称: )
(略称: ) |
| 第11著者 氏名(和/英/ヨミ) |
/ / |
| 第11著者 所属(和/英) |
(略称: )
(略称: ) |
| 第12著者 氏名(和/英/ヨミ) |
/ / |
| 第12著者 所属(和/英) |
(略称: )
(略称: ) |
| 第13著者 氏名(和/英/ヨミ) |
/ / |
| 第13著者 所属(和/英) |
(略称: )
(略称: ) |
| 第14著者 氏名(和/英/ヨミ) |
/ / |
| 第14著者 所属(和/英) |
(略称: )
(略称: ) |
| 第15著者 氏名(和/英/ヨミ) |
/ / |
| 第15著者 所属(和/英) |
(略称: )
(略称: ) |
| 第16著者 氏名(和/英/ヨミ) |
/ / |
| 第16著者 所属(和/英) |
(略称: )
(略称: ) |
| 第17著者 氏名(和/英/ヨミ) |
/ / |
| 第17著者 所属(和/英) |
(略称: )
(略称: ) |
| 第18著者 氏名(和/英/ヨミ) |
/ / |
| 第18著者 所属(和/英) |
(略称: )
(略称: ) |
| 第19著者 氏名(和/英/ヨミ) |
/ / |
| 第19著者 所属(和/英) |
(略称: )
(略称: ) |
| 第20著者 氏名(和/英/ヨミ) |
/ / |
| 第20著者 所属(和/英) |
(略称: )
(略称: ) |
| 第21著者 氏名(和/英/ヨミ) |
/ / |
| 第21著者 所属(和/英) |
(略称: )
(略称: ) |
| 第22著者 氏名(和/英/ヨミ) |
/ / |
| 第22著者 所属(和/英) |
(略称: )
(略称: ) |
| 第23著者 氏名(和/英/ヨミ) |
/ / |
| 第23著者 所属(和/英) |
(略称: )
(略称: ) |
| 第24著者 氏名(和/英/ヨミ) |
/ / |
| 第24著者 所属(和/英) |
(略称: )
(略称: ) |
| 第25著者 氏名(和/英/ヨミ) |
/ / |
| 第25著者 所属(和/英) |
(略称: )
(略称: ) |
| 第26著者 氏名(和/英/ヨミ) |
/ / |
| 第26著者 所属(和/英) |
(略称: )
(略称: ) |
| 第27著者 氏名(和/英/ヨミ) |
/ / |
| 第27著者 所属(和/英) |
(略称: )
(略称: ) |
| 第28著者 氏名(和/英/ヨミ) |
/ / |
| 第28著者 所属(和/英) |
(略称: )
(略称: ) |
| 第29著者 氏名(和/英/ヨミ) |
/ / |
| 第29著者 所属(和/英) |
(略称: )
(略称: ) |
| 第30著者 氏名(和/英/ヨミ) |
/ / |
| 第30著者 所属(和/英) |
(略称: )
(略称: ) |
| 第31著者 氏名(和/英/ヨミ) |
/ / |
| 第31著者 所属(和/英) |
(略称: )
(略称: ) |
| 第32著者 氏名(和/英/ヨミ) |
/ / |
| 第32著者 所属(和/英) |
(略称: )
(略称: ) |
| 第33著者 氏名(和/英/ヨミ) |
/ / |
| 第33著者 所属(和/英) |
(略称: )
(略称: ) |
| 第34著者 氏名(和/英/ヨミ) |
/ / |
| 第34著者 所属(和/英) |
(略称: )
(略称: ) |
| 第35著者 氏名(和/英/ヨミ) |
/ / |
| 第35著者 所属(和/英) |
(略称: )
(略称: ) |
| 第36著者 氏名(和/英/ヨミ) |
/ / |
| 第36著者 所属(和/英) |
(略称: )
(略称: ) |
| 講演者 |
第1著者 |
| 発表日時 |
2025-03-04 09:30:00 |
| 発表時間 |
20分 |
| 申込先研究会 |
SIP |
| 資料番号 |
EA2024-124, SIP2024-159, SP2024-65 |
| 巻番号(vol) |
vol.124 |
| 号番号(no) |
no.389(EA), no.390(SIP), no.391(SP) |
| ページ範囲 |
pp.289-294 |
| ページ数 |
6 |
| 発行日 |
2025-02-23 (EA, SIP, SP) |
|