講演抄録/キーワード |
講演名 |
2021-09-16 14:35
金融ドメインにおける事前学習BERTモデルの性能検証 ○鈴木雅弘・坂地泰紀・平野正徳・和泉 潔(東大) NLC2021-12 |
抄録 |
(和) |
近年,BERTをはじめとした大規模コーパスによって事前学習された汎用言語モデルが盛んに用いられている.日本語においてもWikipediaによる事前学習モデルがいくつか公開されている.一方で金融分野においては専門的な言い回しが用いられるため,汎用モデルでは十分な効果が得られない可能性がある.本研究では,金融ドメインのコーパスを用いた事前学習モデルを構築し,金融ドメインのタスクにおける評価を行う. |
(英) |
Recently, general-purpose language models pre-trained on large corpora such as BERT have been widely used. In Japanese, several pre-trained models based on Wikipedia have been published. On the other hand, general-purpose models may not be sufficiently effective in the financial domain because of the use of specialized phrases. In this study, we construct a pre-training model using a corpus of the financial domain, and evaluate it on a task in the financial domain. |
キーワード |
(和) |
自然言語処理 / 言語資源 / BERT / 金融文書 / / / / |
(英) |
Natural language processing / Language resources / BERT / Financial text / / / / |
文献情報 |
信学技報, vol. 121, no. 178, NLC2021-12, pp. 26-29, 2021年9月. |
資料番号 |
NLC2021-12 |
発行日 |
2021-09-09 (NLC) |
ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
PDFダウンロード |
NLC2021-12 |
研究会情報 |
研究会 |
NLC |
開催期間 |
2021-09-16 - 2021-09-16 |
開催地(和) |
オンライン開催 |
開催地(英) |
Online |
テーマ(和) |
第18回テキストアナリティクス・シンポジウム |
テーマ(英) |
The 18th Text Analytics Symposium |
講演論文情報の詳細 |
申込み研究会 |
NLC |
会議コード |
2021-09-NLC |
本文の言語 |
日本語 |
タイトル(和) |
金融ドメインにおける事前学習BERTモデルの性能検証 |
サブタイトル(和) |
|
タイトル(英) |
Performance Validation of Pre-Trained BERT in the Financial Domain |
サブタイトル(英) |
|
キーワード(1)(和/英) |
自然言語処理 / Natural language processing |
キーワード(2)(和/英) |
言語資源 / Language resources |
キーワード(3)(和/英) |
BERT / BERT |
キーワード(4)(和/英) |
金融文書 / Financial text |
キーワード(5)(和/英) |
/ |
キーワード(6)(和/英) |
/ |
キーワード(7)(和/英) |
/ |
キーワード(8)(和/英) |
/ |
第1著者 氏名(和/英/ヨミ) |
鈴木 雅弘 / Masahiro Suzuki / スズキ マサヒロ |
第1著者 所属(和/英) |
東京大学 (略称: 東大)
The University of Tokyo (略称: The Univ. of Tokyo) |
第2著者 氏名(和/英/ヨミ) |
坂地 泰紀 / Hiroki Sakaji / サカジ ヒロキ |
第2著者 所属(和/英) |
東京大学 (略称: 東大)
The University of Tokyo (略称: The Univ. of Tokyo) |
第3著者 氏名(和/英/ヨミ) |
平野 正徳 / Masanori Hirano / ヒラノ マサノリ |
第3著者 所属(和/英) |
東京大学 (略称: 東大)
The University of Tokyo (略称: The Univ. of Tokyo) |
第4著者 氏名(和/英/ヨミ) |
和泉 潔 / Kiyoashi Izumi / イズミ キヨシ |
第4著者 所属(和/英) |
東京大学 (略称: 東大)
The University of Tokyo (略称: The Univ. of Tokyo) |
第5著者 氏名(和/英/ヨミ) |
/ / |
第5著者 所属(和/英) |
(略称: )
(略称: ) |
第6著者 氏名(和/英/ヨミ) |
/ / |
第6著者 所属(和/英) |
(略称: )
(略称: ) |
第7著者 氏名(和/英/ヨミ) |
/ / |
第7著者 所属(和/英) |
(略称: )
(略称: ) |
第8著者 氏名(和/英/ヨミ) |
/ / |
第8著者 所属(和/英) |
(略称: )
(略称: ) |
第9著者 氏名(和/英/ヨミ) |
/ / |
第9著者 所属(和/英) |
(略称: )
(略称: ) |
第10著者 氏名(和/英/ヨミ) |
/ / |
第10著者 所属(和/英) |
(略称: )
(略称: ) |
第11著者 氏名(和/英/ヨミ) |
/ / |
第11著者 所属(和/英) |
(略称: )
(略称: ) |
第12著者 氏名(和/英/ヨミ) |
/ / |
第12著者 所属(和/英) |
(略称: )
(略称: ) |
第13著者 氏名(和/英/ヨミ) |
/ / |
第13著者 所属(和/英) |
(略称: )
(略称: ) |
第14著者 氏名(和/英/ヨミ) |
/ / |
第14著者 所属(和/英) |
(略称: )
(略称: ) |
第15著者 氏名(和/英/ヨミ) |
/ / |
第15著者 所属(和/英) |
(略称: )
(略称: ) |
第16著者 氏名(和/英/ヨミ) |
/ / |
第16著者 所属(和/英) |
(略称: )
(略称: ) |
第17著者 氏名(和/英/ヨミ) |
/ / |
第17著者 所属(和/英) |
(略称: )
(略称: ) |
第18著者 氏名(和/英/ヨミ) |
/ / |
第18著者 所属(和/英) |
(略称: )
(略称: ) |
第19著者 氏名(和/英/ヨミ) |
/ / |
第19著者 所属(和/英) |
(略称: )
(略称: ) |
第20著者 氏名(和/英/ヨミ) |
/ / |
第20著者 所属(和/英) |
(略称: )
(略称: ) |
第21著者 氏名(和/英/ヨミ) |
/ / |
第21著者 所属(和/英) |
(略称: )
(略称: ) |
第22著者 氏名(和/英/ヨミ) |
/ / |
第22著者 所属(和/英) |
(略称: )
(略称: ) |
第23著者 氏名(和/英/ヨミ) |
/ / |
第23著者 所属(和/英) |
(略称: )
(略称: ) |
第24著者 氏名(和/英/ヨミ) |
/ / |
第24著者 所属(和/英) |
(略称: )
(略称: ) |
第25著者 氏名(和/英/ヨミ) |
/ / |
第25著者 所属(和/英) |
(略称: )
(略称: ) |
第26著者 氏名(和/英/ヨミ) |
/ / |
第26著者 所属(和/英) |
(略称: )
(略称: ) |
第27著者 氏名(和/英/ヨミ) |
/ / |
第27著者 所属(和/英) |
(略称: )
(略称: ) |
第28著者 氏名(和/英/ヨミ) |
/ / |
第28著者 所属(和/英) |
(略称: )
(略称: ) |
第29著者 氏名(和/英/ヨミ) |
/ / |
第29著者 所属(和/英) |
(略称: )
(略称: ) |
第30著者 氏名(和/英/ヨミ) |
/ / |
第30著者 所属(和/英) |
(略称: )
(略称: ) |
第31著者 氏名(和/英/ヨミ) |
/ / |
第31著者 所属(和/英) |
(略称: )
(略称: ) |
第32著者 氏名(和/英/ヨミ) |
/ / |
第32著者 所属(和/英) |
(略称: )
(略称: ) |
第33著者 氏名(和/英/ヨミ) |
/ / |
第33著者 所属(和/英) |
(略称: )
(略称: ) |
第34著者 氏名(和/英/ヨミ) |
/ / |
第34著者 所属(和/英) |
(略称: )
(略称: ) |
第35著者 氏名(和/英/ヨミ) |
/ / |
第35著者 所属(和/英) |
(略称: )
(略称: ) |
第36著者 氏名(和/英/ヨミ) |
/ / |
第36著者 所属(和/英) |
(略称: )
(略称: ) |
講演者 |
第1著者 |
発表日時 |
2021-09-16 14:35:00 |
発表時間 |
25分 |
申込先研究会 |
NLC |
資料番号 |
NLC2021-12 |
巻番号(vol) |
vol.121 |
号番号(no) |
no.178 |
ページ範囲 |
pp.26-29 |
ページ数 |
4 |
発行日 |
2021-09-09 (NLC) |