| 講演抄録/キーワード |
| 講演名 |
2021-05-13 10:05
ハイブリッドクラウド構成における分析処理の並列度最適化方式 ○村瀬香緒里・林 真一・金子 聡・村山耕一(日立) ICM2021-3 |
| 抄録 |
(和) |
データをオンプレミスに配置し,分析処理をパブリッククラウドで実行するデータ分析基盤は,データの詳細管理を可能とし,柔軟に処理性能を増減できる利点を併せ持つ.一方で,ハイブリッドクラウド構成では,オンプレミスとパブリッククラウドの設計方針の違いから,リソースの即時増減が難しいオンプレミスの性能に対して分析処理の並列度を必要以上に高くするとコストパフォーマンスが下がる場合がある.本研究では,ITインフラに詳しくないデータ分析者でも前述の構成で適切な分析処理の並列度を決定できる方式を提案する.また本方式によりコストパフォーマンスが低下しない適切な並列度を予測できる見込みを得た. |
| (英) |
A hybrid data analytics platform that consists of data lake on on-premise and servers for analytical processing on public cloud has the advantages of both detailed data management and flexible performance adjustment. However, for some cases cost performance declines due to design policy differences between on-premise and public cloud. For instance, cases where degree of parallelism for data analytics is set higher than necessary since it is difficult to change amount of processing resources of on-premise immediately. In this paper, we propose an optimization method for determining degree of parallelism based on allocatable on-premise resources of the hybrid data analytics platform. We prospect that it can predict appropriate degree of parallelism, and achieve an improved cost performance. |
| キーワード |
(和) |
データ分析基盤 / ハイブリッドクラウドストレージ / 並列度 / 最適化 / / / / |
| (英) |
Data analytics platform / Hybrid cloud storage / Parallelism / ETL / Optimization / / / |
| 文献情報 |
信学技報, vol. 121, no. 13, ICM2021-3, pp. 13-18, 2021年5月. |
| 資料番号 |
ICM2021-3 |
| 発行日 |
2021-05-06 (ICM) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
ICM2021-3 |
| 研究会情報 |
| 研究会 |
ICM IPSJ-CSEC IPSJ-IOT |
| 開催期間 |
2021-05-13 - 2021-05-14 |
| 開催地(和) |
オンライン開催 |
| 開催地(英) |
Online |
| テーマ(和) |
サービス管理,運用管理技術,セキュリティ管理,一般 |
| テーマ(英) |
|
| 講演論文情報の詳細 |
| 申込み研究会 |
ICM |
| 会議コード |
2021-05-ICM-CSEC-IOT |
| 本文の言語 |
日本語 |
| タイトル(和) |
ハイブリッドクラウド構成における分析処理の並列度最適化方式 |
| サブタイトル(和) |
|
| タイトル(英) |
Parallelism optimization method for analytical processing on hybrid cloud. |
| サブタイトル(英) |
|
| キーワード(1)(和/英) |
データ分析基盤 / Data analytics platform |
| キーワード(2)(和/英) |
ハイブリッドクラウドストレージ / Hybrid cloud storage |
| キーワード(3)(和/英) |
並列度 / Parallelism |
| キーワード(4)(和/英) |
最適化 / ETL |
| キーワード(5)(和/英) |
/ Optimization |
| キーワード(6)(和/英) |
/ |
| キーワード(7)(和/英) |
/ |
| キーワード(8)(和/英) |
/ |
| 第1著者 氏名(和/英/ヨミ) |
村瀬 香緒里 / Kaori Murase / ムラセ カオリ |
| 第1著者 所属(和/英) |
株式会社日立製作所 研究開発グループ (略称: 日立)
Hitachi, Ltd. Research & Development Group (略称: Hitachi, Ltd.) |
| 第2著者 氏名(和/英/ヨミ) |
林 真一 / Shinichi / ハヤシ シンイチ |
| 第2著者 所属(和/英) |
株式会社日立製作所 研究開発グループ (略称: 日立)
Hitachi, Ltd. Research & Development Group (略称: Hitachi, Ltd.) |
| 第3著者 氏名(和/英/ヨミ) |
金子 聡 / Satoshi Kaneko / カネコ サトシ |
| 第3著者 所属(和/英) |
株式会社日立製作所 研究開発グループ (略称: 日立)
Hitachi, Ltd. Research & Development Group (略称: Hitachi, Ltd.) |
| 第4著者 氏名(和/英/ヨミ) |
村山 耕一 / Kouichi Murayama / |
| 第4著者 所属(和/英) |
株式会社日立製作所 研究開発グループ (略称: 日立)
Hitachi, Ltd. Research & Development Group (略称: Hitachi, Ltd.) |
| 第5著者 氏名(和/英/ヨミ) |
/ / |
| 第5著者 所属(和/英) |
(略称: )
(略称: ) |
| 第6著者 氏名(和/英/ヨミ) |
/ / |
| 第6著者 所属(和/英) |
(略称: )
(略称: ) |
| 第7著者 氏名(和/英/ヨミ) |
/ / |
| 第7著者 所属(和/英) |
(略称: )
(略称: ) |
| 第8著者 氏名(和/英/ヨミ) |
/ / |
| 第8著者 所属(和/英) |
(略称: )
(略称: ) |
| 第9著者 氏名(和/英/ヨミ) |
/ / |
| 第9著者 所属(和/英) |
(略称: )
(略称: ) |
| 第10著者 氏名(和/英/ヨミ) |
/ / |
| 第10著者 所属(和/英) |
(略称: )
(略称: ) |
| 第11著者 氏名(和/英/ヨミ) |
/ / |
| 第11著者 所属(和/英) |
(略称: )
(略称: ) |
| 第12著者 氏名(和/英/ヨミ) |
/ / |
| 第12著者 所属(和/英) |
(略称: )
(略称: ) |
| 第13著者 氏名(和/英/ヨミ) |
/ / |
| 第13著者 所属(和/英) |
(略称: )
(略称: ) |
| 第14著者 氏名(和/英/ヨミ) |
/ / |
| 第14著者 所属(和/英) |
(略称: )
(略称: ) |
| 第15著者 氏名(和/英/ヨミ) |
/ / |
| 第15著者 所属(和/英) |
(略称: )
(略称: ) |
| 第16著者 氏名(和/英/ヨミ) |
/ / |
| 第16著者 所属(和/英) |
(略称: )
(略称: ) |
| 第17著者 氏名(和/英/ヨミ) |
/ / |
| 第17著者 所属(和/英) |
(略称: )
(略称: ) |
| 第18著者 氏名(和/英/ヨミ) |
/ / |
| 第18著者 所属(和/英) |
(略称: )
(略称: ) |
| 第19著者 氏名(和/英/ヨミ) |
/ / |
| 第19著者 所属(和/英) |
(略称: )
(略称: ) |
| 第20著者 氏名(和/英/ヨミ) |
/ / |
| 第20著者 所属(和/英) |
(略称: )
(略称: ) |
| 第21著者 氏名(和/英/ヨミ) |
/ / |
| 第21著者 所属(和/英) |
(略称: )
(略称: ) |
| 第22著者 氏名(和/英/ヨミ) |
/ / |
| 第22著者 所属(和/英) |
(略称: )
(略称: ) |
| 第23著者 氏名(和/英/ヨミ) |
/ / |
| 第23著者 所属(和/英) |
(略称: )
(略称: ) |
| 第24著者 氏名(和/英/ヨミ) |
/ / |
| 第24著者 所属(和/英) |
(略称: )
(略称: ) |
| 第25著者 氏名(和/英/ヨミ) |
/ / |
| 第25著者 所属(和/英) |
(略称: )
(略称: ) |
| 第26著者 氏名(和/英/ヨミ) |
/ / |
| 第26著者 所属(和/英) |
(略称: )
(略称: ) |
| 第27著者 氏名(和/英/ヨミ) |
/ / |
| 第27著者 所属(和/英) |
(略称: )
(略称: ) |
| 第28著者 氏名(和/英/ヨミ) |
/ / |
| 第28著者 所属(和/英) |
(略称: )
(略称: ) |
| 第29著者 氏名(和/英/ヨミ) |
/ / |
| 第29著者 所属(和/英) |
(略称: )
(略称: ) |
| 第30著者 氏名(和/英/ヨミ) |
/ / |
| 第30著者 所属(和/英) |
(略称: )
(略称: ) |
| 第31著者 氏名(和/英/ヨミ) |
/ / |
| 第31著者 所属(和/英) |
(略称: )
(略称: ) |
| 第32著者 氏名(和/英/ヨミ) |
/ / |
| 第32著者 所属(和/英) |
(略称: )
(略称: ) |
| 第33著者 氏名(和/英/ヨミ) |
/ / |
| 第33著者 所属(和/英) |
(略称: )
(略称: ) |
| 第34著者 氏名(和/英/ヨミ) |
/ / |
| 第34著者 所属(和/英) |
(略称: )
(略称: ) |
| 第35著者 氏名(和/英/ヨミ) |
/ / |
| 第35著者 所属(和/英) |
(略称: )
(略称: ) |
| 第36著者 氏名(和/英/ヨミ) |
/ / |
| 第36著者 所属(和/英) |
(略称: )
(略称: ) |
| 講演者 |
第1著者 |
| 発表日時 |
2021-05-13 10:05:00 |
| 発表時間 |
25分 |
| 申込先研究会 |
ICM |
| 資料番号 |
ICM2021-3 |
| 巻番号(vol) |
vol.121 |
| 号番号(no) |
no.13 |
| ページ範囲 |
pp.13-18 |
| ページ数 |
6 |
| 発行日 |
2021-05-06 (ICM) |
|