| 講演抄録/キーワード |
| 講演名 |
2023-06-02 15:45
ビッグデータ分析システムにおける分散分析基盤のリソース割当最適化 ○上野里奈・藪崎仁史(日立) SC2023-7 |
| 抄録 |
(和) |
ビッグデータ分析システムでは分散分析基盤を用いて処理高速化を図ることが多い。特にクラウド上では、リソース利用コストの最小化と処理速度の最大化が重要である。本稿は、様々な長さのデータの入力を許容するビッグデータ分析システムについて、その内部にある分散分析を利用する処理に対して、分散分析基盤のリソース最適化を課題とする。分散分析基盤にRayを用いるものと想定し、各ノードにデータや処理を転送する際に生じる転送遅延などを考慮し、タスク毎ならびに入力データの量毎に最適なリソース量を瞬時に判断する方法を提案する。 |
| (英) |
Big data analysis systems often use distributed analysis infrastructure to accelerate processing. Minimizing resource utilization costs and maximizing processing speed are important, especially in the cloud. This paper addresses the issue of resource optimization of the distributed analysis infrastructure for a big data analysis system that allows input of data of various lengths for processing that uses distributed analysis inside the system. Assuming that Ray is used as the distributed analysis infrastructure, we propose a method to instantly determine the optimal amount of resources for each task and amount of input data, taking into account transfer delays that occur when data and processing are transferred to each node. |
| キーワード |
(和) |
分散分析 / リソース最適化 / ビッグデータ / Ray / / / / |
| (英) |
Distributed Processing / Resource Allocation / Big Data / Ray / / / / |
| 文献情報 |
信学技報, vol. 123, no. 61, SC2023-7, pp. 38-41, 2023年6月. |
| 資料番号 |
SC2023-7 |
| 発行日 |
2023-05-26 (SC) |
| ISSN |
Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
SC2023-7 |
| 研究会情報 |
| 研究会 |
SC |
| 開催期間 |
2023-06-02 - 2023-06-03 |
| 開催地(和) |
会津大学 UBIC 3D Theater |
| 開催地(英) |
UBIC 3D Theater, University of Aizu |
| テーマ(和) |
サービス化するAI技術とDX, 一般 |
| テーマ(英) |
Services for AI Technology and DX, etc general |
| 講演論文情報の詳細 |
| 申込み研究会 |
SC |
| 会議コード |
2023-06-SC |
| 本文の言語 |
日本語 |
| タイトル(和) |
ビッグデータ分析システムにおける分散分析基盤のリソース割当最適化 |
| サブタイトル(和) |
|
| タイトル(英) |
Resource Allocation Optimization of Distributed Infrastructure in Big Data Analysis Systems |
| サブタイトル(英) |
|
| キーワード(1)(和/英) |
分散分析 / Distributed Processing |
| キーワード(2)(和/英) |
リソース最適化 / Resource Allocation |
| キーワード(3)(和/英) |
ビッグデータ / Big Data |
| キーワード(4)(和/英) |
Ray / Ray |
| キーワード(5)(和/英) |
/ |
| キーワード(6)(和/英) |
/ |
| キーワード(7)(和/英) |
/ |
| キーワード(8)(和/英) |
/ |
| 第1著者 氏名(和/英/ヨミ) |
上野 里奈 / Rina Ueno / ウエノ リナ |
| 第1著者 所属(和/英) |
(株)日立製作所 研究開発グループ デジタルサービスプラットフォームイノベーションセンタ (略称: 日立)
Hitachi, Ltd., Research & Development Group, Center for Technology Innovation - Digital Service Platform (略称: Hitachi) |
| 第2著者 氏名(和/英/ヨミ) |
藪崎 仁史 / Hitoshi Yabusaki / ヤブサキ ヒトシ |
| 第2著者 所属(和/英) |
(株)日立製作所 研究開発グループ デジタルサービスプラットフォームイノベーションセンタ (略称: 日立)
Hitachi, Ltd., Research & Development Group, Center for Technology Innovation - Digital Service Platform (略称: Hitachi) |
| 第3著者 氏名(和/英/ヨミ) |
/ / |
| 第3著者 所属(和/英) |
(略称: )
(略称: ) |
| 第4著者 氏名(和/英/ヨミ) |
/ / |
| 第4著者 所属(和/英) |
(略称: )
(略称: ) |
| 第5著者 氏名(和/英/ヨミ) |
/ / |
| 第5著者 所属(和/英) |
(略称: )
(略称: ) |
| 第6著者 氏名(和/英/ヨミ) |
/ / |
| 第6著者 所属(和/英) |
(略称: )
(略称: ) |
| 第7著者 氏名(和/英/ヨミ) |
/ / |
| 第7著者 所属(和/英) |
(略称: )
(略称: ) |
| 第8著者 氏名(和/英/ヨミ) |
/ / |
| 第8著者 所属(和/英) |
(略称: )
(略称: ) |
| 第9著者 氏名(和/英/ヨミ) |
/ / |
| 第9著者 所属(和/英) |
(略称: )
(略称: ) |
| 第10著者 氏名(和/英/ヨミ) |
/ / |
| 第10著者 所属(和/英) |
(略称: )
(略称: ) |
| 第11著者 氏名(和/英/ヨミ) |
/ / |
| 第11著者 所属(和/英) |
(略称: )
(略称: ) |
| 第12著者 氏名(和/英/ヨミ) |
/ / |
| 第12著者 所属(和/英) |
(略称: )
(略称: ) |
| 第13著者 氏名(和/英/ヨミ) |
/ / |
| 第13著者 所属(和/英) |
(略称: )
(略称: ) |
| 第14著者 氏名(和/英/ヨミ) |
/ / |
| 第14著者 所属(和/英) |
(略称: )
(略称: ) |
| 第15著者 氏名(和/英/ヨミ) |
/ / |
| 第15著者 所属(和/英) |
(略称: )
(略称: ) |
| 第16著者 氏名(和/英/ヨミ) |
/ / |
| 第16著者 所属(和/英) |
(略称: )
(略称: ) |
| 第17著者 氏名(和/英/ヨミ) |
/ / |
| 第17著者 所属(和/英) |
(略称: )
(略称: ) |
| 第18著者 氏名(和/英/ヨミ) |
/ / |
| 第18著者 所属(和/英) |
(略称: )
(略称: ) |
| 第19著者 氏名(和/英/ヨミ) |
/ / |
| 第19著者 所属(和/英) |
(略称: )
(略称: ) |
| 第20著者 氏名(和/英/ヨミ) |
/ / |
| 第20著者 所属(和/英) |
(略称: )
(略称: ) |
| 第21著者 氏名(和/英/ヨミ) |
/ / |
| 第21著者 所属(和/英) |
(略称: )
(略称: ) |
| 第22著者 氏名(和/英/ヨミ) |
/ / |
| 第22著者 所属(和/英) |
(略称: )
(略称: ) |
| 第23著者 氏名(和/英/ヨミ) |
/ / |
| 第23著者 所属(和/英) |
(略称: )
(略称: ) |
| 第24著者 氏名(和/英/ヨミ) |
/ / |
| 第24著者 所属(和/英) |
(略称: )
(略称: ) |
| 第25著者 氏名(和/英/ヨミ) |
/ / |
| 第25著者 所属(和/英) |
(略称: )
(略称: ) |
| 第26著者 氏名(和/英/ヨミ) |
/ / |
| 第26著者 所属(和/英) |
(略称: )
(略称: ) |
| 第27著者 氏名(和/英/ヨミ) |
/ / |
| 第27著者 所属(和/英) |
(略称: )
(略称: ) |
| 第28著者 氏名(和/英/ヨミ) |
/ / |
| 第28著者 所属(和/英) |
(略称: )
(略称: ) |
| 第29著者 氏名(和/英/ヨミ) |
/ / |
| 第29著者 所属(和/英) |
(略称: )
(略称: ) |
| 第30著者 氏名(和/英/ヨミ) |
/ / |
| 第30著者 所属(和/英) |
(略称: )
(略称: ) |
| 第31著者 氏名(和/英/ヨミ) |
/ / |
| 第31著者 所属(和/英) |
(略称: )
(略称: ) |
| 第32著者 氏名(和/英/ヨミ) |
/ / |
| 第32著者 所属(和/英) |
(略称: )
(略称: ) |
| 第33著者 氏名(和/英/ヨミ) |
/ / |
| 第33著者 所属(和/英) |
(略称: )
(略称: ) |
| 第34著者 氏名(和/英/ヨミ) |
/ / |
| 第34著者 所属(和/英) |
(略称: )
(略称: ) |
| 第35著者 氏名(和/英/ヨミ) |
/ / |
| 第35著者 所属(和/英) |
(略称: )
(略称: ) |
| 第36著者 氏名(和/英/ヨミ) |
/ / |
| 第36著者 所属(和/英) |
(略称: )
(略称: ) |
| 講演者 |
第1著者 |
| 発表日時 |
2023-06-02 15:45:00 |
| 発表時間 |
25分 |
| 申込先研究会 |
SC |
| 資料番号 |
SC2023-7 |
| 巻番号(vol) |
vol.123 |
| 号番号(no) |
no.61 |
| ページ範囲 |
pp.38-41 |
| ページ数 |
4 |
| 発行日 |
2023-05-26 (SC) |
|