| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2016-01-19 13:30 GPUを用いたSparkのリダクション及びトランスフォーメーションの性能評価 ○大野泰弘・森島 信・松谷宏紀（慶大）  VLD2015-81 CPSY2015-113 RECONF2015-63 |
|
| 抄録 | （和） | Sparkは大規模データ向けの分散処理フレームワークである。Sparkはデータを処理する際、RDDというデータ形式に変換して使用時にそれをメモリに保持するため、ディスクアクセス回数が少なく反復処理や機械学習に向いている。本論文では、計算インテンシブな処理の際、RDDを基にした配列を作成しGPUに転送してGPUで処理することを提案する。これにより、Sparkのリダクション及びトランスフォーメーションの計算量が多い操作を高速化できる。また、これらの操作は従来のSparkのRDD操作と同様に行え、制限はほとんどない。これにより、INT型の1GBデータを対象としたリダクション処理の総和計算が6.2-24.2倍、トランスフォーメーション処理のキーソートが11.1-15.7倍、リダクションとトランスフォーメーションの複合処理の分散の値を求める計算が8.1-24.6倍の性能向上を実現した。 |
| （英） | (Not available yet) | |
| キーワード | （和） | GPU / Spark / RDD / リダクション / トランスフォーメーション / / / |
| （英） | / / / / / / / | |
| 文献情報 | 信学技報, vol. 115, no. 399, CPSY2015-113, pp. 25-30, 2016年1月. | |
| 資料番号 | CPSY2015-113 | |
| 発行日 | 2016-01-12 (VLD, CPSY, RECONF) | |
| ISSN | Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | VLD2015-81 CPSY2015-113 RECONF2015-63 |
|
| 研究会情報 | |
| 研究会 | VLD CPSY RECONF IPSJ-SLDM IPSJ-ARC |
| 開催期間 | 2016-01-19 - 2016-01-21 |
| 開催地（和） | 慶應義塾大学 日吉キャンパス |
| 開催地（英） | Hiyoshi Campus, Keio University |
| テーマ（和） | FPGA応用および一般 |
| テーマ（英） | FPGA Applications, etc |
| 講演論文情報の詳細 | |
| 申込み研究会 | CPSY |
| 会議コード | 2016-01-VLD-CPSY-RECONF-SLDM-ARC |
| 本文の言語 | 日本語 |
| タイトル（和） | GPUを用いたSparkのリダクション及びトランスフォーメーションの性能評価 |
| サブタイトル（和） | |
| タイトル（英） | Performance Evaluations on Reduction and Transformation of Spark Using GPU |
| サブタイトル（英） | |
| キーワード(1)（和/英） | GPU / |
| キーワード(2)（和/英） | Spark / |
| キーワード(3)（和/英） | RDD / |
| キーワード(4)（和/英） | リダクション / |
| キーワード(5)（和/英） | トランスフォーメーション / |
| キーワード(6)（和/英） | / |
| キーワード(7)（和/英） | / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 大野 泰弘 / Yasuhiro Ohno / オオノ ヤスヒロ |
| 第1著者 所属（和/英） | 慶應義塾大学 (略称： 慶大) Keio University (略称： Keio Univ.) |
| 第2著者 氏名（和/英/ヨミ） | 森島 信 / Shin Morishima / モリシマ シン |
| 第2著者 所属（和/英） | 慶應義塾大学 (略称： 慶大) Keio University (略称： Keio Univ.) |
| 第3著者 氏名（和/英/ヨミ） | 松谷 宏紀 / Hiroki Matsutani / マツタニ ヒロキ |
| 第3著者 所属（和/英） | 慶應義塾大学 (略称： 慶大) Keio University (略称： Keio Univ.) |
| 講演者 | 第1著者 |
| 発表日時 | 2016-01-19 13:30:00 |
| 発表時間 | 25分 |
| 申込先研究会 | CPSY |
| 資料番号 | VLD2015-81, CPSY2015-113, RECONF2015-63 |
| 巻番号（vol） | vol.115 |
| 号番号（no） | no.398(VLD), no.399(CPSY), no.400(RECONF) |
| ページ範囲 | pp.25-30 |
| ページ数 | 6 |
| 発行日 | 2016-01-12 (VLD, CPSY, RECONF) |
[研究会発表申込システムのトップページに戻る]