| 電子情報通信学会 研究会発表申込システム 講演論文 詳細 |
技報閲覧サービス [ログイン] 技報アーカイブ |
| トップに戻る | 前のページに戻る | [Japanese] / [English] |
| 講演抄録／キーワード | ||
| 講演名 | 2016-08-10 10:00 FPGA NICを用いたSpark Streamingの低遅延オフローディング ○中村幸平・林 愛美・松谷宏紀（慶大）  CPSY2016-31 |
|
| 抄録 | （和） | IoT やSNS の進歩と普及によって、大量のストリームデータを少ない遅延で処理もしくは解析する低遅延ストリーム処理の重要度が高まっている。ストリーム処理は、処理の時間的粒度に応じてmicro-batch 方式とone-at-a-time 方式の2 つに大別でき、前者は短い時間ウィンドウ毎、後者は単一データ毎に決められた処理を行う。 ストリーム処理基盤として近年注目を浴びているApache Spark Streaming はmicro-batch 方式を採用しており、既存のSpark フレームワークが有する機械学習やグラフ処理などの豊富なライブラリをストリーム処理に利用できるという利点があるが、micro-batch 方式を採用しているため、データ処理までの遅延が大きいという欠点もある。本論文では、one-at-a-time 処理をFPGA ベースの10GbE ネットワークインタフェース（FPGA-NIC）上にオフローディングし、Spark Streaming からこの低遅延one-at-a-time 機能を利用できるようにすることでこの問題の解決を図る。この機能を利用してSpark Streaming 上に変化点検出アプリケーションを構築したところ、変化点検出処理を僅か0.048ms の遅延で行うことができた。 |
| （英） | (Not available yet) | |
| キーワード | （和） | FPGA / アクセラレータ設計 / キャッシュ / ストリーム処理 / ストリームデータ / / / |
| （英） | FPGAs / Accelerator design / Cache / Stream processing / Streaming data / / / | |
| 文献情報 | 信学技報, vol. 116, no. 177, CPSY2016-31, pp. 211-216, 2016年8月. | |
| 資料番号 | CPSY2016-31 | |
| 発行日 | 2016-08-01 (CPSY) | |
| ISSN | Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 | |
| 著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します．(許諾番号：10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) | |
| PDFダウンロード | CPSY2016-31 |
|
| 研究会情報 | |
| 研究会 | CPSY DC IPSJ-ARC |
| 開催期間 | 2016-08-08 - 2016-08-10 |
| 開催地（和） | キッセイ文化ホール（松本） |
| 開催地（英） | Kissei-Bunka-Hall (Matsumoto) |
| テーマ（和） | 並列／分散／協調とディペンダブルコンピューティングおよび一般 |
| テーマ（英） | Parallel, Distributed and Cooperative Processing |
| 講演論文情報の詳細 | |
| 申込み研究会 | CPSY |
| 会議コード | 2016-08-CPSY-DC-ARC |
| 本文の言語 | 日本語 |
| タイトル（和） | FPGA NICを用いたSpark Streamingの低遅延オフローディング |
| サブタイトル（和） | |
| タイトル（英） | A Low-Latency Offloading for Spark Streaming Using FPGA NIC |
| サブタイトル（英） | |
| キーワード(1)（和/英） | FPGA / FPGAs |
| キーワード(2)（和/英） | アクセラレータ設計 / Accelerator design |
| キーワード(3)（和/英） | キャッシュ / Cache |
| キーワード(4)（和/英） | ストリーム処理 / Stream processing |
| キーワード(5)（和/英） | ストリームデータ / Streaming data |
| キーワード(6)（和/英） | / |
| キーワード(7)（和/英） | / |
| キーワード(8)（和/英） | / |
| 第1著者 氏名（和/英/ヨミ） | 中村 幸平 / Kohei Nakamura / ナカムラ コウヘイ |
| 第1著者 所属（和/英） | 慶應義塾大学 (略称： 慶大) Keio University (略称： Keio Univ.) |
| 第2著者 氏名（和/英/ヨミ） | 林 愛美 / Ami Hayashi / ハヤシ アミ |
| 第2著者 所属（和/英） | 慶應義塾大学 (略称： 慶大) Keio University (略称： Keio Univ.) |
| 第3著者 氏名（和/英/ヨミ） | 松谷 宏紀 / Hiroki Matsutani / マツタニ ヒロキ |
| 第3著者 所属（和/英） | 慶應義塾大学 (略称： 慶大) Keio University (略称： Keio Univ.) |
| 講演者 | 第1著者 |
| 発表日時 | 2016-08-10 10:00:00 |
| 発表時間 | 30分 |
| 申込先研究会 | CPSY |
| 資料番号 | CPSY2016-31 |
| 巻番号（vol） | vol.116 |
| 号番号（no） | no.177 |
| ページ範囲 | pp.211-216 |
| ページ数 | 6 |
| 発行日 | 2016-08-01 (CPSY) |
[研究会発表申込システムのトップページに戻る]