| 講演抄録/キーワード |
| 講演名 |
2013-08-02 16:15
分散並列型CEPにおける通信高速化手法 ○小林賢司・佐伯敏章・ヴィエル エメリック・今村信貴・松原正純・上田晴康・坂本喜則(富士通研) CPSY2013-26 |
| 抄録 |
(和) |
分散並列型CEPとは,複数ノードで多量のイベントをリアルタイムに処理するビッグデータ処理基盤である.ノード間で多量のイベントを送受信しなければならないため,高スループットな通信方式が必要とされる.我々が開発している分散並列型CEPは開発効率性からJavaを採用しており,通信時に伴うシリアライズ・デシリアライズコストの削減が高スループット実現のための課題となっている.この課題を解決するために本研究では,CEPの処理特性を利用し,不必要なデシリアライズを不要とするパックドバイナリクラス方式,必要となるまでデシリアライズを遅らせる遅延デシリアライゼーション方式を提案する.性能評価を行ったところ,パックドバイナリクラス方式は従来方式と比較して約4.7倍,遅延デシリアライゼーション方式では適用しない場合と比較して約3.4倍のスループット向上を確認した. |
| (英) |
Distributed CEP is big data processing platform that can process many events in real-time. In a distributed CEP system, many events must be transferred between each processing node. To limit the impact of those transfers on performance, it is important to use a high-throughput communication method. We have been developing a distributed CEP system using Java for productivity reasons. However, throughput has been impacted by the serialization and de-serialization of Java objects. To address this problem, we propose a combination of two methods: binary class packing and delayed deserialization. With binary class packing, events can be processed without unnecessary de-serialization. With delayed deserialization, de-serialization is delayed until it is required. In our evaluation, we found that, compared to existing methods, binary class packing improves throughput by 4.7 times, and delayed deserialization improves throughput by 3.4 times. |
| キーワード |
(和) |
複合イベント処理(CEP) / Java / 通信 / シリアライズ / デシリアライズ / スループット / / |
| (英) |
Complex Event Processing(CEP) / Java / Network / Serialize / Deserialize / Throughput / / |
| 文献情報 |
信学技報, vol. 113, no. 169, CPSY2013-26, pp. 97-102, 2013年8月. |
| 資料番号 |
CPSY2013-26 |
| 発行日 |
2013-07-25 (CPSY) |
| ISSN |
Print edition: ISSN 0913-5685 Online edition: ISSN 2432-6380 |
著作権に ついて |
技術研究報告に掲載された論文の著作権は電子情報通信学会に帰属します.(許諾番号:10GA0019/12GB0052/13GB0056/17GB0034/18GB0034) |
| PDFダウンロード |
CPSY2013-26 |