10. アジェンダ
• イベント概要
• Hadoop Summitにおけるストリーム処理
• セッション紹介
• ① The Future of Apache Storm
• ② Ingest and Stream Processing - What Will You Choose?
• まとめ
10
13. アジェンダ
• イベント概要
• Hadoop Summitにおけるストリーム処理
• セッション紹介
• ① The Future of Apache Storm
• ② Ingest and Stream Processing - What Will You Choose?
• まとめ
13
14. The Future of Apache Storm
• P. Taylor Goetz @Hortonworks
• StormのPMC chair、他ApexやKylinのPMC
• Stormの過去と今年4月にリリースした1.0と今後の話
• 0.10.x まで
• 1.0の新機能
• 2.xに向けて
• よもやま話
14
20. アジェンダ
• イベント概要
• Hadoop Summitにおけるストリーム処理
• セッション紹介
• ① The Future of Apache Storm
• ② Ingest and Stream Processing - What Will You Choose?
• まとめ
20
21. Ingest and Stream Processing
– What Will You Choose?
• Ted Malaska @Cloudera
• ストリーム処理のシステムを構築する上で各コンポーネントのセマンティクスや、実装に
は何を選ぶべきかの指針を与える話
• 1個前の話とかなり違うことを言っている
21
22. ストリームの構成とセマンティクス
• セマンティクス?
22
At Most Once 重複はしないけど損失はするかも
At Least Once 損失はしないけど重複はするかも
Exactly Once 損失も重複もしない
Producer Kafka Engine Destination
At Least Once
At Least Once
Ordered
Partitioned モノによる モノによる
25. アジェンダ
• イベント概要
• Hadoop Summitにおけるストリーム処理
• セッション紹介
• ① The Future of Apache Storm
• ② Ingest and Stream Processing - What Will You Choose?
• まとめ
25