Storm 与 Esper

将storm做更高层次的抽象就没有办法绕开数据的元数据。Storm本身只提供到fields级别的，而且发送单位只能是List<Object>，nathan在这方面虽有意向，但没有说明开发计划。

基于事件流分析的Esper有较为丰富的上层接口，其类SQL语言对数据开发人员也比较友好。在Github上也有人做过此类的尝试，https://github.com/tomdz/storm-esper ，可能由于作者只是一时兴起，并没有做完善的开发，在元数据方面也仅仅以Object类型代之，使得Esper中利用持久层数据库做过滤、查询等操作就形同鸡肋。

于是自己写了一个Storm的Esper接口，思想还是借鉴于tomdz的将Esper置于Bolt中，增加了元数据的支持并进行了更高层次的抽象。对于使用HBase的操作进行了二次事件发送，使得其暂时可以支持HBase作为持久层。

 

评论

4 楼 di1984HIT 2014-11-21  

呵呵，挺复杂啊，能分享一下么

3 楼 x-rip 2014-01-14  

marsorp 写道

使得Esper中利用持久层数据库做过滤、查询等操作就形同鸡肋。

楼主是否可以解释一下。

谢谢！

SQL执行时需要利用表的Meta来做语义分析，Storm本身缺乏对Tuple中各个字段的类型定义，必须要自己从外部做一套。

2 楼 marsorp 2013-11-08  

使得Esper中利用持久层数据库做过滤、查询等操作就形同鸡肋。

楼主是否可以解释一下。

谢谢！

1 楼 colder_coder 2013-04-12  

博主介意共享一下你的代码吗？
[e-mail]