申请试用
HOT
登录
注册
 
Integrating Real-Time and Batch Processing in a Poly store

Integrating Real-Time and Batch Processing in a Poly store

陈重丶
/
发布于
/
1788
人观看
本文描述了一种叫做s-store的流处理引擎,以及它在大狗多商店中的作用。从根本上说,s-store是一个前端处理器,它接受来自多个来源的输入,并将其按摩成一种消除错误(数据清理)的形式,并将输入转换成一种可以有效消化成大狗的形式。s-store还充当智能路由器,将输入元组发送到大狗的适当组件。对s-store共享内存的所有更新都是以事务一致(酸)的方式进行的,从而消除了非同步读和写导致的新错误。将数据从大狗的组件转移到组件的能力是至关重要的。我们已经描述了一个从s-store迁移到发布GREs的人,我们已经实现了作为概念的第一个证明。我们报告了一些有趣的结果,使用此迁移器影响查询计划的评估。
6 点赞
1 收藏
0下载
相关文档
确认
3秒后跳转登录页面
去登陆