大数据平台调度系统架构实践

彩色蚂蚁发布于2019/01/09

注脚

展开查看详情

1.调度系统架构理论 与 实践 大数据平台工作流调度系统 刘旭晖( 天火 ) @ 蘑菇街 - colorant @ We c hat

2.Agenda

3.调度系统分类

4.作业调度系统 - 定时分片类系统

5.作业调度系统 -DAG 工作流 类系统

6.Thus things  flow   away day and night

7.工作流调度系统的两种心法流派 概念: 作业计划和任务实例 工作机制和代表系统

8.两种流派 的优缺点 如果 是在业务场景比较简单,任务依赖容易理清的场景下,静态执行列表方 案的系统维护代价会比较小 。 反之 ,则应该考虑构建动态执行列表方 案的系统

9.工作流的定义管理方式

10.

11.Why another Scheduler

12.系统架构 目标: 高可用 ,组件模块化 ,无状态化

13.Jarvis 2 设计 目标 - 系统

14.Jarvis 2 设计 目标 - 产品交互

15.多说两句:关于多租户

16.多说两句:关于作业监控报警

17.多说两句:关于作业监控报警

18.多说两句:关于作业监控报警

19.多说两句:关于作业监控报警

20.Jarvis 的现状和问题

21.未来的改进计划

22.( Backup ) to sum up …

23.欢迎交流 以上内容,时间所限,大幅简化了,更多内容和细节 欢迎关注我的公众号“大数据务虚杂谈” 欢迎来人来函交流 刘旭晖( 天火 ) @ 蘑菇街 - colorant @ Wechat

24.欢迎交流 以上内容,时间所限,大幅简化了,更多内容和细节 欢迎关注我的公众号“大数据务虚杂谈” 欢迎来人来函交流 刘旭晖( 天火 ) @ 蘑菇街 - colorant @ Wechat

user picture
历任多家互联网上市公司大数据团队负责人,对各种低幼爱好如:桌游,乐高,摄影,徒步有迷之热爱。维护有“大数据务虚杂谈”和“望月的蚂蚁”两个公众号,超低频率更新各种技术和兴趣爱好相关话题文章

相关文档