申请试用
HOT
登录
注册
 
工业大数据 Spark查询优化案例分享

工业大数据 Spark查询优化案例分享

中国HBase技术社区
/
发布于
/
8851
人观看
本次主要分享上汽集团对于Spark查询的优化思路。大数据量的精确查询是我们经常遇到的一类场景。为了解决此类问题,我们做了诸多实践。实践思路主要分为两类,一类主要着眼于物理层面,主要为了缩小数据源的范围,有些甚至可以做到精确定位。另一类主要着眼于查询计划的优化,在使用Spark CBO的同时,我们探索并实现了一些特定case的聚合函数下推。相信对有类似需求的工程师们会有所帮助。
100点赞
10收藏
10下载
确认
3秒后跳转登录页面
去登陆