申请试用
HOT
登录
注册
 
Spark SQL自适应执行释放大规模集群的力量

Spark SQL自适应执行释放大规模集群的力量

poppy
/
发布于
/
2429
人观看
在本文中,我们将探讨英特尔和百度为应对大规模的挑战而作出的共同努力,并概述我们为基于Spark SQL的百度Big SQL平台实现的自适应执行模式。在运行时,自适应执行可以更改执行计划以使用更好的连接策略并自动处理倾斜连接。它还可以改变减速器的数量,以更好地适应数据规模。通常,自适应执行减少了调优SQL查询参数所需的工作,并且通过在运行时选择更好的执行计划和并行性来提高执行性能。
14 点赞
6 收藏
2下载
相关文档
确认
3秒后跳转登录页面
去登陆