Spark Shuffle 优化

8月14日【Spark Shuffle 优化】

主讲人:辰石,阿里巴巴计算平台事业部EMR团队技术专家,目前从事大数据存储以及Spark相关方面的工作。

简介:本次直播介绍EMR Spark 在shuffle方面的相关优化工作,主要包含shuffle 优化的背景以及shuffle 优化的设计方案,最后会介绍Spark shuffle 在 TPC-DS测试中的性能数据

阿里巴巴开源大数据EMR技术团队成立Apache Spark中国技术社区,定期打造国内Spark线上线下交流活动。请持续关注。
钉钉群号:21784001
团队群号:HPRX8117
微信公众号:Apache Spark技术交流社区

展开查看详情

1.

2.• • •

3.

4.• • • • • • • •

5.• • • • • •

6.

7.• • • • • • • •

8.

9.• • • • • •

10.• •

11.

12.• • • • • •

13.• •

14.•

15.•

16.•

17.•

18.• •

19.• •

20.• •

21.• •

22.

阿里巴巴开源大数据EMR技术团队成立Apache Spark中国技术社区,定期打造国内Spark线上线下交流活动。请持续关注。 团队群号:HPRX8117 微信公众号:Apache Spark技术交流社区
关注他