申请试用
HOT
登录
注册
 
Spark+Alluxio:面向K8s的数据本地性优化

Spark+Alluxio:面向K8s的数据本地性优化

Alluxio
/
发布于
/
3083
人观看

Alluxio用缓存的方式,将数据带到计算端,通过更好的数据本地性提升计算效率。随着更多人将服务迁移到云端的容器中并使用K8s来进行容器编排,新的技术、框架和设计理念也给数据本地性带来了新的挑战。Alluxio针对用户在K8s上的不同使用场景,提供了不同的数据本地化解决方案。这个分享将从Spark+Alluxio在非K8s环境下如何实现数据本地性出发,深入介绍Spark+Alluxio如何在K8s环境下实现同样的数据本地性,最后介绍针对不同使用场景的两种解决方案。

8点赞
6收藏
40下载
确认
3秒后跳转登录页面
去登陆