申请试用
HOT
登录
注册
 

Apache Spark 3.0简介:回顾过去的十年,并展望未来

Apache Spark中国技术交流社区
/
发布于
/
865
人观看

点击链接观看精彩回放:https://developer.aliyun.com/live/43188

Apache Spark 3.0简介:回顾过去的十年,并展望未来

李潇

Databricks Spark 研发部主管,领导 Spark,Koalas,Databricks runtime,OEM的研发团队。Apache Spark Committer、PMC成员。2011年从佛罗里达大学获得获得了博士学位。曾就职于IBM,获发明大师称号(Master Inventor),是异步数据库复制和一致性验证的领域专家,发表专利十余篇。(Github: gatorsmile)

我们将分享Apache Spark创建者Matei Zaharia的主题演讲,重点介绍Apache Spark 3.0 更易用、更快、更兼容的特点。Apache Spark 3.0 延续了项目初心,在SQL和Python API上取得了重大改进;自适应动态优化,使数据处理更易于访问,从而最大限度地减少手动配置。今年也是Spark首次开源发布的10周年纪念日,我们将回顾该项目及其用户群是如何增长的,以及Spark周围的生态系统(如Koalas, Delta Lake 和可视化工具)是如何发展的,共同探讨处理大规模数据的更简单、更有效的方案。

1点赞
2收藏
确认
3秒后跳转登录页面
去登陆