ebay
Delta Lake在eBay的实践:Spark SQL增删改查
2020/04/30 20:00 - 21:00

讲师介绍:

金澜涛,eBay分析数据平台工程师。超过7年的Hadoop/Spark开发经验。曾任职于大众点评大数据架构组。eBay技术大学Spark课程讲师,2019人工智能峰会上海站讲师,Spark+AI Summit 2019讲师。

议题介绍:

Carmel Spark是eBay Carmel团队基于Apache Spark进行魔改的SQL-on-Hadoop引擎。在功能性和性能上,做了大量开发和优化。例如全新的CBO,并发调度,物化视图,索引,临时表,Extended Adaptive Execution,Range Partition,列级访问权限控制,以及各类监控和管理功能等。本次分享主要介绍Delta Lake在Carmel Spark中的实践经验:基于Delta Lake存储层,实现了完全兼容Teradata的扩展语义Update/Delete语法。

“回车”发送消息