申请试用
HOT
登录
注册
 
Apache Linkis数据处理实战-李孟
Apache Linkis数据处理实战-李孟

Apache Linkis数据处理实战-李孟

示说网官方
/
发布于
/
445
人观看

Linkis 在上层应用和底层引擎之间构建了一层计算中间件。 关于Linkis 数据处理实战,我主要分享两方面,一方面关于元数据,另一方面关于计算任务。 元数据划分为三类:数据字典、数据血缘和数据特征,Linkis基于Linkis DataSource和Apache Atlas 两种服务为数据资产提供元数据管理能力。 dolphinscheduler 拉起Linkis 计算任务,dolphinscheduler Shell 任务类型 通过LinkisDolphinSchedulerClient 配置相关参数,拉起相关任务。

李孟,仙翁数据架构师,Apache Linkis Committer,CSDN博客专家,WeDataSphere社区贡献者,Exchangis贡献者,Streamis贡献者

0点赞
0收藏
0下载
确认
3秒后跳转登录页面
去登陆