申请试用
HOT
登录
注册
 
Arch Meetup#8 杭州站 - 使用 Ray 作为 Spark SQL UDF 的执行引擎

Arch Meetup#8 杭州站 - 使用 Ray 作为 Spark SQL UDF 的执行引擎

Milvus.io
/
发布于
/
156
人观看
使用 Ray 作为 Spark SQL UDF 的执行引擎

这次分享我们会重点介绍如何基于 Ray 使用 Python 实现 Spark SQL UDF 函数,进一步的,我们使用该技术实现有状态的 UDF 函数,从而能够将常见的 Python 算法模型转换成 SQL UDF 函数使用,解决算法模型包装成 SQL 函数面临的两大难题:1. 函数需要一个初始化过程,2. 函数有一定的 Python 环境要求。

0 点赞
0 收藏
2下载
确认
3秒后跳转登录页面
去登陆