申请试用
HOT
登录
注册
 

如何基于 JuiceFS 打造多业态统一存储平台 | JuiceFS Meetup

新一期的Meetup来了!本期,我们邀请到了JuiceFS 的资深用户,豆瓣。 豆瓣成立于2005年,是中国最早的社交网站之一。在 2009 到 2019 的十年间,豆瓣数据平台经历了几轮变迁,形成了 DPark + Mesos + MooseFS 的架构。
时间
2023/04/22 14:00 - 16:00
人数
100
地点
研讨会直播
845人浏览
会议详情

豆瓣成立于2005年,是中国最早的社交网站之一。在 2009 到 2019 的十年间,豆瓣数据平台经历了几轮变迁,形成了 DPark + Mesos + MooseFS 的架构。

由机房全面上云的过程中,原有这套架构并不能很好的利用云的特性,豆瓣需要做一次全面的重新选型,既要考虑未来十年的发展趋势,也需要找到与现有组件兼容且平滑过渡的解决方案。一番改造后, 豆瓣数据平台目前形成了 Spark + Kubernetes + JuiceFS 的云上数据湖架构。

JuiceFS 作为统一存储平台,接入了多项在线、离线业务,在升级过程中数据处理的一致性、实时性、稳定性也都得到了显著提升。

  • 豆瓣数据平台在更替组件时,有哪些考量?
  • 在 JuiceFS 统一存储平台上,豆瓣接入的场景有哪些?各有什么挑战?

在这期活动中,你将了解到豆瓣对于改造存储平台的思考与实践。同时,我们还将为大家介绍JuiceFS 企业版,想了解企业版和社区版有哪些相同和差异之处,不要错过本周六 Meetup。

时间

2023 年4月22日(本周六)下午 14:00-15:15


议程

14:00-14:05  4月社区动态

14:05-14:35  Talk1: 如何基于JuiceFS 搭建统一的存储平台

曹丰宇,参与了豆瓣上云和数据平台切换的过程,目前负责豆瓣数据平台的功能开发和维护。


演讲概要:

  • 豆瓣旧的数据平台架构简介
  • 面临的问题以及平台演进
  • 云上构建数据平台架构
  • JuiceFS 的应用场景
  • 共享文件系统、日志、数据湖、流计算 checkpoint、归档备份、算法
  • 未来展望


14:35-15:05 Talk2: JuiceFS 企业版全面解析

高昌健,Juicedata 技术专家,参与建设 JuiceFS 开源社区的主力队员。十年互联网行业从业经历,曾在知乎、即刻、小红书多个团队担任架构师职位,专注于分布式系统、大数据、AI 领域的技术研究。


演讲概要:

  • 企业版发展历程
  • 企业版和社区版的定位差异
  • 企业版核心特性介绍
  • 企业版未来规划


欢迎进群

活动
文档
专题
博客
确认
3秒后跳转登录页面
去登陆