Apache IoTDB x Apache Pulsar Meetup

2020年01月04日 13:00 - 17:30

清华大学Fit楼1-312

可容纳200人
免费
报名码

活动介绍

Apache Pulsar 是下一代云原生分布式流数据平台,它源于 Yahoo,2016 年 12 月开源,2018 年 9 月正式成为 Apache 顶级项目,逐渐从单一的消息系统演化成集消息、存储和函数式轻量化计算的流数据平台。

从成为 Apache 顶级项目后,在这一年的时间中,Pulsar 发展势头非常迅速,目前在全球拥有 100+ 的企业级用户,像雅虎、苹果、迪斯尼、Hulu、腾讯、中国移动、中国电信、智联招聘、涂鸦智能、个推等公司都在使用 Pulsar。Pulsar 社区目前有 190+ contributors,30+ committers,代码提交次数 4000+,fork 人数 1100+,slack 社群和微信社群活跃用户分别为 1000+,在海内外举办过 10 多场大型线下技术交流会。在 Pulsar 如火如荼的发展过程中,Pulsar 积极与周边大数据生态互联,目前已经完成 Pulsar + Flink,Pulsar + Spark 等的集成应用。Apache Pulsar 的关注度与日倍增,正在发展成为最受欢迎的流数据平台。

这次是 Apache Pulsar 第一次走进清华大学校园,与国内顶级开源数据库 Apache IoTDB 进行密切合作,希望与更多高校学子进行深入交流,碰撞出不一样的火花。

活动议程

演讲内容

1.Apache Pulsar — 从消息系统到流原生平台

摘要:

本次分享主要介绍 Apache Pulsar 的特性,从技术和社区多个角度讲解:

  1. Apache Pulsar 是什么
  2. Apache Pulsar 的差异化亮点
  3. Apache Pulsar 与流原生
  4. 社区案例分享

2.Apache IoTDB 的前世今生与技术细节揭秘

摘要

随着时间序列数据逐渐成为重要的数据类型之一,时序数据库日益受到关注。Apache IoTDB 是目前唯一一个从我国高校走进 Apache 的项目,其读写性能远超当前市面上的常见时序数据库。

本次分享会介绍我们为什么做 IoTDB、IoTDB 如何从实验室技术原型系统变为工业级产品、以及 IoTDB 如何实现每秒数千万数据点的写入性能。

3.腾讯海量数据 MQ 实践与 Pulsar 新技术落地

摘要:

腾讯大数据经过 10 多年的发展,数据接入总量已超过了 35 万亿条记录/天,且仍在随业务飞速发展。在长期的数据平台研发与运维实践中,消息中间件在高可靠与高性能场景下的开发、部署与运维得到了逐步完善。

本次分享将围绕腾讯的海量数据接入实践,来探讨 MQ 设计的原则与方法论,并结合最新的 Apache Pulsar 的落地实践,介绍新技术落地所克服的技术挑战并分享相应的经验。本着回馈社区的精神,最后将揭示腾讯大数据未来在 Pulsar 社区的贡献与生态合作计划。

4.基于 IoTDB 打造时序数据全生命周期管理的开源解决方案

摘要:

无论是互联网公司还是工业企业,针对时间序列数据的管理和使用正在成为重要的发力点。本报告围绕 Apache IoTDB,结合 Apache PLC4X、Apache Pulsar、Apache Spark 等介绍时间序列的采集、缓存、存储、处理、分析、可视化的全生命周期的开源解决方案,让海量时间序列数据管理不再成为掣肘用户应用的难题。

5.Pulsar IO 运行原理与开发实践(连接 Pulsar 和 IoTDB)

摘要:

本次分享主要介绍以下几个方面:

  1. Functions Worker 中各个组件的运作机制
  2. Pulsar IO 如何运行在 Functions Worker 上
  3. 以连接 IoTDB 为例分享一个 Connector 的开发实践

关于主办方

本次 Meetup 由 StreamNative 联合清华大学大数据系统软件国家工程实验室共同举办。

StreamNative 是一家围绕 Apache Pulsar 和 Apache BookKeeper 打造下一代流数据平台的开源基础软件公司。我们秉承“Event Streaming 是大数据的未来基石”、“开源是基础软件的未来”这两个理念,专注于开源生态和社区的构建,致力于前沿技术领域的创新。

清华大学「大数据系统软件国家工程实验室」挂靠清华大学软件学院,中国工程院院士孙家广担任实验室主任,国家杰出青年科学基金获得者、清华大学软件学院院长王建民教授担任实验室执行主任。大数据系统软件国家工程实验室是承担我国大数据系统软件技术研发与工程化的国家级创新平台。