申请试用
HOT
登录
注册
 
借助Intel 傲腾DC持久内存构建高性能HDFS 缓存加速大数据分析

借助Intel 傲腾DC持久内存构建高性能HDFS 缓存加速大数据分析

Intel Analytics
/
发布于
/
5430
人观看

HDFS缓存是一种集中式缓存机制,用户可以通过指定要缓存的文件的路径的方式来加速常用数据访问速度。但是,由于HDFS缓存是基于DRAM的,会与用户程序竞争内存资源,同时在数据节点重启的场景下需要重新预热缓存,所以其使用场景受到很多限制。持久化内存代表了一种新型的存储器和存储技术,它以可承受的价格提供更高性能,更大容量,同时提供数据持久性。本次分享将介绍如何借助持久化内存构建高性能HDFS 缓存方案。我们将首先介绍HDFS持久性内存缓存设计与实现,然后介绍其性能优势,最后将探讨持久化内存在其他大数据分析场景中的应用。

12 点赞
6 收藏
8下载
相关文档
确认
3秒后跳转登录页面
去登陆