9月10日 Spark 社区直播【利用持久内存提速Spark】
主题:
利用持久内存提速Spark
简介:
主要探讨如何在Spark上使用持久内存这一新技术来进一步提速性能。具体会介绍基于Plasma的共享内存方案来提速SQL数据源访问的性能以及利用持久内存扩展Spark现有内存磁盘存储层级来提速RDD cache在迭代式计算中的效果。
时间:
9月10日 19:00 本周四
观看方式:
或届时进入直播间(回看链接):
https://developer.aliyun.com/live/45184
讲师介绍:
纪琨尚,英特尔亚太研发有限公司大数据部门的软件工程师,专注于Spark计算框架上基于Optane PMEM的优化
叶宇强,英特尔亚太研发有限公司大数据部门的资深软件工程师,专注于Spark计算框架上基于Optane PMEM的优化

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
Flink SQL 1.11 新功能与最佳实践
作者:伍翀(云邪),Apache Flink PMC member,阿里巴巴技术专家整理:陈婧敏(清樾) 本文整理自 Apache Flink PMC,阿里巴巴技术专家伍翀(云邪)的分享,旨在帮助用户快速了解新版本 Table & SQL 在 Connectivity 和 Simplicity 等方面的优化及实际开发使用的最佳实践,主要分为以下四个部分: 简要回顾 Flink 1.8 ~ Flink 1.11 版本在 Apache 社区的发展趋势,其中国内开发者的积极参与和中文社区的蓬勃发展对 Flink 在社区和 GitHub 的活跃度做出了重要贡献。 详细解读 Flink SQL 1.11 新功能,如 connectors 参数简化 + 动态 Table 参数减少代码冗余,内置 connectors + LIKE 语法帮助快速测试,重构的 TableEnvironment 、TableSource / TableSink 接口提升易用性,Hive Dialect + CDC 进一步支持流批一体。 重点展示新版本对 Hive 数仓实时化的支持和 Flink SQL 引入 CD...
- 下一篇
训练营报名中 | 5天突破Elasticsearch全观测日志分析能力
云栖大会 | Elasticsearch 场景化应用专场,将于2020年9月18日 下午13:00开始,如果你不想错过,马上订阅吧 ~~更多 Elasticsearch 场景化应用,请下载白皮书【Elasticsearch 八大经典应用】 限量开放 1000 个免费学习名额,讲师来自阿里巴巴、Elastic、星图科技的Elasticsearch大咖,将从底层技术原理到场景化应用,从理论到实践,让你全面掌握 Elasticsearch 全观测日志分析能力 >>>>点击报名 面对企业海量业务/日志数据的管理及分析时,我们难免需要花费大量的时间、精力来处理,不仅是因为庞大的数据量导致的集群性能瓶颈,更多在于数据孤岛、碎片化、无可视化等,而导致的效率低下。 而作为大数据分析及运维人员的你 • 是否希望实现日志、指标、APM数据在一个平台统一分析• 是否希望建立统一的可视化视图、对齐时间、统一过滤条件• 是否希望建立统一的基于规则的监控和告警,关联多个数据源• 是否希望建立统一的机器学习的智能监控和告警 如果你希望实现这些能力,来报名参加本训练营吧~~ 课程概要 除了大咖...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- 设置Eclipse缩进为4个空格,增强代码规范
- SpringBoot2全家桶,快速入门学习开发网站教程
- Springboot2将连接池hikari替换为druid,体验最强大的数据库连接池
- Red5直播服务器,属于Java语言的直播服务器
- CentOS8安装Docker,最新的服务器搭配容器使用
- Docker安装Oracle12C,快速搭建Oracle学习环境
- CentOS8,CentOS7,CentOS6编译安装Redis5.0.7
- SpringBoot2更换Tomcat为Jetty,小型站点的福音
- CentOS7设置SWAP分区,小内存服务器的救世主
- CentOS7安装Docker,走上虚拟化容器引擎之路