阿里巴巴张瑞谈面向未来的数据库架构-低调大师

阿里巴巴张瑞谈面向未来的数据库架构

2017-09-12 722

　本文讲的是阿里巴巴张瑞谈面向未来的数据库架构【IT168 评论】国内最受关注的数据库技术盛会——2017第八届中国数据库技术大会(DTCC2017)将于2017年5月11-13日如约而至。本届大会以“数据驱动?价值发现”为主题，汇集来自互联网、电子商务、金融、电信、政府、行业协会等20多个领域的120多位技术专家，共同探讨Oracle、MySQL、NoSQL、云端数据库、智能数据平台、区块链、数据可视化、深度学习等领域的前瞻性热点话题与技术。大会共设定2大主场和20个技术专场，将吸引5000多名IT人士参会，为数据库人群、大数据从业人员、广大互联网人士及行业相关人士提供最具价值的交流平台。

　　(更多大会精彩：http://tech.it168.com/topic/2017/5-10/DTCC2017/)

在大会上，来自阿里巴巴集团研究员张瑞带来了《面向未来的数据库体系架构的思考》的精彩分享。据张瑞介绍，目前，阿里数据库技术团队正在建设阿里下一代数据库技术体系，希望能够把阿里的成果、踩过的坑以及面向未来思考介绍和与会者做一些深入的探讨，能够为中国数据库技术的发展出一份力。

　　阿里巴巴集团研究员张瑞

据了解，AliSQL 是基于 MySQL 官方版本的一个分支，由阿里云数据库团队维护，目前也应用于阿里巴巴集团业务以及阿里云数据库服务。AliSQL 版本在强度和广度上都经历了极大的考验。最新的 AliSQL 版本不仅从其他开源分支比如Percona，MariaDB，WebScaleSQL 等社区汲取精华，也沉淀了阿里巴巴多年在 MySQL 领域的经验和解决方案。AliSQL 增加更多监控指标，并针对电商秒杀、物联网大数据压缩、金融数据安全等场景提供个性化的解决方案。

以电商的秒杀场景为例，对数据库而言，就是对一条记录的更新，因为事务的特点，单条记录的更新必须串行完成，但秒杀的特点，就是在某个时刻，大量的并发进行减库存，这就造成了大量的线程因获取不到锁而处在死锁检测状态，消耗了大量的CPU资源，最终导致系统无法响应，而引起雪崩效应。AliSQL针对这样的场景，提供了排队和限流的功能，经过了双11零点时刻高并发请求的考验，保持了系统的稳定性和持续吞吐能力。

对于未来，数据库技术应该不仅在数据库内核技术上创新，还应该实现数据库的弹性调度以及如何从自动化走向智能化。

在谈到数据库内核技术创新上，张瑞首次谈到了AliSQLX-Cluster (基于三副本Paxos/Raft协议的AliSQL)，在性能上同城三副本与单机性能持平，并且可以异地部署，延时增加，但保持了高吞吐，同时具备网路抖动高容忍性。

从X-Cluster与MySQL Group Replication的对比测试(同IDC)中不难看出，在三节点同IDC部署，sysbench标准化测试 Insert场景，X-Cluster是MySQL GR 的2.4倍。　　

在异地对比测试中，三节点三地部署，sysbench标准化测试 Insert场景，X-Cluster(5.04万)是MySQL GR(0.85万)的5.94倍;响应延时X-Cluster(58ms)是MySQL GR(150ms)的38%。

对于自动数据生命周期管理，AliSQL依托热数据存储InnoDB引擎和冷数据存储RocksDB引擎实现了多引擎实现自动冷热数据分离。

众所周知，要想实现弹性调度的量大基础挑战是：容器化和计算存储分离。据张瑞介绍，AliSQL支持物理机、VM、Docker，可以保证容器性能与物理机持平，并且DB与其他应用混部，提升CPU利用率。

在存储计算分离上，由于25G网络，RDMA，SPDK等技术的发展，让大规模存储计算分离成为可能。通过数据库优化，减少网络IO，变离散IO为顺序IO，降低网络延迟带来的性能影响。与此同时，共享存储池，提升存储利用率。通过Erasure Code技术，降低副本数。

可以说，AliSQL是伴随着业务的发展一起成长起来的，经历过双11大促这样大压力的考验，同时也经历了阿里云各行各业用户差异化的需求，已是身经百战。

原文发布时间为：2017-05-11

本文作者：张存

本文来自云栖社区合作伙伴IT168，了解相关信息可以关注IT168

原文标题：阿里巴巴张瑞谈面向未来的数据库架构

微信关注我们

原文链接：https://yq.aliyun.com/articles/216018

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

“互联网+智慧燃气”助力武汉智慧城市建设

“实时掌握天然气用量、远程抄表、安全监控......”这些通过中国电信智慧燃气综合管理平台，搭载物联网专网，即可实现。9月12日，湖北电信与杭州先锋电子技术股份有限公司签署了NB-IoT（窄带物联网）合作协议，全面建设智慧燃气小区，让燃气使用更安全，用量管理更便捷直观。目前，湖北电信、武钢华润燃气公司、杭州先锋电子技术股份有限公司已在武汉市合力建设智慧燃气标杆小区，截至9月11日已安装 1240户，远程抄表率达到100%，通过智慧燃气管理平台可实现在线监测、安全防范、统计报表、收费、网上充值、阶梯气价、用期预测、大数据分析等功能，实现了集远程抄表、燃气用量数据分析和燃气安全监控一体的“智慧燃气”小区。据湖北电信相关负责人介绍，NB-IoT（窄带物联网）技术具有覆盖广、大连接、成本低、功耗少、架构优等特点，武汉市目前已开通1.7万个窄带物联网基站。后期将充分发挥NB-IoT（窄带物联网）技术优势，提升湖北燃气行业运营管理水平和公共服务能力，打造“互联网+智慧燃气”的产业生态圈，助力智慧城市建设。本文转自d1net（转载）

2017-09-13

645

本文讲的是胡晓明：阿里云助力企业应对互联网挑战【IT168云计算】今天，阿里云栖厦门峰会在美丽鹭城召开，阿里云集中展示了其解决企业级客户痛点的关键能力：全面的云计算、企业级互联网中间件、大数据平台数加。阿里云总裁胡晓明率先登台，从企业级用户互联网+转型的痛点入手，带来了阿里云企业级关键方案，可以为用户带来的资源融合、架构共享、数据互通的价值做了介绍。他表示，未来三年内，中国40%以上的企业都将采用云计算开展业务。 ▲阿里云总裁胡晓明传统“烟囱式”架构成传统企业转型互联网桎梏胡晓明介绍，作为超大企业集团，阿里巴巴在数年前与当下其他传统企业一样，所面临诸多系统、应用、数据价值挖掘、IT架构重构等方面的诸多挑战。据介绍，目前，阿里巴巴拥有整体三万名员工，6亿消费用户，100亿的商品信息，同时去年成交量达到3万亿。阿里巴巴目前所面临的最大挑战在于，如何对天猫、淘宝、聚划算、支付宝、咸鱼等平台进行打通，让消费数据交互产生价值，同时让消费者得到更好的体验。而随着互联网+战略的逐步推进，越来越多的传统企业也在向互联网转型的过程中，挑战重重。基于传统的IT架构，所有的开发模式都是烟囱式的开发...

2017-09-13

582

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。