Redis中国用户组|唯品会Redis cluster大规模生产实践经验-低调大师

Redis中国用户组|唯品会Redis cluster大规模生产实践经验

2018-02-26 804

Outline
一、生产应用场景
二、存储架构演变
三、应用最佳实践
四、运维经验总结
第1、2节：介绍redis cluster在唯品会的生产应用场景，以及存储架构的演变。
第3节：redis cluster的稳定性，应用成熟度，踩到过那些坑，如何解决这些问题？这部分是大家比较关心的内容。
第4节：简单介绍大规模运营的一些经验，包括部署、监控、管理以及redis工具开发。

本文作者：geelou

本文来自云栖社区合作伙伴rediscn，了解相关信息可以关注redis.cn网站。

微信关注我们

原文链接：https://yq.aliyun.com/articles/502616

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

5.2 Redis商业版

Redis作者Salvatore Sanfilippo所在公司RedisLab提供了企业版的Redis产品——Redis Labs Enterprise Cluster (RLEC)——几乎解决了我们上述的所有问题：对客户端完全透明化，自动集群管理（伸缩、高可用、持久化等），多种监控和预警方式等等。 RLEC支持单结点（单主）、单结点主从（一主一从）、集群（多主）、高可用性的集群（多主多从）。从架构上看，RLEC集群的每个结点由以下组件组成： Zero-latency Proxy (Proxy)：高性能的Proxy，隐藏后端存储路由和实现 Cluster Manager (Agent)：集群的部署、配置、管理 Management UI (Dashboard)：监控管理页面，提供RESTFul API，Web，CLI等多种管理方式任意时刻，集群中会有一个结点处于”Master”角色，即这个结点上的Cluster Manager负责整个集群的管理工作，包括集群健康检查、分片迁移、请求监管等。由此能够看出，RLEC本身的结点之前也会互相通信，选举出一个主。额外地，RLEC还支持一些比较...

2018-02-27

594

1、业务范围 redis cluster在唯品会主要应用于后端业务，用作内存存储服务。主要大数据实时推荐/ETL、风控、营销三大业使用。cluster用于取代当前twemproxy三层架构，作为通用的存储架构。redis cluster可以大幅度简化我们的存储架构，也解决twemproxy架构无法在线扩容节点的问题。目前我们在线有生产几十个cluster集群，约2千个instances，单个集群最大达到250+instances。这是我们的生产应用场景，主要是后端业务的存储，目前没有作为cache使用的场景。 2、大数据、风控、营销系统的特征 cluster作为数据量大, 单个cluster集群在几十个GB到上TB级别内存存储量。作为后端应用的存储，数据来源主要以下三种方式： Kafka --> Redis Cluster，Storm/Spark实时 Hive -->Redis Cluster，MapReduce程序 MySQL -->Redis Cluster，Java/C++程序。数据由离线/实时job生成, 读写请求量大, 对读写性能也要求高。业务高峰期...

2018-02-27

677

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。