Redis中国用户组|唯品会Redis cluster大规模生产实践经验-低调大师

Redis中国用户组|唯品会Redis cluster大规模生产实践经验

2018-02-26 827

Outline
一、生产应用场景
二、存储架构演变
三、应用最佳实践
四、运维经验总结
第1、2节：介绍redis cluster在唯品会的生产应用场景，以及存储架构的演变。
第3节：redis cluster的稳定性，应用成熟度，踩到过那些坑，如何解决这些问题？这部分是大家比较关心的内容。
第4节：简单介绍大规模运营的一些经验，包括部署、监控、管理以及redis工具开发。

本文作者：geelou

本文来自云栖社区合作伙伴rediscn，了解相关信息可以关注redis.cn网站。

微信关注我们

原文链接：https://yq.aliyun.com/articles/502616

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

5.2 Redis商业版

Redis作者Salvatore Sanfilippo所在公司RedisLab提供了企业版的Redis产品——Redis Labs Enterprise Cluster (RLEC)——几乎解决了我们上述的所有问题：对客户端完全透明化，自动集群管理（伸缩、高可用、持久化等），多种监控和预警方式等等。 RLEC支持单结点（单主）、单结点主从（一主一从）、集群（多主）、高可用性的集群（多主多从）。从架构上看，RLEC集群的每个结点由以下组件组成： Zero-latency Proxy (Proxy)：高性能的Proxy，隐藏后端存储路由和实现 Cluster Manager (Agent)：集群的部署、配置、管理 Management UI (Dashboard)：监控管理页面，提供RESTFul API，Web，CLI等多种管理方式任意时刻，集群中会有一个结点处于”Master”角色，即这个结点上的Cluster Manager负责整个集群的管理工作，包括集群健康检查、分片迁移、请求监管等。由此能够看出，RLEC本身的结点之前也会互相通信，选举出一个主。额外地，RLEC还支持一些比较...

2018-02-27

612

1、业务范围 redis cluster在唯品会主要应用于后端业务，用作内存存储服务。主要大数据实时推荐/ETL、风控、营销三大业使用。cluster用于取代当前twemproxy三层架构，作为通用的存储架构。redis cluster可以大幅度简化我们的存储架构，也解决twemproxy架构无法在线扩容节点的问题。目前我们在线有生产几十个cluster集群，约2千个instances，单个集群最大达到250+instances。这是我们的生产应用场景，主要是后端业务的存储，目前没有作为cache使用的场景。 2、大数据、风控、营销系统的特征 cluster作为数据量大, 单个cluster集群在几十个GB到上TB级别内存存储量。作为后端应用的存储，数据来源主要以下三种方式： Kafka --> Redis Cluster，Storm/Spark实时 Hive -->Redis Cluster，MapReduce程序 MySQL -->Redis Cluster，Java/C++程序。数据由离线/实时job生成, 读写请求量大, 对读写性能也要求高。业务高峰期...

2018-02-27

706

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。