亿级流量电商系统多级缓存架构

2018-08-21 617 89

亿级流量电商系统多级缓存架构

Redis基础

数据类型String hash list set zset

java操作Redis

redis的RDB和AOF两种持久化机制

Redis Transcation

Redis高级

redis企业级数据备份

Lua脚本与redis抢红包实战案例

redis的读写分离架构应对高并发请求

redis哨兵架构

redis容灾策略

redis如何在保持主从复制和高可用架构

redis 集群的动态增删节点

Kafka +Storm + Zookeeper + flume整合

Kafka体系结构、存储策略、分区、发布与订阅

Kafka 整合zookeeper协调管理 java scala操作kafka

Flume和Storm与Kafka整合

Storm集群构建、配置文件以及常见问题解决

Storm分组策略以及常用组件和第一个Storm实例

Storm整合消息队列、Storm Trident以及整合Hadoop2.x

kafka+ehcache+redis开发缓存数据生产服务

Nginx + Lua 流量数据实时上报

Strom + Kafka开发实时统计

Storm + Zookeeper热门商品分段存储

nginx+lua+storm的热点缓存的流量分发策略自动降级解决方案

OpenResty Nginx + Lua

OpenResty介绍

Lua基本语法

OpenResty开发实战

keepalived高可用和健康监测动态上下线

反向代理和负载均衡

Tomcat Session共享

I/O复用详解及高并发系统设计

Nginx缓存 URL重写及读写分离

SSL(https)

证书认证机制原理及加密算法

证书申请/版本选择

Nginx/Tomcat证书安装

容灾备份

redis企业级数据备份方案

redis cluster的自动化slave迁移

高并发场景下的缓存+数据库双写不一致问题分析与解决方案

hystrix 资源隔离+限流+熔断+降级+运维监控

hystrix的metric

facade command接口手动降级机制

缓存雪崩缓存穿透的完美解决方案

各级缓存失效应对策略

可以私信我哦

1 SpringBoot+ 高并发消息处理 EDM?项目实战

2 SpringBoot ELK?分布式数据分析

3 Netty?高并发 UTS?项目实战

4 SpringCloud?微服务+NoSQL+ 负载均衡平台设计

原文地址https://blog.csdn.net/qq_42603157/article/details/81868481

微信关注我们

原文链接：https://yq.aliyun.com/articles/626787

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

2018-08-21 00:00:00

Yarn 日志存储配置

我们知道，yarn上能够监控运行的spark情况，但是一个程序运行完后就会被销毁，看不到了。所以我们需要在程序运行完也能看到日志，这是就需要配置我们的参数了 1.进入sparkconf下，拷贝一个spark.defaults.conf文件修改参数 spark.eventLog.enabled true //将日志持久化存储下来展示 spark.eventLog.dir hdfs://bjcdh:8021/dir //日志存放地址 2.修改spark.env.sh参数 SPARK_HISTORY_OPTS="-Dspark.history.fs.logDirectory=hdfs://bjcdh:8021/dir -DSpark.history.ui.port=7777" //指定读取路径和端口 3.启动日志监控，进入到sbin/ 运行 ./start-history-server.sh 运行之后会提示输出一个.out的日志文件，使用tail -f命令查看日志中最后面提到的启动地址，浏览器中输入这个地址可看到运行的和未运行的。例如地址http://hadoop001:777...

615

2018-08-22 00:00:00

DKhadoop开发环境安装常见问题与解决方法汇总

Dkhadoop版本的下载安装以及运行环境搭建等各个方面内容基本都已经分享过了，今天给大家就dkhadoop开发环境安装中常见的问题以及解决方法进行汇总整理，希望对一些朋友有帮助吧！ DKHadoop安装问题整理 1、系统安装如果没有联网，请手动同步时间如果联网请同步为中国时区 2、集群免密登录问题 1）：主机名一定要区分大小写，否则免密不成功 2）：运行sshpass.sh的时候，必须是在/root/下并且参数是集群密码（如果不是123456请输入自己的密码！！！！！！！！），避免输入错误。 3、MySQL安装问题 1）：如果出现类似：bash “ MySQL ”command not found 就需要运行: source /etc/profile 2）：执行 ./sync的时候必须输入另一台的IP 4、DKH启动安装 1）：如果登录不进去，回忆一下运行changeMaster的时候是不是输入错误。如果输入错误，必须手动修改文件： vi /root/DKHInstall/webapps/DKH/WEB-INF/classes/dbconfig.properties vi ...

466

资源下载

更多资源

优质分享Android(本站安卓app)

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Eclipse（集成开发环境）

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

Java Development Kit(Java开发工具)

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。

Sublime Text 一个代码编辑器

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。