首页 文章 精选 留言 我的

精选列表

搜索[全链路],共10007篇文章
优秀的个人博客,低调大师

系统迁移前的全链路评估与风险分析

## 一、迁移评估框架 ![图表](https://developer.qcloudimg.com/http-save/yehe-12602052/e676bff74bc760b044fac01e0e217594.png) ## 二、业务评估 ### 2.1 业务流程分析 ![图表](https://developer.qcloudimg.com/http-save/yehe-12602052/a2f1b3d37772580c4df87b1f313d6a9a.png) **流程评估维度**: |维度|评估内容|评分标准| | --- | --- | --- | |重要性|流程对业务的影响程度|1-5分| |复杂度|流程步骤和分支数量|1-5分| |关联性|与其他系统的依赖程度|1-5分| |频率|流程执行频率|1-5分| ### 2.2 业务影响分析 **影响评估矩阵**: ![图表](https://developer.qcloudimg.com/http-save/yehe-12602052/548ef0bc74a9d7db7d7f5a5d2425d5b5.png) ### 2.3 业务连续性要求 **连续性等级**: |等级|说明|RTO|RPO| | --- | --- | --- | --- | |一级|核心业务,不可中断| 经过全面评估,本次系统迁移项目在技术上可行,但存在以下关键风险需要重点关注: 1. 数据规模较大(约3.5TB),需要制定高效的迁移策略 1. Java版本升级存在兼容性风险,需要提前进行代码适配 1. 核心业务的迁移窗口有限,需要制定详细的回滚预案 **建议**: |建议项|说明|优先级| | --- | --- | --- | |采用增量迁移方案|减少停机时间|高| |提前进行兼容性测试|识别潜在问题|高| |制定详细回滚预案|保障业务连续性|高| |增加迁移窗口|降低风险|中| ## 七、评估工具 ### 7.1 评估工具推荐 |工具类型|工具名称|用途| | --- | --- | --- | |数据库评估|AWS DMS Schema Conversion Tool|数据库兼容性评估| |代码评估|SonarQube|代码质量评估| |性能评估|JMeter|性能基准测试| |安全评估|Nessus|安全漏洞扫描| ### 7.2 评估模板 **数据规模评估模板**: ``` | 数据库 | 表数量 | 记录数 | 大小 | 增长率 | 优先级 | |-------|-------|-------|-----|-------|-------| | 业务库 | 200 | 5000万 | 500GB | 5GB/天 | 高 | | 日志库 | 50 | 2亿 | 1TB | 10GB/天 | 中 | ``` ## 八、常见问题 ### 8.1 评估不充分 **现象**:迁移过程中发现未评估的问题 **预防措施**: |措施|说明| | --- | --- | |扩大评估范围|全面评估所有关联系统| |深入调研|与业务人员深入沟通| |多次验证|多轮评估确保全面| ### 8.2 风险低估 **现象**:实际风险高于评估结果 **预防措施**: |措施|说明| | --- | --- | |保守估计|风险评估时保守估计| |专家评审|邀请专家进行风险评审| |历史数据|参考历史迁移经验| ### 8.3 成本超支 **现象**:实际成本超出预算 **预防措施**: |措施|说明| | --- | --- | |详细估算|细化成本估算| |预留缓冲|预留15-20%的缓冲| |严格控制|严格控制变更范围|

优秀的个人博客,低调大师

基于Spring Boot + Dubbo的全链路日志追踪(二)

一、概要 紧接上一篇,完成分析之后,就要具体的实现了。 service-a: 实现dubbo服务。 service-b: 实现web服务,并调用service-a实现的服务。 二、实现 2.1 日志采集及存储 本例直接使用【阿里云·日志服务】进行数据存储和检索,使用Aliyun Log Logback Appender进行日志收集及上传。 其实就是阿里自己实现了一个Logback Appender。当然我们也可以自己实现,比如上传至自建的ELK中。 2.2 项目中traceId生成、传递、销毁 2.2.1 traceId生成、销毁 2.2.1.1 客户端请求等触发(外部) 外部类请求触发情况,使用拦截器处理。 请求过来之后,生成traceId,并写入org.slf4j.MDC。 请求完成之后,将traceId从org.slf4j.MDC中移除。 package com.example.dubboserviceb.interceptor; import com.example.dubboserviceb.constants.Constants; import org.slf4j.MDC; import org.springframework.web.servlet.HandlerInterceptor; import org.springframework.web.servlet.ModelAndView; import javax.servlet.http.HttpServletRequest; import javax.servlet.http.HttpServletResponse; import java.util.UUID; /** * @author lpe234 * @since 2019/5/25 14:43 */ public class TraceIdInterceptor implements HandlerInterceptor { @Override public boolean preHandle(HttpServletRequest request, HttpServletResponse response, Object handler) throws Exception { // generate traceId String traceId = UUID.randomUUID().toString().replace("-", ""); // put traceId MDC.put(Constants.TRACE_ID, traceId); return true; } @Override public void postHandle(HttpServletRequest request, HttpServletResponse response, Object handler, ModelAndView modelAndView) throws Exception { } @Override public void afterCompletion(HttpServletRequest request, HttpServletResponse response, Object handler, Exception ex) throws Exception { // clear traceId MDC.remove(Constants.TRACE_ID); } } 2.2.1.2 定时任务等触发(内部) (略...) 2.2.1 traceId传递 2.2.1.1 WEB类传递 简单的接口返回类,增加traceId字段。 package com.example.dubboserviceb.utils; import lombok.Data; /** * @author lpe234 * @since 2019/5/25 14:55 */ @Data public class RestResponse<T> { private Integer code; private String msg; private T data; private String traceId; public RestResponse() { } public RestResponse(Integer code, String msg, T data) { this.code = code; this.msg = msg; this.data = data; } public static <T> RestResponse<T> ok(T data) { return new RestResponse<>(200, "ok", data); } public static <T> RestResponse<T> error(T data) { return new RestResponse<>(400, "error", data); } } 当请求响应结果生成前,获取当前org.slf4j.MDC中的traceId,设置到RestResponse中。 package com.example.dubboserviceb.advice; import com.example.dubboserviceb.constants.Constants; import com.example.dubboserviceb.utils.RestResponse; import org.slf4j.MDC; import org.springframework.core.MethodParameter; import org.springframework.http.MediaType; import org.springframework.http.converter.HttpMessageConverter; import org.springframework.http.server.ServerHttpRequest; import org.springframework.http.server.ServerHttpResponse; import org.springframework.web.bind.annotation.ControllerAdvice; import org.springframework.web.servlet.mvc.method.annotation.ResponseBodyAdvice; /** * @author lpe234 * @since 2019/5/25 15:03 */ @ControllerAdvice public class ResponseModifyAdvice implements ResponseBodyAdvice<Object> { @Override public boolean supports(MethodParameter methodParameter, Class<? extends HttpMessageConverter<?>> aClass) { return true; } @Override public Object beforeBodyWrite(Object o, MethodParameter methodParameter, MediaType mediaType, Class<? extends HttpMessageConverter<?>> aClass, ServerHttpRequest serverHttpRequest, ServerHttpResponse serverHttpResponse) { // put traceId to response ((RestResponse) o).setTraceId(MDC.get(Constants.TRACE_ID)); return o; } } 最终,接口响应数据例如如下: { "code": 200, "msg": "ok", "data": "Hello apple", "traceId": "6c25de3422374d51be58555ae9c380e8" } 2.2.1.2 Dubbo类传递 traceId的存储使用org.apache.dubbo.rpc.RpcContext(内部使用InternalThreadLocal实现)。 借助Dubbo的过滤器来实现,traceId在Dubbo服务间的读取、写入和清除。 package com.example.dubboservicea.filter; import com.example.dubboservicea.constants.Constants; import org.apache.dubbo.common.extension.Activate; import org.apache.dubbo.rpc.*; import org.slf4j.MDC; /** * @author lpe234 * @since 2019/5/25 15:24 */ @Activate(group = {org.apache.dubbo.common.Constants.PROVIDER, org.apache.dubbo.common.Constants.CONSUMER}) public class DubboTraceIdFilter implements Filter { @Override public Result invoke(Invoker<?> invoker, Invocation invocation) throws RpcException { RpcContext rpcContext = RpcContext.getContext(); // before if (rpcContext.isProviderSide()) { // get traceId from dubbo consumer,and set traceId to MDC String traceId = rpcContext.getAttachment(Constants.TRACE_ID); MDC.put(Constants.TRACE_ID, traceId); } if (rpcContext.isConsumerSide()) { // get traceId from MDC, and set traceId to rpcContext String traceId = MDC.get(Constants.TRACE_ID); rpcContext.setAttachment(Constants.TRACE_ID, traceId); } Result result = invoker.invoke(invocation); // after if (rpcContext.isProviderSide()) { // clear traceId from MDC MDC.remove(Constants.TRACE_ID); } return result; } @Override public Result onResponse(Result result, Invoker<?> invoker, Invocation invocation) { return result; } } 另,需要在resources/META-INF/dubbo/文件夹下,创建com.alibaba.dubbo.rpc.Filter文本文件。内容为dubboTraceIdFilter=com.example.dubboservicea.filter.DubboTraceIdFilter。 而后,spring-boot配置文件中 配置dubbo的过滤器 #dubbo dubbo: scan: base-packages: com.example.dubboservicea.provider, com.example.dubboservicea.reference protocol: name: dubbo port: 12101 registry: address: zookeeper://118.190.204.150:20084 provider: filter: dubboTraceIdFilter consumer: filter: dubboTraceIdFilter 三、结果 3.1 HTTP请求结果返回 3.2 日志服务查询

优秀的个人博客,低调大师

王东:微服务下的APM全链路监控

什么是APM? APM (Application Performance Management) 即应用性能管理,属于IT运维管理(ITOM)范畴。主要是针对企业 关键业务的IT应用性能和用户体验的监测、优化,提高企业IT应用的可靠性和质量,保证用户得到良好的服务,降 低IT总拥有成本(TCO)。 APM的发展历程 Gartner对APM的定义(2014) 2014年Gartner对APM的5个定义: Gartner对APM的定义(2016) 2016年重新定义,将原来的五部分合成三部分。 服务开发架构的发展历程 一开始的应用开发是从Main-frame一直到2010年以前比较热的SOA架构,到14年比较热的Microsorvices架构,从14年开始基于容器化的Microsorvices。服务开发框架复杂度越来越高。 微服务带来的挑战 依赖关系复杂

资源下载

更多资源
Mario

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

Spring

Spring

Spring框架(Spring Framework)是由Rod Johnson于2002年提出的开源Java企业级应用框架,旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念,提供核心容器、应用上下文、数据访问集成等模块,支持整合Hibernate、Struts等第三方框架,其适用范围不仅限于服务器端开发,绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能,例如代码缩略图,Python的插件,代码段等。还可自定义键绑定,菜单和工具栏。Sublime Text 的主要功能包括:拼写检查,书签,完整的 Python API , Goto 功能,即时项目切换,多选择,多窗口等等。Sublime Text 是一个跨平台的编辑器,同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源,继承了IntelliJ IDEA强大的JS部分的功能。

用户登录
用户注册