go-zero解读与最佳实践（上）-低调大师

go-zero解读与最佳实践（上）

2021-02-03 541

本文有『Go开源说』第三期 go-zero 直播内容修改整理而成，视频内容较长，拆分成上下篇，本文内容有所删减和重构。

大家好，很高兴来到“GO开源说” 跟大家分享开源项目背后的一些故事、设计思想以及使用方法，今天分享的项目是 go-zero，一个集成了各种工程实践的 web 和 rpc 框架。我是Kevin，go-zero 作者，我的 github id 是 kevwan。

go-zero 概览

go-zero 虽然是20年8月7号才开源，但是已经经过线上大规模检验了，也是我近20年工程经验的积累，开源后得到社区的积极反馈，在5个多月的时间里，获得了5.9k star。多次登顶github Go语言日榜、周榜、月榜榜首，并获得了gitee最有价值项目（GVP），开源中国年度最佳人气项目。同时微信社区极为活跃，3000+人的社区群，go-zero爱好者们一起交流go-zero使用心得和讨论使用过程中的问题。

下图中间三层是 go-zero 内建支持的服务治理相关组件，基本涵盖了微服务治理主要的能力，而且是基本不需要开发者自己配置的，默认方案已经是经过大规模线上项目调优的。

微服务系统设计中的痛点

1. 微服务系统如何拆分？

先粗后细，不要过细，切忌一个接口一个服务
横向拆分，而非纵向，我们尽量不要超过三层调用
单向调用，严禁循环调用
禁止接口类型透传，在不同的层之间不要共享同一个数据定义，避免一处修改，影响其它
没有依赖关系的串行调用改为并行，可以通过 core/mr 包降低响应延迟而不增加系统负载

2. 如何保障高并发高可用？

良好的数据边界

数据边界是微服务拆分的核心，不同的服务之间不要显示共享数据，而应该通过 rpc 共享。
高效的缓存管理

服务能否支撑高并发，缓存很关键。缓存机制不光要设计好，还需要通过工具尽可能让业务开发人员避免出错，因为缓存代码的编写有相当的难度，goctl 很好的生成了自动管理缓存的代码。
优雅的熔断降载保护

微服务系统一般都是由大量服务共同组合而成的，服务多了自然会有某个服务出现故障的风险，我们不能让某个服务的故障导致整个系统不可用，这就是服务雪崩，要避免雪崩，我们就需要有效隔离有故障的服务，从而降级可用。熔断和降载是防止服务雪崩的最有效手段之一。
弹性伸缩能力

对于高并发的系统来说，突发流量洪峰的情况下，系统需要能够及时水平扩容，go-zero 的自适应降载可以很好的配合 kubernetes 集群的自动水平伸缩能力。
清晰的资源使用定义

要想让系统保持稳定，我们一定要对资源使用做清晰的定义，比如我们到底在什么时候考虑扩充资源，是资源占用率达到了50%还是70%，必须对系统资源的使用状况有足够清晰的定义。
高效的监控报警

我在团队内部一直强调：没有度量就没有优化。我们必须对系统有高效的监控和及时的报警机制。这样才能让我们对整个系统的运行状态有足够的了解。

大型微服务项目从何下手？

微服务系统大体上看起来如上图，但是我们并不是一定要业务一开始就上微服务，我们看看一个典型的微服务系统是怎么进化而来的，下面粗略的讲解一下大型微服务系统的进化过程。

从单体服务开始

项目刚开始，我们不要一味的追求技术的先进性，因为大部分项目是走不到高并发的那一天的，我们需要的是第一时间满足业务。
业务优先，技术支撑

我在团队里讲：架构是从业务中来，到业务中去。任何脱离了业务的技术都是自嗨，我们需要把满足业务需要作为第一优先级，技术需要支撑业务现在和可预期发展的需要即可。当然，有满足自身业务的现成的框架和最佳实践那是最好了，但不要让技术栈过于复杂，避免重心从业务转移到技术本身来。
服务指标监控

随着业务的发展，我们可能需要对技术做一定的升级和改造了，但是我们一直强调：没有度量就没有优化。所以我们需要及时加上对整个服务的关键指标的监控，从而让我们在了解系统的前提下进行必要的改造。
数据拆分+缓存管理

当业务发展到一定程度之后，基于监控，我们发现服务必须要做拆分了。那么我们第一步要做的是先把数据拆分清楚，数据拆分后，我们就可以加上对应的缓存管理，从而保障数据层面的稳定性。
服务拆分

相对于数据拆分，服务的拆分相对是比较容易的，基于拆分好的数据，对应出上层的服务，因为服务是无状态的，所以这个拆分就比较容易。
支撑系统建设

随着业务的发展，日常的系统维护工作就显得比较繁琐和容易出错了。此时，我们需要建设支撑系统，如何部署新服务，如何更新老服务，是不是要上 kubernetes，等等。
自动化+工程建设

当业务发展到一定程度，工程效率就是一个很大的问题了。goctl 就是为了解决自动化和工程效率问题而生，其中内置的 api, rpc, model, Dockerfile, k8s部署文件等的自动生成节省了我们大量时间，也避免了业务开发中的错误。

go-zero 组件剖析 + go-zero 最佳实践（待续）

如果你想要更好的了解 go-zero 项目，欢迎前往官方网站上学习具体的示例。

视频回放地址

https://www.bilibili.com/video/BV1Jy4y127Xu

项目地址

https://github.com/tal-tech/go-zero

https://gitee.com/kevwan/go-zero

欢迎使用 go-zero 并 star 支持我们！

微信关注我们

原文链接：https://my.oschina.net/kevwan/blog/4943290

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

PHP开发：Redis 内存满了怎么办？

Redis占用内存大小 Redis的内存淘汰 LRU算法 LRU在Redis中的实现 LFU算法问题 Redis占用内存大小我们知道Redis是基于内存的key-value数据库，因为系统的内存大小有限，所以我们在使用Redis的时候可以配置Redis能使用的最大的内存大小。 1、通过配置文件配置通过在Redis安装目录下面的redis.conf配置文件中添加以下配置设置内存大小 //设置Redis最大占用内存大小为100M maxmemory 100mb redis的配置文件不一定使用的是安装目录下面的redis.conf文件，启动redis服务的时候是可以传一个参数指定redis的配置文件的 2、通过命令修改 Redis支持运行时通过命令动态修改内存大小 //设置Redis最大占用内存大小为100M 127.0.0.1:6379> config set maxmemory 100mb //获取设置的Redis能使用的最大内存大小 127.0.0.1:6379> config get maxmemory 如果不设置最大内存大小或者设置最大内存大小为0，在64...

2021-02-03

611

新增 sm4 加解密算法增加了单元测试关于one-sm 源码地址 https://github.com/lizhichao/sm https://gitee.com/vicself/sm 安装 composer require lizhichao/one-sm SM3签名 <?php require __DIR__ . '/vendor/autoload.php'; $sm3 = new \OneSm\Sm3(); // 字符串签名 echo $sm3->sign('abc') . PHP_EOL; echo $sm3->sign(str_repeat("adfas哈哈哈", 100)) . PHP_EOL; // 文件签名 echo $sm3->signFile(__FILE__) . PHP_EOL; 性能测试和 openssl, SM3-PHP性能测试结果 openssl:4901d7181a1024b8c0f59b8d3c5c6d96b4b707ad10e8ebc8ece5dc49364a3067 one-s...

2021-02-02

661

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。