首页 文章 精选 留言 我的

精选列表

搜索[go],共10000篇文章
优秀的个人博客,低调大师

这帮人居然用 Go 写“前端”?(一)

作者 | 郑嘉涛(羣青) 来源 | 尔达 Erda 公众号 ​ 无一例外,谈到前后端分离“必定”是 RESTful API,算是定式了。但我们知道 REST 在资源划分上的设计总是与 UI 大相径庭,大量专用、特异、古怪的接口就像永远拾不尽的菌菇,你费力铲除它们,但一场雷雨便又枯树复披。另一方面接口越来越通用,最后却只剩下 CRUD,美其名曰后端只考虑稳定和性能,大量业务逻辑却全权“丢”给了前端,不禁让人怀疑,这真的是前后端分离了吗? Erda 作为企业一站式云原生 PaaS 平台,也存在着大量面向使用交互的布局各色的界面:从个人后台到部署总览再到项目设置;从集群管理到监控大盘再到成员管理。我们从 REST 开始做起,但也逐渐发生变化。本文将从头讲述我们如何从确实问题切入,逐步建设和完善 Erda 的前后端分离框架。 ​ 由于整个框架牵涉到太多内容,所以我计划以系列文章的形式来进行详细解读。本文主要介绍其产生的缘由以及设计思路,更多相关的细节会在后续文章中进行展开,包括但不限于: ​ 框架实现细节 使用框架后测试如何展开? 稳定性和工程管理 ······ 简要介绍一下本文的主要结构: ​ 朴素的想法 交互 vs 业务 回归经典 组件及协议 前面三个部分主要介绍了我们建设框架的背景以及方案分析,“组件及协议”部分则整体阐述了框架的核心设计理念。如果你赶时间,建议直接阅读“组件及协议”部分。 ​ 朴素的想法 所有软件公司都会遇到的困境,那就是分工。老派开发者会信奉单打独斗全栈的能力,但软件变得复杂之后,分工是不可避免的,而最为显著的就是前后端的分工。 Erda 的前端资源一直是紧缺的,最夸张的时候前后端比例可以达到 1:8,大部分情况下,工程的瓶颈在于前端。我们很朴素的认为,改变这个局面需要后端承担更多的工作,以释放前端的人力。 ​ 交互 vs 业务 所谓前后端的分工,从根本上来说是交互和业务的划分。 下图是最通用的场景,前端关注视觉、体验等,后端关注 CRUD、安全、稳定等。而业务流程、权限等则是散落在前端和后端,我们很难说清楚一个具体的业务逻辑究竟是前端实现的,还是后端实现的。 由上文描述可以预见,这样的划分会导致一些问题: ​ 重复性工作:进而系统开发会在某些位置产生疏忽(比如前端实现了鉴权,导致后端的鉴权逻辑得不到很好的验证)。 前后端对接面积大:带来沟通成本,往往这个成本由前端同学承担,这也是前端资源短缺的原因之一。 试想一下,你是否经常会看到这样的场景:后端写完接口后拍拍屁股走人,独留下前端默默猜测接口的参数意义。包括后来测试出的 BUG,也“总”被认为是前端的问题。 面对上面的问题,业界也存在很多种解决方法,比如采用 NodeJS: 如上图所示,通过 js 实现来囊括业务流程、权限等逻辑。使得这些逻辑事实上全部纳入前端范畴,而后端则被空心化,也就只剩下大家熟悉的 CRUD。 这种做法在某种程度上是高效的,也符合前端界“大一统”的思潮,但对于前端资源不足的现状来讲,该举措无疑是雪上加霜。 同时,也有激进派会采用低代码平台“一劳永逸”,干脆不需要前端开发,基于平台的配置和少量的后端流程代码仿佛呈现了一个可能的未来: 不过现有的低代码平台大多仍处于发展阶段,完全摒弃前端则会导致交互或者 UI 呈现比较死板和固定,简单来讲就是不够“炫酷”。这也是为什么目前低代码平台大多支撑的是中后台系统。 我们看到业界也有走“复古”路线的,比如 hey.com 就是如此(https://www.hey.com/how-it-works/): 所谓“复古”,指的是页面逻辑大量运用后端渲染,前端只用少量简单的代码(css,js)实现交互细节。就好比古早的 php 以及 jsp 等开发模式,基本上所有的业务逻辑都实现在后端。可以说这种实践是当下对前端框架越来越庞大、nodejs 盛行现状的一种“反叛”。 不过我们也欣喜的看到,即使是所谓“过时”的开发模式,开发出的仍然是包含当代审美的“炫酷”产品、仍有着十分卓越的交互体验。 全栈的可取之处 hey.com 所用的开发模式,从某种角度上看也可以认为是全栈。 一个人开发前端和后端,这件事情有很大的诱惑力。这也意味着: ​ 前后端的沟通成本大量减少,即使前后端都需要熟知业务细节。 接口调试成本大量减少,即使接口设计经过充分的评审。 放到更长远的角度,功能变更和迭代的成本也趋于减少。 但是,全栈的要求过高,个人很难做到前后端都精通。不过这种一个人负责到底的思想,倒是非常可取。 ​ 回归经典 Web 的基础是 HTTP。HTTP 请求的目标(target)是资源(resource)。我们访问的所有页面都是资源,页面的链接则是资源定位符(URI)。 ​ 如下图所示,整个流程是这样的: ​ 浏览器发起请求,当请求得到处理,服务端传输数据给浏览器以呈现界面(这个数据一般为 HTML,一种描述呈现方式的语言)。 以表单为例,在呈现为表单的界面上进行操作,按照协议和浏览器的实现,则会发起一次新的资源请求(HTTP)。 这次请求需要服务器进行资源更改,成功后则会重新返回数据给浏览器以呈现修改后的界面。 <form action="/users/1"> <label>Name:</label> <input type="text" name="name" value="Bob"> <input type="submit" value="Submit"> </form> 传统的 web 只有最低限度的弹窗、确认、scroll 等浏览器定义的交互元素,提交(submit)则是交互的终结。不过,随着 web 和 js 的发展,交互有了更多的可能,同时 html5、css3 也为交互提供了更大的基础。 现在,我们最直观的感受就是网站越来越“炫酷”了,同时也越来越“重”了。站在开发者的角度,前端 js 工程的打包速度甚至比后端工程还要更慢。 有没有一种可能,让我们所有的技术都回归到经典 web,回归到面向资源(resource)进行操作,回归到上个世纪重新思考交互?我们进而可以扩充浏览器的交互元素,而不用通过 js 框架实现复杂交互;扩充 HTTP 请求使其更适应浏览器呈现和交互。 举个例子,我们正要开发一个工作看板,如果浏览器已经提供了一个通用的看板交互元素,我们是不是就可以像使用表单 form 一样,只需要利用这个交互元素再“配置”上业务信息,就能够在不使用额外 js 的情况下,完成这个功能呢? 基于以上,我们得出了这样的构思: 沉淀出一个通用的组件库(来扩充浏览器交互元素),并且这个组件库数量是固定的,我们将其称之为“通用组件”。 利用通用组件填充进业务数据后可以配置呈现出业务功能,比如登录表单、项目创建表单等;通用组件复合业务属性后,我们称之为“业务组件”,业务组件个数会随着业务增长而膨胀。 需要有一个协议来响应交互,达成上述 form 表单的交互流程,但是这个协议需要足够强大不仅能支持组件库所有组件的交互流程,还需要支持多组件联动的复杂场景;这个协议运行在 HTTP 之上,但是与 RESTful 的区别在于,REST 只关注数据且它是无状态的,而我们设想的协议需要感知界面呈现以及支持完整的交互流程。 如上图所示,通过组件库和协议,可以承载前端一半以上的工作,同时将部分减少后端与前端重叠的工作,并且前后端仍保有其自身的灵活性。 组件及协议 综上,落实我们得出的三点构思,需要达成三个层次的事情: ​ 丰富的通用组件库 组件渲染能力,将业务组件渲染成通用组件 协议渲染能力,以处理复杂交互 我们设计了这样一个渲染框架,分两个部分(上图绿色部分): ​ 业务组件渲染器:核心是处理业务数据到通用组件的转化,以及通用组件操作(operation)的处理(handle)。 场景协议渲染器:核心是将一堆组件编排成为一个场景(可以理解为一个页面,如上图右侧的页面结构)以及场景中组件之间的数据绑定,在有交互产生操作(operation)时,负责决策下派以及操作生效后的重新渲染。 上图中间的通用组件库,则是由前端进行定义和维护的,前端的关注点在于要丰富这个通用组件库,以及将每个组件的交互和 UI 做到极致(后面会讲到,这些工作即是前端呈现器)。 这样的设计初衷旨在大量减少前端工作,尤其是前后端对接方面,甚至可以认为对接是“反转”的,体现在两个层面:接口定义的反转和开发时序的变化。 接口定义的反转 接口的定义上,传统的由后端主导转向为前端主导。 传统(或者说现在主流)的后端实现为 RESTful API,而前端直接对接这些散落的 API,并且理解接口内结构体的含义。但在组件化的背景下,所谓“前后端对接”被拆成了两部分:渲染和呈现。 前面所说的渲染框架(后端)实现了业务到通用组件的渲染,前端定义维护了通用组件库,并实现通用组件的“呈现器”,它将通用组件的数据呈现为可视化的形式。 在渲染和呈现之间的是标准化的通用组件结构(Component Data),我们可以认为通用组件即为前端主导定义的接口,后端由原先甩手一个 RESTful API,演变成要“被迫”理解通用组件的数据结构以实现业务逻辑,整个形势发生了反转。 有趣的是,由于通用组件的数量是确定的,我们可以将通用组件开发移植到其他不同呈现介质,甚至可以开发出 CLI 界面的呈现器,且后端代码无需修改。 开发时序的变化 由传统的后端开发完成后前端联调,转向为前端先完成开发而后端配合联调。 “呈现器”使得前端只需要关注通用组件的开发,业务逻辑可以彻底归为后端。如此职责的划分让前端跳出对后端的依赖,可以独立完成设计、开发和调试(只需要 mock 组件数据)。组件的高度复用,前端甚至可以摇身一变成为设计师,跳过高保真设计稿,直接交付实物,而这个时候的后端可能还在与表结构设计苦苦挣扎。 更重要的不仅仅是前端的开发时间缩短。 我们可以类比 RESTful API 形式的前后端分离,同样都是通过“接口”来标准化对接以实现解耦。REST 接口显然是会随着业务而膨胀的,通用组件的真正优势在于彻底剥除业务,使得它的数量相对恒定且极少。我们都知道少即是美(simple is better),实践证明组件越少越能保证每个组件的质量,而前端通过这些高质量组件完成的功能,几乎可以认为,调试的工作都在后端了。 更多 业务组件真的能隔离业务吗?交互怎么办? 协议渲染真的能替换 REST 吗?我只能二选一吗? …… 在下篇文章中,我们将会详细地介绍组件渲染和协议渲染的运行逻辑,以及我们是如何做到让前端彻底不关心业务的? ​ 欢迎参与开源 Erda 作为开源的一站式云原生 PaaS 平台,具备 DevOps、微服务观测治理、多云管理以及快数据治理等平台级能力。点击下方链接即可参与开源,和众多开发者一起探讨、交流,共建开源社区。欢迎大家关注、贡献代码和 Star! ​ Erda Github 地址:https://github.com/erda-project/erda Erda Cloud 官网:https://www.erda.cloud/

优秀的个人博客,低调大师

DalFox —— Go 开发的 XSS 参数分析和扫描工具

DalFox是一款功能强大的XSS参数分析和扫描工具,该工具基于Golang开发,可以帮助广大研究人员通过分析参数,来寻找XSS漏洞,并基于DOM解析器来对找到的XSS漏洞进行验证。 核心功能 参数分析(寻找反射参数,寻找存在问题的字符,识别注入点); 静态分析(检测存在问题的Header,例如CSP、X-Frame-optiopns等); 优化Payload查询,通过Payload生成检查注入点,消除不必要的Payload; XSS扫描,支持反射型和存储型; 所有的测试Payload已通过编码器测试,支持双重URL编码和HTML十六进制编码; 友好的管道支持(单一URL、文件和IO);

优秀的个人博客,低调大师

Kuiper —— Go 实现的物联网边缘数据分析软件

EMQ X Kuiper 是 Golang 实现的轻量级物联网边缘分析、流式处理开源软件,可以运行在各类资源受限的边缘设备上。 Kuiper 设计的一个主要目标就是将在云端运行的实时流式计算框架(比如Apache Spark,Apache Storm和Apache Flink等)迁移到边缘端。Kuiper 参考了上述云端流式处理项目的架构与实现,结合边缘流式数据处理的特点,采用了编写基于源 (Source),SQL (业务逻辑处理),目标 (Sink)的规则引擎来实现边缘端的流式数据处理。 功能 超轻量 核心服务安装包约 4.5MB,初始运行时占用内存约 10MB 跨平台 流行 CPU 架构:X86 AMD * 32, X86 AMD * 64; ARM * 32, ARM * 64位; PPC 常见 Linux 发行版、OpenWrt 嵌入式系统、MacOS、Docker 工控机、树莓派、工业网关、家庭网关、MEC 边缘云等 完整的数据分析 通过 SQL 支持数据抽取、转换和过滤 数据排序、分组、聚合、连接 60+ 各类函数,覆盖数学运算、字符串处理、聚合运算和哈希运算等 4 类时间窗口,以及计数窗口 高可扩展性 提供插件扩展机制,可以支持在源 (Source),SQL 函数,目标 (Sink)三个方面的扩展 源 (Source) :内置支持 MQTT 数据的接入,提供了扩展点支持任意的类型的接入 目标(Sink):内置支持 MQTT、HTTP,提供扩展点支持任意数据目标的支持 SQL 函数:内置支持60+常见的函数,提供扩展点可以扩展自定义函数 管理能力 基于 Web 的管理控制台,用于节点,插件,流和规则的管理 通过命令行和 REST API 对流、规则和插件进行管理 与KubeEdge、K3s、Baetyl等基于边缘 Kubernetes 框架的集成能力 与 EMQ X Edge 集成 提供了与 EMQ X Neuron 和 EMQ X Edge 的无缝集成,实现在边缘端从消息接入到数据分析端到端的场景实现能力 应用场景 Kuiper 可以运行在各类物联网的边缘使用场景中,比如工业物联网中对生产线数据进行实时处理;车联网中的车机对来自汽车总线数据的即时分析;智能城市场景中,对来自于各类城市设施数据的实时分析。通过 Kuiper 在边缘端的处理,可以提升系统响应速度,节省网络带宽费用和存储成本,以及提高系统安全性等。

优秀的个人博客,低调大师

自学Go语言过程中摸索出的底层知识

概念约定 本文中出现的概念只是为了方便描述而假设的概念,有些概念在专业术语中并不存在; 并且所有概念在不同硬件、操作系统及编程语言下的实际表现可能会有细节上的不同。 进程时间 进程 直接从 CPU 核心分配 CPU时间 ,某 进程 分配到的 CPU时间 又称为它的 进程时间 。 线程时间 线程从它所属的 进程 的 进程时间 中分配时间,某线程分配到的 CPU时间 又称为它的 线程时间 。 协程时间 协程从它所属的 线程 的 线程时间 中分配时间,某协程分配到的 CPU时间 又称为它的 协程时间 。 内核 所谓 内核 就是操作系统的核心,这一点想必大家都知道,然而实际上 内核 所包含的知识远不止于此,本文中我们主要涉及到的是 内核封装 的概念。 大家不妨用类的封装来类比——将核心数据保护起来,使不属于 内核 的代码(或者专业一点儿叫 内核空间 之外的代码)无法直接访问,只能通过 内核 提供的接口调用 内核代码 间接访问——这就叫做 内核封装 。 内核态 运行 内核代码 的状态,或者说运行在 内核空间 的状态,叫做 内核态。 某 CPU核心 正在运行 内核代码,我们就可以说它正处于 内核态; 如某 进程 运行过程中通过 系统接口 调用了 内核代码,则此时该 进程 和它所属(分配 CPU时间 给它)的 CPU核心 都处于 内核态。 以此类推,如某 线程 调用了 内核代码,则此时它和它上级的 进程、CPU核心 都处于 内核态。 同样地,如某 协程 调用了 内核代码,则此时它和它上级的 线程、进程、CPU核心 都处于 内核态。 用户态 运行非 内核代码,即 用户代码 的状态,或者说运行在 用户空间 的状态,叫做 用户态。 某 CPU核心 正在运行 用户代码,我们就可以说它正处于 用户态; 如某 进程 正在运行 用户代码,则此时该 进程 和它所属(分配 CPU时间 给它)的 CPU核心 都处于 用户态。 以此类推,如某 线程 正在运行 用户代码,则此时它和它上级的 进程、CPU核心 都处于 用户态。 同样地,如某 协程 正在运行 用户代码,则此时它和它上级的 线程、进程、CPU核心 都处于 用户态。 CPU特权级别 Intel CPU 拥有四个特权级别,由r0到r3,由 寄存器 中的两个隐藏位(bit)指定: 00为r0,01为r1,10为r2,11为r3。 权限大小: r0>r1>r2>r3,每种特权级别所能执行的 CPU指令 都不同,r0能执行所有 指令,其它三个能执行的 指令 依次递减。 Windows 使用r0作为 内核态 特权级别,使用r3作为 用户态 特权级别,其它 CPU 和系统具体情况不了解,应该大同小异。 系统CPU时间 运行 内核代码 所消耗掉的 CPU时间,或者说在 内核空间 运行所消耗掉的 CPU时间,叫做 系统CPU时间。 用户CPU时间 运行非 内核代码 ,即 用户代码 所消耗掉的 CPU时间,或者说在 用户空间 运行所消耗掉的 CPU时间,叫做 用户CPU时间。 墙上时钟时间 或者可以简称为 时钟时间,顾名思义,就是指挂在墙上的时钟的时间; 是不受 CPU时间 分配影响的,外部的,客观的物理时间。 这个概念看似没什么深度,甚至有点儿搞笑,但实际上还是很有用的。 比如我在编译一个 JAVA 程序时,控制台反馈给我[finished in 0.8s]的信息,但是我心里默数了,从编译开始到结束,最起码有两秒多。 于是我就可以跟别人描述说: “JAVA编译反馈的编译时间应该是它消耗掉的CPU时间,而不是时钟时间,我心里默数了最起码有两秒多,它告诉我'finished in 0.8s'”。

资源下载

更多资源
Mario

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

腾讯云软件源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题,腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构,目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称,一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集,帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Sublime Text

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能,例如代码缩略图,Python的插件,代码段等。还可自定义键绑定,菜单和工具栏。Sublime Text 的主要功能包括:拼写检查,书签,完整的 Python API , Goto 功能,即时项目切换,多选择,多窗口等等。Sublime Text 是一个跨平台的编辑器,同时支持Windows、Linux、Mac OS X等操作系统。

用户登录
用户注册
修改密码
忘记密码