搜索[分布式调度]结果-低调大师优秀个人博客

精选列表

搜索[分布式调度]，共10000篇文章

Simple Admin 分布式后台管理系统 v0.1.5 发布

本次更新较大： 1. 默认 ORM 切换为 Ent, GORM移至gorm分支 2. 后端负责所有后端数据的i18n, 之前是前端负责所有i18n 3. 错误码由restful 改为统一以 200 状态返回带错误代码的数据 4. 优化api文件注释声明 5. 优化文档结构 6. 优化前端多个bugs

2022-11-15

Simple Admin 分布式后台管理系统 v0.1.2 发布

软件简介 Simple Admin 是一个开箱即用的分布式微服务后端管理系统，基于 go-zero 开发，提供丰富的功能如服务发现，权限管理等。

2022-10-28

Simple Admin 分布式后台管理系统 v0.1.1 发布

软件简介 Simple Admin 是一个开箱即用的分布式微服务后端管理系统，基于 go-zero 开发，提供丰富的功能如服务发现，权限管理等。

2022-10-24

KubeEdge SIG AI发布首个分布式协同AI Benchmark调研

随着边侧算力逐步强化，时代也正在见证边缘AI往分布式协同AI的持续演变。分布式协同AI技术是指基于边缘设备、边缘服务器、云服务器利用多节点分布式乃至多节点协同方式实现人工智能系统的技术。

2022-10-18

Simple Admin 分布式后台管理系统 v 0.1.0 更新啦

Simple Admin 是一个开箱即用的分布式微服务后端管理系统，基于go-zero开发，提供丰富的功能如服务发现，权限管理等。该框架可以帮助您快速开发具有RPC服务的后台管理系统。

2022-10-17

Apache Kvrocks：高性能的分布式 KV 数据库

pache Kvrocks(incubating) 是一款高性能的分布式 KV 数据库，使用 RocksDB 作为底层存储引擎并兼容 Redis 协议，能够解决 Redis 内存成本高以及容量有限的问题

2022-10-14

分布式系统中如何实现临界资源的互斥访问？

临界资源互斥访问 分布式互斥是随着分布式系统的出现而出现的，并随着分布式系统理论发展而发展。在分布式系统中，很多进程能够在微观上并行执行。

2022-09-22

每日一博 | Go 分布式链路追踪实现原理

在分布式、微服务架构下，应用一个请求往往贯穿多个分布式服务，这给应用的故障排查、性能优化带来新的挑战。分布式链路追踪作为解决分布式应用可观测问题的重要技术，愈发成为分布式应用不可缺少的基础设施。

2022-07-12

分布式云原生数据库中的共识流程

与此同时，更新rangeID对应的raftScheduleState并将rangeID添加到raftScheduler的queue中等待raft processor调度处理。

2022-06-15

分布式数据库DDL的编译与执行

在生成物理计划之前会先判断语句是否需要分布式执行，DDL不会进行分布式执行，会生成一个本地的PlanningCtx（PlanningCtx 包含在单个查询的整个规划过程中使用和更新的数据）。

2022-05-30

Xmake v2.6.6 发布，分布式编译和缓存支持

分布式编译支持 Xmake 提供了内置的分布式编译服务，通常它可以跟本地编译缓存，远程编译缓存相互配合，实现最优的编译的加速。

2022-05-26

我们为什么选择使用分布式持续交付新星 Zadig ？

以下文章来源于Github爱好者，作者Alan Wang 简介： Zadig on Github Zadig on Gitee Zadig 是一款分布式持续交付产品，由 KodeRover 公司基于

2022-05-23

Part 1- 关于Hint Hint是嵌入SQL语句的对优化器进行提示的信息，是DBA进行SQL优化的常用手段。SQL语句经过优化器(规则优化(RBO)、代价优化(CBO))，通常会选择正确的查询路径，但是智者千虑，必有一失，有时优化器也会选择一个很差的计划，使得该条SQL查询变得很慢，此时需要DBA人为干预(通过给SQL语句增加一个注释)，告诉优化器要选择指定的访问路径(full scan、index scan)或join 类型(merge、hash、lookup)，使得该条SQL语句可以高效的运行。 Part 2 - Hint的使用通过 /*+ ... */ 的注释形式放在 SELECT 关键字之后，多个 hint 之间用逗号隔开。例如 select /*+use_index(t, index1)*/ * from t where a = 10 and b = 20; 如下图所示，经过RBO会得到如下normalized plan，而/*+ use_index(t, index1)*/ 将作用于scan选择的过程，这将告诉优化器在选择表t的访问路径(① ② ③)时，选择②索引index1。 Part 3 - Hint在云溪数据库中的解析和应用流程整体流程如下图3.1所示: 图3.1 hint 解析使用流程第一步：输入带有hint SQL语句，如下所示 SELECT/*+ use_index(t1, idx1), merge_join(t1, t2) */ count(*) FROM t1, t2 WHERE t1.a = t2.b; 第二步：parser 编译解析；第三步：将AST中的hint信息保存在HintSet中；第四步：Builder从AST中获取hint信息，将对应hint解析到TableHint和IndexHint结构体中；第五步：normalized plan阶段(RBO)，通过调用buildScan为表构建ScanFlags，调用buildJoin为表构建JoinFlags；第六步：在CBO阶段进行探索时，根据组成员的Flags信息，通过开销大小，来阻止某些等价表达式的生成，并生成hint需要的表达式，从而减小搜索空间；第七步：生成hint作用之下的最优查询计划。 Part 4 - Hint 在云溪数据库中不同阶段的表现形式 SQL语句中：显示指定要在表c上强制使用idx2，与c和o相关的join操作不允许使用NLJ算子；经过parser后，hint信息保存在HintSet中；在Builder中，hint信息以对象index和table为单位进行保存；在规范化计划树和Memo结构体中，hint信息存在对应的Expr结构体中。详细流程如下图4.1所示: 图4.1 hint在不同阶段的表现形式图 Part 5 - Hint对优化器的影响图5.1结构解释：图5.1 hint作用图 bestHT 存储着每个Group的代价最低的表达式。 exprHT 存储所有探索出来的表达式。 Group为逻辑等价的关系表达式的集合。在云溪数据库中hint 影响计划的手段主要有两个，一个是探索阶段中，减少表达式的生成(例如指定megejoin，正常情况下会生成 merge、lookup、hash 三种连接类型，但是指定了mergejoin，就会直接不生成其他的的表达式)，如下①；另一个是代价计算阶段中返回一个很大的代价hugeCost(例如针对t1，指定index1，然后对于其他的访问方法，则会直接返回很大的代价)，如下③。 Hint对优化器的影响如下： ①排除了若干操作，减少了Memo结构体中表达式的个数，如下图X号所示； ②决定相关Group的最优计划选择，如下图Group 1； ③ Group 1中，#1作为规范化表达式必然存在于组中，但是，它的代价被设置为hugeCost； ③由于使用ForceIndex，在探索阶段使用其它索引的表达式不会被优化器选择； ⑤ 最终影响最优计划树的选择。

2022-04-18

开源分布式图数据库的思考和实践

本文首发于 Nebula Graph Community 公众号本文整理自 DTCC 主题演讲【开源分布式图数据库的思考和实践】目录目录图数据库市场的现状图数据库的优势以 Nebula Graph

2022-04-12

分布式数据库--ZBConverter数据转换工具

- 基本介绍 - ZBConverter是一个可扩展、高性能的数据传输、模式转换和迁移验证的工具，支持云溪数据库、Oracle、MariaDB、MySQL、SQL Server、PostgreSQL、IBM DB2、Sybase、Informix、Teradata、Greenplum和Netezza之间数据库模式（DDL）、查询和DML语句、视图、存储过程、包、函数和触发器的转换。使用C/C++编写，使用本机低内存中批量加载器 API 来传输数据，适用于 Linux、Windows、64 位和 32 位平台。命令行相关参数如下： - 逻辑架构 - 当单个SQL文件或者含有多个SQL文件的文件夹被-in参数所指定，就会经过ProcessFile处理文件。文件内容被ConvertSql预转换为数据流传入Convert，其中GetBomToken()函数将数据依照token语法树转换后传入Parse()函数。Parse()函数会根据映射进行批量处理直到token被处理完成，经过Post后由CreateOutputString处理为输出流，最后由Write写入文件或文件夹。在原有文件名的基础上默认加上_out，亦可自定义输出文件。 SQL文件处理逻辑 SQL语句处理逻辑 - 实际应用 - 例如MySQL->ZNBase（云溪数据库）效果如下：

2022-03-23

大数据分布式计算系统 Spark 入门核心之 RDD

Spark RDD RDD 基础概念 RDD 是什么 RDD(Resilient Distributed Dataset)名为弹性分布式数据集，是 Spark 中最基本的数据抽象，代表一个不可变、可分区

2022-03-22

每日一博 | MySQL 分布式事务的“路”与“坑”

但分布式事务参与方通常在不同机器的不同实例上，原来的局部事务的锁不能保证分布式事务的ACID特性，需要引入新的事务框架，MySQL的分布式事务是基于2PC（二阶段提交）实现，下面详细介绍下2pc分布式事务

2022-03-01

【高手问答汇总】聊聊分布式文件系统与 JuiceFS

JuiceFS 是一款开源分布式文件系统，创新的将对象存储作为底层存储介质，实现了存储空间的无限扩展。

2022-01-19

分布式监控系统 WGCLOUD v3.3.6 全新发布

WGCLOUD是一款集成度较高的分布式运维监控系统，具有易部署、易上手使用、轻量、高效等特点，server端基于springboot开发，agent端使用go编写。

2022-01-17

Apache Ignite 2.12.0 版本发布，分布式内存数据库

Apache Ignite 版本发布说明： Apache Ignite 分布式内存数据库 2.12.0 (!)

2022-01-16

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。