搜索[分布式调度]结果-低调大师优秀个人博客

精选列表

搜索[分布式调度]，共10000篇文章

Apache Dubbo 3.0.8 发布，分布式 RPC 服务框架

Apache Dubbo 3.0.8 已发布，这是一款高性能、轻量级的开源 Java RPC 框架，它提供了三大核心能力：面向接口的远程方法调用、智能容错和负载均衡，以及服务自动注册和发现。具体更新内容包括： Bugfixes & Enhancements Triple Protocol 修复可能的内存泄漏#9919 多协议情况下使用单独的 ThreadPool#10018 存根编译器增强关机流程优化#9938 Service Discovery 修复interface-app mapping#9992 修复 warmup 在消费者端不起作用#10022,#9990 修复 OfflineApp 在版本为 0 时无法更新注册表的问题#9986 当前地址模型不可用时，在 APPLICATION_FIRST 模式下回退到另一个地址模型#9964 重构元数据交换过程以支持某些注册表模式，例如 k8s 和 dns#9904 为实例级参数过滤器扩展添加“exclude”过滤策略#10015 Others 与 Cache 一起使用时，区分 ReferenceConfig 实例的 singleton 和 prototype status#10012 修复从 2.6 或更低版本升级到 3.x 时的 SPI 扩展兼容性问题#9977 修改全局迁移 key 为 'dubbo.application.migration.step'#10006 更新说明：https://github.com/apache/dubbo/releases/tag/dubbo-3.0.8

2022-05-19

使用Colossal-AI分布式训练BERT模型

文章内容: 大规模模型对分布式训练带来了什么挑战?什么是Colossal-AI？

2022-05-12

分布式锁实现原理解析（Redis & WLock）

Java并发包（JUC）提供的锁 2 分布式锁 1. 为什么我们需要分布式锁？单机锁主要是为了同步同一进程中各个线程之间的操作。

2022-05-10

分布式日志存储架构设计方案

本文将分享如何设计一个高可用、可扩展的分布式日志系统。本文是一种理论性的方案探索，当然各种方案也是在实际的生产环境中经过实践总结而来的。本文是分布式日志存储系列的理论篇。

2022-05-05

Apache Dubbo 3.0.7 发布，分布式 RPC 服务框架

Apache Dubbo 3.0.7 已发布，这是一款高性能、轻量级的开源 Java RPC 框架，它提供了三大核心能力：面向接口的远程方法调用、智能容错和负载均衡，以及服务自动注册和发现。此版本继续专注于 Dubbo3 的稳定性改进。有关错误修复和改进的细节，可查看milestone 3.0.7了解更多详细信息。 Bugfixes & Enhancements Curator 和 Zookeeper 扩展相关问题，#9746，#9749，#9597 服务发现增强，#9726，#9754，#9799，#9742，#9820，#9784 三重协议支持 native stub generator，#9822 优化关机流程，#9747 优化 Nacos 默认注册行为，默认不注册consumer URL，#9827 修复 zone-aware 和 weight policy 不适用于多个 registry 场景的问题，#9680，#9786 修复消费者端服务组无法正常工作的问题，#9818 修复 skywalker 报告的可能的 RpcContext 污染问题，#9666 更新说明：https://github.com/apache/dubbo/releases/tag/dubbo-3.0.7

2022-04-02

CrateDB 4.7.1 发布，分布式 SQL 数据库

CrateDB 是一个分布式的 SQL 数据库，使得实时存储和分析大量的机器数据变得简单。

2022-03-16

分布式数据库排序及优化

一、背景 1.1 分布式数据库架构当前分布式数据库架构有不少，但是总体架构相差不大，主要组件都包含协调节点、数据分片、元数据节点、全局时钟。

2022-03-07

Apache Dubbo 3.0.6 发布，分布式 RPC 服务框架

Apache Dubbo 3.0.6 已发布，这是一款高性能、轻量级的开源 Java RPC 框架，它提供了三大核心能力：面向接口的远程方法调用、智能容错和负载均衡，以及服务自动注册和发现。 3.0.6 继续专注于 Dubbo3 的稳定性提升，变化主要与服务发现、三重协议、社区用户反馈的 bug 有关。查看milestone3.0.6了解更多详细信息。 Bug 修复修复带有嵌入式 RPC 调用的异步提供程序无法成功写回结果的问题。#9704 修复 QoS endpoint /ready 和 /startup 不能正常工作的问题。#9634 修复 Spring bean 无法注册到 SPI 实例的问题。#8792 修复注册到 ResponseFuture 的回调的执行顺序不确定的问题。#9461 修复多个 metadata reporter 支持。#9322 功能增强服务发现模型重构的meta impl cache 支持#9684 并发＃9684 三重协议 JDK 17 支持支持 send.reconnect 可配置#9195 更新说明：https://github.com/apache/dubbo/releases/tag/dubbo-3.0.6

2022-03-05

事件驱动分布式应用 EventMesh - 1 月进展

EventMesh 事件驱动分布式应用多运行时 1.参与云原生社区在线meetup介绍推广EventMesh 2.grpc特性开发测试跟进 3.1.4.0发布准备 4.与serverless 社区workflow

2022-02-14

Apache Dubbo 3.0.5 发布，分布式 RPC 服务框架

Apache Dubbo 3.0.5 已发布，这是一款高性能、轻量级的开源 Java RPC 框架，它提供了三大核心能力：面向接口的远程方法调用、智能容错和负载均衡，以及服务自动注册和发现。此版本专注于 Dubbo3 的稳定性改进，突出了 resilience、performance、triple、service discovery 和其他一些重要的错误修复。有关更多详细信息，可参阅milestone 3.0.5。 Bug 修复修复部分注册表扩展的问题，包括 Nacos 和 Zookeeper。修复 Dubbo3 初始化和关闭过程中报的 bug 修复 Async RPC 相关的 bug，包括线程切换和回调混乱的上下文恢复。修复服务发现（应用级）问题功能增强 Resilience 提升空地址通知保护不健康节点/地址的自动黑名单。 Triple protocol的增强性能调优，减少内存分配漏洞升级 Log4j 到 2.17.0，见＃9380的详细信息更新说明：https://github.com/apache/dubbo/releases/tag/dubbo-3.0.5

2022-01-05

微服务中的分布式事务实践

其中发布文章和更新统计信息通常在不同的微服务中微服务化之后的订单系统出行旅游需要在第三方系统同时定几张票面对这些本地事务无法解决的场景，我们需要分布式事务的解决方案，保证跨服务、跨数据库更新数据的一致性

2021-12-20

Redkale 2.6.0 发布，Java 分布式微服务框架

Redkale，一个Java分布式微服务框架，1.6M的jar可以代替传统几十M的第三方。包含TCP/UDP、HTTP、RPC、依赖注入、序列化与反序列化、数据库操作、WebSocket等功能。

2021-12-01

腾讯开源｜分布式深度学习训练工具 PatrickStar

PatrickStar 是一款分布式深度学习训练工具，它的设计目标是支持以 GPT、Bert 为代表的超大预训练模型训练。在性能表现上远超目前业界 DeepSpeed 效果。

2021-10-29

Apache Dubbo 3.0.4 发布，分布式 RPC 服务框架

Apache Dubbo 3.0.4 已发布，这是一款高性能、轻量级的开源 Java RPC 框架，它提供了三大核心能力：面向接口的远程方法调用、智能容错和负载均衡，以及服务自动注册和发现。此版本更新内容：新特性添加记录器禁用选项（#8885）支持后台启动模块（#8869）支持多订阅服务扩展（#8908）支持原生 dubbo 3.0.4（#8966）支持取消 streamObserver （#8946）三重传输支持消息压缩（#8817、#9018、#9021、#9032）支持模型字段中的缓存属性（#9025）支持使用 maven 插件运行 dubbo 原生项目（#8970）为ExtensionLoader添加ExtensionClassLoaderPackages支持（#9061） bug 修复修复 appendAttribute 键（#8847）修复 RpcContext 重复覆盖的问题（#8842）修复addParam()的StringIndexOutOfBoundsException（#8799）在decode(Channel, InputStream)处添加空调用检查（#8812）修复IllegalStateException和doOverrideIfNecessary NPE（#8768）添加 zookeeper 节点数据创建事件检查（#8833）修复：使用多个协议并指定端口时，无法启动服务。（#8769）修复 urlInvokerMap 并发访问问题（#8701）修复 bean 的 Deployer State 延迟注入问题（#8867） ZookeeperRegistry CountDownLatch 应该被释放并添加一些 UT （#8870）修复 serialVersionUID（#8852）修复并发 bean 创建错误的问题（#8883）恢复 Servlet 页面 API（#8884）修复 CountDownLatch 未被释放的问题（#8878）修复订阅时，查看配置部分不可用的问题（#8879）在发布 ServiceDefinition 时修复 Class.forName（#8894） Socks 代理过滤本地地址（#8876）修复延迟导出不适用于 ServiceConfig（#8912）修复 MergeableClusterInvoker NPE（#8891）添加 destroy() 调用关闭 tomcat 服务器端口（#8920）在 LazyConnectExchangeClient 关闭方法中将客户端设置为 null（#8881）修复：telnet 中 registry cast to AbstractRegistry 错误（#8619）修复 AbstractServiceDiscovery#serviceInstance 属性不添加 volatile 修饰符（#8915）修复地址为空时状态路由器抛出异常（#8951）在 Injvm Invoke 中重置 ServiceModel（#8952）修复实例模式 mesh 路由无法获取 url 参数（#8947）修复异常信息（#8974） kryo 序列化恢复判断 jdk 的方法（#8968）修复重复的 ApplicationConfig 错误（#8989） testRecover() 覆盖 removeFailedRegisteredTask 和 removeFailedSubscribedTask（#8981）修复 ConfigManagerTest 拼写错误（#8990）修复创建 SPI 的自适应类时的并发问题（#8998）修复 Listener 提前初始化（#9006）在关闭操作时检查 ClosedChannelException（#9010） NotifyService 回调方法的正确参数类型（#9008）设置模块在 applicationDeployer 中启动 checkStarted()（#9013）修复多实例迁移报告（#9020）在 get 配置中修复 NPE（#9024）增加检查 localMetadataService.blockUntilUpdated stat 的逻辑（#9002）在 blockUntilUpdated 处检查 applicationModel 销毁状态（#9001）移除 RegistryFactory 扩展点的默认实现（#9027）修复实例更新失败的问题（#9040）修复 tomcat 端口已被使用时进程无法停止的问题（#8552）优化将 ScopeModel 添加到本地调用（#8849）修复优化字段范围（#8751）优化 dubbo 元数据模块的部分代码（#8783）一开始不显示 replaceWithLazyClient() 警告（#8814）统一错误信息（#8794）提取 MigrationRule 的常量（#8850）改进 MigrationRuleListener#destroy 方法的逻辑（#8853）添加 ClassLoaderResourceLoader 来缓存 ClassLoader 的资源（#8866）超时关闭流（#8888）大幅优化某些 UnitTest 用例成本时间（#8844）提高单元测试效率（#8877）当 DefaultFuture 被取消时， TimeoutCheckTask 应该被取消（#8898）删除无意义的代码（#8887）尝试从接口参数加载类（#8905）为 SpringBean Initializer 添加 ModuleModel 限定符（#8904）调用 timeout 时转换 TimeoutException（#8906）重构 MetricsConfig（#8785）当 DefaultFuture2 被取消时，TimeoutCheckTask 应该被取消（#8901）添加重置帧处理程序（#8871）优化三服务器发送帧错误处理程序（#8922）优化多个部分代码（#8900） MultipleRegistry 去除重复 URL（#8896） gson格式泛型调用的优化（#8924） Catch handler.caught() throwable 的 MultiMessageHandler（#8930）重构 Injvm 调用（#8926）将调用中的 LinkedHashMap 还原为 HashMap（#8941）销毁执行器并改进测试（#8928）移除 SimpleChannelInboundHandler（#8893）使用新算法优化哈希负载平衡一致性（#8948）添加等待注册完成的闩锁（#8962）删除未使用的客户端处理程序（#8955）忽略 Injvm 调用副本的通用调用（#8986）通过 ScopeModelAware 将 applicationModel 注入 TripleHttp2Protocol（#8984）优化 AbstractRegistry（#8971）将本地调用者从 Collections.singletonList 更改为 ArrayList（#8997）添加serializingExecutor（#8999）发送和删除逻辑前无需估计头部大小（#8802）添加健康服务取消处理程序（#9004）删除方法级别的连接配置（#9011）提取常量并修复错别字（#9019）用future来替换latch（#9030）支持默认服务实例的深拷贝（#9029）添加问题模板（#9036）为 LazyConnectExchangeClient 重建 InstanceAddressURL 到 ServiceConfigURL（#9041）填充 ListBoolMatch 代码并优化 DubboAttachmentMatch 代码（#8448）格式三元组（#9058）管理全局资源和执行器服务，修复 zk 客户端连接（#9033）添加已弃用的描述（#9065）稳定性提升为ServiceDefinitionBuilderTest添加[annotation]测试用例，并删除未使用的参数（#8788）为MetadataReportInstance和AbstractServiceNameMapping添加单元测试（#8846）增强FailoverClusterInvoker单元测试（#8851）增强FailbackClusterInvoker单元测试（#8861）增强FailfastClusterInvokerTest单元测试（#8864）增强ForkingClusterInvoker单元测试（#8865）添加ZookeeperMetadataReportTest测试用例（#8840）为ServiceInstanceMetadataUtilsTest添加测试用例（#8914）为CuratorFrameworkUtils和AbstractServiceDiscoveryFactory添加单元测试（#8886）修复testInvoke_retryTimes_withBizException（#8910）为StandardMetadataServiceURLBuilder添加单元测试（#8913）添加一些AvailableClusterInvoker单元测试（#8934）添加单元测试和一些优化（#8945）补丁关机 hooks 测试（#8958）增强可合并集群调用测试（#8889）验证远程 url 的远程引用（#8973）为MultiplexProtocolConnectionManagerTest配置 tri 扩展（#8979）为Http2ProtocolDetector和NettyEventLoopFactory添加单元测试（#9023）修复AbstractMetadataReportTest和AbstractMetadataReportFactoryTest（#8807）为ChannelBuffers和ChannelBufferFactory添加单元测试（#9031）为dubbo-registry-nacos添加单元测试（#9035）更新公告：https://github.com/apache/dubbo/releases/tag/dubbo-3.0.4

2021-10-27

Redkale 2.5.0 发布，Java 分布式微服务框架

Redkale，一个Java分布式微服务框架，1.4M的jar可以代替传统几十M的第三方。包含TCP/UDP、HTTP、RPC、依赖注入、序列化与反序列化、数据库操作、WebSocket等功能。

2021-10-19

Apache Storm 2.1.1 发布，分布式实时计算

Apache Storm 是一个分布式的、容错的、高性能的实时计算系统，为数据的处理提供了有力的保障。

2021-10-16

常见开源分布式文件系统架构对比

随着互联网的高速发展，这些问题变得日益突出，涌现出了一些分布式文件系统来应对这些挑战。下面介绍几个我了解过的分布式文件系统的基本架构，并比较不同架构的优点和局限。

2021-09-29

Apache Storm 2.3.0 发布，分布式实时计算

Apache Storm 是一个分布式的、容错的、高性能的实时计算系统，为数据的处理提供了有力的保障。

2021-09-28

分布式服务下，消息中间件改造

需要请求服务端通信的节点，调用生产服务端封装的消息发送接口即可；生产服务端：封装消息发送API，并维护路由管理，权限识别等，消息落地存储等；消息存储层：主要基于消息中间件进行存储，数据库层面用来处理特定情况下的二次调度

2021-09-23

Apache Dubbo 3.0.3 发布，分布式 RPC 服务框架

Apache Dubbo 3.0.3 已发布，这是一款高性能、轻量级的开源 Java RPC 框架，它提供了三大核心能力：面向接口的远程方法调用、智能容错和负载均衡，以及服务自动注册和发现。功能当 triple 的响应为异常时支持附件（#8488）提取 DubboSpringInitializer 并支持自定义初始化（#8495）支持 triple 服务器流（#8542）增强和修复检查配置（#8483） Dubbo 编译器支持流（#8566）支持忽略的网络接口（#8616）多实例支持（#8662，#8669，#8684，#8717，#8728，#8736，#8737，#8766，#8779，#8789，#8786，#8810，#8818，#8819，#8825，#8823，#8829，#8831，#8824，#8835，#8832）支持配置 HTTP2 设置（#8700）错误修正避免调用 destroy 时资源没有释放（#8459）修复使用 triple 协议不可用返回真实异常（#8458） Triple：当附件是对象实例时去除 auto wrap（#8473）解决服务发现场景下的地址传递问题（#8492）修复 2181 端口的地址使用错误（#8466）修复广播日志格式错误（#8484）修复一些注释（#8526）修复类转换错误并为 ZoneAwareClusterInvoker 添加单元测试（#8503）修复 nacos 组在消费者端不可用的问题（#8533）修复请求超时时序列化检查的 NPE（#8547）将编译器版本提升到 0.0.3 版本优化 Triple：优化连接和删除执行器（#8486）压缩一些没有地址的注册表（#8496）优化 shortestResponseLoadBalance（#8441，#8519）优化 dubbo 监控配置（#8477，#8549）重构参考配置（#8455）修复错别字（#8499）优化所有测试案例中的 zookeeper 超时（#8564）创建引用时忽略异常（#8534）为 ListenableRouter 中的一些变量添加 volatile 修饰符（#8579）调整应用程序、组和 url 版本值的获取（#8582）为 Triple 协议添加标题过滤器（#8585）依赖项的变化升级 curator：5.0.0 -> 5.1.0 升级 nacos：2.0.2->2.0.3 兼容性兼容 spring 3.2.x（#8430）更多详情可查看：https://github.com/apache/dubbo/releases/tag/dubbo-3.0.3

2021-09-20

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。