搜索[分布式调度]结果-低调大师优秀个人博客

精选列表

搜索[分布式调度]，共10000篇文章

开放分布式追踪（OpenTracing）入门与 Jaeger 实现

分布式系统的运维挑战容器、Serverless 编程方式的诞生极大提升了软件交付与部署的效率。

2018-07-26

Yum简单安装MFS分布式文件系统

MooseFS是一个容错，高可用，高性能，扩展，网络分布式文件系统。它将数据分布在多个物理商品服务器上，这些服务器对用户可视为一个虚拟磁盘。

2018-07-26

阿里分布式服务框架Dubbo的架构总结

Dubbo是Alibaba开源的分布式服务框架，它最大的特点是按照分层的方式来架构，使用这种方式可以使各个层之间解耦合（或者最大限度地松耦合）。

2018-07-23

Hadoop HDFS分布式文件系统Docker版

一、Hadoop文件系统HDFS 构建单节点的伪分布式HDFS 构建4个节点的HDFS分布式系统 nameNode secondnameNode datanode1 datanode2 其中 datanode2

2018-07-08

基于 Python 自建分布式高并发 RPC 服务

RPC（Remote Procedure Call）服务，也即远程过程调用，在互联网企业技术架构中占据了举足轻重的地位，尤其在当下微服务化逐步成为大中型分布式系统架构的主流背景下，RPC 更扮演了重要角色

2018-07-04

搞懂分布式技术23：SpringBoot Kafka 整合使用

（关注公众号后回复”Java“即可领取 Java基础、进阶、项目和架构师等免费学习资料，更有数据库、分布式、微服务等热门技术学习视频，内容丰富，兼顾原理和实践，另外也将赠送作者原创的Java学习指南、Java

2018-07-04

民生银行核心分布式改造实践分享

摘要：在没有分布式技术之前，国内银行的核心系统面临着很多挑战。以民生银行为例，2013年的时候每天交易量约1800万笔，整个项目的硬件和运维投入达到1.1亿多，成本非常高昂。

2018-06-24

搞懂分布式技术15：缓存更新的套路

当然，XA这样的强一致性的玩法会导致性能下降，关于分布式的事务的相关话题，你可以看看《分布式系统的事务处理》一文。（全文完）\ 微信公众号【黄小斜】大厂程序员，互联网行业新知，终身学习践行者。

2018-06-22

Kubeflow实战系列: 利用TFJob运行分布式TensorFlow

介绍本系列将介绍如何在阿里云容器服务上运行Kubeflow, 本文介绍如何使用TfJob运行分布式模型训练。

2018-06-13

HBase + SpringBoot分布式文件存储实战(一)-简介

技术分析前提

2018-06-13

关于分布式计算的一些概念

整理自《架构解密从分布式到微服务》第七章——聊聊分布式计算.做了相应补充和修改。

2018-06-02

基于 UAI-Train 平台的分布式训练

TensorFlow 中的分布式机器学习训练使用了如图所示的参数服务器方法。

2018-05-23

干货| 支付系统如何进行分布式改造

由于数据库主备复制的延时，必须等到数据同步完成才可以切换，容灾切换时间长，进行分布式改造已经刻不容缓。

2018-05-16

Zabbix proxy分布式监控(学习笔记三十一)

转载：http://www.cnblogs.com/yaoyaojcy/p/8182067.html 自学Zabbix13.1分布式监控proxy介绍 zabbix2.4版本之前，zabbix提供了两种解决方案

2018-05-08

MPPDB分布式结构化数据库

1.MPPDB简介 MPP，它是一款 Shared Nothing 架构的分布式并行数据库集群，具备高性能、高可用、高扩展特性，可以为超大规模数据管理提供高性价比的通用计算平台，并广泛地用于支撑各类数据仓库系统

2018-04-30

SpringBoot 整合 Dubbo&Zookeeper 实现分布式

1. 安装 Zookeeper 环境 Zookeeper 环境搭建&zk命令详解 2. 服务提供者因为用了父工程的版本管理，所以这里没有显示版本，我把用到的版本给大家分享下。 jdk 1.8 springboot 1.5.8 spring-boot-starter-dubbo 1.0.0 闲余之际我会把demo源码分享。 2.1 pom依赖 <dependencies>  <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-web</artifactId> </dependency>  <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-test</artifactId> <scope>test</scope> </dependency>  <dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-data-jpa</artifactId> </dependency>  <dependency> <groupId>mysql</groupId> <artifactId>mysql-connector-java</artifactId> <version>8.0.8-dmr</version> <scope>compile</scope> </dependency>  <dependency> <groupId>io.dubbo.springboot</groupId> <artifactId>spring-boot-starter-dubbo</artifactId> </dependency>  <dependency> <groupId>junit</groupId> <artifactId>junit</artifactId> <version>4.12</version> </dependency> <dependency> <groupId>org.projectlombok</groupId> <artifactId>lombok</artifactId> </dependency> </dependencies> 2.2. Service填写大概给下项目架构: 为了方便，我用的springboot data jpa做持久性框架。如果不会jpa，请先看我 springboot jpa整合。 SchoolRepository .java /** * Created by Fant.J. */ @Repository public interface SchoolRepository extends JpaRepository<School,Integer> { } SchoolService.java 略(一个正常的借口) 实现类SchoolServiceImpl .java核心代码 @Service(version = "2.0.1") public class SchoolServiceImpl implements SchoolService { @Autowired private SchoolRepository schoolRepository; 这里的@Service注解是dubbo的注解，不是springframework下的注解。该注解就是向zk注册服务。 2.3. application.properties server.port=9002 ## Dubbo 服务提供者配置 spring.dubbo.application.name=school-server spring.dubbo.registry.address=zookeeper://xxx.xxx.xxx.xxx:2181 spring.dubbo.protocol.name=dubbo spring.dubbo.protocol.port=20882 spring.dubbo.scan=com.xxx.school.service spring.datasource.url=jdbc:mysql://xxxxxxxxxx spring.datasource.username=xxxx spring.datasource.password=xxxx spring.datasource.driver-class-name=com.mysql.jdbc.Driver 注意：每一个服务都需要一个未被使用的dubbo端口。 3. 服务消费为了和服务提供者解耦，我们需要把Service接口类单独拿出来放到client模块里，这里不贴详细代码了。 3.1 pom.xml 这里略，根据controller类里的需要来填充相关依赖 3.2 SchoolController @RestController @RequestMapping("/sch") public class SchoolController { @Reference(version = "2.0.1") private SchoolService schoolService; @RequestMapping("/all") public ServerResponse getAll(){ return schoolService.selectAll(); } } 注意与@Service注解的version属性值一一对应。 3.3 application.properties ## Dubbo 服务消费者配置 spring.dubbo.application.name=xxx spring.dubbo.registry.address=zookeeper://xxxx.xxx.xxx.xxx spring.dubbo.scan=com.xxx.web.controller 成功截图：有疑问请在下面留言。

2018-04-23

从 Elasticsearch 来看分布式系统架构设计

分布式系统第一种：基于本地文件系统的分布式系统上图中是一个基于本地磁盘存储数据的分布式系统。

2018-03-29

Python分布式抓取和分析京东商城评价

于是，我采用分布式快速抓取京东的评价信息，然后使用 pandas 对抓取到的数据进行分析。话不多说先附上使用地址体验地址

2018-03-13

简陋的分布式爬虫（附项目代码地址）

新手向，基于Redis构建的分布式爬虫。以爬取考研网的贴子为例，利用 PyQuery, lxml 进行解析，将符合要求的文章文本存入MySQ数据库中。

2018-03-13

资源下载

更多资源

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。