搜索[分布式锁]结果-低调大师优秀个人博客

精选列表

搜索[分布式锁]，共10000篇文章

Disjob—分布式任务调度框架

简介 Disjob是一款分布式的任务调度框架，天然为支持分布式长任务执行而设计，它除了具备常规的任务调度功能外，还提供：任务拆分及分布式并行执行、暂停及取消运行中的任务、恢复执行被暂停的任务、任务执行失败重试

2023-10-14

分布式 | DBLE 3.23.04.0 版本发布！

文章主要分为以下四部分内容：一、DBLE 项目介绍二、新版本主要更新解读三、完整Release Notes 四、LTS 版本更新一、DBLE 项目介绍 DBLE 是企业级开源分布式中间件，江湖人送外号

2023-06-20

PureFlash —— 分布式存储系统

PureFlash是一个开源的分布式存储系统，项目起始于2016年。

2023-02-24

分布式问题系列--惊群

在分布式系统对同一资源进行更新的时候惊群造成的影响多进程/线程中：惊醒所有进程/线程，导致n-1个进程/线程做了无效的调度，上下文切换，cpu瞬时增高多个进程/线程争抢资源，所以涉及到同步问题，

2021-10-25

Vearch —— 分布式向量搜索系统

Vearch 是一个分布式向量搜索系统，可以用来计算向量相似度，或用于机器学习领域，如：图像识别、视频识别或自然语言处理等各个领域。本系统基于 Faiss 实现，提供了快速的向量检索功能。

2021-10-23

鸿蒙分布式小车游戏Demo

小车会根据输入的wifi名和密码链接上对应的wifi，同时停止掉小车本身的wifi热点，手机会回退到原本链接的wifi（就是刚刚给小车配置的wifi），这样多部手机和多个小车都连上指定的热点，多设备间就可以利用鸿蒙分布式特性进行交互数据了

2021-05-26

Jaeger分布式跟踪工具初探

官方文档 Jaegertracing Jaeger简介 Jaeger：开源的端到端分布式跟踪，监视复杂的分布式系统中的事务并进行故障排除。

2021-05-07

分布式ID生成方案

一、前言 分布式系统中我们会对一些数据量大的业务进行分拆，如：用户表，订单表。因为数据量巨大一张表无法承接，就会对其进行分库分表。

2021-03-31

ClickHouse分布式集群搭建指南

本文首发于：行者AI 阅读此文，你会了解ClickHouse的相关知识及ClickHouse分布式集群部署方案的搭建指南，如果你对ClickHouse感兴趣或是对数据分析有自己的想法，欢迎关注我们哦~

2021-02-04

作者：独笔孤行@TaoCloud DRBD（Distributed Replicated Block Device）是一个用软件实现的、无共享的、服务器之间镜像块设备内容的存储复制解决方案。可以简单的理解为网络RAID。 DRBD的核心功能通过Linux的内核实现，最接近系统的IO栈，DRBD的位置处于文件系统以下，比文件系统更加靠近操作系统内核及IO栈。一、准备环境节点主机名 IP地址磁盘操作系统节点1 node1 172.16.201.53 sda,sdb centos7.6 节点2 node2 172.16.201.54 sda,sdb centos7.6 关闭防火墙和selinux #2节点都需要配置 systemctl stop firewalld systemctl disable firewalld setenforce 0 sed -i "s/SELINUX=enforcing/SELINUX=disabled/g" /etc/selinux/config 配置epel源 #2节点都需要配置 yum install epel-release 二、安装drbd 如果yum源中有完整的drbd软件，可直接通过yum进行安装，如果yum无法找到部分软件包，可通过编译安装。以下2中方法二选一即可。 1.yum安装drbd yum install drbd drbd-bash-completion drbd-udev drbd-utils kmod-drbd yum方式进行安装可能无法找到kmod-drbd软件包，因此需要编译安装。 2.编译安装drbd 2.1准备编译环境 yum update yum -y install gcc gcc-c++ make automake autoconf help2man libxslt libxslt-devel flex rpm-build kernel-devel pygobject2 pygobject2-devel reboot 2.2在官网下载源码包，在官网 https://www.linbit.com/en/drbd-community/drbd-download/中获取源码包下载地址，并进行下载。 wget https://www.linbit.com/downloads/drbd/9.0/drbd-9.0.21-1.tar.gz wget https://www.linbit.com/downloads/drbd/utils/drbd-utils-9.13.0.tar.gz wget https://www.linbit.com/downloads/drbdmanage/drbdmanage-0.99.18.tar.gz mkdir -p rpmbuild/{BUILD,BUILDROOT,RPMS,SOURCES,SPECS,SRPMS} mkdir DRBD9 2.3.编译生成rpm包 tar xvf drbd-9.0.21-1.tar.gz cd drbd-9.0.21-1 make kmp-rpm cp /root/rpmbuild/RPMS/x86_64/*.rpm /root/DRBD9/ tar xvf drbdmanage-0.99.18.tar.gz cd drbdmanage-0.99.18 make rpm cp dist/drbdmanage-0.99.18*.rpm /root/DRBD9/ 2.4.开始安装drbd #2节点都需要安装 cd /root/DRBD9 yum install drbd-kernel-debuginfo-9.0.21-1.x86_64.rpm drbdmanage-0.99.18-1.noarch.rpm drbdmanage-0.99.18-1.src.rpm kmod-drbd-9.0.21_3.10.0_1160.6.1-1.x86_64.rpm 三、配置DRBD 1.主节点划分vg #节点1操作 pvcreate /dev/sdb1 vgcreate drbdpool /dev/sdb1 2.初始化DRBD集群并添加节点 #节点1操作 [root@node1 ~]# drbdmanage init 172.16.201.53 You are going to initialize a new drbdmanage cluster. CAUTION! Note that: * Any previous drbdmanage cluster information may be removed * Any remaining resources managed by a previous drbdmanage installation that still exist on this system will no longer be managed by drbdmanage Confirm: yes/no: yes Empty drbdmanage control volume initialized on '/dev/drbd0'. Empty drbdmanage control volume initialized on '/dev/drbd1'. Waiting for server: . Operation completed successfully #添加节点2 [root@node1 ~]# drbdmanage add-node node2 172.16.201.54 Operation completed successfully Operation completed successfully Host key verification failed. Give leader time to contact the new node Operation completed successfully Operation completed successfully Join command for node node2: drbdmanage join -p 6999 172.16.201.54 1 node1 172.16.201.53 0 G3F1h/pAcGwV1LnlxhFE 记录返回结果中的最后一行：“drbdmanage join -p 6999 172.16.201.54 1 node1 172.16.201.53 0 G3F1h/pAcGwV1LnlxhFE” 并在节点2中执行，以加入集群。 3.从节点划分vg #节点2操作 pvcreate /dev/sdb vgcreate drbdpool /dev/sdb 4.从节点加入集群 #节点2操作 [root@node2 ~]# drbdmanage join -p 6999 172.16.201.54 1 node1 172.16.201.53 0 G3F1h/pAcGwV1LnlxhFE You are going to join an existing drbdmanage cluster. CAUTION! Note that: * Any previous drbdmanage cluster information may be removed * Any remaining resources managed by a previous drbdmanage installation that still exist on this system will no longer be managed by drbdmanage Confirm: yes/no: yes Waiting for server to start up (can take up to 1 min) Operation completed successfully 5.检查集群状态 #节点1操作，以下返回结果为正常状态 [root@node1 ~]# drbdadm status .drbdctrl role:Primary volume:0 disk:UpToDate volume:1 disk:UpToDate node2 role:Secondary volume:0 peer-disk:UpToDate volume:1 peer-disk:UpToDate 6.创建资源 #节点1操作 #创建资源test01 [root@node1 ~]# drbdmanage add-resource test01 Operation completed successfully [root@node1 ~]# drbdmanage list-resources +----------------+ | Name | State | |----------------| | test01 | ok | +----------------+ 7.创建卷 #节点1操作 #创建5GB的卷test01 [root@node1 ~]# drbdmanage add-volume test01 5GB Operation completed successfully [root@node1 ~]# drbdmanage list-volumes +-----------------------------------------------------------------------------+ | Name | Vol ID | Size | Minor | | State | |-----------------------------------------------------------------------------| | test01 | 0 | 4.66 GiB | 100 | | ok | +-----------------------------------------------------------------------------+ [root@node1 ~]# 8.部署资源末尾数字 “2” 表示节点数量 #节点1操作 [root@node1 ~]# drbdmanage deploy-resource test01 2 Operation completed successfully #创建完时，状态为Inconsistent，正在进行同步 [root@node1 ~]# drbdadm status .drbdctrl role:Primary volume:0 disk:UpToDate volume:1 disk:UpToDate node2 role:Secondary volume:0 peer-disk:UpToDate volume:1 peer-disk:UpToDate test01 role:Secondary disk:UpToDate node2 role:Secondary replication:SyncSource peer-disk:Inconsistent done:5.70 #同步完成后，状态内容如下 [root@node1 ~]# drbdadm status .drbdctrl role:Primary volume:0 disk:UpToDate volume:1 disk:UpToDate node2 role:Secondary volume:0 peer-disk:UpToDate volume:1 peer-disk:UpToDate test01 role:Secondary disk:UpToDate node2 role:Secondary peer-disk:UpToDate 9.配置DRBD设备完成后，创建文件系统并进行挂载 #节点1操作 # [/dev/drbd***]的数字,是通过命令[drbdmanage list-volumes]获取的[Minor]值 [root@node1 ~]# mkfs.xfs /dev/drbd100 meta-data=/dev/drbd100 isize=512 agcount=4, agsize=305176 blks = sectsz=512 attr=2, projid32bit=1 = crc=1 finobt=0, sparse=0 data = bsize=4096 blocks=1220703, imaxpct=25 = sunit=0 swidth=0 blks naming =version 2 bsize=4096 ascii-ci=0 ftype=1 log =internal log bsize=4096 blocks=2560, version=2 = sectsz=512 sunit=0 blks, lazy-count=1 realtime =none extsz=4096 blocks=0, rtextents=0 [root@node1 ~]# mount /dev/drbd100 /mnt/ [root@node1 ~]# echo "Hello World" > /mnt/test.txt [root@node1 ~]# ll /mnt/ total 4 -rw-r--r-- 1 root root 12 Nov 26 15:43 test.txt [root@node1 ~]# cat /mnt/test.txt Hello World 10.在节点2上挂载DRBD设备，可进行如下操作： #在节点1操作 #卸载/mnt目录，配置为从节点 [root@node1 ~]# umount /mnt/ [root@node1 ~]# drbdadm secondary test01 #在节点2操作 #配置为主节点 [root@node2 ~]# drbdadm primary test01 [root@node2 ~]# mount /dev/drbd100 /mnt/ [root@node2 ~]# df -hT Filesystem Type Size Used Avail Use% Mounted on devtmpfs devtmpfs 3.9G 0 3.9G 0% /dev tmpfs tmpfs 3.9G 0 3.9G 0% /dev/shm tmpfs tmpfs 3.9G 8.9M 3.9G 1% /run tmpfs tmpfs 3.9G 0 3.9G 0% /sys/fs/cgroup /dev/mapper/centos-root xfs 35G 1.5G 34G 5% / /dev/sda1 xfs 1014M 190M 825M 19% /boot tmpfs tmpfs 783M 0 783M 0% /run/user/0 /dev/drbd100 xfs 4.7G 33M 4.7G 1% /mnt [root@node2 ~]# ls -l /mnt/ total 4 -rw-r--r-- 1 root root 12 Nov 26 15:43 test.txt [root@node2 ~]# cat /mnt/test.txt Hello World 关注微信公众号“云实战”，欢迎更多问题咨询

2020-11-26

理解 Raft 分布式共识算法

Raft 算法是一类基于日志复制的分布式共识算法，旨在提供与 Multi-Paxos 共识算法相同的容错性和性能的前提下，追求更好的可理解性和工程可实现性。

2020-09-28

分布式应用的未来 — Distributionless

作者丨阿里云高级技术专家至简（李云）在技术变革推动社会发展这一时代背景下，大量支撑规模化分布式应用的技术创新、创造与创业应用而生，Could Native、Service Mesh、Serverless

2019-08-12

分布式Redis深度历险-Cluster

本文为分布式Redis深度历险系列的第三篇，主要内容为Redis的Cluster，也就是Redis集群功能。

2019-07-22

分布式Redis深度历险-Sentinel

则选取id最小的那个原文：Java架构笔记免费Java高级资料需要自己领取，涵盖了Java、Redis、MongoDB、MySQL、Zookeeper、Spring Cloud、Dubbo高并发分布式等教程

2019-07-20

解密分布式事务框架-Fescar

1.分布式事务在去年的时候我写过一篇关于分布式事务的文章再有人问你分布式事务，把这篇扔给他。再这篇文章中我叫大家能不用分布式事务就别用分布式事务，因为会引入很多的复杂度。

2019-03-28

MySQL分布式集群文档整理

MySQL 慢查询日志（3）MySQL 查询缓存（4）MySQL binlog日志恢复数据（5）MySQL 主从复制（6）MySQL 主主复制（7）MySQL binlog 详解 MySQL分布式集群视频链接

2018-11-29

深入理解分布式事务

1、什么是分布式事务 分布式事务就是指事务的参与者、支持事务的服务器、资源服务器以及事务管理器分别位于不同的分布式系统的不同节点之上。

2018-11-29

分布式服务治理框架Dubbo

前言 Dubbo是一个被国内很多互联网公司广泛使用的开源分布式服务治理框架，是一个非常全面的SOA基础框架，当当网在Dubbo基础上新增了一些功能，并将其命名为Dubbox（Dubbo eXtensions

2018-09-15

什么是 TCC分布式事务？

但是这也带来了分布式应用都会面对的问题：如何保证多个服务间的事务？怎样才能使操作的原子性、一致性等得到保证？

2018-09-12

分布式Redis缓存串讲(一)

互联网应用的基石现在流量稍微大些的网站，都会采取Redis。基于Redis的内存缓存特性，可以大幅度降低数据库的访问量，大大提升了网站的并发能力，充当数据库的削量先锋。既然Redis这么重要，我们从它的官方介绍来完整的了解下它的能力，知己知彼，才能更运用自如。 Redis官方介绍 Redis是一个开源(BSD协议)，内存解构存储，可以用作数据库，缓存和消息代理。它支持诸如字符串(strings),哈希散列（hashs）,列表（lists）,集合（sets）,带有范围查询的排序集（sorted sets with range queries），位图（bitmaps）,超级日志（hyperloglogs ）和带有半径查询的地理空间索引（geospatial indexes with radius queries），Redis具有内置复制（ replication），Lua脚本（Lua scripting），LRU驱逐（LRU eviction），事务（transactions ）和不同级别的磁盘持久性（different levels of on-disk persistence），并通过Redis Sentinel提供高可用性和通过Redis Cluster自动分区。您可以对这些类型运行原子操作，例如附加到字符串 ; 递增哈希值 ; 将元素推送到列表中 ; 计算集合交集，并集和差异 ; 或者在排序集中获得排名最高的成员。你可以对这些类型执行原子操作，像追加字符串；在哈希里递增值；推送一个元素到列表；计算集合交集，并集和差异 ; 或者在排序集中获得排名最高的成员。为了实现其出色的性能，Redis使用内存数据集。根据您的使用情况，您可以通过每隔一段时间将数据集转储到磁盘或通过将每个命令附加到日志来保留它。如果您只需要功能丰富的网络内存缓存，则可以选择禁用持久性。 Redis还支持简单到设置的主从异步复制，具有非常快速的非阻塞第一次同步，自动重新连接以及在网络分割上的部分重新同步。其他功能包括：事务发布/订阅 Lua脚本(例如：eval 调用redis的脚本) 设置Key的过期时间 LRU-Cahce(内存管理的一种页面置换算法，最近最少使用) 自动故障转移（通过Redis Sentinel实现） Redis是用ANSI C编写，官方建议使用Linux进行部署，Windows版本没有官方支持，但Microsoft开发并维护了Redis的Win-64端口。 Redis应用场景数据表缓存一般访问量较大的表，读取时可以先获取Redis缓存，获取不到再查询数据库，然后放入Redis。这是最常见的运用场景。业务状态缓存例如，多租户的系统，为了减小批量数据压力，可以利用redis实现同一时间内，只能由一个导入。导入完成，清空缓存。也可以限制十分钟内只能导入一次等。还有例如首页数据放入缓存，两分钟更新一次。原子性利用Redis一些原子性命令Inc,decr，可以实现业务参数唯一执行的场景，如订单付款成功通知，为了防止业务线创建多条记录，可以对订单Id执行inc命令，判断是否为1，1代表只有一个执行，如果大于1，则返回结果，并调用decr。类似于信号量。 Redis应用风险虽然Redis给我们提供了巨大的便利，但也要时刻保持对它的关注。要不然有些时候，会对你造成巨大的伤害。缓存穿透意思是指同一个key，数据库没有数据，巨大流量下，会不断的访问数据库。这是浪费的，可以针对一些场景，控制查询次数。如果获取不到值，在指定的时间内不再请求数据库。缓存雪崩同一时间内大量key同时失效，造成流量集体访问数据库，临时失去了缓存的作用。缓存预热必要的基础数据，可以提前缓存掉。节约第一次加载时间。风险监控针对线上机器的不同维度实施监控，如链接数，内存，cpu,稳定性等有异常及时发通知。 flushall风险预知在极端情况下，为了保证新业务的稳定，可能采取被迫措施flushall,清空所有缓存。这种情况下，你一定不能把缓存当成数据库来使用，要有缓存随时可以丢弃的自觉性。谨记！虽然有大量要注意的风险点，但比起它的收益来讲，我们肯定会继续使用的。量一大，各种问题都会出来，不要怕，挺住！ Redis C#客户端 C#客户端这里列举了 csredis Nhiredis redis-sharp redisboost ServiceStack.Redis Sider StackExchange.Redis TeamDev Redis Client 使用之前，可以先了解下它们的优点和弊端，如ServiceStack.Redis 4.0以上版本属于收费版本。StackExchange.Redis在.netcore下有超时bug。 Redis常用命令知悉 Redis官方提供了在线命令测试redis命令，我们可以通过这个网页快速熟悉命令。命令种类有很多，我们今天先从strings,lists来熟悉下。 string下的命令 set get getrange 获取字符串区间 append 追加 > set key1 dolll OK > get key1 "dolll" > GETRANGE key1 0 2 "dol" > append key1 as 7 > get key1 "dolllas" incr 递增 decr 递减 > incr hello (integer) 1 > incr hello (integer) 2 > decr hello (integer) 1 list下的命令 lpush lrange > lpush dwe redis (integer) 1 > lpush dwe ds (integer) 2 > lpush dwe sd (integer) 3 > lpush dwe qd (integer) 4 > lRange dwe 0 20 1) "qd" 2) "sd" 3) "ds" 4) "redis" 匆忙的结束今天主要重温了下Redis,了解Redis应用场景，C#客户端和简单的运行命令。作者：从此启程/范存威出处：http://www.cnblogs.com/fancunwei/ 本文版权归作者和博客园共有，欢迎转载，但未经作者同意必须保留此段声明，且在文章页面明显位置给出原文链接。如文章对您有用，烦请点个推荐再走，感谢！本博客新开通打赏，鼠标移到右侧打赏浮动处，即可赏博主点零花钱，感谢您的支持！

2018-09-06

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。