搜索[集群]结果-低调大师优秀个人博客

精选列表

搜索[集群]，共10007篇文章

KubeKey_v3.x安装K8s

安装说明测试环境该文档测试了[CentOS7.9,Rocky8.x,Rocky9.x]均可安装集群信息 IP hostname 节点类型 10.0.3.0 master1 master 10.0.3.1

2025-12-13

面试大杂烩

脑裂是指在高可用集群中，由于网络分区或节点暂时性故障，导致集群中的成员无法正常通信。

2025-09-18

Kafka集群搭建

4、集群：多台服务器组成的整体叫做集群，这个整体对生产者和消费者来说，是透明的。其实对消费系统组成的集群添加一台服务器减少一台服务器对生产者和消费者都是无感之的。

2018-11-30

Pulsar 集群安装

Pulsar 2.2.0版本安装步骤，单机模式（standalone）比较简单，直接参考官网：http://pulsar.apache.org/docs/en/standalone/按步骤执行就行，主要讲解集群模式安装

2018-11-28

redis集群搭建

redis集群搭建 Redis集群的搭建 Redis集群中至少应该有三个节点。要保证集群的高可用，需要每个节点有一个备份机。 Redis集群至少需要6台服务器。搭建伪分布式。

2018-07-24

CentOS集群搭建

perl-5.16.1]# make && make test && make install [root@eshop-cache01 local]# perl –v 配置集群

2018-03-24

Hbase集群搭建

node02 node03 node,node03为代理域名,已经在 /etc/hosts 配置过所以可以直接使用修改配置文件 hbase‐site.xml 注意：以下配置集成的是hadoop ha集群

2017-12-29

Elasticsearch集群部署

一、ES中的基本概念 cluster 代表一个集群，集群中有多个节点，其中有一个为主节点，这个主节点是可以通过选举产生的，主从节点是对于集群内部来说的。

2017-12-09

Elasticsearch集群管理

ES通过设置【节点的名字】和【集群的名字】，就能自动的组织相同集群名字的节点加入到集群中，并使很多的技术对用户透明化。如果用户想要管理查看集群的状态，可以通过一些REST API来实现。

2017-12-05

mv/home/abc/home/abcd(修改目录名) （1）vi/usr/local/hadoop/etc/hadoop/core-site.xml <configuration> <property> <name>fs.defaultFS</name> <value>hdfs://skinglzw:9000</value> </property> <property> <name>hadoop.tmp.dir</name> <value>/usr/local/hadoop/tmp</value> </property> <property> <name>hadoop.native.lib</name> <value>true</value> <description>shold native hadoop libraries, if present ,be use</description> </property> </configuration> （2）vi hdfs-site.xml <property> <name>dfs.replication</name> <value>2</value> </property> <property> <name>dfs.namenode.secondary.http-address</name> <value>skinglzw:50090</value> <description>The secondary namenode thhp server address and port.</description> </property> <property> <name>dfs.namenode.name.dir</name> <value>/usr/local/hadoop/dfs/name</value> </property> <property> <name>dfs.datanode.data.dir</name> <value>/usr/local/hadoop/dfs/data</value> </property> <property> <name>dfs.namenode.checkpoint.dir</name> <value>file:///usr/local/hadoop/dfs/namesecondary</value> <description>Determaine where on the local filesystem theasfdfasfafafasdfaf sdfasfasdfas</description> </property> （3）cp ./mapred-site.xml.template ./mapred-site.xml vimapred-site.xml <property> <name>mapreduce.framework.name</name> <value>yarn</value> </property> （4）vi yarn-site.xml <property> <name>yarn.resourcemanager.hostname</name> <value>skinglzw</value> </property> <property> <name>yarn.nodemanager.aux-services</name> <value>mapreduce_shuffle</value> </property> （5）vihadoop-env.sh export JAVA_HOME=/usr/local/jdk/jdk1.8.0 export HADOOP_HOME=/usr/local/hadoop export HADOOP_COMMON_LIB_NATIVE=$HADOOP_HOME/lib/native export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib" (5.1)vi slaves skinglzw1 skinglzw2 skinglzw3 skinglzw4 （6）vi ~/.bashrc export JAVA_HOME=/usr/local/jdk/jdk1.8.0 export JRE_HOME=${JAVA_HOME}/jre export HADOOP_HOME=/usr/local/hadoop export HADOOP_CONF_DIR=${HADOOP_HOME}/etc/hadoop export HADOOP_COMMON_LIB_NATIVE_DIR=${HADOOP_HOME}/lib/native export HADOOP_OPTS="-Djava.library.path=${HADOOP_HOME}/lib" export SCALA_HOME=/usr/local/scala/scala-2.10.4 export SPARK_HOME=/usr/local/spark/spark-1.6.0-bin-hadoop2.6 export FLINK_HOME=/usr/local/flink/flink-0.9.0 export HIVE_HOME=/usr/local/hive/apache-hive-1.2.1 export M2_HOME=/usr/local/spark/apache-maven-3.2.2/ export CLASS_PATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib:${HIVE_HOME}/lib export PATH=/usr/local/eclipse/eclipse:${M2_HOME}/bin:${SPARK_HOME}/bin:${SPARK_HOME}/sbin:${SCALA_HOME}/bin:${JAVA_HOME}/bin:${HADOOP_HOME}/bin:${HADOOP_HOME}/sbin:${HIVE_HOME}/bin:${FLINK_HOM}/bin:$PATH source ~/.bashrc(每台机器都要执行，才能生效) scp /home/skinglzw/.bashrc root@skinglzw1:/home/skinglzw1/.bashrc scp/home/skinglzw/.bashrcroot@skinglzw2:/home/skinglzw2/.bashrc scp/home/skinglzw/.bashrcroot@skinglzw3:/home/skinglzw3/.bashrc scp/home/skinglzw/.bashrcroot@skinglzw4:/home/skinglzw4/.bashrc vi /etc/hosts 192.168.23.131 skinglzw 192.168.23.128 skinglzw1 192.168.23.129 skinglzw2 192.168.23.130 skinglzw3 192.168.23.132 skinglzw4 scp /etc/hosts root@skinglzw1:/etc/hosts scp /etc/hosts root@skinglzw2:/etc/hosts scp /etc/hosts root@skinglzw3:/etc/hosts scp /etc/hosts root@skinglzw4:/etc/hosts scp -r /usr/local/jdk/ root@skinglzw4:/usr/local(传某个目录，整个目录加-r) scp -r /usr/local/scala/ root@skinglzw4:/usr/local scp -r /usr/local/spark/ root@skinglzw4:/usr/local scp -r /usr/local/hive/ root@skinglzw4:/usr/local scp -r /usr/local/hadoop/ root@skinglzw4:/usr/local 文件格式化 bin/hdfs namenode -format /usr/local/hadoop/sbin ./start-dfs.sh ./stop-dfs.sh yarn资源管理或者调度 ./start-yarn.sh(启动yarn比启动hdfs快很多，因为safemode进行数据的检查和恢复) http://skinglzw:50070 http://skinglzw:8088 配置spark cp ./spark-env.sh.template ./spark-env.shvispark-env.sh export JAVA_HOME=/usr/local/jdk/jdk1.8.0 export SCALA_HOME=/usr/local/scala/scala-2.10.4 export HADOOP_HOME=/usr/local/hadoop export HADOOP_CONF_DIR=/usr/local/hadoop/etc/hadoop export SPARK_MASTER_IP=skinglzw export SPARK_WORKER_MEMORY=1g export SPARK_EXECUTOR_MEMORY=1g export SPARK_DRIVER_MEMORY=1g export SPARK_WORKER_CORES=8 vi slaves skinglzw1 skinglzw2 skinglzw3 skinglzw4 vi spark-defaults.conf spark.executor.extraJavaOptions -XX:+PrintGCDetails -Dkey=value -Dnumbers="one two three" spark.eventLog.enabled true spark.eventLog.dir hdfs://skinglzw:9000/historyserverforSpark spark.yarn.historyServer.address skinglzw:18080 spark.history.fs.logDirectory hdfs://skinglzw:9000/historyserverforSpark scp ./spark-env.sh root@skinglzw1:/usr/local/spark/spark-1.6.0-bin-hadoop2.6/conf/spark-env.sh scp ./slaves root@skinglzw1:/usr/local/spark/spark-1.6.0-bin-hadoop2.6/conf/slaves hadoop dfs rm -r /historyserverforSpark (删除历史信息，如果有的话就删除) hadoop dfs mkdir /historyserverforSpark /usr/local/spark/spark-1.6.0-bin-hadoop2.6/sbin ulimit -c unlimited(我的虚拟机是单核的2线程，所有要先设置下，不然会报错，启动不起啦) nodemanaget没启动起来不知道为什么 ./start-all.sh(去其他机器用jps看下work进程有没有启动起来，没有的话，stop-all.sh命令执行，再start-all.sh执行一次，还不成功，多试几次就成功了，我的虚拟机配置低的原因) ./start-history-server.sh http://skinglzw:8080 http://skinglzw:18080 bin目录下 spark-submit 提交spark程序 spark-shell 本文转自 skinglzw 51CTO博客，原文链接：http://blog.51cto.com/skinglzw/1867055，如需转载请自行联系原作者

2017-11-28

Redis集群方案

下面介绍Redis的集群方案。

2017-11-27

Linux HA集群

HA(High Availability，高可用)集群的主要目的是提高服务的在线率，也就是缩短平均无故障的时间。

2017-11-16

Weblogic集群介绍

Weblogic集群介绍在介绍weblogic集群之前，先看看传统的双机架构,如下图所示：这种架构存在以下几点不足之处： 1）采用主机备机的方式，一般主机使用比较频繁，导致另外比较空闲，资源利用不均衡

2017-11-15

Redis 集群介绍

集群简介 Redis 集群是一个可以在多个 Redis 节点之间进行数据共享的设施（installation）。

2017-11-15

Elasticsearch集群配置

false, "lucene_version" : "5.5.0" }, "tagline" : "You Know, for Search" } [root@test opt]# 注意 1.集群只有两台

2017-11-12

zookeeper 集群安装

ZooKeeper本身可以以Standalone模式安装运行，不过它的长处在于通过分布式ZooKeeper集群（一个Leader，多个Follower），基于一定的策略来保证ZooKeeper集群的稳定

2017-11-12

Redis 集群cluster

在网上查找redis集群的相关文档，很多都是以主从或者主从故障转移而说是集群，前几天玩了下集群，今天终于写出来一部分内容，可以分享出来了。

2017-11-09

hadoop集群搭建

key: ssh-keygen 复制从A复制到B上: ssh-copy-id B 验证： ssh localhost/exit，ps -e|grep ssh ssh A #在B中执行启动hadoop集群

2017-11-09

HBase 集群监控

掌控集群的核心性能指标，了解集群的性能表现。集群出现问题时及时报警，便于运维同学及时修复问题。集群重要指标值异常时进行预警，将问题扼杀在摇篮中，不用等集群真正不可用时才采取行动。

2017-10-21

ElasticSearch 集群监控

最近在做 ElasticSearch 的信息（集群和节点）监控，特此稍微整理下学到的东西。这篇文章主要介绍集群的监控。

2017-10-21

hadoop集群配置

官网配置：http://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/ClusterSetup.html 参考配置：http://blog.csdn.net/jediael_lu/article/details/38680013

2017-09-03

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。