docker集群存储软件etcd安装-低调大师

docker集群存储软件etcd安装

2017-11-07 529

Etcd是coreos开发的一个kv的软件，我使用他做存储数据，比如持久化固定ip，就是把固定的docker容器ip信息存放到etcd里，智能配置docker防火墙的信息也是存放到etcd里，这个软件很小型，并且支持集群，很是方便，现在给大家介绍一下如何在centos6系统里安装此软件。

先简单介绍一下etcd，从网上复制的

 
        etcd是一个高可用的键值存储系统，主要用于共享配置和服务发现。
       
        etcd的特性如下：
       
        简单: curl可访问的用户的API（HTTP+JSON）
       
        安全: 可选的SSL客户端证书认证
       
        快速: 单实例每秒 1000 次写操作
       
        可靠: 使用Raft保证一致性

安装环境

系统：centos6.6

etcd版本0.4.6

虽然有最新的版本，但我一直使用这个版本，比较稳定

下面是安装过程

1、下载

 
        curl -L  https:
        //github
        .com
        /coreos/etcd/releases/download/v0
        .4.6
        /etcd-v0
        .4.6-linux-amd64.
        tar
        .gz -o etcd-v0.4.6-linux-amd64.
        tar
        .gz

2、解压

 
        tar 
        xzvf etcd-v0.4.6-linux-amd64.
        tar
        .gz 
       
        cd 
        etcd-v0.4.6-linux-amd64

3、复制程序到系统环境

 
        cp 
        etcd 
        /usr/local/bin 
       
        cp 
        etcdctl 
        /usr/local/bin

4、设置运行脚本，绝对路径是/etc/init.d/etcd

 
        #!/bin/bash
       
        # Copyright 2013, Nathan Milford
       
        #
       
        # Licensed under the Apache License, Version 2.0 (the "License");
       
        # you may not use this file except in compliance with the License.
       
        # You may obtain a copy of the License at
       
        #
       
        #     http://www.apache.org/licenses/LICENSE-2.0
       
        #
       
        # Unless required by applicable law or agreed to in writing, software
       
        # distributed under the License is distributed on an "AS IS" BASIS,
       
        # WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
       
        # See the License for the specific language governing permissions and
       
        # limitations under the License.
       
        #
       
        # /etc/init.d/etcd
       
        #
       
        # Startup script for etcd
       
        #
       
        # chkconfig: 2345 20 80
       
        # description: Starts and stops etcd
       
        . 
        /etc/init
        .d
        /functions 
       
        prog=
        "etcd" 
       
        prog_bin=
        "/usr/local/bin/$prog" 
       
        desc=
        "etcd shared configuration and service discovery daemon" 
       
        if 
        ! [ -f $prog_bin ]; 
        then 
       
        echo 
        "$prog binary not found." 
       
        exit 
        5 
       
        fi
       
        if 
        [ -f 
        /etc/sysconfig/
        $prog ]; 
        then 
       
        . 
        /etc/sysconfig/
        $prog 
       
        else
       
        echo 
        "No sysconfig file found in /etc/sysconfig/$prog... exiting." 
       
        exit 
        5 
       
        fi
       
        start() {
       
        echo 
        "Starting $desc ($prog): " 
       
        su 
        $ETCD_USER -c 
        "nohup $prog_bin $ETCD_OPTS >>$ETCD_OUT_FILE 2>&1 &" 
       
        RETVAL=$? 
       
        return 
        $RETVAL 
       
        }
       
        stop() {
       
        echo 
        "Shutting down $desc ($prog): " 
       
        pkill -f $prog_bin 
       
        }
       
        restart() {
       
        stop 
       
        start 
       
        }
       
        status() {
       
        if 
        [ -z $pid ]; 
        then 
       
        pid=$(pgrep -f $prog_bin) 
       
        fi 
       
        if 
        [ -z $pid ]; 
        then 
       
        echo 
        "$prog is NOT running." 
       
        return 
        1 
       
        else 
       
        echo 
        "$prog is running (pid is $pid)." 
       
        fi 
       
        }
       
        case 
        "$1" 
        in 
       
        start)   start;; 
       
        stop)    stop;; 
       
        restart) restart;; 
       
        status)  status;; 
       
        *)       
        echo 
        "Usage: $0 {start|stop|restart|status}" 
       
        RETVAL=2;; 
       
        esac
       
        exit 
        $RETVAL

5、设置etcd软件环境配置，根据自己的实际环境修改

 
        09:21:19 
        # cat /etc/sysconfig/etcd 
       
        #!/bin/bash
       
        # Copyright 2014, Nathan Milford
       
        #
       
        # Licensed under the Apache License, Version 2.0 (the "License");
       
        # you may not use this file except in compliance with the License.
       
        # You may obtain a copy of the License at
       
        #
       
        #     http://www.apache.org/licenses/LICENSE-2.0
       
        #
       
        # Unless required by applicable law or agreed to in writing, software
       
        # distributed under the License is distributed on an "AS IS" BASIS,
       
        # WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
       
        # See the License for the specific language governing permissions and
       
        # limitations under the License.
       
        lib_dir=
        '/var/lib/etcd/' 
       
        # Will be used to populate IP address values below.  Setting some items to
       
        # '0.0.0.0' is not compatable with the discovery API.
       
        #_MY_IPADDR=$(/sbin/ifconfig | grep 'inet'| grep -Ev '(127|117|172|::1|fe)' |awk '{print $2}'|head -n 1)
       
        _MY_IPADDR=10.10.29.236
       
        # Daemon User
       
        #ETCD_USER="etcd"
       
        # Cluster Seeds
       
        #  You can specify a list here sepearated by commas, or leave it blank if
       
        #  you're playing with a single node.
       
        ETCD_SEEDS=
        "" 
       
        # Discovery Endpoint
       
        #  Leave it as the public URL unless you are running your own.
       
        ETCD_DISCOVER_ENDPOINT=
        "https://discovery.etcd.io/" 
       
        # Discovery Token
       
        #  If you are using the discovery protocol you can grab your cluster token
       
        #  from https://discovery.etcd.io/new if you are not hosting it yourself.
       
        ETCD_DISCOVERY_TOKEN=
        "cb5940a807d44287e05f29f3170883e3" 
       
        # This node's name as it represents itself on the cluster.
       
        ETCD_NODE_NAME=$(
        hostname 
        -s) 
       
        # Hostname and port for the etcd server to work on.
       
        ETCD_LISTEN=
        "$_MY_IPADDR:4001" 
       
        # Directory to store log and snapshot.
       
        ETCD_DATA_DIR=
        "/var/lib/etcd/" 
       
        # File to log stdout/stderr to.
       
        ETCD_OUT_FILE=
        "/var/log/etcd/etcd.log" 
       
        # Set logging vebosity for the file above.
       
        #   Valid options are "", "v" or "vv"
       
        ETCD_LOGGING=
        "" 
       
        # Max size of the cluster.
       
        ETCD_MAXSIZE=9
       
        # Max size of result buffer.
       
        ETCD_MAXRESULT=1024
       
        # Number of retries to attempt while joining a cluster
       
        ETCD_RETRIES=3
       
        # Set security settings for the etcd server.
       
        #  Leave blank if you do not plan to use this feature, otherwise add appropriate
       
        #  paths.
       
        ETCD_CAFILE=
        "" 
       
        ETCD_CERT=
        "" 
       
        ETCD_KEY=
        "" 
       
        # Toggles snapshotting.
       
        #  Keep blank or set to true.
       
        ETCD_SNAPSHOT=
        "" 
       
        # Hostname and port for the RAFT server to work on.
       
        RAFT_LISTEN=
        "$_MY_IPADDR:7001" 
       
        # Set security settings for the RAFT server.
       
        #  Leave blank if you do not plan to use this feature, otherwise add appropriate
       
        #  paths.
       
        RAFT_CAFILE=
        "" 
       
        RAFT_CERT=
        "" 
       
        RAFT_KEY=
        "" 
       
        # Below we build the opts to pass to the init script.
       
        ETCD_OPTS="-name=${ETCD_NODE_NAME} \
       
        -addr=${ETCD_LISTEN} \ 
       
        -peer-addr=${RAFT_LISTEN} \ 
       
        -data-
        dir
        =${ETCD_DATA_DIR} \ 
       
        -max-result-buffer=${ETCD_MAXRESULT} \ 
       
        -max-cluster-size=${ETCD_MAXSIZE} \ 
       
        -max-retry-attempts=${ETCD_RETRIES}" 
       
        if 
        [ x$ETCD_SEEDS != 
        "x" 
        ]; 
        then 
       
        ETCD_OPTS=
        "$ETCD_OPTS -peers=${ETCD_SEEDS}" 
       
        fi
       
        if 
        [ x$ETCD_DISCOVERY_TOKEN != 
        "x" 
        ]; 
        then 
       
        ETCD_OPTS=
        "$ETCD_OPTS -discovery=${ETCD_DISCOVER_ENDPOINT}${ETCD_DISCOVERY_TOKEN}" 
       
        fi
       
        if 
        [ 
        "$ETCD_LOGGING" 
        == 
        "v" 
        ]; 
        then 
       
        ETCD_OPTS=
        "$ETCD_OPTS -v" 
       
        elif 
        [ 
        "$ETCD_LOGGING" 
        == 
        "vv" 
        ]; 
        then 
       
        ETCD_OPTS=
        "$ETCD_OPTS -vv" 
       
        fi
       
        if 
        [ x$ETCD_SNAPSHOT != 
        "x" 
        ]; 
        then 
       
        ETCD_OPTS=
        "$ETCD_OPTS -snapshot" 
       
        fi
       
        if 
        [ ! -d $lib_dir ];
        then 
       
        mkdir 
        -p $lib_dir 
       
        fi
       
        #if [ x$ETCD_CAFILE != "x" ] && [ x$ETCD_CERT != "x" ] && [ x$ETCD_KEY != "x" ]; then
       
        #  ETCD_OPTS="$ETCD_OPTS -ca-file=${ETCD_CAFILE} -cert-file=${ETCD_CERT} -key-file=${ETCD_KEY}"
       
        #fi
       
        #if [ x$RAFT_CAFILE != "x" ] && [ x$RAFT_CERT != "x" ] && [ x$RAFT_KEY != "x" ]; then
       
        #  ETCD_OPTS="$ETCD_OPTS -peer-ca-file=${RAFT_CAFILE} -peer-cert-file=${RAFT_CERT} -peer-key-file=${RAFT_KEY}"
       
        #fi
       
        #echo $ETCD_OPTS
       
        # TODO
       
        # Add support for:
       
        #  -peers-file
       
        #  -config
       
        #  -cors
       
        #  -cpuprofile

如果不想加入集群，就把ETCD_DISCOVER_ENDPOINT与ETCD_DISCOVERY_TOKEN给注释了，另外_MY_IPADDR是本机的ip

6、创建用户

 
        useradd 
        etcd -M -s 
        /sbin/nologin

7、创建日志与数据存放目录

 
        mkdir 
        /var/log/etcd 
       
        mkdir 
        /var/lib/etcd

8、授予权限

 
        chown 
        -R etcd:etcd 
        /var/log/etcd 
       
        chown 
        -R etcd:etcd 
        /var/lib/etcd

9、启动

 
        /etcd/init
        .d
        /etcd 
        start

10、设置开机启动

 
        chkconfig --level 345 etcd on

11、查看运行情况

查看集群主机ip

 
        12:22:48 
        # curl -L http://127.0.0.1:4001/v2/machines 
       
        http:
        //10
        .10.21.199:4001, http:
        //10
        .10.27.221:4001, http:
        //10
        .10.17.3:4001, http:
        //10
        .10.17.4:4001, http:
        //10
        .10.29.236:4001

查看集群主机列表（详细）

 
  
    
      
      
        12:23:07 
        # curl -L http://127.0.0.1:4001/v2/keys/_etcd/machines 
       
 
        {
        "action"
        :
        "get"
        ,
        "node"
        :{
        "key"
        :
        "/_etcd/machines"
        ,
        "dir"
        :
        true
        ,
        "nodes"
        :[{
        "key"
        :
        "/_etcd/machines/docker-test1"
        ,
        "value"
        :
        "etcd=http%3A%2F%2F10.10.21.199%3A4001\u0026raft=http%3A%2F%2F10.10.21.199%3A7001"
        ,
        "modifiedIndex"
        :1,
        "createdIndex"
        :1},{
        "key"
        :
        "/_etcd/machines/docker-test2"
        ,
        "value"
        :
        "etcd=http%3A%2F%2F10.10.27.221%3A4001\u0026raft=http%3A%2F%2F10.10.27.221%3A7001"
        ,
        "modifiedIndex"
        :9,
        "createdIndex"
        :9},{
        "key"
        :
        "/_etcd/machines/docker-test3"
        ,
        "value"
        :
        "etcd=http%3A%2F%2F10.10.17.3%3A4001\u0026raft=http%3A%2F%2F10.10.17.3%3A7001"
        ,
        "modifiedIndex"
        :16,
        "createdIndex"
        :16},{
        "key"
        :
        "/_etcd/machines/ip-10-10-17-4"
        ,
        "value"
        :
        "etcd=http%3A%2F%2F10.10.17.4%3A4001\u0026raft=http%3A%2F%2F10.10.17.4%3A7001"
        ,
        "modifiedIndex"
        :177304,
        "createdIndex"
        :177304},{
        "key"
        :
        "/_etcd/machines/ip-10-10-29-236"
        ,
        "value"
        :
        "etcd=http%3A%2F%2F10.10.29.236%3A4001\u0026raft=http%3A%2F%2F10.10.29.236%3A7001"
        ,
        "modifiedIndex"
        :2101510,
        "createdIndex"
        :2101510}],
        "modifiedIndex"
        :1,
        "createdIndex"
        :1}} 
       
 
    

   
 

查看集群header

 
        12:23:15 
        # curl -L http://127.0.0.1:4001/v2/leader 
       
        http:
        //10
        .10.17.4:7001

详细请参考https://github.com/coreos/etcd

本文转自 dl528888 51CTO博客，原文链接：http://blog.51cto.com/dl528888/1623746，如需转载请自行联系原作者

微信关注我们

原文链接：https://yq.aliyun.com/articles/417937

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

zabbix企业应用之监控docker容器资源情况

关于docker的监控，无论开源的CAdvisor、Data Dog还是我自己写的监控（http://dl528888.blog.51cto.com/2382721/1635951），不是通过docker的statsapi就是使用socket来进行。单独看一个主机的监控项还行，比如只查看容器test的cpu、内存还是网络，但如果想批量查看的话，比如查看容器test1-test10的所有监控项或者只是看cpu资源使用比较费劲了，现在我使用zabbix通过docker stats api监控容器资源，然后使用lld技术自动监控，使用zatree进行批量展示监控效果。不说太多的废话，直接看效果图，满足自己需求在继续深入研究一、效果图 1、监控容器cpu使用率 2、监控容器内存使用量 3、监控容器网络流量值目前我监控docker就监控这些东西，至于其他的资源个人有需求可以自己写。下面是如何部署二、部署 1、环境我的zabbix是2.0.6，所以想使用我的模板，必须是2.0.x以上的zabbix版本； docker使用1.6版本，如果想使用我的监控，docker必须大于1.5；需...

2017-11-08

601

CentOS7 安装 docker-ce

Docker CE 安装过程更新系统源 $ sudo yum -y update 安装yum-utils工具 $ sudo yum -y install yum-utils # 将软件包添加至本地缓存 $ sudo yum makecache fast 安装 Docker CE 资源源 $ sudo yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo 安装 docker $ sudo yum -y install docker-ce 启动 docker $ sudo systemctl start docker 测试 docker $ sudo docker run hello-world 配置普通用户使用docker a) 查看是否存在 docker 用户组 $ cat /etc/group | grep docker 如果不存在 docker 用户组，自行创建： $ sudo groupadd docker b) 添加当前用户到 docker 组中 $ sudo...

2017-11-08

562

发表评论

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。