OpenvSzwitch实现Docker跨主机通信-低调大师

OpenvSzwitch实现Docker跨主机通信

2016-07-09 758

1. OpenvSwitch简介

Open vSwitch（下面简称为 OVS）是由 Nicira Networks 主导的，运行在虚拟化平台（例如 KVM，Xen）上的虚拟交换机。在虚拟化平台上，OVS可以为动态变化的端点提供 2 层交换功能，很好的控制虚拟网络中的访问策略、网络隔离、流量监控等等。主要实现代码为可移植的C代码。

它的目的是让大规模网络自动化可以通过编程扩展，同时仍然支持标准的管理接口和协议（例如NetFlow,sFlow,SPAN,RSPAN,CLI,LACP,802.1ag）。此外，它被设计为支持跨越多个物理服务器的分布式环境，类似于vmware的vmnetwork分布式switch或cisconexus 1000v。Open vSwitch支持多种Linux虚拟化协议，包括Xen/Xen Server,KVM,和VirtualBox。

2.环境

2.1 拓扑图：

2.2 试验环境：

虚拟机操作系统Centos7.2.1511

Openvswitch 2.3.1

3.OpenvSwitch安装

Postil：为了能正常使用service,ifconfig等命令你需要装

yum -y install systemd systemd-libs net-tools

3.1 关闭selinux和防火墙

setenforce 0
sed -i "s/SELINUX=enforcing/SELINUX=permissive/g" /etc/selinux/config
systemctl stop firewalld && systemctl disablefirewalld

3.2 安装依赖包

yum -y install openssl-devel wget kernel-devel

3.3 安装开发工具

yum -y groupinstall "Development Tools"

3.4 添加用户并切换用户

useradd ovswitch
su - ovswitch

3.5 创建编译目录并cd进去

mkdir -p ~/rpmbuild/SOURCES
cd ~/rpmbuild/SOURCES/

3.6 下载OpenvSwitch源码包并解压

wget http://openvswitch.org/releases/openvswitch-2.3.1.tar.gz
tar zxvf openvswitch-2.3.1.tar.gz

3.7 从spec文件中删除openvswitch-kmod的依赖包，并创建一个新的spec文件

sed 's/openvswitch-kmod,//g' openvswitch-2.3.1/rhel/openvswitch.spec >openvswitch-2.3.1/rhel/openvswitch_no_kmod.spec

3.8 编译，然后退出当前用户使用root

rpmbuild -bb --nocheck ./openvswitch-2.3.1/rhel/openvswitch_no_kmod.spec
exit

3.9 安装编译生成的rpm文件

yum -y localinstall/home/ovswitch/rpmbuild/RPMS/x86_64/openvswitch-2.3.1-1.x86_64.rpm

3.10 启动服务

service openvswitch start
service openvswitch status
chkconfig openvswitch on

3.11 安装完成，验证是否安装成功

[root@docker1 ~]# ovs-vsctl --version
ovs-vsctl (Open vSwitch) 2.3.1
Compiled Jul  1 2016 19:52:39
DB Schema 7.6.2

4.0部署OVS实现docker跨主机通信

Docker1_Server与Docker2_Server都执行

安装pipework建立容器间的网络互联的工具

git clonehttps://github.com/jpetazzo/pipework
cp ~/pipework/pipework /usr/bin

4.1 停止docker服务

service docker stop

4.2 安装网桥工具

yum -y install bridge-utils

4.3 停掉docker0网桥并删除

ip link set dev docker0 down
brctl delbr docker0

4.5 配置

Docker1_Server

使用OVS添加网桥br0

ovs-vsctl add-br br0

清空eth0网卡IP

ifconfig eth0 0 up

将物理主机ip赋给br0，并设置网关

ifconfig br0 192.168.200.6/24 up
route add default gw 192.168.200.2

将eth0加入br0

ovs-vsctl add-port br0 eth0

测试是否恢复通信

[root@docker1 ~]# ping baidu.com
PING baidu.com (123.125.114.144) 56(84)bytes of data.
64 bytes from 123.125.114.144: icmp_seq=1ttl=128 time=6.50 ms
64 bytes from 123.125.114.144: icmp_seq=2ttl=128 time=4.80 ms
64 bytes from 123.125.114.144: icmp_seq=3ttl=128 time=6.11 ms
64 bytes from 123.125.114.144: icmp_seq=4ttl=128 time=3.82 ms

让docker使用我们的br0桥接网络

vi /etc/sysconfig/docker-network
修改内容如下行即可：
DOCKER_NETWORK_OPTIONS="-b=br0"

启动docker服务

service docker start
chkconfig docker on

启动容器并为容器指定IP

docker run -itd --name test1 --net=none busybox:latest sh
docker run -itd --name test2 --net=none busybox:latest sh
pipework br0 test1 192.168.200.10/24@192.168.200.6
pipework br0 test2 192.168.200.11/24@192.168.200.6
可用docker ps -a查看容器是否启动

测试访问

docker exec -it test1 sh

Docker2_Server

使用OVS添加网桥br0

ovs-vsctl add-br br0

清空eth0网卡IP

ifconfig eth0 0 up

将物理主机ip赋给br0，并设置网关

ifconfig br0 192.168.200.7/24 up
route add default gw 192.168.200.2

将eth0加入br0

ovs-vsctl add-port br0 eth0

测试是否恢复通信

[root@docker2 ~]# ping baidu.com
PING baidu.com (123.125.114.144) 56(84)bytes of data.
64 bytes from 123.125.114.144: icmp_seq=1ttl=128 time=5.96 ms
64 bytes from 123.125.114.144: icmp_seq=2ttl=128 time=6.03 ms
64 bytes from 123.125.114.144: icmp_seq=3ttl=128 time=4.59 ms
64 bytes from 123.125.114.144: icmp_seq=4ttl=128 time=6.86 ms

让docker使用我们的br0桥接网络

vi /etc/sysconfig/docker-network
修改内容如下行即可：
DOCKER_NETWORK_OPTIONS="-b=br0"

启动docker服务

service docker start
chkconfig docker on

启动容器并为容器指定IP

docker run -itd --name test3 --net=none busybox:latest sh
docker run -itd --name test4 --net=none busybox:latest sh
pipework br0 test3 192.168.200.12/24@192.168.200.7
pipework br0 test4 192.168.200.13/24@192.168.200.7
可用docker ps -a查看容器是否启动

测试访问

docker exec -it test3 sh

综合测试由docker1_Server来访问docker2_Server

总结

通过本次测试，可以看到OpenvSwitch的强大之处，ovs不仅仅用于docker容器，还可以应用虚拟主机网络。通过软件定义网络，极大的简化了网络配置。docker在1.9版本之后加入overlay网络，运用的也是ovs技术。

OpenvSwitch性能是优于docker本身的docker0网桥的。

微信关注我们

原文链接：https://blog.51cto.com/renyongfan/1812825

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

python实现redis客户端单例+hbase客户端单例

当业务需要大量去连接redis或者hbase的时候，大量的连接会造成socket的大量占用，导致的结果就是服务器没有更多的端口去分配，这种情况下的最好解决方案就是实现客户端连接的单例模式，保持连接永远是同一个。说到这，可能大家没有经历过，如果在每秒钟插入4000条数据的话，这个现象就非常明显了。下面就实现下python实现操作redis+hbase单例模式，有很多改进之处，根据自己业务进行调整，可以通过打印实例的ID进行验证： importhappybase importredis class_RedisMgrSingleton(type): '''redis的单例''' def__init__(self,name,bases,dict): super(_RedisMgrSingleton,self).__init__(name,bases,dict) self._instance={} def__call__(self,host,port,db): ifnotself._instance.has_key((host,port,db)): self._instance[(host,po...

2016-07-08

741

客户端无法远程连接Server2008R2服务器排错 ===问题描述=== 客户所使用的是2008R2的服务器操作系统，排错第一步就是问题定位，整理出所有远程有问题的服务器，分析他们的错误的共同点。在远程这些服务器时出现的错误有两种。远程会话被断开，因为没有远程桌面许可证服务器可提供许可证，请联系服务器管理员输入用户名密码后，弹出证书信任，点击确定之后直接闪退以上远程操作均使用域管理员 ===问题分析=== 1）远程连接限制是两个，超过两个以后必须将之前的用户踢掉才可以继续访问，以上报错都没有进入服务器界面，使用mstsc /v:服务器ip地址 /admin 远程连接一样的报错，有一种说法是部署了远程桌面服务之后，服务过期了用户无法访问，这里客户用的都是正版系统和有许可的服务，进一步分析需要登录服务器排查 2）远程桌面闪退虽然报错方式和第一台不一样，但是可能是由相同原因造成 ===远程桌面闪退问题排查=== 1）通过VMware vSphere Client找到有远程问题的服务器，打开"远程桌面会话操作主机配置" 由上往下查看错误信息，首行错误信息提示远程桌面服务许可服务器不可用...

2016-07-09

804

资源下载

更多资源

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。