Linux下搭建MySQL集群-低调大师

Linux下搭建MySQL集群

2018-11-29 731

一、MySQL集群简介

1、什么是MySQL集群

MySQL集群是一个无共享的(shared-nothing)、分布式节点架构的存储方案，其目的是提供容错性和高性能。

数据更新使用读已提交隔离级别（read-committedisolation)来保证所有节点数据的一致性，使用两阶段提交机制（two-phasedcommit)保证所有节点都有相同的数据(如果任何一个写操作失败，则更新失败）。

无共享的对等节点使得某台服务器上的更新操作在其他服务器上立即可见。传播更新使用一种复杂的通信机制，这一机制专用来提供跨网络的高吞吐量。

通过多个MySQL服务器分配负载，从而最大程序地达到高性能，通过在不同位置存储数据保证高可用性和冗余。

2、名称概念

MySQL集群有如下三层：

应用程序层：负责与MySQL服务器通信的各种应用程序。

Mysql服务器层：处理SQL命令，并与NDB存储引擎通信和Mysql服务器。

NDB集群组件层：NDB集群组件有时也称数据节点，负责处理查询，然后将结果返回给mysql服务器。

其中MySQL数据库集群主要包括如下三部分：

1) SQL节点（SQL node - 下图对应为 mysqld）：分布式数据库。包括自身数据和查询中心结点数据

2) 数据节点（Data node - ndbd）：集群共享数据（内存中）

3) 管理服务器（Management Server - ndb_mgmd）：管理集群 SQL node,Data node

拓扑结构图如下所示：

二、环境说明

1、系统环境

2、软件环境

MySQL集群版本：

mysql-cluster-gpl-7.3.6-linux-glibc2.5-x86_64.tar.gz

注：依据系统，在MySQL官网自行下载。

三、搭建集群（Linux环境）

1、安装集群版本

a、准备工作

不管是Management Server，还是Data node、SQL node，都需要先安装MySQL集群版本，然后根据不用的配置来决定当前服务器有哪几个角色。

安装之前准备好mysql用户和mysql用户组，

相关命令：

chkconfig iptables off 
service iptables stop

b、安装集群版本

1.上传安装包至/usr/local目录下，并解压

tar -zxvf mysql-cluster-gpl-7.3.6-linux-glibc2.5-x86_64.tar.gz

2.重命名文件夹

mv mysql-cluster-gpl-7.3.6-linux-glibc2.5-x86_64 mysql

3.授权

chown -R mysql:mysql mysql

4.切换mysql用户

su - mysql

5.安装MySQL

cd /usr/local/mysql
scripts/mysql_install_db --user=mysql --datadir=/usr/local/mysql/data

注：所有服务器上都需要执行上述操作来安装MySQL集群版本。

2、集群配置

a、管理节点

1.root用户下，创建目录和配置文件

mkdir /var/lib/mysql-cluster
cd /var/lib/mysql-cluster
vim config.ini

config.ini配置信息如下：

[NDBD DEFAULT]
NoOfReplicas=2
[NDB_MGMD]
#设置管理节点服务器
nodeid=1
HostName=192.168.3.115
DataDir=/var/lib/mysql-cluster
[NDBD]
id=2
HostName=192.168.3.116
DataDir=/usr/local/mysql/data
[NDBD]
id=3
HostName=192.168.3.117
DataDir=/usr/local/mysql/data
[MYSQLD]
id=4
HostName=192.168.3.116
[MYSQLD]
id=5
HostName=192.168.3.117
#必须有空的mysqld节点，不然数据节点断开后启动有报错
[MYSQLD]
id=6
[mysqld]
id=7

2.授权

chown -R mysql:mysql /var/lib/mysql-cluster

3.切换用户

su - mysql

4.启动管理服务

/usr/local/mysql/bin/ndb_mgmd -f /var/lib/mysql-cluster/config.ini --initial

注:命令行中的ndb_mgmd是mysql cluster的管理服务器，后面的-f表示后面的参数是启动的参数配置文件。

如果在启动后过了几天又添加了一个数据节点，这时修改了配置文件启动时就必须加上--initial参数，不然添加的节点不会作用在mysql cluster中。

b、数据节点

1.编辑/etc/my.cnf文件

# vim /etc/my.cnf
[mysqld] 
sql_mode=NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES 
datadir=/usr/local/mysql/data
socket=/var/lib/mysql/mysql.sock
user=mysql
ndbcluster 
ndb-connectstring=192.168.3.115
[mysql_cluster] 
ndb-connectstring=192.168.3.115

2.切换用户

su - mysql

3.启动数据节点服务

/usr/local/mysql/bin/ndbd --initial

注：第一次启动需要加参数：–initial，以后就不用加了，直接运行： /usr/local/mysql/bin/ndbd

c、SQL节点

1.编辑/etc/my.cnf文件（数据节点和SQL节点在统一服务器时可省略）

# vim /etc/my.cnf
[mysqld] 
sql_mode=NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES 
datadir=/usr/local/mysql/data
socket=/var/lib/mysql/mysql.sock
user=mysql
ndbcluster 
ndb-connectstring=192.168.3.115
[mysql_cluster] 
ndb-connectstring=192.168.3.115

2.复制mysqld到系统服务里面去

cp /usr/local/mysql/support-files/mysql.server /etc/init.d/mysqld

3.切换用户

su - mysql

4.启动数据节点服务

service mysqld start
/usr/local/mysql/bin/mysqladmin -u root password 'password'

d、完成效果

ndb_mgm> show
Connected to Management Server at: localhost:1186
Cluster Configuration
---------------------
[ndbd(NDB)]2 node(s)
id=2@192.168.3.116  (mysql-5.6.19 ndb-7.3.6, Nodegroup: 0, *)
id=3@192.168.3.117  (mysql-5.6.19 ndb-7.3.6, Nodegroup: 0)
[ndb_mgmd(MGM)]1 node(s)
id=1@192.168.3.115  (mysql-5.6.19 ndb-7.3.6)
[mysqld(API)]4 node(s)
id=4@192.168.3.116  (mysql-5.6.19 ndb-7.3.6)
id=5@192.168.3.117  (mysql-5.6.19 ndb-7.3.6)
id=6 (not connected, accepting connect from any host)
id=7 (not connected, accepting connect from any host)

四、常用命令与问题整理

1） ndb_mgmd管理命令：/usr/local/mysql/bin/ndb_mgm 执行之后就是管理控制台了，里面可以继续输入命令。(具体命令可以使用help查看)

2）停止集群服务器的命令：/usr/local/mysql/bin/ndb_mgm -e shutdown

如果集群配置有更新了：rm /usr/local/mysql/mysql-cluster/ndb_1_config.bin.1

3）停止SQL节点的命令：/usr/local/mysql/bin/mysqladmin -uroot shutdown

4）使用需要注意如下两点：

a.表必须用ENGINE=NDB或ENGINE=NDBCLUSTER选项创建，或用ALTER TABLE选项更改，以使用NDB Cluster存储引擎在 Cluster内复制它们。如果使用mysqldump的输出从已有数据库导入表，可在文本编辑器中打开SQL脚本，并将该选项添加到任何表创建语句，或用这类选项之一替换任何已有的ENGINE（或TYPE）选项。

b.另外还请记住，每个NDB表必须有一个主键。如果在创建表时用户未定义主键，NDB Cluster存储引擎将自动生成隐含的主键。（注释：该隐含键也将占用空间，就像任何其他的表索引一样。由于没有足够的内存来容纳这些自动创建的键，出现问题并不罕见）。

其他操作上没有什么区别！

微信关注我们

原文链接：https://blog.roncoo.com/article/129594

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

mongodb集群性能优化

在前面两篇文章，我们介绍了如何去搭建mongodb集群，这篇文章我们将介绍如何去优化mongodb的各项配置，以达到最优的效果。警告不做任何的优化，集群搭建完成之后，使用命令连接mongodb终端，一般会遇到以下的警告信息：如何你是用的是我最新一版集群搭建的脚本，估计警告会少几个，因为里面已经做了一些优化 2017-08-16T18:33:42.985+0800ISTORAGE[initandlisten]**WARNING:UsingtheXFSfilesystemisstronglyrecommendedwiththeWiredTigerstorageengine 2017-08-16T18:33:42.985+0800ISTORAGE[initandlisten]**Seehttp://dochub.mongodb.org/core/prodnotes-filesystem 2017-08-16T18:33:43.024+0800ICONTROL[initandlisten] 2017-08-16T18:33:43.024+0800ICONTROL[initandliste...

2018-11-29

769

1. DDL - Data Definition Language 数据库定义语言：定义数据库的结构。其主要命令有CREATE，ALTER，DROP等，下面用例子详解。该语言不需要commit，因此慎重。 CREATE - to create objects in the database 在数据库创建对象例：CREATE DATABASE test; // 创建一个名为test的数据库 ALTER - alters the structure of the database 修改数据库结构例：ALTER TABLE test ADD birthday date; // 修改test表，新增date类型的birthday列 DROP - delete objects from the database 从数据库中删除对象例：DROP DATABASE test;// 删除test数据库还有其他的： TRUNCATE - 截断表内容（开发期，还是挺常用的） COMMENT - 为数据字典添加备注 2. DML - Data Manipulation Language 数据库操...

2018-11-29

749

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。