首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >Linux下搭建MySQL集群

Linux下搭建MySQL集群

作者头像
李鹏
修改于 2017-08-25 10:16:15
修改于 2017-08-25 10:16:15
8.1K10
代码可运行
举报
文章被收录于专栏:李鹏的专栏李鹏的专栏
运行总次数:0
代码可运行

一、MySQL集群简介

1、什么是MySQL集群

MySQL集群是一个无共享的(shared-nothing)、分布式节点架构的存储方案,其目的是提供容错性和高性能。

数据更新使用读已提交隔离级别(read-committedisolation)来保证所有节点数据的一致性,使用两阶段提交机制(two-phasedcommit)保证所有节点都有相同的数据(如果任何一个写操作失败,则更新失败)。

无共享的对等节点使得某台服务器上的更新操作在其他服务器上立即可见。传播更新使用一种复杂的通信机制,这一机制专用来提供跨网络的高吞吐量。

通过多个MySQL服务器分配负载,从而最大程序地达到高性能,通过在不同位置存储数据保证高可用性和冗余。

2、名称概念

MySQL集群有如下三层:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
应用程序层:负责与MySQL服务器通信的各种应用程序。

Mysql服务器层:处理SQL命令,并与NDB存储引擎通信和Mysql服务器。

NDB集群组件层:NDB集群组件有时也称数据节点,负责处理查询,然后将结果返回给mysql服务器。

其中MySQL数据库集群主要包括如下三部分:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
1) SQL节点(SQL node - 下图对应为 mysqld):分布式数据库。包括自身数据和查询中心结点数据  

2) 数据节点(Data node  - ndbd):集群共享数据(内存中)     

3) 管理服务器(Management Server - ndb_mgmd):管理集群 SQL node,Data node

拓扑结构图如下所示:

二、环境说明

1、系统环境

2、软件环境

MySQL集群版本:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
mysql-cluster-gpl-7.3.6-linux-glibc2.5-x86_64.tar.gz

注:依据系统,在MySQL官网自行下载。

三、搭建集群(Linux环境)

1、安装集群版本

a、准备工作

不管是Management Server,还是Data node、SQL node,都需要先安装MySQL集群版本,然后根据不用的配置来决定当前服务器有哪几个角色。

安装之前准备好mysql用户和mysql用户组,

相关命令:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
groupadd mysql  
useradd mysql -g mysql

为了方便测试,确定相关机器的防火墙已关闭(或者设置防火墙这几台机器之间的网络连接是畅通无阻的),

相关命令:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
chkconfig iptables off 
service iptables stop

b、安装集群版本

1.上传安装包至/usr/local目录下,并解压

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
tar -zxvf mysql-cluster-gpl-7.3.6-linux-glibc2.5-x86_64.tar.gz

2.重命名文件夹

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
mv mysql-cluster-gpl-7.3.6-linux-glibc2.5-x86_64 mysql

3.授权

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
chown -R mysql:mysql mysql

4.切换mysql用户

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
su - mysql

5.安装MySQL

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
cd /usr/local/mysql
scripts/mysql_install_db --user=mysql --datadir=/usr/local/mysql/data

注:所有服务器上都需要执行上述操作来安装MySQL集群版本。

2、集群配置

a、管理节点

1.root用户下,创建目录和配置文件

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
mkdir /var/lib/mysql-cluster
cd /var/lib/mysql-cluster
vim config.ini

config.ini配置信息如下:

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
[NDBD DEFAULT]
NoOfReplicas=2
[NDB_MGMD]
#设置管理节点服务器
nodeid=1
HostName=192.168.3.115
DataDir=/var/lib/mysql-cluster
[NDBD]
id=2
HostName=192.168.3.116
DataDir=/usr/local/mysql/data
[NDBD]
id=3
HostName=192.168.3.117
DataDir=/usr/local/mysql/data
[MYSQLD]
id=4
HostName=192.168.3.116
[MYSQLD]
id=5
HostName=192.168.3.117
#必须有空的mysqld节点,不然数据节点断开后启动有报错
[MYSQLD]
id=6
[mysqld]
id=7

2.授权

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
chown -R mysql:mysql /var/lib/mysql-cluster

3.切换用户

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
su - mysql

4.启动管理服务

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
/usr/local/mysql/bin/ndb_mgmd -f /var/lib/mysql-cluster/config.ini --initial
代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
:命令行中的ndb_mgmd是mysql cluster的管理服务器,后面的-f表示后面的参数是启动的参数配置文件。

如果在启动后过了几天又添加了一个数据节点,这时修改了配置文件启动时就必须加上--initial参数,不然添加的节点不会作用在mysql cluster中。

b、数据节点

1.编辑/etc/my.cnf文件

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
# vim /etc/my.cnf
[mysqld] 
sql_mode=NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES 
datadir=/usr/local/mysql/data
socket=/var/lib/mysql/mysql.sock
user=mysql
ndbcluster 
ndb-connectstring=192.168.3.115
[mysql_cluster] 
ndb-connectstring=192.168.3.115

2.切换用户

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
su - mysql

3.启动数据节点服务

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
/usr/local/mysql/bin/ndbd --initial
代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
注:第一次启动需要加参数:–initial,以后就不用加了,直接运行: /usr/local/mysql/bin/ndbd

c、SQL节点

1.编辑/etc/my.cnf文件(数据节点和SQL节点在统一服务器时可省略)

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
# vim /etc/my.cnf
[mysqld] 
sql_mode=NO_ENGINE_SUBSTITUTION,STRICT_TRANS_TABLES 
datadir=/usr/local/mysql/data
socket=/var/lib/mysql/mysql.sock
user=mysql
ndbcluster 
ndb-connectstring=192.168.3.115
[mysql_cluster] 
ndb-connectstring=192.168.3.115

2.复制mysqld到系统服务里面去

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
cp /usr/local/mysql/support-files/mysql.server /etc/init.d/mysqld

3.切换用户

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
su - mysql

4.启动数据节点服务

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
service mysqld start
/usr/local/mysql/bin/mysqladmin -u root password 'password'

d、完成效果

代码语言:javascript
代码运行次数:0
运行
AI代码解释
复制
ndb_mgm> show
Connected to Management Server at: localhost:1186
Cluster Configuration
---------------------
[ndbd(NDB)]2 node(s)
id=2@192.168.3.116  (mysql-5.6.19 ndb-7.3.6, Nodegroup: 0, *)
id=3@192.168.3.117  (mysql-5.6.19 ndb-7.3.6, Nodegroup: 0)
[ndb_mgmd(MGM)]1 node(s)
id=1@192.168.3.115  (mysql-5.6.19 ndb-7.3.6)
[mysqld(API)]4 node(s)
id=4@192.168.3.116  (mysql-5.6.19 ndb-7.3.6)
id=5@192.168.3.117  (mysql-5.6.19 ndb-7.3.6)
id=6 (not connected, accepting connect from any host)
id=7 (not connected, accepting connect from any host)

四、常用命令与问题整理

1) ndb_mgmd管理命令:/usr/local/mysql/bin/ndb_mgm 执行之后就是管理控制台了,里面可以继续输入命令。(具体命令可以使用help查看)

2) 停止集群服务器的命令:/usr/local/mysql/bin/ndb_mgm -e shutdown

如果集群配置有更新了:rm /usr/local/mysql/mysql-cluster/ndb_1_config.bin.1

3) 停止SQL节点的命令:/usr/local/mysql/bin/mysqladmin -uroot shutdown

4)使用需要注意如下两点:

a.表必须用ENGINE=NDB或ENGINE=NDBCLUSTER选项创建,或用ALTER TABLE选项更改,以使用NDB Cluster存储引擎在 Cluster内复制它们。如果使用mysqldump的输出从已有数据库导入表,可在文本编辑器中打开SQL脚本,并将该选项添加到任何表创建语句,或 用这类选项之一替换任何已有的ENGINE(或TYPE)选项。

b.另外还请记住,每个NDB表必须有一个主键。如果在创建表时用户未定义主键,NDB Cluster存储引擎将自动生成隐含的主键。(注释:该隐含 键也将占用空间,就像任何其他的表索引一样。由于没有足够的内存来容纳这些自动创建的键,出现问题并不罕见)。

其他操作上没有什么区别!

文章来源http://www.roncoo.com/article/detail/129594

本文系转载,如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文系转载,如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
1 条评论
热度
最新
为什么SQL结点会显示未连接?
为什么SQL结点会显示未连接?
回复回复点赞举报
推荐阅读
编辑精选文章
换一批
MySQL集群搭建实现高可用
MySQLCluster是MySQL适合于分布式计算环境的高实用、高冗余版本。Cluster的汉语是“集群”的意思。它采用了NDB Cluster 存储引擎,允许在1个 Cluster 中运行多个MySQL服务器。
萧晚歌
2020/08/19
3.4K0
【详解】MySQLCluster集群搭建详解
随着互联网的快速发展,数据量的爆炸式增长对数据库系统的性能和可靠性提出了更高的要求。传统的单机数据库已经难以满足大规模应用的需求。MySQL Cluster 是一种高可用、高性能的分布式数据库系统,它通过多节点复制和故障转移机制,提供了一个健壮的数据存储解决方案。本文将详细介绍如何搭建一个基本的 MySQL Cluster 集群。
大盘鸡拌面
2025/07/20
1950
mysql-cluster集群原理介绍和搭建步骤(四个data/sql节点) (转)「建议收藏」
MySQL簇概述MySQL簇是一种技术,该技术允许在无共享的系统中部署“内存中”数据库的簇。通过无共享体系结构,系统能够使用廉价的硬件,而且对软硬件无特殊要求。此外,由于每个组件有自己的内存和磁盘,不
Java架构师必看
2022/04/02
3.2K0
mysql-cluster集群原理介绍和搭建步骤(四个data/sql节点) (转)「建议收藏」
MySQL NDB Cluster实战
前言 本文来自睿哲科技的张树杰同学分享MySQL NDB集群的基础知识和搭建,非常赞! 希望越来越多的同学一起来分享,帮助他人,也收获成长,每季度分享排名第一的同学有惊
大数据和云计算技术
2018/03/08
4.6K0
MySQL NDB Cluster实战
mysql集群搭建教程-mysql+windows篇
​搭建MySQL集群,首先看了一些关于集群的资料,然后根据步骤一步步的整,遇到了一些问题,在这里把我遇到的问题以及解决方法分享出来。​
张哥编程
2024/12/17
5930
mysql集群搭建教程-mysql+windows篇
MySQL集群:高可用性DBMS
如果你在寻找一个不会发生单点故障的数据库管理系统,那么水平拓展的MySQL集群分布式多主架构将是您的最佳选择。MySQL集群可以通过MySQL和NoSQL接口访问,并且可以用来服务密集的读/写工作。
和风
2018/05/22
2.3K0
MySQL集群:高可用性DBMS
高可用性、负载均衡的mysql集群解决方案
一、mysql的市场占有率 二、mysql为什么受到如此的欢迎 三、mysql数据库系统的优缺点 四、网络服务器的需求 五、什么是mysql的集群 六、什么是负载均衡 七、mysql集群部署和实现方法 八、负载均衡的配置和测试 九、Mysql集群系统的测试(测试方案+测试脚本+测试结果分析) l mysql的市场占有率 MySQL是世界上最流行的开源数据库,已有1100多万的击活安装,每天超过五万的下 载。MySQL为全球开发者、DBA和IT管理者在可靠性、性能、易用性方面提供了选 择。 第三方市场调查机
李海彬
2018/03/23
5.1K0
mysql集群之MYSQL CLUSTER
http://xuwensong.elastos.org/2014/01/13/ubuntu-%E4%B8%8Bmysql-cluster%E5%AE%89%E8%A3%85%E5%92%8C%E9%85%8D%E7%BD%AE/
全栈程序员站长
2022/09/06
3K0
mysql集群之MYSQL CLUSTER
【MySQL集群】——在Windows环境下配置MySQL集群
版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/huyuyang6688/article/details/47441743
DannyHoo
2018/09/13
3.4K0
【MySQL集群】——在Windows环境下配置MySQL集群
手把手教你用Mysql-Cluster-7.5搭建数据库集群
当你的业务到达一定的当量,肯定需要一定数量的数据库来负载均衡你的数据库请求,我在之前的博客中已经说明了,如何实现负载均衡,但是还有一个问题就是数据同步,因为负载均衡的前提就是,各个服务器的数据库是数据同步的。在业务量不大的时候,我们会使用主从复制的方法实现服务器数据同步,一主多从或者是双主等,但是虽然进行了读写分离,但是对于读的方法限制还是比较大,所以解决数据同步的问题就是数据库集群的意义。我这里使用mysql官网提供的mysql-cluster实现集群。(到文章发布前的最新版本的安装教程,把网上踩的坑都踩过了一遍;)
MonroeCode
2018/01/10
1.9K0
MySQL数据库,详解MySQL分布式集群搭建
搭建MySQL分布式集群,例如:利用MySQL cluster ,MySQL proxy,MySQL replication,drdb等等,有人会问MySQL集群意义是什么呢?为一个数据库减轻负担,说白了就是减少sql排队队列中的sql的数量,举个例子:有10个sql请求,如果放在一个数据库服务器的排队队列中,他要等很长时间,如果把这10个sql请求,分配到5个数据库服务器的排队队列中,一个数据库服务器的队列中只有2个,这样等待时间是不是大大的缩短了呢?这已经很明显了。下面我们来看看如何具体的搭建一个MySQL分布式集群。
用户1289394
2021/03/29
3K0
mysql-cluster集群搭建
官方网站下载mysql-cluster-gpl-7.5.7-linux-glibc2.12-x86_64.tar.gz (mysql集群)
93年的老男孩
2019/12/18
1.7K0
如何在Ubuntu 18.04上创建多节点MySQL集群
MySQL Cluster分布式数据库为MySQL数据库管理系统提供高可用性和吞吐量。MySQL Cluster由一个或多个管理节点(ndb_mgmd)组成,这些节点存储集群的配置并控制ndbd存储集群数据的数据节点()。与管理节点通信后,客户端(MySQL客户端,服务器或本机API)直接连接到这些数据节点。
木纸鸢
2018/09/25
4.3K0
MySQL8 中文参考(八十九)
TCP/IP 是 NDB 集群中所有节点之间连接的默认传输机制。通常情况下,不需要定义 TCP/IP 连接;NDB 集群会自动为所有数据节点、管理节点以及 SQL 或 API 节点设置这些连接。
ApacheCN_飞龙
2024/06/26
2730
百度架构师是怎样搭建MySQL分布式集群?
MySQL集群是一个无共享的(shared-nothing)、分布式节点架构的存储方案,其目的是提供容错性和高性能。
慕容千语
2019/06/06
6090
百度架构师是怎样搭建MySQL分布式集群?
在Windows7中搭建Mysql Cluster
登录windows时最好用Administor登录(特别是管理节点,用其它用户登录了一次,之后就搭建不了,总是出现"修改不了一些文件的错误"),不然程序没有权限修改某些文件。
克虏伯
2019/04/15
2.2K0
Windows Server 2008R2配置MySQL Cluster
配置环境   VMware:(版本10.0.01)   操作系统:Windows Server 2008 R2 Enterprise   VM1:192.168.220.103 管理节点(MGM),数据节点(NDBD1),SQL节点(SQL1)   VM2:192.168.220.104 数据节点(NDBD2),SQL节点(SQL2)   MySQL Cluster版本:7.3.7 (MSI Installer)  下载地址:http://dev.mysql.com/downloads/cluste
Porschev
2018/01/16
1.8K0
Windows Server 2008R2配置MySQL Cluster
MySQL8 中文参考(八十七)
作为 NDB Cluster 的一部分的 MySQL 服务器在一个主要方面与普通(非集群)MySQL 服务器不同,即它使用NDB存储引擎。这个引擎有时也被称为NDBCLUSTER,尽管更倾向于使用NDB。
ApacheCN_飞龙
2024/06/26
3290
MySQL NDB Cluster介绍
最近翻译了好几篇关于NDB的文章,相信有很多人会有疑问,NDB Cluster究竟是个什么东西?它是一款新产品吗?它和InnoDB Cluster有什么不同?它是MySQL吗?它怎么使用?在这篇文章里,我将为大家介绍一下MySQL NDB Cluster是什么?它的架构和特征,以及它的适用场景。
MySQLSE
2020/09/28
6.2K0
MySQL NDB Cluster介绍
MySQL技能完整学习列表13、MySQL高级特性——1、分区表(Partitioning)——2、复制(Replication)——3、集群(Clustering)
分区表是MySQL中一种将数据分散存储在多个物理子表中的技术,但从逻辑上看,它们仍然被当作一个表来对待。这种技术可以极大地提高大型数据库的性能、管理和可维护性。
红目香薰
2023/12/01
2820
相关推荐
MySQL集群搭建实现高可用
更多 >
领券
一站式MCP教程库,解锁AI应用新玩法
涵盖代码开发、场景应用、自动测试全流程,助你从零构建专属AI助手
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档