烹饪MySQL8.0 Cluster这道菜
xmh
•
2020年06月12日 am11:05
•
数据库技术,
MySQL,
•
阅读 3055

此文将带领大家接触MySQL8.0版本,并且部署Mysql Cluster。香。香。香。
一:写在前面--MySQL8.0的改进
1:性能:MySQL 8.0 的速度要比 MySQL 5.7 快 2 倍。MySQL 8.0 在以下方面带来了更好的性能:读/写工作负载、IO 密集型工作负载、以及高竞争("hot spot"热点竞争问题)工作负载。

MySQL8.0、MySQL5.7、MySQL5.7 性能对别
2:NoSQL:从MySQL 5.7 版本其开始提供 NoSQL 存储功能,目前在 8.0 版本中NoSQL功能也得到了更大的改进。
3:窗口函数(Window Functions):从 MySQL 8.0 开始,新增了一个叫窗口函数的概念,它可以用来实现若干新的查询方式。窗口函数与 SUM()、COUNT() 这种集合函数类似,但它不会将多行查询结果合并为一行,而是将结果放回多行当中。即窗口函数不需要 GROUP BY。
4:隐藏索引:在 MySQL 8.0 中,索引可以被“隐藏”和“显示”。当对索引进行隐藏时,它不会被查询优化器所使用。我们可以使用这个特性用于性能调试,例如我们先隐藏一个索引,然后观察其对数据库的影响。如果数据库性能有所下降,说明这个索引是有用的,然后将其“恢复显示”即可;如果数据库性能看不出变化,说明这个索引是多余的,可以考虑删掉。
5:降序索引:MySQL 8.0 为索引提供按降序方式进行排序的支持,在这种索引中的值也会按降序的方式进行排序。
6:通用表表达式(Common Table Expressions CTE):在复杂的查询中使用嵌入式表时,使用 CTE 使得查询语句更清晰。
7:UTF-8 编码:从 MySQL 8 开始,使用 utf8mb4 作为 MySQL 的默认字符集。
8:JSON:MySQL 8 大幅改进了对 JSON 的支持,添加了基于路径查询参数从 JSON 字段中抽取数据的 JSON_EXTRACT() 函数,以及用于将数据分别组合到 JSON 数组和对象中的 JSON_ARRAYAGG() 和 JSON_OBJECTAGG() 聚合函数。
9:可靠性:InnoDB 现在支持表 DDL 的原子性,也就是 InnoDB 表上的 DDL 也可以实现事务完整性,要么失败回滚,要么成功提交,不至于出现 DDL 时部分成功的问题,此外还支持 crash-safe 特性,元数据存储在单个事务数据字典中。
10:高可用性(High Availability):InnoDB 集群为您的数据库提供集成的原生 HA 解决方案。
11:安全性:对 OpenSSL 的改进、新的默认身份验证、SQL 角色、密码强度、授权。
二、接下来要干什么
1:基于Centos7.X 安装MySQL8.0数据库
2:基于3台Centos7.X 搭建Mysql Cluster
三、准备环境
1、服务器环境
基于VirtualBox的3台虚拟机。配置如下:
内存:1024M
硬盘:12G
网络:NAT
2:准备软件
CentOS-7-x86_64-Minimal-1908.iso
mysql-8.0.20-linux-glibc2.12-x86_64.tar.xz
mysql-shell-8.0.20-linux-glibc2.12-x86-64bit.tar.gz
[下载地址:]
https://cdn.mysql.com//Downloads/MySQL-8.0/mysql-8.0.20-linux-glibc2.12-x86_64.tar.xz
https://cdn.mysql.com//Downloads/MySQL-Shell/mysql-shell-8.0.20-linux-glibc2.12-x86-64bit.tar.gz
三:操作系统提前配置
1:设置3台Centos7的服务器IP地址与Hostname如下:
10.0.2.188 cook-node1
10.0.2.189 cook-node2
10.0.2.190 cook-node3
为操作系统设置ip地址与Hostname

增加hosts解析
[root@cook-node1 ~]# vi /etc/hosts

2:修改linux的系统配置
[root@cook-node1 ~]# vi /etc/security/limits.conf
增加
* soft nofile 65535
* hard nofile 65535
* soft nproc 65535
* hard nproc 65535
[root@cook-node1 ~]# vi /etc/security/limits.d/20-nproc.conf
#将
* soft nproc 1024
root soft nproc unlimited
#修改为
* soft nproc unlimited
root soft nproc unlimited
3:关闭linux的防火墙

4:卸载操作系统自带的MySQL数据库跟Mariadb数据库,Mariadb数据库是MySQL数据库的开源版,所以必须也卸载,否则会造成一定的冲突

四:MySQL Cluster部署说明

MySQL Cluster 1主2从结构
说明:
cook-node1为MySQL Cluster的主节点,主要负责数据写操作
cook-node2为MySQL Cluster的从节点1,主要负责数据的读操作
cook-node3为MySQL Cluster的从节点2,与cook-node2一样负责数据的读操作
同时:
在cook-node1中部署MySQL Router进行读写操作分离

五:具体部署操作
1:将
mysql-8.0.20-linux-glibc2.12-x86_64.tar.xz、
mysql-shell-8.0.20-linux-glibc2.12-x86-64bit.tar.gz文件上传到3个服务器节点中。
2:为部署用户新建用户操作系统用户:cook,以下所有部署操作均使用cook用户进行操作。

3:对文件进行解压,重命名、规整好文件

4:修改MySQL的配置文件my.cnf,放在
/work/cook/mysql8.0/mysql-8.0.20/下
[mysqld]
character-set-server=utf8
port=3306
socket=/tmp/mysql.sock
basedir=/work/cook/mysql8.0/mysql-8.0.20
datadir=/work/cook/mysql8.0/mysql-8.0.20/data
log-error=/work/cook/mysql8.0/mysql-8.0.20/data/mysqld.log
pid-file=/work/cook/mysql8.0/mysql-8.0.20/data/mysql.pid
user=cook
tmpdir=/tmp
default-storage-engine=INNODB
lower-case-table-names=1
#复制框架
server_id=1
gtid_mode=ON
enforce_gtid_consistency=ON
master_info_repository=TABLE
relay_log_info_repository=TABLE
binlog_checksum=NONE
log_slave_updates=ON
log_bin=binlog
binlog_format=ROW
#组复制设置
#server必须为每个事务收集写集合,并使用XXHASH64哈希算法将其编码为散列
transaction_write_set_extraction=XXHASH64
#告知插件加入或创建组命名,UUID
loose-group_replication_group_name="f703d586-8d16-11ea-aa98-005090e3c222"
#server启动时不自启组复制,为了避免每次启动自动引导具有相同名称的第二个组,所以设置为OFF。
loose-group_replication_start_on_boot=off
#告诉插件使用IP地址,端口33061用于接收组中其他成员转入连接
loose-group_replication_local_address="10.0.2.188:33061"
#启动组server,种子server,加入组应该连接这些的ip和端口;其他server要加入组得由组成员同意
loose-group_replication_group_seeds="10.0.2.188:33061,10.0.2.189:33061,10.0.2.190:33061"
loose-group_replication_ip_whitelist="10.0.2.188,10.0.2.189,10.0.2.190"
loose-group_replication_bootstrap_group=off
# 使用MGR的单主模式
loose-group_replication_single_primary_mode=on
loose-group_replication_enforce_update_everywhere_checks=off
disabled_storage_engines = MyISAM,BLACKHOLE,FEDERATED,CSV,ARCHIVE
5:执行mysql的安装命令
进入到MySQL的bin目录下,执行./mysqld --initialize-insecure --basedir=
/work/cook/mysql8.0/mysql-8.0.20 --datadir=
/work/cook/mysql8.0/mysql-8.0.20/data --lower-case-table-names=1

如上图,即表示安装成功。
6:使用
support-files/mysql.server进行mysql的启动,停止,重启等。
复制
support-files/mysql.server文件到
/work/cook/mysql8.0/mysql-8.0.20下,
编辑mysql.server文件,补充basedir与datadir对应的值

在
/work/cook/mysql8.0/mysql-8.0.20/data/下新建mysql.pid文本文件。
执行:
/work/cook/mysql8.0/mysql-8.0.20/mysql.server start即可启动MySQL8.0数据库

7:进入mysql命令行,设置root密码,增加admin用户
[cook@cook-node1 bin]$ ./mysql -uroot -p
Enter password:
Welcome to the MySQL monitor. Commands end with ; or \g.
Your MySQL connection id is 8
Server version: 8.0.20 MySQL Community Server - GPL
Copyright (c) 2000, 2020, Oracle and/or its affiliates. All rights reserved.
Oracle is a registered trademark of Oracle Corporation and/or its
affiliates. Other names may be trademarks of their respective
owners.
Type 'help;' or '\h' for help. Type '\c' to clear the current input statement.
mysql> alter user'root'@'localhost' IDENTIFIED BY 'admin_cluster-Pwd1';
Query OK, 0 rows affected (0.02 sec)
mysql> create user 'admin'@'%' identified by 'root_cluster-Pwd1';
Query OK, 0 rows affected (0.02 sec)
mysql> grant all privileges on *.* to 'admin'@'%' with grant option;
Query OK, 0 rows affected (0.01 sec)
以上操作,cook-node1节点的MySQL已经运行成功。
8:可直接将
/work/cook/mysql8.0/mysql-8.0.20文件夹打包,复制到其他两个节点中,进行快速配置。快速配置时,注意修改my.cnf中的
server_id=1修改为server_id=2、server_id=3
loose-group_replication_local_address="10.0.2.188:33061"
对应修改为
loose-group_replication_local_address="10.0.2.189:33061"
loose-group_replication_local_address="10.0.2.190:33061"
9:通过以上8个步骤,即可把3个节点的mysql单独运行起来,接下来即可创建mysql cluster的集群了
10:选择10.0.2.188为mysql-shell的管理节点,通过mysql-shell进行集群管理
将
mysql-shell-8.0.20-linux-glibc2.12-x86-64bit.tar.gz解压,并且重名为mysql-shell-8.0.20,放在/work/cook/mysql8.0下

进入
/work/cook/mysql8.0/mysql-shell-8.0.20/bin,
通过./mysqlsh --uri admin@10.0.2.188:3306 链接到集群控制中,
通过var cluster = dba.createCluster('cookMysqlCluster');可新建一个名为cookMysqlCluster的集群。如下图。

执行完以上命令后,可通过cluster.status();查看集群状态

增加第二个几点:10.0.2.189:3306
可通过以下命令增加:cluster.addInstance('admin@10.0.2.189:3306');
如下图:

增加集群节点错