翼度科技»论坛 编程开发 mysql 查看内容

MySQL5.7 通过逻辑备份迁移到GreatSQL注意事项

7

主题

7

帖子

21

积分

新手上路

Rank: 1

积分
21
一、背景概述

在将数据库从MySQL 5.7迁移到GreatSQL8.0.32时,由于数据量较小且关注安全性,决定使用mysqldump执行逻辑备份,并将数据导入GreatSQL。但在备份时采用了备份全库(--all-databases)的方式,在导入GreatSQL后,修改用户密码时出现错误。这是因为mysqldump备份时包括了mysql系统库,而MySQL 5.7中的mysql系统库采用了MyISAM存储引擎,而GreatSQL的mysql系统库采用了InnoDB存储引擎。因此,在导入数据后,部分系统表被覆盖,导致了错误的出现。
二丶问题复现

1.部署2个实例

部署MySQL 5.7与GreatSQL 8.0.32,具体步骤省略
2.MySQL 创建测试数据

通过sysbench创建10张表
  1. $ sysbench lua/oltp_read_write.lua --mysql-db=sysbench --mysql-host=192.168.1.162 --mysql-port=6003 --mysql-user=root --mysql-password=greatsql --tables=10 --table_size=5000 --report-interval=2 --threads=10 --time=600 --mysql-ignore-errors=all prepare
复制代码
3.MySQL 创建测试用户
  1. mysql> create user test1@'%' identified by 'greatsql';
  2. Query OK, 0 rows affected (0.01 sec)
  3. mysql> grant all on *.* to test1@'%';
  4. Query OK, 0 rows affected (0.01 sec)
复制代码
4.MySQL进行全库备份
  1. $ /mysql57/svr/mysql/bin/mysqldump -uroot -pgreatsql -h192.168.1.162 -P6003  --single-transaction --set-gtid-purged=OFF --all-databases > all.sql
复制代码
5.GreatSQL导入备份数据
  1. greatsql> source all.sql;
复制代码
在导入过程中有如下报错,从这里可以看出导入时有系统表被导入,并且部分系统表不支持被修改:

6.GreatSQL执行修改用户密码操作
  1. greatsql> alter user test1@'%' identified by 'abc123';
  2. ERROR 1785 (HY000): Statement violates GTID consistency: Updates to non-transactional tables can only be done in either autocommitted statements or single-statement transactions, and never in the same statement as updates to transactional tables.
复制代码
此时报错违反了 GTID 的一致性,由于导入数据后有部分MySQL库下的系统表被修改成了MyISAM存储引擎,并且修改用户密码会涉及多张系统表的更新,在一个 SQL 语句中既对非事务表进行了更新操作,又对事务表进行了更新操作,这违反了 GTID 的一致性规则。
7.GreatSQL执行查看库表信息的操作

当执行刷新权限的操作后,执行下面的SQL时也会报错
  1. greatsql> flush privileges;
  2. Query OK, 0 rows affected, 11 warnings (0.00 sec)
  3. greatsql> show tables;
  4. ERROR 1449 (HY000): The user specified as a definer ('mysql.infoschema'@'localhost') does not exist
  5. greatsql> show databases;
  6. ERROR 1449 (HY000): The user specified as a definer ('mysql.infoschema'@'localhost') does not exist
复制代码
mysql.infoschema用户是MySQL8.0中引入的,mysql.infoschema用户是MySQL数据库的系统用户,用来管理和访问系统自带实例information_schema;导入MySQL系统库后,user表被覆盖为MySQL5.7的user表,此用户不存在,因此在刷新权限后访问元数据信息时报错;
8.查看mysqldump备份了哪些系统表
  1. $ grep 'CREATE TABLE ' all.sql
  2. ......
  3. CREATE TABLE `innodb_index_stats` (
  4. CREATE TABLE `innodb_table_stats` (
  5. CREATE TABLE `ndb_binlog_index` (
  6. CREATE TABLE `plugin` (
  7. CREATE TABLE `proc` (
  8. CREATE TABLE `procs_priv` (
  9. CREATE TABLE `proxies_priv` (
  10. CREATE TABLE `server_cost` (
  11. CREATE TABLE `servers` (
  12. CREATE TABLE IF NOT EXISTS `slave_master_info` (
  13. CREATE TABLE IF NOT EXISTS `slave_relay_log_info` (
  14. CREATE TABLE `slave_worker_info` (
  15. CREATE TABLE `tables_priv` (
  16. CREATE TABLE `time_zone` (
  17. CREATE TABLE `time_zone_leap_second` (
  18. CREATE TABLE `time_zone_name` (
  19. CREATE TABLE `time_zone_transition` (
  20. CREATE TABLE `time_zone_transition_type` (
  21. CREATE TABLE `user` (
  22. CREATE TABLE IF NOT EXISTS `general_log` (
  23. CREATE TABLE IF NOT EXISTS `slow_log` (
  24. ......
复制代码
三、问题解决


  • 可以初始化一个新的GreatSQL实例,备份这个新的GreatSQL实例的MySQL系统库
  1. $ /greatsql/svr/mysql/bin/mysqldump -uroot -pgreatdb -h127.0.0.1 -P6001  --single-transaction --set-gtid-purged=OFF -B mysql > mysql.sql
复制代码

  • 导入mysql系统库的备份文件到GreatSQL实例中
  1. greatsql> source mysql.sql;
复制代码
3.导入完成后,刷新权限
  1. greatsql> flush privileges;
  2. Query OK, 0 rows affected (0.01 sec)
复制代码
4.执行创建用户测试
  1. greatsql> create user test1@'%' identified by 'greatsql';
  2. Query OK, 0 rows affected (0.01 sec)
  3. greatsql> grant all on *.* to test1@'%';
  4. Query OK, 0 rows affected (0.01 sec)
复制代码
5.执行 show 操作
  1. greatsql> show databases;
  2. +--------------------+
  3. | Database           |
  4. +--------------------+
  5. | information_schema |
  6. | mysql              |
  7. | performance_schema |
  8. | sys                |
  9. | sys_audit          |
  10. | sysbench           |
  11. | test               |
  12. +--------------------+
  13. 7 rows in set (0.01 sec)
  14. greatsql> show tables;
  15. +----------------+
  16. | Tables_in_test |
  17. +----------------+
  18. | test           |
  19. +----------------+
  20. 1 row in set (0.01 sec)
复制代码
四、总结

1.在从MySQL5.7向GreatSQL或者MySQL8.0 通过逻辑备份迁移时,不要备份系统库mysql,避免发生问题;
2.用户及权限可以单独进行备份然后导入到GreatSQL或者MySQL8.0中。

Enjoy GreatSQL
来源:https://www.cnblogs.com/greatsql/p/18232511
免责声明:由于采集信息均来自互联网,如果侵犯了您的权益,请联系我们【E-Mail:cb@itdo.tech】 我们会及时删除侵权内容,谢谢合作!

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x

举报 回复 使用道具