手机版
你好,游客 登录 注册 搜索
背景:
阅读新闻

MySQL MEB常见用法

[日期:2017-05-04] 来源:Linux社区  作者:ivictor [字体: ]

1. 备份成镜像

    备份:

./MySQLbackup --socket=/usr/local/mysql-advanced-5.6.23-linux-glibc2.5-x86_64/data/mysql.sock --backup-image=/images/20161008.mbi --backup-dir=/tmp/backup  backup-to-image

    其中,backup-dir是用来存储临时文件的。该目录下的文件可以直接删除掉。每次备份只需要备份这个镜像文件即可。

    /images目录本身必须存在。

    如果备份的是镜像,则首先必须把镜像恢复到备份目录中

./mysqlbackup --backup-image=/images/20161008.mbi --backup-dir=/backup image-to-backup-dir

   应用日志

./mysqlbackup --backup-dir=/backup apply-log

   恢复

./mysqlbackup --defaults-file=/backup/server-my.cnf --backup-dir=/backup/ copy-back   

2. 压缩备份

   备份

./mysqlbackup --socket=/usr/local/mysql-advanced-5.6.23-linux-glibc2.5-x86_64/data/mysql.sock --backup-dir=/backup --compress --compress-level=9 backup

   应用日志

./mysqlbackup --socket=/usr/local/mysql-advanced-5.6.23-linux-glibc2.5-x86_64/data/mysql.sock --backup-dir=/backup --uncompress apply-log

   恢复

./mysqlbackup --defaults-file=/backup/server-my.cnf --backup-dir=/backup/ copy-back

3. 基于库的复制

   非innodb表的复制

   mysqlbackup中提供了这样一个参数--databases,很多人会想当然的以为这个就是用来实现基于库的复制,但实际上并不是,首先看看--help中的说明

--databases=LIST
              This option is used to filter the list of non-innodb
              tables that needs to be backed up. To filter innodb tables,
              use --include option.
              The argument specifies space separated list of database/table
              names of the following form:
                   "db_name[.table_name] db_name1[.table_name1] ...".
              If this option is not specified all databases will be 
              backed up. Also, if the specified database does not match
              with any single database/table, then all databases will be
              backed up.

  意思--database只是用来备份非innodb表的,支持两种方式的写法,--databases=test和--databases=test.test1。

  令人意外的是,如果指定了test库进行复制,则其它所有的非innodb库都不会复制,譬如,mysql库中的user表,performance_schema库。

  而且,上述说明中还提到了“if the specified database does not match with any single database/table, then all databases will be backed up.”,意思是如果指定的数据库或表实际上不存在,则所有的非innodb表都会备份。但实际测试的恰恰相反,如果指定的不存在,则其它所有的非innodb表都不会被复制。

  所以,--databases这种场景基本上可以忽略,因为对于非innodb表来说,可以直接copy,无需用这种方式来备份,而且,指定了特定表,而没有指定mysql库的话,即便执行了恢复操作,也无法启动数据库。如果要复制多个非innodb表,可使用:--databases='test.test mysql'

  innodb表的复制

  下面重点看一下innodb表的复制,这个涉及到--include参数

  --include=REGEXP  
              Backup only those per-table innodb data files which match 
              the regular expression (REGEXP). For each table with a 
              per-table data file, a string of the form db_name.table_name
              is checked against the regular expression (REGEXP). If the 
              REGEXP matches db_name.table_name, the table is included. 
              The REGEXP should be of POSIX 1003.2 'extended' form. 
   可以看出--include参数是用正则表达式来匹配的。

   譬如下面备份语句,只备份db1库和test库

./mysqlbackup --socket=/usr/local/mysql-advanced-5.6.23-linux-glibc2.5-x86_64/data/mysql.sock --backup-dir=/backup --include='(db1|test)\..*' backup

   我这是只备份了db1库和test库。

   但是这种备份方式有点问题,这个在恢复的时候会体现出来。

   1. 没有备份mysql库中的几张innodb表。

   2. 备份了所有表的frm文件,包括没有备份的innodb表,这样,在恢复的时候会报如下错误,因为只有frm文件,而没有ibd文件。虽然并没有影响数据库的正常启动,但终究不太好。

2016-09-28 10:05:16 1989 [ERROR] InnoDB: Failed to find tablespace for table '"test1"."test1"' in the cache. Attempting to load the t
ablespace with space id 25.2016-09-28 10:05:16 7fc1ac33e700  InnoDB: Operating system error number 2 in a file operation.
InnoDB: The error means the system cannot find the path specified.
2016-09-28 10:05:16 1989 [ERROR] InnoDB: Could not find a valid tablespace file for 'test1/test1'. See http://dev.mysql.com/doc/refma
n/5.6/en/innodb-troubleshooting-datadict.html for how to resolve the issue.2016-09-28 10:05:16 7fc1ac33e700 InnoDB: cannot calculate statistics for table "test1"."test1" because the .ibd file is missing. For 
help, please refer to http://dev.mysql.com/doc/refman/5.6/en/innodb-troubleshooting.html

   所以,在这种备份方式下,需人为的删除这些表的frm文件。

   官方文档中其实还提到了两个参数:--only-innodb和 --only-innodb-with-frm。

   如果指定了--only-innodb参数,则只会备份指定表的ibd文件,不会备份指定备份的innodb表的frm文件和任何非innodb表(包括mysql和performance_schema)

   如果指定了--only-innodb-with-frm参数,则会备份指定表的ibd文件和frm文件,但是不会备份非innodb表。

   个人感觉,这两个参数还是比较鸡肋,如果要实现innodb表的复制,只能指定--include参数,然后人为删除不需要的frm文件。

 

4. 利用可传输表空间基于部分库的复制

   复制

 ./mysqlbackup --socket=/usr/local/mysql-advanced-5.6.23-linux-glibc2.5-x86_64/data/mysql.sock --backup-dir=/backup --include='db1\.t1' --use-tts backup

   在该例中,只备份了一张表db1.t1,也可以备份多张表或库

  应用日志

./mysqlbackup --backup-dir=/backup/ apply-log

  恢复

./mysqlbackup --defaults-file=/backup/server-my.cnf --socket=/usr/local/mysql-advanced-5.6.23-linux-glibc2.5-x86_64/data/mysql.sock --backup-dir=/backup/ copy-back

  但是,报如下错误 

160929 11:37:35 mysqlbackup: INFO: Importing table: db1.t1.
 mysqlbackup: ERROR: mysql query: 'ALTER TABLE db1.t1 IMPORT TABLESPACE': Internal error: Cannot reset LSNs in table '"db1"."t1"' : Tablespace not found mysqlbackup: ERROR: Failed to import tablespace db1.t1.

mysqlbackup failed with errors!

  查看db1目录下t1各文件的权限

[root@localhost db1]# ll
total 116
-rw-rw---- 1 mysql mysql    65 Sep 29 11:17 db.opt
-rw-r--r-- 1 root  root    371 Sep 29 11:37 t1.cfg
-rw-rw---- 1 mysql mysql  8556 Sep 29 11:37 t1.frm
-rw-r--r-- 1 root  root  98304 Sep 29 11:37 t1.ibd

  发现,其中两个文件的权限是root。

  注意:即便是把备份目录/backup的权限设置为mysql,这两个文件的权限依旧是root

  此时,可修改这两个文件的权限

[root@localhost db1]# chown mysql.mysql *

  在客户端手动import表空间

mysql> alter table db1.t1 import tablespace;
Query OK, 0 rows affected (1.55 sec)

mysql> select * from db1.t1;
+------+
| id   |
+------+
|    1 |
+------+
1 row in set (0.00 sec)

   导入成功。

   注意:基于可传输表空间的部分表或库的复制,无需在新的实例上恢复,可在任意一个online实例上进行,前提是这些实例中待导入的表并不存在。

 

5. 增量复制

    全量复制

./mysqlbackup --socket=/usr/local/mysql-advanced-5.6.23-linux-glibc2.5-x86_64/data/mysql.sock --backup-dir=/backup backup

   第一次增量复制   

./mysqlbackup --socket=/usr/local/mysql-advanced-5.6.23-linux-glibc2.5-x86_64/data/mysql.sock --incremental --incremental-backup-dir=/increment_backup_1 --incremental-base=dir:/backup backup

   第二次增量复制

./mysqlbackup --socket=/usr/local/mysql-advanced-5.6.23-linux-glibc2.5-x86_64/data/mysql.sock --incremental --incremental-backup-dir=/increment_backup_2 --incremental-base=dir:/increment_backup_1 backup

  基于增量复制的恢复

  首先要应用日志

./mysqlbackup --backup-dir=/backup apply-log

  第一次增量恢复

./mysqlbackup --incremental-backup-dir=/increment_backup_1 --backup-dir=/backup apply-incremental-backup

  第二次增量恢复

./mysqlbackup --incremental-backup-dir=/increment_backup_2 --backup-dir=/backup apply-incremental-backup

  恢复

./mysqlbackup --defaults-file=/backup/server-my.cnf --backup-dir=/backup copy-back

 

 关于增量备份, mysqlbackup支持两种方式的增量备份

 基于数据文件

--incremental --incremental-backup-dir=PATH 
  --start-lsn=LSN | --incremental-base=BACKUP 

 基于redo文件

 --incremental-with-redo-log-only --incremental-backup-dir=PATH 
  --start-lsn=LSN | --incremental-base=BACKUP 

 基于redo文件的备份有个前提,即指定LSN后的redo log没有被覆盖。

 对于基于数据文件的增量备份,除了上述指定--incremental-base的方式外,还可指定--start-lsn,

 start-lsn即是上一个备份集中meta目录下backup_variables.txt文件中end_lsn的值。

6. 其它用法 

验证镜像是否损坏

./mysqlbackup --backup-dir=/image --backup-image=2016_09_27_image validate

本文永久更新链接地址http://www.linuxidc.com/Linux/2017-05/143432.htm

linux
相关资讯       MySQL MEB 
本文评论   查看全部评论 (0)
表情: 表情 姓名: 字数

       

评论声明
  • 尊重网上道德,遵守中华人民共和国的各项有关法律法规
  • 承担一切因您的行为而直接或间接导致的民事或刑事法律责任
  • 本站管理人员有权保留或删除其管辖留言中的任意内容
  • 本站有权在网站内转载或引用您的评论
  • 参与本评论即表明您已经阅读并接受上述条款