Linux命令:MySQL系列之十二--MySQL备份与还原mysqldump(重要章节)
一、数据备份
备份类型:热备份、温备份和冷备份
热备份:读、写不受影响;
温备份:仅可以执行读操作;
冷备份:离线备份,读、写操作均中止;
备份方式:物理备份和逻辑备份:
物理备份:复制数据文件,速度快,保存数据库的所有数据结构,如果数据跟数据库关联性强,
导致物理备份可移植性能力不强;
逻辑备份:将数据导出至文本文件中,速度慢、丢失浮点数精度;方便使用文本处理工具
直接对其处理,可移植能力强;缺点:浮点数据可能会丢失精度;备份出的数据更占用
存储空间;压缩后可大大节省空间;不适合对大数据库做完全备份。
备份策略:完全备份、增量备份和差异备份:
完全备份:备份全部数据;
增量备份:仅备份上次完全备份或者增量备份以后变化的数据;
差异备份:仅备份上次完全备份以后变化的数据;(差异备份比增量备份所需空间大)
数据库需要备份的内容:数据、配置文件、二进制日志、事务日志
MySQL备份工具:
mysqldump:逻辑备份工具、MyISAM(温备份)、InnoDB(热备份)
mysqldump:(备份时需加以下选项)
--databases DB1,DB2,... #备份那几个数据库
--all-databases #备份所有数据库
MyISAM:温备份(需加选项如下)
--lock-all-tables #备份时锁定所有表
--lock-tables #备份一张表时只锁定该备份的表
InnoDB:热备份(需加选项如下)
--single-transaction #执行热备份时需加该项表示是执行热备份
--flush-logs #备份时先滚动下日志文件
--events #备份事件
--routines #备份存储事件和函数
--triggers #备份触发器
--master-data={0|1|2} 备份后的文件记录了日志位置(一般设置为2)
mysqlhotcopy:物理备份工具、温备份
文件系统工具:
cp:冷备工具
lv:逻辑卷的快照功能,几乎热备:
mysql> FLUSH TABLES; 刷新表
mysql>LOCK tables 锁表
创建快照:释放锁,而后复制数据
第三方备份工具:
ibbackup:商业工具
xtrabackup:开源工具
一、使用mysqldump命令备份(逻辑备份工具)
mysqldump命令将数据库中的数据备份成一个文本文件。表的结构和表中的数据将存储在生成的文本文件中。
mysqldump命令的工作原理很简单。它先查出需要备份的表的结构,再在文本文件中生成一个CREATE语句。然后,将表中的所有记录转换成一条INSERT语句。然后通过这些语句,就能够创建表并插入数据。
1、备份一个数据库,备份前需先刷新表,并锁表,否则表修改造成备份的不一致性
mysqldump基本语法:
mysqldump -u username -p dbname table1 table2 ...-> BackupName.sql
其中:
dbname参数表示数据库的名称;
table1和table2参数表示需要备份的表的名称,为空则整个数据库备份;
-
BackupName.sql参数表设计备份文件的名称,文件名前面可以加上一个绝对路径。通常将数据库被分成一个后缀名为sql的文件;
选项:
--master-data={0|1|2}
0:不记录二进制日志文件及其位置;
1:以CHANGE MASTER TO的方式记录位置,可用于恢复后直接启动从服务器;
2:以CHANGE MASTER TO的方式记录位置,但默认为被注释掉;
--lock-all-tables:锁定所有表
--flush-logs:执行日志flush刷新
如果指定库中的表类型均为InnoDB,可使用--single-transaction启动热备;
实例:使用root用户备份test数据库步骤:
第一步先刷新并锁表:
mysql> FLUSH TABLES WITH READ LOCK; #刷新表,并以读锁表
Query OK, 0 rows affected (0.00 sec)
再通过mysqldump备份表:
[root@lamp ~]# mysqldump -uroot -p test > /root/stu.sql #备份test数据库到/root目录下
Enter password:
[root@lamp ~]# ls /root
anaconda-ks.cfg Music Public Templates stu.sql
备份完后再解锁表:
mysql> UNLOCK TABLES; #解锁表
Query OK, 0 rows affected (0.00 sec)
文件的开头会记录MySQL的版本、备份的主机名和数据库名。
文件中以“--”开头的都是SQL语言的注释,以"/*!40101"等形式开头的是与MySQL有关的注释。40101是MySQL数据库的版本号,如果MySQL的版本比1.11高,则/*!40101和*/之间的内容就被当做SQL命令来执行,如果比4.1.1低就会被当做注释。
*************************************************************
****实例:模拟所有库都坏掉,实现完全备份和及时点还原。
先完全备份所有数据库:
第一步先刷新并锁表:
mysql> FLUSH TABLES WITH READ LOCK; #刷新表,并以读锁表(此步骤也可以结合mysqldump一起使用,不用单独操作)--flush-logs --lock-all-tables含义一样。
Query OK, 0 rows affected (0.00 sec)
[root@lamp ~]# mysqldump -uroot -p --master-data=2 --flush-logs --all-databases --lock-all-tables > /root/alldatabases.sql #--master-data=2以CHANGE MASTER TO的方式记录位置,但默认为被注释掉,--flush-logs刷新日志文件,--all-databases备份所有库,--lock-all-tables锁定所有表,备份至/root目录下。(完全备份所有数据库)
Enter password:
[root@lamp ~]# less /root/alldatabases.sql #查看完全备份中当前的二进制日志为000020
-- MySQL dump 10.13 Distrib 5.5.28, for Linux (x86_64)
-- Host: localhost Database:
-- ------------------------------------------------------
-- Server version 5.5.28-log
/*!40101 SET @OLD_CHARACTER_SET_CLIENT=@@CHARACTER_SET_CLIENT */;
/*!40101 SET @OLD_CHARACTER_SET_RESULTS=@@CHARACTER_SET_RESULTS */;
/*!40101 SET @OLD_COLLATION_CONNECTION=@@COLLATION_CONNECTION */;
/*!40101 SET NAMES utf8 */;
/*!40103 SET @OLD_TIME_ZONE=@@TIME_ZONE */;
/*!40103 SET TIME_ZONE='+00:00' */;
/*!40014 SET @OLD_UNIQUE_CHECKS=@@UNIQUE_CHECKS, UNIQUE_CHECKS=0 */;
/*!40014 SET @OLD_FOREIGN_KEY_CHECKS=@@FOREIGN_KEY_CHECKS, FOREIGN_KEY_CHECKS=0 */;
/*!40101 SET @OLD_SQL_MODE=@@SQL_MODE, SQL_MODE='NO_AUTO_VALUE_ON_ZERO' */;
/*!40111 SET @OLD_SQL_NOTES=@@SQL_NOTES, SQL_NOTES=0 */;
-- Position to start replication or point-in-time recovery from
-- CHANGE MASTER TO MASTER_LOG_FILE='mysql-bin.000020', MASTER_LOG_POS=107;
-- Current Database: `hellodb`
CREATE DATABASE /*!32312 IF NOT EXISTS*/ `hellodb` /*!40100 DEFAULT CHARAC
................
mysql> PURGE BINARY LOGS TO 'mysql-bin.000020'; #模拟删除当前二进制之前的日志信息。(再删除前最好把日志文件保存至其他地方,以备还原至之前状态需要)
Query OK, 0 rows affected (0.01 sec)
mysql> SHOW BINARY LOGS; #查看所有日志信息,只剩下000020
+------------------+-----------+
| Log_name | File_size |
+------------------+-----------+
| mysql-bin.000020 | 107 |
+------------------+-----------+
1 row in set (0.00 sec)
mysql> USE studb;
Database changed
mysql> SELECT * FROM tutors; #查询表tutors的信息
+-----+------------------+--------+-----+
| TID | Tname | Gender | Age |
+-----+------------------+--------+-----+
| 1 | HongQigong | M | 93 |
| 2 | HuangYaoshi | M | 63 |
| 3 | HuangRong | F | 46 |
| 4 | HuYidao | M | 65 |
| 5 | XiaoLongnv | F | 28 |
| 6 | HuFei | M | 45 |
| 7 | GuoXiang | F | 32 |
+-----+------------------+--------+-----+
mysql> DELETE FROM tutors WHERE Age>80;#删除表tutors年龄大于80的行
Query OK, 1 rows affected (0.01 sec)
mysql> SELECT * FROM tutors;#查询表tutors的信息
+-----+------------------+--------+-----+
| TID | Tname | Gender | Age |
+-----+------------------+--------+-----+
| 2 | HuangYaoshi | M | 63 |
| 3 | HuangRong | F | 46 |
| 4 | HuYidao | M | 65 |
| 5 | XiaoLongnv | F | 28 |
| 6 | HuFei | M | 45 |
| 7 | GuoXiang | F | 32 |
+-----+------------------+--------+-----+
mysql> \q
[root@lamp ~]# mysql -uroot -p #登录mysql
Enter password:
mysql> FLUSH LOGS; #刷新滚动日志
Query OK, 0 rows affected (0.01 sec)
mysql> \q
[root@lamp ~]# cd /mydata/data/#进入到mysql数据文件夹
[root@lamp data]# ls
hellodb ib_logfile0 lamp.err mydb mysql-bin.000020 mysql-bin.index stu
ibdata1 ib_logfile1 lamp.pid mysql mysql-bin.000021 performance_schema test
[root@lamp data]# mysqlbinlog mysql-bin.000020 > /root/mon-incremental.sql #把mysql的二进制日志文件导出成sql格式数据,(并命名为第一次增量备份)
[root@lamp data]# mysql -uroot -p #登录mysql
Enter password:
mysql> USE studb;
Database changed
mysql> INSERT INTO tutors (Tname) Values ('stu123');#往表tutors插入一行数据
Query OK, 1 rows affected (0.01 sec)
mysql> \q
[root@lamp data]# ls
hellodb ib_logfile0 lamp.err mydb mysql-bin.000020 mysql-bin.index
ibdata1 ib_logfile1 lamp.pid mysql mysql-bin.000021 performance_schema
[root@lamp data]# cp mysql-bin.000021 /root #复制最后一次操作的二进制日志文件至数据目录以外的目录/root
[root@lamp data]# rm -rf ./* #删除数据库的数据目录中的所有数据(模拟数据库的所有库数据丢失)
[root@lamp data]# ls #查看当前目录,数据已经被清空
[root@lamp data]# service mysqld stop #由于数据文件都被清空,故此时mysql无法停止,也无法启动
MySQL server PID file could not be found! [FAILED]
[root@lamp data]# killall mysqld #此时只能强制终止mysqld进程
[root@lamp ~]# cd /usr/local/mysql/ #进入mysql的安装目录
[root@lamp mysql]# ls
bin data include lib mysql-test scripts sql-bench
COPYING docs INSTALL-BINARY man README share support-files
[root@lamp mysql]# scripts/mysql_install_db --user=mysql --datadir=/mydata/data/ #对mysql数据库进行初始化设置,并指定相关的选项,--datadir指定数据库的数据存放目录。
Installing MySQL system tables...
OK
Filling help tables...
OK
...........
cd . ; ./bin/mysqld_safe &
You can test the MySQL daemon with mysql-test-run.pl
cd ./mysql-test ; perl mysql-test-run.pl
Please report any problems with the ./bin/mysqlbug script!
[root@lamp mysql]# service mysqld start #数据库初始化成功后重新启动数据库,因为已经初始化,所以数据库的密码为空.
Starting MySQL... [ OK ]
[root@lamp mysql]# mysql < /root/alldatabases.sql #先恢复完全备份的内容
[root@lamp mysql]# mysql < /root/mon-incremental.sql #恢复第一次增量备份
[root@lamp mysql]# mysqlbinlog /root/mysql-bin.000021 > /root/temp.sql #把故障前的最后一次二进制日志导出成sql格式的数据
[root@lamp mysql]# mysql < /root/temp.sql #把二进制日志还原至数据库
至此就手动进行了一次mysql所有库的及时点备份还原恢复,但是此还原数据库的方法会导致产生很多mysql的二进制日志文件。
正确的恢复方法是:
恢复数据前,临时关闭mysql记录二进制日志功能,待恢复后再开启记录二进制日志的功能;
mysql> SET sql_log_bin=0; #临时关闭记录二进制日志功能
Query OK, 0 rows affected (0.00 sec)
mysql> \. /root/alldatabases.sql #恢复完全备份的内容(\.表示读取导入后面目录的文件内容,
也可以替换为SOURCE命令)
mysql> \. /root/mon-incremental.sql #恢复第一次增量备份
mysql> SET sql_log_bin=1; #数据库恢复完后再打开记录二进制日志功能
************************************************************************
2、备份多个数据库
语法:mysqldump -u username -p --all-databases > /root/back.sql :备份所有库
mysqldump -u username -p --databases dbname2 dbname2 > Backup.sql
加上了--databases选项,然后后面跟多个数据库
mysqldump -u root -p --databases test mysql > /root/backup.sql
3、备份所有数据库
mysqldump命令备份所有数据库的语法如下:
mysqldump -u username -p -all-databases > /root/BackupName.sql
示例:
mysqldump -u -root -p -all-databases > /root/all.sql
二、直接复制整个数据库目录
MySQL有一种非常简单的备份方法,就是将MySQL中的数据库文件直接复制出来。这是最简单,速度最快的方法。
不过在此之前,要先将服务器停止,这样才可以保证在复制期间数据库的数据不会发生变化。如果在复制数据库的过程中还有数据写入,就会造成数据不一致。这种情况在开发环境可以,但是在生产环境中很难允许备份服务器。
注意:这种方法不适用于InnoDB存储引擎的表,而对于MyISAM存储引擎的表很方便。同时,还原时MySQL的版本最好相同。
三、使用mysqlhotcopy工具快速备份(物理备份工具)
一看名字就知道是热备份。因此,mysqlhotcopy支持不停止MySQL服务器备份。而且,mysqlhotcopy的备份方式比mysqldump快。mysqlhotcopy是一个perl脚本,主要在Linux系统下使用。其使用LOCK TABLES、FLUSH TABLES和cp来进行快速备份。
原理:先将需要备份的数据库加上一个读锁,然后用FLUSH TABLES将内存中的数据写回到硬盘上的数据库,最后,把需要备份的数据库文件复制到目标目录。
命令格式如下:
[root@localhost ~]#
dbname:数据库名称;
backupDir:备份到哪个文件夹下;
常用选项:
--help:查看mysqlhotcopy帮助;
--allowold:如果备份目录下存在相同的备份文件,将旧的备份文件加上_old;
--keepold:如果备份目录下存在相同的备份文件,不删除旧的备份文件,而是将旧的文件更名;
--flushlog:本次辈分之后,将对数据库的更新记录到日志中;
--noindices:只备份数据文件,不备份索引文件;
--user=用户名:用来指定用户名,可以用-u代替;
--password=密码:用来指定密码,可以用-p代替。使用-p时,密码与-p之间没有空格;
--port=端口号:用来指定访问端口,可以用-P代替;
--socket=socket文件:用来指定socket文件,可以用-S代替;
mysqlhotcopy并非mysql自带,需要安装Perl的数据库接口包;下载地址为:http://dev.mysql.com/downloads/dbi.html
目前,该工具也仅仅能够备份MyISAM类型的表。
二、数据还原
1、还原使用mysqldump命令备份的数据库的语法如下:
mysql -u root -p [dbname] < backup.sql
示例:
mysql -u root -p < C:\backup.sql
2、还原直接复制目录的备份
通过这种方式还原时,必须保证两个MySQL数据库的版本号是相同的。MyISAM类型的表有效,对于InnoDB类型的表不可用,InnoDB表的表空间不能直接复制。
自动备份脚本:
要求:
1,每天4点备份mysql数据;
2,为节省空间,删除超过3个月的所有备份数据;
3,删除超过7天的备份数据,保留3个月里的 10号 20号 30号的备份数据;
#创建shell文件 vim backup_mysql.sh #!/bin/bash mysqldump -uroot -p --master-data=2 --flush-logs --all-databases --lock-all-tables > /root/dbdata/mysqlbak/`date +%Y%m%d`.sql find /root/dbdata/mysqlbak/ -mtime +7 -name '*[1-9].sql' -exec rm -rf {} \; find /root/dbdata/mysqlbak/ -mtime +90 -name '*.sql' -exec rm -rf {} \; #创建定时任务 crontab –e 0 4 * * * /data/dbdata/backup_mysql.sh