免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
楼主: 小版主杀手
打印 上一主题 下一主题

[讨论]mysql数据库存储、备份、恢复你知道多少--亲 你懂的(获奖名单已公布) [复制链接]

论坛徽章:
4
CU大牛徽章
日期:2013-03-13 15:32:35CU大牛徽章
日期:2013-03-13 15:38:15CU大牛徽章
日期:2013-03-13 15:38:52戌狗
日期:2013-12-27 15:08:11
51 [报告]
发表于 2012-04-05 11:09 |只看该作者
yahoon 发表于 2012-04-05 10:03
回复 45# 小版主杀手
那何必停呢,我直接flush 之后lock 再复制就不OK了?
这对所有的引擎都适用吧?

也可以啊

论坛徽章:
0
52 [报告]
发表于 2012-04-05 11:42 |只看该作者
回复 42# donniechen


    他们连最基本的资源监控都没有啊,呵呵!一定要建立监控体系,nagios是比较好的监控工具。再配合cacti比较完美。

论坛徽章:
13
技术图书徽章
日期:2014-04-29 14:15:42IT运维版块每日发帖之星
日期:2015-12-12 06:20:00IT运维版块每日发帖之星
日期:2015-08-30 06:20:00IT运维版块每日发帖之星
日期:2015-08-24 06:20:00IT运维版块每日发帖之星
日期:2015-08-02 06:20:002015年亚洲杯之澳大利亚
日期:2015-04-03 15:03:12申猴
日期:2015-03-20 09:00:292015年迎新春徽章
日期:2015-03-04 09:54:452015年辞旧岁徽章
日期:2015-03-03 16:54:15季节之章:冬
日期:2015-01-20 17:08:47双子座
日期:2014-11-21 16:30:31技术图书徽章
日期:2014-07-11 16:29:08
53 [报告]
发表于 2012-04-05 11:48 |只看该作者
这个还没用过,只能支持下~

论坛徽章:
0
54 [报告]
发表于 2012-04-05 11:52 |只看该作者
关于日常管理mysql的经验
1、建立监控体系(nagios+cacti+scripts),每天查看服务器的一些基本信息(磁盘、网络流量、qps、io等等)
2、定期的查看慢查询日志,并进行优化(我这边是一个月分析一次)
3、对于历史数据定期的进行归档后删除,这个和公司的业务特点有关系(perl脚本)
4、对小数据库每天一次全备份、大库增量备份+主从(本地和异地备份),
5、操作数据库的时候,只要涉及到数据的更改都需要先进行备份,根据情况你选择是备份库还是备份单表
6、审核开发提供的SQL,对不符合设计规则的进行更改,比如主键的选择、列的数据类型的选择、注释等等
7、此外对自己不太确定的东西一定要弄个测试环境跑一下,平时多做实验、多看书,增强理论和实战经验。

评分

参与人数 2可用积分 +5 收起 理由
ruochen + 2 赞一个!
小版主杀手 + 3 赞一个!

查看全部评分

论坛徽章:
0
55 [报告]
发表于 2012-04-05 14:16 |只看该作者
回复 55# 飞鸿无痕

作为一个MYSQL DBA管理应该具有报告分析,日常工作记录备忘,建立完整的应急预案,处理突发事件,否则,会有很多意想不到的事情发生的

   

论坛徽章:
0
56 [报告]
发表于 2012-04-05 16:12 |只看该作者
回复 56# donniechen


   对的,补充得好!

论坛徽章:
0
57 [报告]
发表于 2012-04-06 08:40 |只看该作者
来学习了

论坛徽章:
4
CU大牛徽章
日期:2013-03-13 15:32:35CU大牛徽章
日期:2013-03-13 15:38:15CU大牛徽章
日期:2013-03-13 15:38:52戌狗
日期:2013-12-27 15:08:11
58 [报告]
发表于 2012-04-06 11:45 |只看该作者
cuyunwu321 发表于 2012-04-04 10:36
不知道有用meb的吗,感觉也蛮好用的

方便谈下心得

论坛徽章:
0
59 [报告]
发表于 2012-04-06 18:45 |只看该作者
我是新手 ,提出的可能会让大家笑话。
在mysql备份我觉的应该像版本控制那样,每个一段时间(比如几个小时,一天等)进行自动备份,但是没必要每次都把所有的数据都备份,我们在前一次的基础上进行比较,如果数据库数据并没有发生变化,那么就不备份,通过比较当数据库发生变化,我们就把目前数据库的数据与以前备份的比较,找出不同的,把找出的不同保存下来,这样可以减少内存的消耗,但我们需要返回某个时刻时,在当前的基础上进行反向依次改变。达到以前的状态。

论坛徽章:
59
2015七夕节徽章
日期:2015-08-24 11:17:25ChinaUnix专家徽章
日期:2015-07-20 09:19:30每周论坛发贴之星
日期:2015-07-20 09:19:42ChinaUnix元老
日期:2015-07-20 11:04:38荣誉版主
日期:2015-07-20 11:05:19巳蛇
日期:2015-07-20 11:05:26CU十二周年纪念徽章
日期:2015-07-20 11:05:27IT运维版块每日发帖之星
日期:2015-07-20 11:05:34操作系统版块每日发帖之星
日期:2015-07-20 11:05:36程序设计版块每日发帖之星
日期:2015-07-20 11:05:40数据库技术版块每日发帖之星
日期:2015-07-20 11:05:432015年辞旧岁徽章
日期:2015-07-20 11:05:44
60 [报告]
发表于 2012-04-06 22:17 |只看该作者
1.MySQL平台数据库备份方案

MySQL的备份方案如下:
 1.mysqldump备份

  mysqldump 是采用SQL级别的备份机制,它将数据表导成 SQL 脚本文件,在不同的 MySQL 版本之间升级时相对比较合适,这也是最常用的备份方法。

  示例:mysqldump -uroot -p database table > /home/jobs/back.sql

  mysqldump也可做增量备份,mysqldump相关参数网上较多,就不在此一一赘述了

  2.mysqlhotcopy备份

  mysqlhotcopy 是一个 PERL 程序。它使用 LOCK TABLES、FLUSH TABLES 和 cp 或 scp 来快速备份数据库。它是备份数据库或单个表的最快的途径,但它只能运行在数据库文件(包括数据表定义文件、数据文件、索引文件)所在的机器上。

  mysqlhotcopy 只能用于备份 MyISAM,并且只能运行在 类Unix 和 NetWare 系统上。

  mysqlhotcopy 支持一次性拷贝多个数据库,同时还支持正则表达。

  示例: root#/usr/local/mysql/bin/mysqlhotcopy -h=localhost -u=root

  -p=123456 database /tmp (把数据库目录 database 拷贝到 /tmp下)root#/usr/local/mysql/bin/mysqlhotcopy -h=localhost -u=root -p=123456 db_name_1 ... db_name_n /tmproot#/usr/local/mysql/bin/mysqlhotcopy

  -h=localhost -u=root -p=123456 db_name./regex//tmp更详细的使用方法请查看手册,或者调用下面的命令来查看 mysqlhotcopy 的帮助:

  perldoc /usr/local/mysql/bin/mysqlhotcopy注意,想要使用 mysqlhotcopy,必须要有SELECT、RELOAD(要执行 FLUSH TABLES) 权限,并且还必须要能够有读取 datadir/db_name 目录的权限。

  还原mysqlhotcopy 备份出来的是整个数据库目录,使用时可以直接拷贝到 mysqld指定的 datadir (在这里是 /usr/local/mysql/data/)目录下即可,同时要注意权限的问题,如下例: root#cp-rf db_name /usr/local/mysql/data/root#chown -R nobody:nobody/usr/local/mysql/data/ (将 db_name 目录的属主改成 mysqld 运行用户)

  3.SQL 语法备份

  3.1 备份BACKUP TABLE 语法其实和 mysqlhotcopy 的工作原理差不多,都是锁表,然后拷贝数据文件。它能实现在线备份,但是效果不理想,因此不推荐使用。它只拷贝表结构文件和数据文件,不同时拷贝索引文件,因此恢复时比较慢。例子: BACK TABLE tbl_name TO '/tmp/db_name/';注意,必须要有 FILE权限才能执行本SQL,并且目录 /tmp/db_name/ 必须能被 mysqld 用户可写,导出的文件不能覆盖已经存在的文件,以避免安全问题。

  恢复用 BACKUP TABLE 方法备份出来的文件,可以运行 RESTORE TABLE 语句来恢复数据表。例子: RESTORE TABLE FROM '/tmp/db_name/';权限要求类似上面所述。

  3.2 SELECT INTO OUTFILE 则是把数据导出来成为普通的文本文件,可以自定义字段间隔的方式,方便处理这些数据。

  例子:SELECT INTO OUTFILE '/tmp/db_name/tbl_name.txt' FROM tbl_name;注意,必须要有FILE 权限才能执行本SQL,并且文件 /tmp/db_name/tbl_name.txt 必须能被 mysqld用户可写,导出的文件不能覆盖已经存在的文件,以避免安全问题。

  用 SELECT INTO OUTFILE 方法备份出来的文件,可以运行 LOAD DATA INFILE 语句来恢复数据表。

  例子: LOAD DATA INFILE '/tmp/db_name/tbl_name.txt' INTO TABLE tbl_name;权限要求类似上面所述。倒入数据之前,数据表要已经存在才行。如果担心数据会发生重复,可以增加 REPLACE关键字来替换已有记录或者用 IGNORE 关键字来忽略他们。

  4.启用二进制日志(binlog)

  采用 binlog 的方法相对来说更灵活,省心省力,而且还可以支持增量备份。

  启用 binlog 时必须要重启 mysqld。首先,关闭 mysqld,打开 my.cnf,加入以下几行:

  server-id = 1
  log-bin = binlog
  log-bin-index = binlog.index
  然后启动 mysqld 就可以了。运行过程中会产生 binlog.000001 以及 binlog.index,前面的文件是 mysqld 记录所有对数据的更新操作,后面的文件则是所有 binlog 的索引,都不能轻易删除。关于 binlog 的信息请查看手册。

  需要备份时,可以先执行一下 SQL 语句,让 mysqld 终止对当前 binlog的写入,就可以把文件直接备份,这样的话就能达到增量备份的目的了: FLUSH LOGS;如果是备份复制系统中的从服务器,还应该备份master.info 和 relay-log.info 文件。备份出来的 binlog 文件可以用 MySQL 提供的工具 mysqlbinlog 来查看,如:/usr/local/mysql/bin/mysqlbinlog /tmp/binlog.000001该工具允许你显示指定的数据库下的所有SQL 语句,并且还可以限定时间范围,相当的方便,详细的请查看手册。

  恢复时,可以采用类似以下语句来做到: /usr/local/mysql/bin/mysqlbinlog /tmp/binlog.000001  | mysql -uyejr -pyejr db_name把 mysqlbinlog 输出的 SQL 语句直接作为输入来执行它。

  如果你有空闲的机器,不妨采用这种方式来备份。由于作为 slave 的机器性能要求相对不是那么高,因此成本低,用低成本就能实现增量备份而且还能分担一部分数据查询压力,何乐而不为呢?

  5.拷贝文件

  直接备份数据文件相较前几种方法,备份数据文件最为直接、快速、方便,缺点是基本上不能实现增量备份。

  为了保证数据的一致性,需要在靠背文件前,执行以下 SQL 语句: FLUSH TABLES WITH READ LOCK;也就是把内存中的数据都刷新到磁盘中,同时锁定数据表,以保证拷贝过程中不会有新的数据写入。这种方法备份出来的数据恢复也很简单,直接拷贝回原来的数据库目录下即可。

  注意,对于 Innodb 类型表来说,还需要备份其日志文件,即 ib_logfile* 文件。因为当 Innodb 表损坏时,就可以依靠这些日志文件来恢复。

  6.利用rsync备份

  rsync作为同步工具也可以用来做备份,但要配置服务器端和客户端

  示例rsync -vzrtopg --progress --delete root@192.168.1.3::root /tmp/

  相关rsync配置可参考http://fanqiang.chinaunix.net/a6/b7/20010908/1305001258.html

  缺点是rsync是根据文件修改时间做的增量备份,所以备份数据库都是全备,并且配置比较麻烦.


文章来自中国建站:http://www.jz123.cn/text/2525759.html
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP