MySQL 常见数据拆分办法
在生产环境中,由于业务的增长或者业务的拆分,dba经常需要拆库操作。那么我们常见的拆库手段有哪些呢?
我这里提供几种解决办法:
1. 使用mysqldump 把表逻辑倒出,然后再source 到其它地方
2. 使用xtrabackup 把表、或者库逻辑备份出,然后再recovery出一个实例
3. 使用mysql自带的表空间转移(transport)[这个需要mysql 5.6.6 以上版本支持]
i: 先来看一下mysql 的 transport 表空间的特性吧
比如我们要把 tab_test1 从 db_a 移动到 db_b ,那么我们需要做这么一系列动作:
step 1: use db_a; show create table tab_test1;(首先,拿到需要的表结构)
step 2: use db_b; create table tab_test1; alter tale tab_test1 discard tablespace;(discard tablespace 就是把ibd文件删掉,只留下.frm文件)(其次,到目标库删除掉idb文件)
step 4: use db_a; flush table test122 for export;(把相关表的内存数据写入到数据库)
step 5: 拷贝 tab_test1.ibd 文件到 db_b/ 目录下;(操作系统层执行拷贝ibd文件操作)
step 6: use db_a; unlock tables; (源库上解锁表)
step 7: use db_b; alter table tab_test1 import tablespace;(目标库执行表空间导入)
执行完上边几个步骤,我们就完成了 在库之间迁移 某些个表的操作了。
ii: 再来看一下 xtrabackup 导出部分表,以达到迁移目的
step 1: 我们需要使用xtrabackup 备份部分表
nohup perl /home/ddb/tmp/xtrabackup/bin/innobackupex-1.5.1 --ibbackup=/home/tmp/xtrabackup/bin/xtrabackup_55 --user=root --password=123 --defaults-file=/home/my.cnf --slave-info --tables-file=/mnt/back_tables.txt /mnt/backup_1
step 2: 应用日志,进行恢复操作
nohup perl /home/tmp/percona-xtrabackup-2.1.9-linux-x86_64/bin/innobackupex-1.5.1 --ibbackup=/home/tmp/percona-xtrabackup-2.1.9-linux-x86_64/bin/xtrabackup_55 --export --apply-log --defaults-file=/home/node-1-1/backup-my.cnf /home/node-1-1/ > /tmp/r.log 2>&1 &
step 3: 重新起实例,配置复制关系,只复制部分表
my.cnf 文件配置: replicate_wild_do_table/replicate_wild_ignore_table
执行完上边几个步骤,我们就完成了表的迁移操作,并且新起了个实例,达到了分库的目的。
iii:最后我们就看一下 mysqldump 的姿势吧
额, 这个就不多啰嗦了吧, mysqldump 做的事情就是 一些逻辑的导出, 倒出来的数据我们是可以用人肉可见的。 这个需要注意的一点就是 --single-transcation 选项
关于以上几种办法,我们在实际工作中需要 考虑 服务器的资源、内存容量等, 需要结合实际情况来使用 合适的办法进行拆库操作。
上一篇: JAVA格式化时间日期的简单实例
推荐阅读
-
mysql 统计大数据缓慢有关问题,请教有啥解决办法吗
-
php读写mysql数据时乱码的解决办法
-
在PHP+Apache+MySQL环境下(windows系统),连接SQLServer数据出现“can not find driver”问题的解决办法
-
Oracle数据库TNS常见错误的解决办法
-
PHP长时间连接数据库造成mysql has gone away解决办法
-
MYSQL数据库导入数据时出现乱码的解决办法
-
MySQL 数据库查询随机数量条目的效率问题及解决办法
-
MySQL导入导出数据出现乱码的解决办法
-
求代码一段:向mysql中插入文本数据时,带格式解决办法
-
Mysql数据库权限丢失的解决办法