免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
› 论坛 › 数据库技术 › MySQL › 急求mysql大表拆分方法
最近访问板块 发新帖
查看: 10867 | 回复: 7
打印 上一主题 下一主题

急求mysql大表拆分方法 [复制链接]

fengfeng919

论坛徽章:
0
跳转到指定楼层
1楼 [收藏(0)] [报告]
发表于 2012-12-10 15:42 |只看该作者 |倒序浏览
我目前的情况是多个数据库，所有表都使用innodb引擎，而且目前还是共享表空间模式，其中有一张表目前已经多大4千万条数据了，大小达到130G，请有拆分大表经验的老师们给个建议，我现在基本没有成型的方案，谢谢，在线等 -_-
creekea

论坛徽章:
0
2楼 [报告]
发表于 2012-12-10 16:20 |只看该作者
SF，占个位，帮顶顶：）
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
seesea2517

论坛徽章:
93
2015年辞旧岁徽章 日期:2019-10-10 10:51:15CU大牛徽章 日期:2014-02-21 14:21:56CU十二周年纪念徽章 日期:2020-10-15 16:55:55CU大牛徽章 日期:2014-02-21 14:22:07羊年新春福章 日期:2019-10-10 10:51:39CU大牛徽章 日期:2019-10-10 10:55:38季节之章：春 日期:2020-10-15 16:57:40ChinaUnix元老 日期:2019-10-10 10:54:42季节之章：冬 日期:2019-10-10 10:57:17CU大牛徽章 日期:2014-02-21 14:22:52CU大牛徽章 日期:2014-03-13 10:40:30CU大牛徽章 日期:2014-02-21 14:23:15
3楼 [报告]
发表于 2012-12-11 09:37 |只看该作者
这方面我没啥经验，就是帮大神先提几个问题好让他们看到的时候可以快一点帮你解决问题。
1. 你的拆分指的是什么意思，是要按表内容来分成多个表还是只是使用分区功能
2. 无论是什么方式的拆分，你都需要提供表的一些信息以便分析，比如表结构，数据的分布等
3. 如果是要弄成独立表空间，估计没别的办法，就是导出后重建，再导入数据（导出倒是有几种方案，比如导出sql语句或是Tab分隔等方案，使用tab分隔的没有多余字符，导出的文件会小一些，速度也会快一些）
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
ruochen

论坛徽章:
8
综合交流区版块每周发帖之星 日期:2015-12-02 15:03:53数据库技术版块每日发帖之星 日期:2015-10-02 06:20:00IT运维版块每日发帖之星 日期:2015-10-02 06:20:00IT运维版块每日发帖之星 日期:2015-09-14 06:20:00金牛座 日期:2014-10-10 11:23:34CU十二周年纪念徽章 日期:2013-10-24 15:41:34酉鸡 日期:2013-10-19 10:17:1315-16赛季CBA联赛之北京 日期:2017-03-06 15:12:44
4楼 [报告]
发表于 2012-12-11 10:11 |只看该作者
你想如何拆分？


一般来说对应用影响小、或者停机维护短的基本都借助复制来做
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
G8bao7

论坛徽章:
0
5楼 [报告]
发表于 2012-12-11 11:14 |只看该作者
这方面谈不上经验，说下自己的想法，欢迎大牛拍砖。
首先，查找数据库当前的瓶颈在什么地方。读、写、IO、CPU、磁盘容量等。
     

1、建议表空间换成独立表空间
2、分析整理数据的使用情况，区分出活跃、非活跃数据。

回复 1# fengfeng919


   
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
action08

论坛徽章:
223
2022北京冬奥会纪念版徽章 日期:2015-08-10 16:30:32操作系统版块每日发帖之星 日期:2016-05-10 19:22:58操作系统版块每日发帖之星 日期:2016-02-18 06:20:00操作系统版块每日发帖之星 日期:2016-03-01 06:20:00操作系统版块每日发帖之星 日期:2016-03-02 06:20:0015-16赛季CBA联赛之上海 日期:2019-09-20 12:29:3219周年集字徽章-周 日期:2019-10-01 20:47:4815-16赛季CBA联赛之八一 日期:2020-10-23 18:30:5320周年集字徽章-20 日期:2020-10-28 14:14:2615-16赛季CBA联赛之广夏 日期:2023-02-25 16:26:26CU十四周年纪念徽章 日期:2023-04-13 12:23:10操作系统版块每日发帖之星 日期:2016-05-10 19:22:58
6楼 [报告]
发表于 2012-12-11 13:01 |只看该作者
这东西先看一遍文档，再有针对性的请教更好吧
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
chinafenghao

论坛徽章:
8
CU大牛徽章 日期:2013-09-18 15:20:48CU大牛徽章 日期:2013-09-18 15:20:58CU大牛徽章 日期:2013-09-18 15:21:06CU大牛徽章 日期:2013-09-18 15:21:12CU大牛徽章 日期:2013-09-18 15:21:17天秤座 日期:2013-10-30 14:01:03摩羯座 日期:2013-11-29 18:02:31luobin 日期:2016-06-17 17:46:36
7楼 [报告]
发表于 2012-12-11 13:37 |只看该作者
@fengfeng919
http://bbs.chinaunix.net/thread-4057166-1-1.html
上周的话题刚好是shading,为什么不去关注下呢
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
fengfeng919

论坛徽章:
0
8楼 [报告]
发表于 2012-12-11 21:04 |只看该作者
感谢这么多人点拨！
谢谢chinafenghao，我过去看看，呵呵！
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP