免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 6889 | 回复: 6
打印 上一主题 下一主题

PG大数据量的问题,求大仙解答~~ [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2011-08-22 21:52 |只看该作者 |倒序浏览
随着数据的增多,最近PG的库遇到一些问题。

比如,PG的库设置后会不定期做autoVaccum处理,
但在数据库使用频繁的状态下autoVaccum处理会被推迟。这样就会造成,
对于大数据量的DB,长期得不到清理,数据量激增。

现在的对应方法是,定期将大数据量的DB dump下来,然后重新创建,导入数据。dump的时候只会保留纯数据,这样相当于做的DB清理。
不过,这种方法很耗时,而且需要定期做。

请路过的大虾,给指点指点,有没有什么好的,可行的办法~~:emn1:

论坛徽章:
59
2015七夕节徽章
日期:2015-08-24 11:17:25ChinaUnix专家徽章
日期:2015-07-20 09:19:30每周论坛发贴之星
日期:2015-07-20 09:19:42ChinaUnix元老
日期:2015-07-20 11:04:38荣誉版主
日期:2015-07-20 11:05:19巳蛇
日期:2015-07-20 11:05:26CU十二周年纪念徽章
日期:2015-07-20 11:05:27IT运维版块每日发帖之星
日期:2015-07-20 11:05:34操作系统版块每日发帖之星
日期:2015-07-20 11:05:36程序设计版块每日发帖之星
日期:2015-07-20 11:05:40数据库技术版块每日发帖之星
日期:2015-07-20 11:05:432015年辞旧岁徽章
日期:2015-07-20 11:05:44
2 [报告]
发表于 2011-08-22 21:58 |只看该作者
还没有这么大数据量。帮顶下。

论坛徽章:
4
丑牛
日期:2014-09-15 09:28:12双子座
日期:2014-12-19 17:01:192015年辞旧岁徽章
日期:2015-03-03 16:54:15数据库技术版块每日发帖之星
日期:2016-06-28 06:20:00
3 [报告]
发表于 2011-08-22 22:16 |只看该作者
如果 autovacuum 进程被推迟了,可以手工执行 vacuum 操作,这比dump 出来,再
导入的方法方便多了。

论坛徽章:
59
2015七夕节徽章
日期:2015-08-24 11:17:25ChinaUnix专家徽章
日期:2015-07-20 09:19:30每周论坛发贴之星
日期:2015-07-20 09:19:42ChinaUnix元老
日期:2015-07-20 11:04:38荣誉版主
日期:2015-07-20 11:05:19巳蛇
日期:2015-07-20 11:05:26CU十二周年纪念徽章
日期:2015-07-20 11:05:27IT运维版块每日发帖之星
日期:2015-07-20 11:05:34操作系统版块每日发帖之星
日期:2015-07-20 11:05:36程序设计版块每日发帖之星
日期:2015-07-20 11:05:40数据库技术版块每日发帖之星
日期:2015-07-20 11:05:432015年辞旧岁徽章
日期:2015-07-20 11:05:44
4 [报告]
发表于 2011-08-23 11:58 |只看该作者
回复 3# tanfeng3


    谢谢指教啊。

论坛徽章:
0
5 [报告]
发表于 2011-08-23 21:26 |只看该作者
回复 3# tanfeng3


    谢谢关注~!
你说的方法,我之前想到过,由于数据库使用的比较频繁,手动做vaccum会占用很大的系统资源,而且时间较长。
对于正在做vaccum的DB来说,执行SQL文会很慢。
出于以上的考虑,现在用dump来回避这个问题。比如,DB1需要进行清理,那么在使用DB1的同时创建DB2,
将DB1的数据dump后导入DB2。之后切换DB来完成本次处理。

论坛徽章:
59
2015七夕节徽章
日期:2015-08-24 11:17:25ChinaUnix专家徽章
日期:2015-07-20 09:19:30每周论坛发贴之星
日期:2015-07-20 09:19:42ChinaUnix元老
日期:2015-07-20 11:04:38荣誉版主
日期:2015-07-20 11:05:19巳蛇
日期:2015-07-20 11:05:26CU十二周年纪念徽章
日期:2015-07-20 11:05:27IT运维版块每日发帖之星
日期:2015-07-20 11:05:34操作系统版块每日发帖之星
日期:2015-07-20 11:05:36程序设计版块每日发帖之星
日期:2015-07-20 11:05:40数据库技术版块每日发帖之星
日期:2015-07-20 11:05:432015年辞旧岁徽章
日期:2015-07-20 11:05:44
6 [报告]
发表于 2011-08-23 22:06 |只看该作者
回复 5# longjiang_2008


    有好的经验要分享给大家啊。

论坛徽章:
0
7 [报告]
发表于 2011-08-24 12:57 |只看该作者
回复 1# longjiang_2008


    检查一下 maintenance_work_mem的值,估计你设置的值太小
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP