免费注册 查看新帖 |

ChinaUnix.net

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 15376 | 回复: 5

PostgreSQL导入数据性能奇差 [复制链接]

论坛徽章:
0
发表于 2013-04-25 13:46 |显示全部楼层
服务器硬件:i5 CPU,8G内存,2个500G SATA硬盘
系统环境:FreeBSD 9.1 AMD 64,ZFS,2个硬盘做mirror,PostGreSQL 9.1.9

现象:用psql导入另外一个系统的备份出来的数据,需要约6个小时。而同样的数据,在windows平台导入只要4分钟,在另外一台专用服务器(SAS硬盘,其余环境相同)上,也只需要5分钟左右。

仔细检查了数据库的配置,和windows平台差不多,唯一不一样的是,服务器上的shared_buffers调到512M了。

个人觉得,这个问题可以排除是数据库安装或者设置方面的原因。有可能是以下两个方面引起:
1、根据delphij的建议“其中,gpart add -a 4k表示令系统按4K扇区对齐。对于非4K扇区的硬盘来说并不一定需要,但并不会对性能产生负面影响。”加了4k参数,可能影响了硬盘在数据库应用方面的性能;
2、硬盘写缓存没有打开,但我加了“kern.cam.ada.0.write_cache=1”,性能也没有变化。

大家给个建议,还有什么原因有可能导致性能差别这么大?

论坛徽章:
53
2015七夕节徽章
日期:2015-08-24 11:17:25ChinaUnix专家徽章
日期:2015-07-20 09:19:30每周论坛发贴之星
日期:2015-07-20 09:19:42ChinaUnix元老
日期:2015-07-20 11:04:38荣誉版主
日期:2015-07-20 11:05:19巳蛇
日期:2015-07-20 11:05:26CU十二周年纪念徽章
日期:2015-07-20 11:05:27IT运维版块每日发帖之星
日期:2015-07-20 11:05:34操作系统版块每日发帖之星
日期:2015-07-20 11:05:36程序设计版块每日发帖之星
日期:2015-07-20 11:05:40数据库技术版块每日发帖之星
日期:2015-07-20 11:05:432015年辞旧岁徽章
日期:2015-07-20 11:05:44
发表于 2013-04-25 22:34 |显示全部楼层
应该是OS的问题,而非PG问题。

论坛徽章:
1
2015年辞旧岁徽章
日期:2015-03-03 16:54:15
发表于 2013-04-29 20:23 |显示全部楼层
没看出来,这个跟POSTGRESQL有什么关系,另外,导入数据时候,最好不要用PSQL来导,
应该用PG_RESTORE,速度会提升

论坛徽章:
3
处女座
日期:2014-11-05 11:02:4315-16赛季CBA联赛之四川
日期:2015-12-10 14:37:4015-16赛季CBA联赛之天津
日期:2017-09-08 18:39:34
发表于 2013-05-02 15:28 |显示全部楼层
你都说了,windows上只要4、5分支,这个跟POSTGRESQL有什么关系

论坛徽章:
0
发表于 2013-07-08 22:58 |显示全部楼层
看着标题,我还以为楼主发现pg的问题了呢?还在奇怪,我倒200G的库貌似也就2小时啊.

论坛徽章:
0
发表于 2013-09-09 10:08 |显示全部楼层
本帖最后由 hmily36 于 2013-09-09 10:10 编辑

这样设置看看
shared_buffers = 2000MB
maintenance_work_mem = 1500MB
fsync = off
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

ITPUB技术栈

ITPUB技术栈是ITPUB企业打造的垂直于IT领域的知识社群平台,在这里,你既可以是创作者也可以是消费者。如果你的IT生涯丰富多彩,喷薄的个人价值尽可在小栈内体现;如果你渴望找到志同道合的伙伴,拓宽人脉,小栈比跑会场更快。 小栈特色:
1.极高的用户转化率,实现更直接的知识变现;
2.随时随地,刷个朋友圈的时间,实现更长效的信息沉淀;
3.戳痛、难点的专业咨询,更接近成功解决方案的时刻;
4.贴近意见领袖,个人高速成长,迈入更富有价值的人际圈。

----------------------------------------

技术小栈>>
  

北京盛拓优讯信息技术有限公司. 版权所有 16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122
中国互联网协会会员  联系我们:huangweiwei@it168.com
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP