免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
› 论坛 › 数据库技术 › Oracle › 几种数据insert方式的性能差别
最近访问板块 发新帖
查看: 7492 | 回复: 6
打印 上一主题 下一主题

[数据库] 几种数据insert方式的性能差别 [复制链接]

willus

论坛徽章:
0
跳转到指定楼层
1楼 [收藏(0)] [报告]
发表于 2012-08-11 20:30 |只看该作者 |倒序浏览
请问下面几种数据插入的方式的性能有没有什么本质上的区别？个人觉得sqlldr非direct方式应该和oci的batch insert性能差不多。for循环的话，其实我也觉得差不多，除了batch insert是一次通信就把数据发给了数据库，而for循环需要跟数据库通信好多次。
1. 使用sqlldr的非direct方式（不能使用direct方式，不停重建索引的开销很大）
2. oci接口的batch insert方式
3. for循环一条一条的插入
renxiao2003

论坛徽章:
59
2015七夕节徽章 日期:2015-08-24 11:17:25ChinaUnix专家徽章 日期:2015-07-20 09:19:30每周论坛发贴之星 日期:2015-07-20 09:19:42ChinaUnix元老 日期:2015-07-20 11:04:38荣誉版主 日期:2015-07-20 11:05:19巳蛇 日期:2015-07-20 11:05:26CU十二周年纪念徽章 日期:2015-07-20 11:05:27IT运维版块每日发帖之星 日期:2015-07-20 11:05:34操作系统版块每日发帖之星 日期:2015-07-20 11:05:36程序设计版块每日发帖之星 日期:2015-07-20 11:05:40数据库技术版块每日发帖之星 日期:2015-07-20 11:05:432015年辞旧岁徽章 日期:2015-07-20 11:05:44
2楼 [报告]
发表于 2012-08-12 18:31 |只看该作者
sqlldr是很方便的。
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
willus

论坛徽章:
0
3楼 [报告]
发表于 2012-08-13 10:43 |只看该作者
@renxiao2003确实是挺方便，不过就是出错了不太好处理。
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
yulihua49

论坛徽章:
15
射手座 日期:2014-11-29 19:22:4915-16赛季CBA联赛之青岛 日期:2017-11-17 13:20:09黑曼巴 日期:2017-07-13 19:13:4715-16赛季CBA联赛之四川 日期:2017-02-07 21:08:572015年亚冠纪念徽章 日期:2015-11-06 12:31:58每日论坛发贴之星 日期:2015-08-04 06:20:00程序设计版块每日发帖之星 日期:2015-08-04 06:20:00程序设计版块每日发帖之星 日期:2015-07-12 22:20:002015亚冠之浦和红钻 日期:2015-07-08 10:10:132015亚冠之大阪钢巴 日期:2015-06-29 11:21:122015亚冠之广州恒大 日期:2015-05-22 21:55:412015年亚洲杯之伊朗 日期:2015-04-10 16:28:25
4楼 [报告]
发表于 2014-02-08 22:14 |只看该作者
willus 发表于 2012-08-11 20:30
请问下面几种数据插入的方式的性能有没有什么本质上的区别？个人觉得sqlldr非direct方式应该和oci的batch i ...

2.多线程并行批量插入。。。。。比sqlldr快，尤其在RAC环境，可以快N倍。
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
yulihua49

论坛徽章:
15
射手座 日期:2014-11-29 19:22:4915-16赛季CBA联赛之青岛 日期:2017-11-17 13:20:09黑曼巴 日期:2017-07-13 19:13:4715-16赛季CBA联赛之四川 日期:2017-02-07 21:08:572015年亚冠纪念徽章 日期:2015-11-06 12:31:58每日论坛发贴之星 日期:2015-08-04 06:20:00程序设计版块每日发帖之星 日期:2015-08-04 06:20:00程序设计版块每日发帖之星 日期:2015-07-12 22:20:002015亚冠之浦和红钻 日期:2015-07-08 10:10:132015亚冠之大阪钢巴 日期:2015-06-29 11:21:122015亚冠之广州恒大 日期:2015-05-22 21:55:412015年亚洲杯之伊朗 日期:2015-04-10 16:28:25
5楼 [报告]
发表于 2014-03-20 20:51 |只看该作者
yulihua49 发表于 2014-02-08 22:14
2.多线程并行批量插入。。。。。比sqlldr快，尤其在RAC环境，可以快N倍。

最近的测试,单机达到directpath的水平,比一般的2.8倍.rac翻番.
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
jackson198574

论坛徽章:
17
天蝎座 日期:2014-03-10 14:35:04数据库技术版块每日发帖之星 日期:2015-12-13 06:20:00IT运维版块每日发帖之星 日期:2015-12-13 06:20:00数据库技术版块每日发帖之星 日期:2015-10-20 06:20:00数据库技术版块每日发帖之星 日期:2015-08-21 06:20:00数据库技术版块每日发帖之星 日期:2015-06-17 22:20:002015年迎新春徽章 日期:2015-03-04 09:57:092015年辞旧岁徽章 日期:2015-03-03 16:54:15技术图书徽章 日期:2015-01-12 17:05:35亥猪 日期:2014-11-09 13:05:04金牛座 日期:2014-09-25 11:28:54处女座 日期:2014-09-15 19:58:36
6楼 [报告]
发表于 2014-03-25 17:08 |只看该作者
能否做一个简单的测试文档？
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
yulihua49

论坛徽章:
15
射手座 日期:2014-11-29 19:22:4915-16赛季CBA联赛之青岛 日期:2017-11-17 13:20:09黑曼巴 日期:2017-07-13 19:13:4715-16赛季CBA联赛之四川 日期:2017-02-07 21:08:572015年亚冠纪念徽章 日期:2015-11-06 12:31:58每日论坛发贴之星 日期:2015-08-04 06:20:00程序设计版块每日发帖之星 日期:2015-08-04 06:20:00程序设计版块每日发帖之星 日期:2015-07-12 22:20:002015亚冠之浦和红钻 日期:2015-07-08 10:10:132015亚冠之大阪钢巴 日期:2015-06-29 11:21:122015亚冠之广州恒大 日期:2015-05-22 21:55:412015年亚洲杯之伊朗 日期:2015-04-10 16:28:25
7楼 [报告]
发表于 2014-03-26 11:40 |只看该作者
本帖最后由 yulihua49 于 2014-03-26 11:51 编辑
jackson198574 发表于 2014-03-25 17:08
能否做一个简单的测试文档？

给你发一个程序包，你自己测吧，见包内的README。
10M的.gz------附件过大？
实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？
返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP