免费注册	查看新帖 \|


平台论坛博客文库

› 论坛 › 数据库技术 › MySQL › 大量数据录入时归并的问题

最近访问板块

发新帖

查看: 2234 | 回复: 2

上一主题

下一主题

大量数据录入时归并的问题 [复制链接]

论坛徽章:: 0

电梯直达

跳转到指定楼层

1楼 [收藏(0)] [报告]

发表于 2008-03-02 15:56 |只看该作者 |倒序浏览

5可用积分

要从4G文件录入数据到库中，如果不把属性相同的归并（即加一个计数），那么将有2亿多条记录，
所以想把属性相同用记数来表示，如
c1 c2 c3 c4 cnt

cnt表示计数，c1,c2,c2表示属性
速度上有问题，每次加记录都要检索已存在的数据，而且属性有三四个，这样到后面就很慢了，不知有什么好办法没有？谢谢

文库|博客

yueliangdao0608

论坛徽章:: 0

2楼 [报告]

发表于 2008-03-03 09:08 |只看该作者

你可以看看5.1的分区。

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

论坛徽章:: 0

3楼 [报告]

发表于 2008-03-03 19:13 |只看该作者

自己写程序归并，是最好的方式，mysql支持不了这种实时归并

实战分享：从技术角度谈机器学习入门| 【大话IT】RadonDB低门槛向MySQL集群下战书 | ChinaUnix打赏功能已上线！ | 新一代分布式关系型数据库RadonDB知多少？

发新帖

Chinaunix › 论坛 › 数据库技术 › MySQL › 大量数据录入时归并的问题

北京盛拓优讯信息技术有限公司. 版权所有京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号：11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员联系我们：huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP