免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
最近访问板块 发新帖
查看: 2634 | 回复: 7
打印 上一主题 下一主题

大侠救命!对有重复数据表加主键,能不能自动将重复数据剔除? [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2003-06-19 16:50 |只看该作者 |倒序浏览
在大批量数据导入时,如果有主键和外键存在,则导入数据非常缓慢.能不能去掉所有的约束后导入数据,然后建立约束,与约束冲突的数据被自动剔除??

论坛徽章:
0
2 [报告]
发表于 2003-06-19 18:06 |只看该作者
提示: 作者被禁止或删除 内容自动屏蔽

论坛徽章:
0
3 [报告]
发表于 2003-06-20 17:51 |只看该作者

大侠救命!对有重复数据表加主键,能不能自动将重复数据剔除?

建议先导入一个中间表,处理了数据后。导入目标表。

论坛徽章:
0
4 [报告]
发表于 2003-06-21 08:06 |只看该作者

大侠救命!对有重复数据表加主键,能不能自动将重复数据剔除?

好像可以用set violations table...来处理吧...

论坛徽章:
5
荣誉会员
日期:2011-11-23 16:44:17CU大牛徽章
日期:2013-09-18 15:15:15CU大牛徽章
日期:2013-09-18 15:15:45未羊
日期:2014-02-25 14:37:19射手座
日期:2014-12-26 22:55:37
5 [报告]
发表于 2003-06-21 13:39 |只看该作者

大侠救命!对有重复数据表加主键,能不能自动将重复数据剔除?

set violations table
是好方法。

论坛徽章:
1
荣誉版主
日期:2011-11-23 16:44:17
6 [报告]
发表于 2003-06-22 11:27 |只看该作者

大侠救命!对有重复数据表加主键,能不能自动将重复数据剔除?

在大批量数据导入时,如果有主键和外键存在,则导入数据非常缓慢.能不能去掉所有的约束后导入数据,然后建立约束,与约束冲突的数据被自动剔除??

建议不要将主键删除,这样保证数据的唯一性

可以把约束删除。因为约束不光和数据记录顺序相关,往往于装载表的顺序也相关。装载结束后重建约束。

ifx提供的策略也可以考虑试试。

论坛徽章:
0
7 [报告]
发表于 2003-06-23 11:29 |只看该作者

大侠救命!对有重复数据表加主键,能不能自动将重复数据剔除?

谢谢各位!我用hpl的express模式导入,速度是非常快,但是无法保证其数据的主键和外键约束,现在只能用另外一种导入模式了,可以带着主键外键导入,我怕主键外键去掉后,重建时恐怕建不上,系统对约束条件很严格,只有牺牲时间了:(

论坛徽章:
11
数据库技术版块每日发帖之星
日期:2016-06-25 06:20:00数据库技术版块每日发帖之星
日期:2016-06-24 06:20:00数据库技术版块每日发帖之星
日期:2016-05-03 06:20:00数据库技术版块每日发帖之星
日期:2016-04-21 06:20:00数据库技术版块每日发帖之星
日期:2016-01-23 06:20:00数据库技术版块每日发帖之星
日期:2015-12-03 06:20:00综合交流区版块每周发帖之星
日期:2015-12-02 15:03:53数据库技术版块每日发帖之星
日期:2015-10-19 06:20:00数据库技术版块每日发帖之星
日期:2015-08-20 06:20:002015年辞旧岁徽章
日期:2015-03-03 16:54:15数据库技术版块每日发帖之星
日期:2016-07-30 06:20:00
8 [报告]
发表于 2003-06-23 12:11 |只看该作者

大侠救命!对有重复数据表加主键,能不能自动将重复数据剔除?

有重复肯定是建不起来的!
你也不能随便删除,破坏了数据的完整性!
1、建立空表与约束关系;
2、set constraints,triggers,indexs for 表名 disabled;
3、导入数据;
4、建立违例和诊断表
     start violations table for 表名;
     违例日志将存放于“表名_vio“表中
5、set constraints,triggers,indexs for 表名 enable;
6、set constrains ,indexs for 表 filtering;
7、stop violations table for 表名;
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP