免费注册 查看新帖 |

Chinaunix

  平台 论坛 博客 文库
12下一页
最近访问板块 发新帖
查看: 4688 | 回复: 15
打印 上一主题 下一主题

请教一个关于informix中处理增量数据的问题。 [复制链接]

论坛徽章:
0
跳转到指定楼层
1 [收藏(0)] [报告]
发表于 2009-08-05 15:28 |只看该作者 |倒序浏览
我使用的是linux下的informix ids 10 数据库,现在有数据文件需要load到表中,但表有唯一性索引,而且必须是唯一性索引。想达到一个目的,就是load过程中,如果遇到重复数据,则使用文件中的记录替换到原来表中的记录,请问如何操作?
在MYSQL里面,从文件载入数据时,使用:load local data infile .......
这里面可以使用一个replace,就达到了那个目的。
但是在informix里面,不知道有没有这样的功能。
请高手们指教一下。

论坛徽章:
1
15-16赛季CBA联赛之江苏
日期:2017-04-05 11:23:15
2 [报告]
发表于 2009-08-05 16:43 |只看该作者
好像没有吧。。。
你可以先把索引去掉,处理过重复值后再加上。

论坛徽章:
0
3 [报告]
发表于 2009-08-05 18:15 |只看该作者

回复 #2 yunzhongyue 的帖子

可是,如果删除了唯一性索引,在倒入完之后,就再也建立不起唯一性索引了呀。

论坛徽章:
0
4 [报告]
发表于 2009-08-06 08:49 |只看该作者

回复 #3 yhz6708 的帖子

先用脚本处理一下。

论坛徽章:
0
5 [报告]
发表于 2009-08-06 08:54 |只看该作者

回复 #4 我是DBA 的帖子

楼上高手能不能详细说明一下?

论坛徽章:
1
15-16赛季CBA联赛之江苏
日期:2017-04-05 11:23:15
6 [报告]
发表于 2009-08-06 09:03 |只看该作者
原帖由 yhz6708 于 2009-8-5 18:15 发表
可是,如果删除了唯一性索引,在倒入完之后,就再也建立不起唯一性索引了呀。

怎么会建不起呢?倒入完之后,可以先将重复值删除然后再建!

论坛徽章:
0
7 [报告]
发表于 2009-08-06 09:26 |只看该作者

回复 #5 yhz6708 的帖子

你给段示例数据
然后告诉我重复的数据要改成什么样的

论坛徽章:
11
金牛座
日期:2015-03-19 16:56:22数据库技术版块每日发帖之星
日期:2016-08-02 06:20:00数据库技术版块每日发帖之星
日期:2016-04-24 06:20:00数据库技术版块每日发帖之星
日期:2016-04-13 06:20:00IT运维版块每日发帖之星
日期:2016-04-13 06:20:00数据库技术版块每日发帖之星
日期:2016-02-03 06:20:00数据库技术版块每日发帖之星
日期:2015-08-06 06:20:00季节之章:春
日期:2015-03-27 15:54:57羊年新春福章
日期:2015-03-27 15:54:37戌狗
日期:2015-03-19 16:56:41数据库技术版块每日发帖之星
日期:2016-08-18 06:20:00
8 [报告]
发表于 2009-08-06 11:16 |只看该作者
用脚本处理下吧~~
从load的文件里读取有唯一索引的列..做个delete操作sql,用这个sql删除现表中的相同记录,再导数据..

论坛徽章:
0
9 [报告]
发表于 2009-08-07 08:18 |只看该作者

回复 #1 yhz6708 的帖子

在导入数据前执行下列SQL语句:
SET INDEXES idx_x1 FILTERING;
这样informix数据库就会把那些重复数据过滤掉

或START VIOLATIONS TABLE FOR tab_name
USING vio_tabname,diag_tabname; 这样数据库就会把那些重复的数据记录在vio_tabname 表中,你可以把这些记录load出来,在针对这些记录进行处理

[ 本帖最后由 koolkite 于 2009-8-7 08:23 编辑 ]

论坛徽章:
0
10 [报告]
发表于 2009-08-07 10:30 |只看该作者
多谢楼上各位高手的帮助,但由于我需要处理的表多达几十个,而且记录数非常大,单表或单文本文件大小可达1G左右,我现在在mysql数据库中,已占用空间20G以上,所以处理出来有一定困难。我想达到的目的其实也简单,先举个数据例子,请各位高手帮忙分析一下。
比如一表,编号为唯一索引.
编号|姓名|年龄|登记日期|销记日期|
001|张三| 30|2009/05/01|1899/12/31|
002|李四|32|2009/01/08|2009/07/05|
005|宋江|45|2009/01/05|2009/08/05|

现在有一增量数据文件a.txt,文件内容如下:
001|张三|35|2009/05/01|2009/07/28|
002|王麻子|38|2008/02/09|1899/12/31|
003|林冲|45|2009/07/28|1899/12/31|

想达到的目的是,对于编号(唯一索引)相同的记录,使用文件中的记录换掉原表中的记录,对于文件中编号在原表中没有的,则直接插入表中.得到的结果是以下的内容:
001|张三|35|2009/05/01|2009/07/28|
002|王麻子|38|2008/02/09|1899/12/31|
003|林冲|45|2009/07/28|1899/12/31|
005|宋江|45|2009/01/05|2009/08/05|

[ 本帖最后由 yhz6708 于 2009-8-9 11:30 编辑 ]
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

  

北京盛拓优讯信息技术有限公司. 版权所有 京ICP备16024965号-6 北京市公安局海淀分局网监中心备案编号:11010802020122 niuxiaotong@pcpop.com 17352615567
未成年举报专区
中国互联网协会会员  联系我们:huangweiwei@itpub.net
感谢所有关心和支持过ChinaUnix的朋友们 转载本站内容请注明原作者名及出处

清除 Cookies - ChinaUnix - Archiver - WAP - TOP