yhz6708 发表于 2009-08-05 15:28

请教一个关于informix中处理增量数据的问题。

我使用的是linux下的informix ids 10 数据库,现在有数据文件需要load到表中,但表有唯一性索引,而且必须是唯一性索引。想达到一个目的,就是load过程中,如果遇到重复数据,则使用文件中的记录替换到原来表中的记录,请问如何操作?
在MYSQL里面,从文件载入数据时,使用:load local data infile .......
这里面可以使用一个replace,就达到了那个目的。
但是在informix里面,不知道有没有这样的功能。
请高手们指教一下。

yunzhongyue 发表于 2009-08-05 16:43

好像没有吧。。。
你可以先把索引去掉,处理过重复值后再加上。

yhz6708 发表于 2009-08-05 18:15

回复 #2 yunzhongyue 的帖子

可是,如果删除了唯一性索引,在倒入完之后,就再也建立不起唯一性索引了呀。

我是DBA 发表于 2009-08-06 08:49

回复 #3 yhz6708 的帖子

先用脚本处理一下。

yhz6708 发表于 2009-08-06 08:54

回复 #4 我是DBA 的帖子

楼上高手能不能详细说明一下?

yunzhongyue 发表于 2009-08-06 09:03

原帖由 yhz6708 于 2009-8-5 18:15 发表 http://bbs2.chinaunix.net/images/common/back.gif
可是,如果删除了唯一性索引,在倒入完之后,就再也建立不起唯一性索引了呀。
怎么会建不起呢?倒入完之后,可以先将重复值删除然后再建!

我是DBA 发表于 2009-08-06 09:26

回复 #5 yhz6708 的帖子

你给段示例数据
然后告诉我重复的数据要改成什么样的

liaosnet 发表于 2009-08-06 11:16

用脚本处理下吧~~
从load的文件里读取有唯一索引的列..做个delete操作sql,用这个sql删除现表中的相同记录,再导数据..

koolkite 发表于 2009-08-07 08:18

回复 #1 yhz6708 的帖子

在导入数据前执行下列SQL语句:
SET INDEXES idx_x1 FILTERING;
这样informix数据库就会把那些重复数据过滤掉

或START VIOLATIONS TABLE FOR tab_name
USING vio_tabname,diag_tabname; 这样数据库就会把那些重复的数据记录在vio_tabname 表中,你可以把这些记录load出来,在针对这些记录进行处理

[ 本帖最后由 koolkite 于 2009-8-7 08:23 编辑 ]

yhz6708 发表于 2009-08-07 10:30

多谢楼上各位高手的帮助,但由于我需要处理的表多达几十个,而且记录数非常大,单表或单文本文件大小可达1G左右,我现在在mysql数据库中,已占用空间20G以上,所以处理出来有一定困难。我想达到的目的其实也简单,先举个数据例子,请各位高手帮忙分析一下。
比如一表,编号为唯一索引.
编号|姓名|年龄|登记日期|销记日期|
001|张三| 30|2009/05/01|1899/12/31|
002|李四|32|2009/01/08|2009/07/05|
005|宋江|45|2009/01/05|2009/08/05|

现在有一增量数据文件a.txt,文件内容如下:
001|张三|35|2009/05/01|2009/07/28|
002|王麻子|38|2008/02/09|1899/12/31|
003|林冲|45|2009/07/28|1899/12/31|

想达到的目的是,对于编号(唯一索引)相同的记录,使用文件中的记录换掉原表中的记录,对于文件中编号在原表中没有的,则直接插入表中.得到的结果是以下的内容:
001|张三|35|2009/05/01|2009/07/28|
002|王麻子|38|2008/02/09|1899/12/31|
003|林冲|45|2009/07/28|1899/12/31|
005|宋江|45|2009/01/05|2009/08/05|

[ 本帖最后由 yhz6708 于 2009-8-9 11:30 编辑 ]
页: [1] 2
查看完整版本: 请教一个关于informix中处理增量数据的问题。