如何删除db2中数据表中的重复行?

jxp2002

如何删除db2中数据表中的重复行?

silverdust

重复到什么程度？是所有字段的值都相同嘛？
比较通用的方法
1、把重复的记录插入到一个临时表里
2、把原表中重复记录删除
3、把临时表里的重复记录用group by的方式取出一条插回到原表

jxp2002

原帖由 silverdust 于 2006-5-29 16:10 发表
重复到什么程度？是所有字段的值都相同嘛？
比较通用的方法
1、把重复的记录插入到一个临时表里
2、把原表中重复记录删除
3、把临时表里的重复记录用group by的方式取出一条插回到原表

1.是所有字段重复!
2.由于数据有几万行,比较麻烦

第2如何控制以后导入数据不出现重复行呢，关键没有定义好!

silverdust

如果所有字段都重复的话，你就按我说的步骤做吧
几万行的数据不算多啊，数据库处理起来很快的

第2如何控制以后导入数据不出现重复行呢，关键没有定义好!
－－－－－－－－－－－－－－－－－－－－－－－－－－－－－
这句话什么意思，没看懂

jxp2002

原帖由 silverdust 于 2006-5-31 09:28 发表
如果所有字段都重复的话，你就按我说的步骤做吧
几万行的数据不算多啊，数据库处理起来很快的

第2如何控制以后导入数据不出现重复行呢，关键没有定义好!
－－－－－－－－－－－－－－－－－－－－－－－－ ...

有N多行重复2行或3行的数据啊，怎么弄呢，太麻烦了，大哥!
你说的方法不懂!!!

lizhuo

加上distinct参数，把数据select出来导入到临时表里，清空表，然后从临时表恢复数据

silverdust

正好我这里有个例子，你看看吧
tmp1和tmp2结构相同，register.txt是包含重复数据的文件

echo "建临时表1\n"
db2 "create table tmp1 \
(customer_id char(20),register_amount decimal(16,2))"

echo "建临时表2\n"
db2 "create table tmp2 \
(customer_id char(20),register_amount decimal(16,2))"

echo "将数据文件装入临时表1\n"
db2 "import from ${filepath}/register.txt of del \
modified by coldel| insert into tmp1"

echo "将重复数据插入临时表2\n"
db2 "insert into tmp2 \
select * from tmp1 where \
customer_id in (select customer_id from \
tmp1 group by customer_id having count(*)>1)"

echo "删除临时表1中的重复数据\n"
db2 "delete from tmp1 \
where customer_id in \
(select customer_id from tmp1 \
group by customer_id having count(*)>1)"

echo "取重复数据中的1条记录插入临时表1\n"
db2 "insert into tmp1 \
select customer_id,max(register_amount) \
from tmp2 group by \
customer_id"

[ 本帖最后由 silverdust 于 2006-6-2 13:06 编辑 ]

smithy

很有帮助啊

大梦

嗯！有道理！