Chinaunix

标题: load问题 [打印本页]

作者: coolmax    时间: 2010-03-11 11:57
标题: load问题
load了一个很大的文件,结果里面有几条脏数据(数据类型和数据库字段类型不匹配),load的时候能不能跳过这些数据啊?{:2_166:}
作者: rahcrahc    时间: 2010-03-11 15:19
好像不行,我的方法是先用全varchar类型的字段构建一张临时表,先将数据load进临时表中。然后根据在load真正的目标表,根据出错信息在临时表中定位相应的记录。比较笨的方法呵呵,尝试过load 1个g的csv数据。
作者: coolmax    时间: 2010-03-15 08:21
我的是etl过程中漏掉了一些规则,导致以上的问题的,并且原始文件丢失了。数据库端的话,貌似只能用rahcrahc 的方法了。




欢迎光临 Chinaunix (http://bbs.chinaunix.net/) Powered by Discuz! X3.2