zenglj 发表于 2009-01-08 20:49

请教:datastage Transformer执行超级慢

请教, 我刚刚接触DATASTAGE, 从一个文本文件加载数据到数据库, 全量入库, 源文件大概120字段,源文件定长,无分隔符,目标36个字段,通过Transformer过滤转换字段, 目标库先清空了的。我执行速度超级猛,测试发现数据记录一旦超过1800,急卡住了, 在读文件就卡住了,哎呀,不知道怎么回事。
还有写入模式不能采用 LOAD,TRUNCATA的模式,所以就采用了UPINESRT,
每个字段都用了TRIM(),
有没有大侠救救呢,急
非常感激!!

RNW 发表于 2009-01-13 09:07

不熟悉DATASTAGE,帮顶

readxlp 发表于 2009-01-15 17:02

你这个方式加载有问题,与数据库交互太多,用Update模式本身也慢,能否把你的文本文件load到一个临时表,之后进行你规则处理
记住原则,尽可能少的与数据库交换

andy心晴 发表于 2009-01-17 14:08

通过代理键,判别insert or update.
datstage ee or se?

Stout 发表于 2009-03-04 15:19

看看运行环境

Stout 发表于 2009-03-11 16:41

运行文件多了
页: [1]
查看完整版本: 请教:datastage Transformer执行超级慢