请教--DataStage中对于大数据量的表如何处理

在项目中遇见的业务表数据量都比较大,就算是做增量抽取,数据量依然很大,JOB运行效率不是很高,应该如何去对大批量的数据进行处理才能提高JOB的运行效率?需要了解在DS中如何处理,数据库中的优化本人已经比较了解了。请教各位高手指点指点,小弟感激不尽!

作者: zixiao86   发布时间: 2011-06-02

ds只是个工具,抛开工具,想想可以自己处理,再把这种处理方式转化为工具

作者: piliskys   发布时间: 2011-06-03