|
最初由 ami 发布
[B]经典!
我也来谈一下对于ETL工具的使用:
曾经短暂的用过ETL工具,速度慢的难于接受,也许是我还没有掌握方法,但始终不敢相信拖拉出来的东西,在性能上可以跟自己多方优化过的代码,以及SQL LOADER等数据库提供的专门工具相提并论。
我们在ETL这一块的做法是:把ETL任务细分成很多小任务,对每个小任务可以选择SQL LOADER,或是C程序,或是存储过程来实现,然后自己编写了带监控界面的工作流程序进行控制;每个月150多G的数据,完成比较复杂的ETL流程,花费2天时间。
也请大家来交流一下,谢谢! [/B]
强啊,向前辈学习! |
|