有奖讨论： ETL 工具 VS SQL 代码

iamxmy

ETL 工具开发效率高、便于后期维护。SQL代码灵活，如果开发人员编码水平过硬，数据处理效率高

wangkxxe

表讨论了哦，具体问题具体分析哦

starhot

为何一定是非此即彼呢？ 我做过的几个项目都是两者合用，各取所长！

zxcv88888

个人感觉吧大家轻喷， 从以前工作的中来总结出来一些东西吧   
   etl 和sql是完全不同的方面，
   etl正如其名一样，当然大家也可以说elt 呼呼，更多的是清洗装载过程，当然你也可以说我可以直接用SQL创建呀，
   etl更多的是一种方案，一个数据仓库上数据来源清洗加载的过程，拿我们以前举例，可以定制自己 的触发机制以及通过系统 的子线程 来分配任务运行机制，
当然你也可以用SQL+其它语言来解决 。
  如果说不同的方面，我个人感觉SQL只是一种语言，一种操作数据的方式，而ETL更多的是一种方案，一种数据加工挖掘的方案。
说的比较乱，大家轻喷，因为本来接触的都是原来底层PERL写的ETL整个过程，比较侧身TD 的AUTOMATION

unik-v

在实际项目中都是二者相结合的，一般情况下，能用etl工具就尽量用工具开发，便于后期维护。到对于一些复杂的逻辑还是用sql实现比较好，毕竟比较灵活

peep521

连etl工具都没用过的飘过，不防大家给介绍下都有什么etl工具

minWe

我喜欢写SQL赶脚有成就感

cytwyking

ETL工具
开发效率上，要好很多，无论是异构源数据，清洗规则，还是transforming，用熟了很快；
后期维护，那是一个天一个地（碰上一个习惯不好的coder，看代码真要看到吐血的...）；
至于说功能，应该也差不到哪去，曾用工具实现了线性拟合，没觉得代码强在哪

yiwenvtech

zhangfengh 发表于 2012-2-27 13:18
简单的使用etl工具，复杂的自己规划写sql

同意

songmiaoyhm

认同大家的观点：
1.  工具容易规范化，易于维护；
2. 工具有自身的特有优势，比如各个点的并行处理。CDC、行列转换、SCD的简单设置就可实现。元数据管理等；
3. 工具能实现的基本SQL也能实现，有时可能要写复杂SQL而已；
4. SQL在处理复杂逻辑时灵活性更高，优势明细；
5. SQL的不易维护和管理。