【有奖讨论一期】Hadoop VS Teradata

Kevin_Farmer

扑通

wangkxxe

粉丝去把TD bynet专利搞出来啊

1024吧，好像这么个说法，具体多少个节点上限偶不是很清楚，但是每个节点下面有N多AMP，不过谁舍得上那么多呢
根据自己的情况定数据库方案，然后再根据情况定数据方案，用teradata存储n年都不看一眼的数据，岂不是太浪费啊

wangkxxe

TD 50PB数据,1024节点

luyi6101

TD,我觉得还是属于传统bi阵营，hadoop是新贵，不久的将来，一些新的领域，如互联网，移动在线会被hadoop统治；
传统行业，金融，通信部分行业要求数据准确大于及时的要求还是绝定了传统bi的一席之地。

wangfans

wangkxxe 发表于 2011-12-20 13:13
粉丝去把TD bynet专利搞出来啊

1024吧，好像有好几种说法，具体多少个节点上限偶不是很清楚，但是每个节 ...

不得不所bynet是TD的牛逼之处，我哪里有那个本事

其实关于数据存储多长时间并不是依赖于这个平台，而是依赖于项目。有的项目要求archive 5的数据，那5年前的数据其实可以cut掉的。。当然有的项目要所有的历史数据，那不但是Terdata有这方面的成本，任何平台都会有硬件浪费的。

wangkxxe

luyi6101 发表于 2011-12-20 13:15
TD,我觉得还是属于传统bi阵营，hadoop是新贵，不久的将来，一些新的领域，如互联网，移动在线会被hadoop统治 ...

表示赞同，呵呵

honggazi

我不了解这个，所以去百度查了一下，
一个分布式系统基础架构，由Apache基金会开发。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力高速运算和存储。Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS。HDFS有着高容错性的特点，并且设计用来部署在低廉的（low-cost）硬件上。而且它提供高传输率（high throughput）来访问应用程序的数据，适合那些有着超大数据集（large data set）的应用程序。HDFS放宽了（relax）POSIX的要求（requirements）这样可以流的形式访问（streaming access）文件系统中的数据。

luyi6101

TD的节点概念其实只是用到了分布式的部分思想，分而治之，这其实在很多ETL工具中都已经实现，如datastage，informatica的pipe，partition的概念，但仅仅是这个还称不上分布式。所以他还是属于传统阵营。

luyi6101

wangkxxe 发表于 2011-12-20 12:56
HADOOP是电商、互联网的发展趋势啊，其他行业的，也许就不适合了，比如业务逻辑过于复杂 ……

是的，这是hadoop的瓶颈之一，逻辑过于复杂，关系在底层不好处理，而且现在hadoop底层数据库多采用列式数据库，大规模的关系运算相对于传统数据库来说，没有丝毫优势。再加上分布式平台过多的代码重构，对逻辑关系的重写造成维护复杂，这个也是抗不住的。

宋夕夕

Teradata在数据库分析领域不断推陈出新，但在结构化数据、半结构化数据和大部分非结构化数据领域几乎没有很大成果。这也就是为什么该公司要收购Aster Data；一家提供SQL-MapReduce框架的公司。MapReduce处理拥有广泛的市场需求，因为存在着大量的互联网点击数据、传感数据和社交媒体内容！Hadoop是一个开放源码的分布式数据处理系统架构，主要面向存储和处理结构化、半结构化或非结构化、真正意义上的大数据（通常成百上千的TB甚至PB级别数据）应用。网络点击和社交媒体分析应用，正在极大地推动应用需求。Hadoop提供的MapReduce（和其他一些环境）是处理大数据集理想解决方案！以上一个网友发表的，个人感觉hadoop以后的发展空间会越来越大，其中之一就是他可以在一些低成本的意见上保证数据的存储和数据分析方案，这点我看着比较好！由于这个是思路，就像现在的MYSQL也一样，有免费的慢慢扩大化，进一步发展出自己的产品和服务！