(话题讨论) 谈谈你对各种分布式处理系统认识及 他们的优势和短处, 同时说一下适用场景

wangkxxe

wangfans 发表于 2012-1-6 11:07
可妹别置顶了，置顶了反而没人气啊

不是我置顶的，是童馨MM弄的，我和她说下去，你们继续 ……

shenyinghe

hadoop加快处理速度可以有助于索引数据更新速度提升，但hadoop设计本身还是作为非实时的系统。
如果，hadoop真快到可以应付实时系统的要求，搜索引擎似乎也就不需要用它处理数据建立反向索引而可以直接用hadoop返回搜索结果了，但就现今储存设备的速度而言，这是软件不可达的能力吧。

实时交互系统数据存取肯定非常依赖服务器内存，比如我的腾讯微博只能直接查看到20多页的消息，很显然老的数据被“放弃”掉了，更久以前的消息可以通过搜索、查看自己的广播等等途径看到，
可以猜测到新、老数据是从不同地方获取的，新的数据访问量大需要放在内存里，老的数据访问量小可以放在硬盘里提供另外一个接口来访问。

zxf261

fourinone和hadoop对比
fourinone优缺点
体积小，配置简单，搭建简易，N*N，支持单机并行，也支持多机并行，多机多实例并行，支持跨平台，windows支持良好。
hadoop优缺点
体积比较大，配置和搭建比较复杂，1*N，不支持单机并行，只支持多机单实例并行，多倾向于支持linux，Windows支持不佳。
总的来说Hadoop并不是为了追求一个并行计算的框架而设计，提供快捷和灵活的计算方式去服务各种计算场景， 它更多的是一个分布式文件系统，提供文件数据的存储和查询，它的map/reduce更倾向于提供并行计算方式进行文件数据查询。而fourinone相反。

xgghxkhuang

今天参加活动，听td的说过，他们收购了askdata 里面有类似的东西，基于mapreduce的。

paypal

楼主，学习HADOOP能混到饭吃么？有机会学习HADOOP么？哪些行业HADOOP？

主要还是应用范围不够广，只有有限的大企业才需要这玩意

btw：可妹的奖励不够给力

liyingyue

可妹！！   

童馨

感谢大家参与itpub话题讨论活动！！
奖励已发，请大家注意查收！！