ITPUB论坛－专业的IT技术社区

登录 注册
ITPUB论坛－专业的IT技术社区»论坛 › ≡ 大数据与数据库 ≡ › 大数据 › 话题讨论：高手接招 破解Hadoop 技术内幕
1234下一页
返回列表 发新帖
楼主: pipihappy8888
收藏 | 打印 上一主题 下一主题

话题讨论：高手接招 破解Hadoop 技术内幕

[复制链接]
liuhuoxingkong
论坛徽章:
82
2013系统架构师大会纪念章 日期:2015-07-31 17:48:20探花 日期:2015-08-17 14:58:32榜眼 日期:2015-08-17 14:59:28进士 日期:2015-08-17 15:00:55举人 日期:2015-08-17 15:00:55秀才 日期:2015-08-19 09:36:37秀才 日期:2015-08-20 08:50:41嫦娥 日期:2015-08-21 09:11:54秀才 日期:2015-08-24 09:48:07进士 日期:2015-08-17 14:58:18
11#
发表于 2014-4-22 12:48 | 只看该作者
遗忘的deny 发表于 2014-4-22 12:19
皮皮就是高手啊，哈哈，和大家做个分享吧

支持

使用道具 举报

回复
daizyflower
论坛徽章:
249
Jeep 日期:2013-09-04 19:17:57Jeep 日期:2013-10-08 09:46:02Jeep 日期:2013-10-08 16:38:27Jeep 日期:2013-11-22 14:53:46Jeep 日期:2013-11-08 23:59:45Jeep 日期:2013-11-22 17:15:17Jeep 日期:2013-11-22 17:15:17Jeep 日期:2013-11-17 09:59:04季节之章：夏 日期:2015-01-28 14:58:51季节之章：春 日期:2014-12-25 16:20:50
12#
发表于 2014-4-22 16:10 | 只看该作者
坐等大师分享

使用道具 举报

回复
pipihappy8888
论坛徽章:
127
茶鸡蛋 日期:2012-01-16 14:24:41鲜花蛋 日期:2012-06-06 14:48:18双黄蛋 日期:2013-01-07 21:07:482013年新春福章 日期:2013-02-25 14:51:24优秀写手 日期:2013-12-18 09:29:082014年新春福章 日期:2014-02-18 16:44:08马上有对象 日期:2014-02-18 16:44:08马上加薪 日期:2014-03-18 09:57:11马上有车 日期:2014-03-20 16:13:24马上有房 日期:2014-03-20 16:14:11
13#
 楼主| 发表于 2014-4-22 16:38 | 只看该作者
以MapReduce为核心的软件栈中，资源管理系统YARN是可插拔替换的，比如可以拿Mesos替换掉YARN。此外。MapReduce的接口发生改变了，所有的资源管系统都得跟着改变；但以YARN为核心的软件栈则不同，所有框架都需要实现YARN定义的对外接口以运行在YARN上。也就是说，Hadoop 2.0 能够打造一个以YARN为核心的生态系统。

使用道具 举报

回复
qingduo04
论坛徽章:
111
ITPUB9周年纪念徽章 日期:2010-10-08 09:34:03马上有房 日期:2014-02-18 16:42:02马上有车 日期:2014-03-20 10:09:22马上有钱 日期:2014-03-20 15:53:11马上有车 日期:2014-03-20 16:13:24马上有房 日期:2014-03-20 16:14:11马上有钱 日期:2014-03-20 16:14:11马上有对象 日期:2014-03-20 16:14:11马上加薪 日期:2014-03-20 16:14:11技术图书徽章 日期:2014-03-27 09:30:56
14#
发表于 2014-4-23 07:08 | 只看该作者
路过支持...........

使用道具 举报

回复
634452186
求职 : 数据库开发
论坛徽章:
2
马上有对象 日期:2014-05-14 14:43:33马上有钱 日期:2014-05-22 10:18:41
15#
发表于 2014-4-23 08:03 | 只看该作者
3.相比于将Storm部署到一个独立的集群中，Storm On YARN可以带来哪些好处？

(1)弹性计算资源 将Storm运行到YARN上后，Storm可与其它应用程序（MapReduce批处理应用程序、Spark、Hbase等）共享整个集群中的资源，这样，当Storm负载骤增时，可动态为它增加计算资源，而当负载减小时，可释放部分资源，从而将这些资源暂时分配给负载更重的其它应用。

(2) 共享底层存储
Storm可与运行在YARN上的其它框架共享底层的HDFS存储系统，可避免多个集群带来的维护成本，同时避免数据跨集群拷贝带来的网络开销和时间延迟。

(3)支持多版本
可同时将多个Storm版本运行YARN上，避免一个版本一个集群带来的维护成本。

使用道具 举报

回复
wkf46525
论坛徽章:
0
16#
发表于 2014-4-23 15:04 | 只看该作者
学习hadoop不久，还没有开始研究YARN

使用道具 举报

回复
crakme
论坛徽章:
11
奥运纪念徽章 日期:2012-11-28 09:37:30马上加薪 日期:2014-03-20 16:14:11马上有对象 日期:2014-03-20 16:14:11马上有钱 日期:2014-03-20 16:14:11马上有房 日期:2014-03-20 16:14:11马上有车 日期:2014-03-20 16:13:24ITPUB社区12周年站庆徽章 日期:2013-10-17 13:56:39ITPUB社区12周年站庆徽章 日期:2013-10-08 17:44:422013年新春福章 日期:2013-02-25 14:51:24ITPUB官方微博粉丝徽章 日期:2012-12-11 17:06:47
17#
发表于 2014-4-23 22:11 | 只看该作者
不熟悉YARN呀   求大师分享

使用道具 举报

回复
neosun
论坛徽章:
2
马上有钱 日期:2014-12-18 22:44:57狮子座 日期:2015-11-23 23:23:05
18#
发表于 2014-4-23 23:23 | 只看该作者
对这个话题感兴趣，拿小板凳坐下来等待高手过招！

使用道具 举报

回复
qingduo04
论坛徽章:
111
ITPUB9周年纪念徽章 日期:2010-10-08 09:34:03马上有房 日期:2014-02-18 16:42:02马上有车 日期:2014-03-20 10:09:22马上有钱 日期:2014-03-20 15:53:11马上有车 日期:2014-03-20 16:13:24马上有房 日期:2014-03-20 16:14:11马上有钱 日期:2014-03-20 16:14:11马上有对象 日期:2014-03-20 16:14:11马上加薪 日期:2014-03-20 16:14:11技术图书徽章 日期:2014-03-27 09:30:56
19#
发表于 2014-4-24 07:06 | 只看该作者
技术细活,了解较少，求大师们指点..........

使用道具 举报

回复
xuhao167
论坛徽章:
23
兰博基尼 日期:2015-04-20 18:33:262014年世界杯参赛球队: 瑞士 日期:2015-04-20 18:33:262014年世界杯参赛球队: 洪都拉斯 日期:2015-04-20 18:33:262014年世界杯参赛球队: 阿尔及利亚 日期:2015-04-20 18:33:26马上有钱 日期:2015-04-20 18:33:26马上有对象 日期:2015-04-20 18:33:26沸羊羊 日期:2015-04-20 18:33:26慢羊羊 日期:2015-04-20 18:33:26喜羊羊 日期:2015-04-21 10:00:44itpub13周年纪念徽章 日期:2015-05-07 14:11:42
20#
发表于 2014-4-24 16:20 | 只看该作者
hadoop趋势所趋啊，小屌们紧跟形势，可以多赚取写米米啊

使用道具 举报

回复

1234下一页
返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

TOP技术积分榜 社区积分榜 徽章 团队 统计 知识索引树 积分竞拍 文本模式 帮助
  ITPUB首页 | ITPUB论坛 | 数据库技术 | 企业信息化 | 开发技术 | 微软技术 | 软件工程与项目管理 | IBM技术园地 | 行业纵向讨论 | IT招聘 | IT文档
  ChinaUnix | ChinaUnix博客 | ChinaUnix论坛
CopyRight 1999-2011 itpub.net All Right Reserved. 北京盛拓优讯信息技术有限公司版权所有　联系我们 未成年人举报专区　
京ICP备16024965号-8 　北京市公安局海淀分局网监中心备案编号：11010802021510　广播电视节目制作经营许可证：编号（京）字第1149号   
快速回复 返回顶部 返回列表