ITPUB论坛－专业的IT技术社区

登录 注册
ITPUB论坛－专业的IT技术社区»论坛 › ≡ 大数据与数据库 ≡ › 大数据 › 【大话IT】Spark能否取代Hadoop？
1234下一页
返回列表 发新帖
楼主: pipihappy8888
收藏 | 打印 上一主题 下一主题

【大话IT】Spark能否取代Hadoop？

[复制链接]
xgghxkhuang
论坛徽章:
57
SQL极客 日期:2013-12-09 14:13:35秀才 日期:2016-01-21 13:42:39秀才 日期:2016-01-13 12:14:26SQL大赛参与纪念 日期:2016-01-13 10:32:19SQL数据库编程大师 日期:2016-01-13 10:30:43秀才 日期:2015-12-14 14:47:54秀才 日期:2015-10-19 15:50:392015年新春福章 日期:2015-03-06 11:58:18懒羊羊 日期:2015-03-04 14:52:11优秀写手 日期:2014-11-08 06:00:14
11#
发表于 2014-11-29 10:55 | 只看该作者
2完全且很大程度上可以，由于spark更倾向于内存计算，所以最快比Hadoop快100倍

使用道具 举报

回复
xgghxkhuang
论坛徽章:
57
SQL极客 日期:2013-12-09 14:13:35秀才 日期:2016-01-21 13:42:39秀才 日期:2016-01-13 12:14:26SQL大赛参与纪念 日期:2016-01-13 10:32:19SQL数据库编程大师 日期:2016-01-13 10:30:43秀才 日期:2015-12-14 14:47:54秀才 日期:2015-10-19 15:50:392015年新春福章 日期:2015-03-06 11:58:18懒羊羊 日期:2015-03-04 14:52:11优秀写手 日期:2014-11-08 06:00:14
12#
发表于 2014-11-29 10:55 | 只看该作者
3高性能计算，数据挖掘

使用道具 举报

回复
xgghxkhuang
论坛徽章:
57
SQL极客 日期:2013-12-09 14:13:35秀才 日期:2016-01-21 13:42:39秀才 日期:2016-01-13 12:14:26SQL大赛参与纪念 日期:2016-01-13 10:32:19SQL数据库编程大师 日期:2016-01-13 10:30:43秀才 日期:2015-12-14 14:47:54秀才 日期:2015-10-19 15:50:392015年新春福章 日期:2015-03-06 11:58:18懒羊羊 日期:2015-03-04 14:52:11优秀写手 日期:2014-11-08 06:00:14
13#
发表于 2014-11-29 11:02 | 只看该作者
8spark毕竟比较新，得经过时间完善稳定它的版本，Hadoop和yarn已经成熟了，可以考虑在生产用，但是会用商业的版本，这样可以安心的在生产上用。

使用道具 举报

回复
i2235932666
论坛徽章:
27
2014年新春福章 日期:2014-02-18 16:50:09秀才 日期:2015-06-25 15:39:28秀才 日期:2015-06-29 15:26:52秀才 日期:2015-07-03 17:00:53秀才 日期:2015-07-14 09:44:30金牛座 日期:2015-07-21 14:01:36秀才 日期:2015-09-14 10:08:30秀才 日期:2016-02-18 09:24:18秀才 日期:2016-02-18 10:08:02举人 日期:2016-02-24 17:33:17
14#
发表于 2014-11-30 16:30 | 只看该作者
我觉得不会，spark更有可能会配合hadoop框架，而不是取代

使用道具 举报

回复
smilesu
论坛徽章:
14
秀才 日期:2016-11-25 16:52:36技术图书徽章 日期:2016-12-20 18:15:09秀才 日期:2016-12-20 18:14:55秀才 日期:2016-12-20 18:14:55秀才 日期:2016-12-20 18:14:55秀才 日期:2016-12-20 18:14:55秀才 日期:2016-12-20 18:14:47罗罗诺亚·索隆 日期:2016-12-12 20:17:20秀才 日期:2016-12-05 11:16:40技术图书徽章 日期:2016-12-05 11:16:40
15#
发表于 2014-12-1 09:02 | 只看该作者
受益了。。

使用道具 举报

回复
ole_ole_ole
论坛徽章:
165
2010广州亚运会纪念徽章:篮球 日期:2010-11-26 22:45:53itpub13周年纪念徽章 日期:2014-10-09 22:09:03itpub13周年纪念徽章 日期:2014-10-09 22:07:43itpub13周年纪念徽章 日期:2014-10-09 22:07:43itpub13周年纪念徽章 日期:2014-10-09 22:09:56itpub13周年纪念徽章 日期:2014-10-09 22:09:56itpub13周年纪念徽章 日期:2014-10-09 22:09:32itpub13周年纪念徽章 日期:2014-10-09 22:09:32itpub13周年纪念徽章 日期:2014-10-08 15:16:50itpub13周年纪念徽章 日期:2014-10-08 15:16:50
16#
发表于 2014-12-1 10:07 | 只看该作者
1.Spark为啥这么火？Spark框架采用的编程语言是什么？是否容易上手？
Spark 大数据的处理速度快，开发的速度比MR简单高效，很多企业都在用Spark取代原先用MR开发的程序。 编程语言scala，有java基础容易上手

使用道具 举报

回复
mchdba
论坛徽章:
27
优秀写手 日期:2013-12-18 09:29:09ITPUB季度 技术新星 日期:2012-08-15 14:50:13嫦娥 日期:2013-03-04 09:47:05数据库板块每日发贴之星 日期:2011-09-08 01:01:01数据库板块每日发贴之星 日期:2011-09-11 01:01:01数据库板块每日发贴之星 日期:2011-09-10 01:01:02数据库板块每日发贴之星 日期:2011-09-09 01:01:01ITPUB十周年纪念徽章 日期:2011-11-01 16:26:59ITPUB 11周年纪念徽章 日期:2012-09-28 17:34:422013年新春福章 日期:2013-03-04 09:50:49
17#
发表于 2014-12-1 20:37 | 只看该作者
我觉得spark比较符合中小型企业。

使用道具 举报

回复
wmxcn2000
论坛徽章:
223
2010新春纪念徽章 日期:2010-03-01 11:20:51ITPUB元老 日期:2019-04-25 13:46:07至尊黑钻 日期:2015-08-13 13:38:12至尊黑钻 日期:2015-02-15 09:47:472015年中国系统架构师大会纪念徽章 日期:2015-07-31 17:48:20管理团队2007贡献徽章 日期:2015-01-19 09:48:272015中国数据库技术大会纪念徽章 日期:2015-05-15 14:08:23海蓝宝石 日期:2015-02-03 10:23:39红宝石 日期:2015-02-03 10:26:04会员2007贡献徽章 日期:2015-02-03 10:26:41
18#
发表于 2014-12-2 11:34 | 只看该作者
这个不好说，取代的可能性还是很高的。

使用道具 举报

回复
perrin1
论坛徽章:
0
19#
发表于 2014-12-2 11:41 | 只看该作者
这个很难说哦

使用道具 举报

回复
xuexiaogang
论坛徽章:
40
2014年新春福章 日期:2014-02-18 16:42:02秀才 日期:2015-12-18 09:28:57秀才 日期:2015-12-14 14:51:162015年中国系统架构师大会纪念徽章 日期:2015-09-16 12:54:392014系统架构师大会纪念章 日期:2015-09-16 12:54:392013系统架构师大会纪念章 日期:2015-09-16 12:54:392012系统架构师大会纪念章 日期:2015-09-16 12:54:392011系统架构师大会纪念章 日期:2015-09-16 12:54:392010系统架构师大会纪念 日期:2015-09-16 12:54:39秀才 日期:2015-12-25 15:31:10
20#
发表于 2014-12-3 21:37 | 只看该作者
lidrema 发表于 2014-11-27 22:42
1.Spark为啥这么火？Spark框架采用的编程语言是什么？是否容易上手？
      Spark是基于内存的迭代计算框架 ...

这个回复的好

使用道具 举报

回复

1234下一页
返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

TOP技术积分榜 社区积分榜 徽章 团队 统计 知识索引树 积分竞拍 文本模式 帮助
  ITPUB首页 | ITPUB论坛 | 数据库技术 | 企业信息化 | 开发技术 | 微软技术 | 软件工程与项目管理 | IBM技术园地 | 行业纵向讨论 | IT招聘 | IT文档
  ChinaUnix | ChinaUnix博客 | ChinaUnix论坛
CopyRight 1999-2011 itpub.net All Right Reserved. 北京盛拓优讯信息技术有限公司版权所有　联系我们 未成年人举报专区　
京ICP备16024965号-8 　北京市公安局海淀分局网监中心备案编号：11010802021510　广播电视节目制作经营许可证：编号（京）字第1149号   
快速回复 返回顶部 返回列表