楼主: 小尾巴鱼

从数据中挖掘宝藏,你真地准备好了吗?

[复制链接]
论坛徽章:
176
20周年集字徽章-20	
日期:2020-10-28 14:31:21ITPUB十周年纪念徽章
日期:2011-11-01 16:24:04ITPUB 11周年纪念徽章
日期:2012-09-28 17:34:42ITPUB社区12周年站庆徽章
日期:2013-08-13 16:52:38itpub13周年纪念徽章
日期:2014-10-08 15:21:35ITPUB14周年纪念章
日期:2015-10-26 17:23:44ITPUB15周年纪念
日期:2018-02-09 14:12:58ITPUB18周年纪念章
日期:2018-09-17 10:09:4919周年集字徽章-庆
日期:2019-08-27 15:07:44状元
日期:2015-11-19 12:58:23
21#
发表于 2015-9-11 17:12 | 只看该作者
1)对于公司不断增加的数据存储,处理和分析需求,您是更倾向于选择增加硬件设备自建和升级数据中心?还是开始尝试来自公有云的相关服务?
对于小型企业来说,自己数据中心不合适,国内的云服务应该是首选。

2)为数据类的应用自建数据中心,硬件选型是选择单纯x86架构?还是选择非x86架构,抑或是将x86与非x86架构混合部署和应用,做出相关决策时最主要的依据是成本,安全,性能、可扩展性还是系统兼容性?
X86这么火,自然要选它。

3)尝试用外部的云平台或云服务承载数据应用需求时,会侧重考虑哪个方面的因素?是价格、知名度、稳定性、响应能力还是客户端的易用性?
考虑的顺序会是: 知名度、稳定性、价格、响应能力、客户端的易用性。
也有简单的方法,同行成功的案例作参考。

4)请具体谈谈对于推进大数据及数据分析应用时力不从心的地方或环节有哪些?可以涵盖硬件,软件和服务层面。
解决方案。

使用道具 举报

回复
论坛徽章:
57
ITPUB15周年纪念
日期:2016-10-13 13:15:342017金鸡报晓
日期:2017-01-10 15:39:052017金鸡报晓
日期:2017-02-08 14:09:13秀才
日期:2017-02-22 15:14:12秀才
日期:2017-02-22 15:16:26秀才
日期:2017-02-22 15:18:00秀才
日期:2017-05-09 11:37:55秀才
日期:2017-07-11 14:19:35ITPUB18周年纪念章
日期:2018-11-13 15:31:24
22#
发表于 2015-9-12 14:40 | 只看该作者
1)对于公司不断增加的数据存储,处理和分析需求,您是更倾向于选择增加硬件设备自建和升级数据中心?还是开始尝试来自公有云的相关服务?
    对应公司实际业务需要,主要分两类,数据存储、处理和分析这几部分,会增加硬件以及扩展数据中心。
    对应公司宣传展示及数据采集,涉及网络资源较多的,采用公有云模式。
2)为数据类的应用自建数据中心,硬件选型是选择单纯x86架构?还是选择非x86架构,抑或是将x86与非x86架构混合部署和应用,做出相关决策时最主要的依据是成本,安全,性能、可扩展性还是系统兼容性?
    主流的硬件,还是以x86为主,主要考虑成本,系统兼容性这两方面,对应安全,性能,实际上与实际应用场景结合定制的。
3)尝试用外部的云平台或云服务承载数据应用需求时,会侧重考虑哪个方面的因素?是价格、知名度、稳定性、响应能力还是客户端的易用性?
    考虑内容很多,主要是成本,稳定性,响应时间。例如:数据中心有部分数据想迁移到云平台中,涉及到云平台存储成本,成本相对比较高,另外,
    做数据分析时,对服务器性能要求比较高,这块云平台成本较低,非常适合。
4)请具体谈谈对于推进大数据及数据分析应用时力不从心的地方或环节有哪些?可以涵盖硬件,软件和服务层面。
   各方面都能涉及到,关键的还是软件和服务,软件的兼容性及可扩展性越来越受制约,服务方面,主要看相应时间,和厂商的技术实力的强弱。

使用道具 举报

回复
论坛徽章:
30
ITPUB十周年纪念徽章
日期:2011-11-01 16:24:04秀才
日期:2015-09-21 09:46:16秀才
日期:2015-10-19 15:49:55秀才
日期:2015-10-26 09:55:08ITPUB14周年纪念章
日期:2015-10-26 17:23:44秀才
日期:2015-11-11 09:48:44秀才
日期:2015-11-11 09:58:34秀才
日期:2015-11-11 10:22:49秀才
日期:2015-11-30 09:13:06秀才
日期:2015-12-14 15:09:38
23#
发表于 2015-9-12 20:58 | 只看该作者
学习先

使用道具 举报

回复
论坛徽章:
57
秀才
日期:2016-03-24 09:20:52秀才
日期:2015-12-14 14:47:54秀才
日期:2015-11-30 09:59:23秀才
日期:2015-11-30 09:13:06秀才
日期:2015-11-23 10:17:19秀才
日期:2015-11-23 09:48:22秀才
日期:2015-11-12 17:43:40秀才
日期:2015-11-11 10:22:49秀才
日期:2015-11-11 10:07:14秀才
日期:2015-11-11 09:58:34
24#
发表于 2015-9-12 22:16 | 只看该作者
1)对于公司不断增加的数据存储,处理和分析需求,您是更倾向于选择增加硬件设备自建和升级数据中心?还是开始尝试来自公有云的相关服务?
    这个还要看公司的情况吧,具体情况具体分析。象一些小的公司,可以尝试公有云的服务;象大公司,有技术有人才有资金有需求,就可以自己搞啊。

2)为数据类的应用自建数据中心,硬件选型是选择单纯x86架构?还是选择非x86架构,抑或是将x86与非x86架构混合部署和应用,做出相关决策时最主要的依据是成本,安全,性能、可扩展性还是系统兼容性?
    x86架构吧,主要考虑成本,可扩展性和兼容性

3)尝试用外部的云平台或云服务承载数据应用需求时,会侧重考虑哪个方面的因素?是价格、知名度、稳定性、响应能力还是客户端的易用性?
   知名度,价格,响应能力

4)请具体谈谈对于推进大数据及数据分析应用时力不从心的地方或环节有哪些?可以涵盖硬件,软件和服务层面。
    好多公司缺少这种大数据的人才,技术上不一定跟得上,就很难推进

使用道具 举报

回复
论坛徽章:
0
25#
发表于 2015-9-14 08:40 | 只看该作者
期待干货

使用道具 举报

回复
论坛徽章:
68
林肯
日期:2013-09-12 15:57:33马自达
日期:2013-10-11 13:52:31路虎
日期:2014-01-26 14:35:49现代
日期:2013-08-29 14:39:50三菱
日期:2013-11-25 11:21:19雪佛兰
日期:2013-09-12 15:55:00一汽
日期:2013-11-28 14:15:05技术图书徽章
日期:2013-12-11 10:11:35技术图书徽章
日期:2013-12-11 10:10:51技术图书徽章
日期:2014-01-14 10:54:13
26#
发表于 2015-9-14 08:57 | 只看该作者
本帖最后由 pastime_Wang 于 2015-10-20 22:55 编辑

(1)对于公司不断增加的数据存储,处理和分析需求,您是更倾向于选择增加硬件设备自建和升级数据中心? 还是开始尝试来自公有云的相关服务?

云服务和自建数据中心都有各自的特点, 每个公司应根据实际需求, 选择及适合当前发展需要, 又为未来战略发展奠定基础

自建数据中心: 更侧重于“技术”, 运维管理、响应速度和成本控制等方面更有优势,特别在安全性方面,实现自身数据中心的完全控制。

云服务: 更偏重于“市场”, 可以保证数据中心长期高效、高稳定性地运行。特别有利于中小企业快速创建数据中心,不受技术(网络和存储)、
场地或人员培训等因素的制约,可以更多关注并探索数据本身的价值而从忽略繁杂的运维和调优过程。

可以暂时选择云服务,把更多精力投入到关键业务中。当企业进入稳定后,则自建机房,将数据进行迁移。
初期可考虑把大量的非结构化或半结构化的大数据或严重影响系统性能非敏感大数据放在云端,不仅有效检查存储空间的占用,
还能利用云存储实现高效、稳定的利用,一旦这些数据失去价值,可以及时中断服务,节省成本。对于安全性较高利用率较频繁的数据,
应放在自建数据中心,同时加强自建网络、存储或计算资源整合,提高数据中心的存储和响应能力,从而实现对基础IT设施的最大化利用。

----------------------------------------------------------------------------------

(2)为数据类的应用自建数据中心,硬件选型是选择单纯x86架构?还是选择非x86架构,抑或是将x86与非x86架构混合部署和应用,做出相关决策时最主要的依据是成本,安全,性能、可扩展性还是系统兼容性?

这个要量体裁衣,成本,安全,性能、可扩展性还是系统兼容性 一个都不能少,目前的流行的x86架构 通常是使用Intel x86架构和VMware、
Citrix程序在一台物理服务器上运行许多虚拟机,大部分是高端刀片服务器, 随着高速网络的推广应用,大多数数据中心已经采用分布式架构取代集中的大型机。
但从高级虚拟化和配置的角度来看,大型机比VMware要先进的多, 就如同 4匹的中央空调与4台1匹的分体式空调相比,萝卜白菜,各有所爱罢了。

----------------------------------------------------------------------------------
(3)尝试用外部的云平台或云服务承载数据应用需求时,会侧重考虑哪个方面的因素?是价格、知名度、稳定性、响应能力还是客户端的易用性?

1. 安全性 是否能够对数据进行有效的加密和解密,并优化加密和解密的速度。
2. 灵活性 数据中心的环境日趋复杂的情况下, 实现工作负载在多代服务器之间无缝迁移, 实现"按需使用"
3. 可靠性 数据中心服务器故障导致应用停用将给客户和终端用户造成损失,特别是关键核心业务,7*24 不间断服务
4. 可用性 处理器级别的优化提高计算密度并降低能耗

----------------------------------------------------------------------------------
(4)请具体谈谈对于推进大数据及数据分析应用时力不从心的地方或环节有哪些?可以涵盖硬件,软件和服务层面。

海量数据处理的三个主要因素:大容量数据、多格式数据和速度,而海量数据的"收集、存放、利用"等环节,对于传统的工具和方法已经不能满足大数据的要求。

收集:收集哪些非(半)结构化数据,其格式是什么样及用什么工具来搜集,另外,数据收集和提取的合法性,数据隐私的保护和数据隐私应用之间的权衡

存放: 如何有效地存储和管理大数据,提供可扩展的管理来应对未来数据增长及数据的安全性

利用: 高效的检索和复杂分析运算的处理速度,应该选择专业大数据分析和虚拟化软件和服务。此外还需要具备必要的行业知识和分析工具,知道要分析什么,最终产生好的投资回报率。

使用道具 举报

回复
论坛徽章:
22
问答徽章
日期:2014-01-06 16:50:41秀才
日期:2015-10-26 09:55:08秀才
日期:2015-11-11 09:48:44秀才
日期:2015-11-11 10:22:49秀才
日期:2015-11-12 17:43:40秀才
日期:2015-12-14 15:02:13秀才
日期:2016-01-21 13:42:39秀才
日期:2016-01-25 14:55:31秀才
日期:2016-02-18 10:08:14秀才
日期:2016-03-24 09:20:52
27#
发表于 2015-9-14 09:51 | 只看该作者
未来是构架开源为主的,根据应用的可靠性要求选择自建IDC  or 租用公有云

使用道具 举报

回复
论坛徽章:
86
秀才
日期:2015-09-21 09:46:16目光如炬
日期:2014-07-28 06:00:03马上有钱
日期:2014-06-16 15:55:42马上有房
日期:2014-06-16 15:55:422014年世界杯参赛球队: 伊朗
日期:2014-06-13 11:29:242014年世界杯参赛球队:巴西
日期:2014-06-06 14:36:14马上有钱
日期:2014-04-04 13:51:21马上加薪
日期:2014-04-04 13:35:40马上有房
日期:2014-02-18 16:42:022014年新春福章
日期:2014-02-18 16:42:02
28#
发表于 2015-9-14 10:38 | 只看该作者
看看啊,呵呵

使用道具 举报

回复
论坛徽章:
98
秀才
日期:2016-02-18 10:06:46山治
日期:2017-02-21 16:18:12秀才
日期:2017-02-22 15:14:12秀才
日期:2017-02-22 15:16:26秀才
日期:2017-02-22 15:18:00秀才
日期:2017-03-01 13:53:39秀才
日期:2017-03-20 13:42:20秀才
日期:2017-03-27 17:52:06秀才
日期:2017-03-28 15:11:09秀才
日期:2017-03-28 15:59:38
29#
发表于 2015-9-15 08:44 | 只看该作者
1)对于公司不断增加的数据存储,处理和分析需求,您是更倾向于选择增加硬件设备自建和升级数据中心?还是开始尝试来自公有云的相关服务?

增加硬件设备,云服务顾忌到安全因素。

2)为数据类的应用自建数据中心,硬件选型是选择单纯x86架构?还是选择非x86架构,抑或是将x86与非x86架构混合部署和应用,做出相关决策时最主要的依据是成本,安全,性能、可扩展性还是系统兼容性?

我们这边基本都是X86,出于对成本、安全、性能、可扩展性和系统兼容性考虑才会做这样的决策。

3)尝试用外部的云平台或云服务承载数据应用需求时,会侧重考虑哪个方面的因素?是价格、知名度、稳定性、响应能力还是客户端的易用性?

如果我们这边考虑使用云平台或云服务,会考虑稳定性盒影响力。


4)请具体谈谈对于推进大数据及数据分析应用时力不从心的地方或环节有哪些?可以涵盖硬件,软件和服务层面。
利益与投入的权衡。

使用道具 举报

回复
论坛徽章:
23
2009日食纪念
日期:2009-07-22 09:30:00秀才
日期:2015-12-21 09:48:11秀才
日期:2015-12-21 09:53:46天枰座
日期:2015-12-23 11:00:06金牛座
日期:2015-12-25 11:38:39秀才
日期:2016-01-12 11:23:27秀才
日期:2016-01-25 14:55:31双子座
日期:2016-05-06 09:49:392017金鸡报晓
日期:2017-01-10 15:33:11乌索普
日期:2017-02-18 09:05:12
30#
发表于 2015-9-17 14:21 | 只看该作者
1)对于公司不断增加的数据存储,处理和分析需求,您是更倾向于选择增加硬件设备自建和升级数据中心?还是开始尝试来自公有云的相关服务?
都有,ERP、BW、OA、HR、MES等不需要放在互联网上的系统倾向于自建和升级数据中心,对于电子商务、外网邮箱、视频会议系统、SRM、DMS等需要放在互联网的系统倾向于放在公有云上。


2)为数据类的应用自建数据中心,硬件选型是选择单纯x86架构?还是选择非x86架构,抑或是将x86与非x86架构混合部署和应用,做出相关决策时最主要的依据是成本,安全,性能、可扩展

性还是系统兼容性?
选择单纯x86架构,目前公司还有遗留的power服务器,以后会慢慢统一成x86。
成本:power服务器的一次性硬件采购价格以及以后的硬件维保价格都远高于x86
安全:目前逐步采用虚拟化平台,x86的安全性已经不再是个问题。
性能:目前x86的cpu性能已经大幅提升,感觉至强系列的cpu很强劲,不必power逊色,另外现在的服务器的瓶颈基本都在IO上,我们通过加大内存或者使用ssd硬盘大幅提高了服务器的性能。
可扩展性:现在有虚拟化软件以及刀片服务器,x86服务器扩展实在是太方便了,而且扩展的价格也比power便宜狠了。
系统兼容性:x86服务器支持Linux、windows,power支持AIX和Linux,但是我们企业用Linux和windows多,用aix很少。

3)尝试用外部的云平台或云服务承载数据应用需求时,会侧重考虑哪个方面的因素?是价格、知名度、稳定性、响应能力还是客户端的易用性?
会侧重考虑做云平台企业的实际投资方,现在互联网风投太多,风投只看短期效益,万一企业短期效益不好,风投就会撤资,一撤资企业就完了,客户就受到影响。
价格:现在做外部云平台,价格都差不多,已经很便宜了
知名度:这个还是要考虑的。
稳定性:要重点考虑,要到实际IDC机房参观考察
响应能力:也要重点考虑,要看对方公司到底有多少运维工程师
客户端的易用性:现在做外部云平台的基本都是openstack,界面都差不多,都挺好用


4)请具体谈谈对于推进大数据及数据分析应用时力不从心的地方或环节有哪些?可以涵盖硬件,软件和服务层面。
硬件方面不是问题,软件方面也不是问题,有问题的是服务层面,如何统一软件服务,如何建立模型,如何挖掘数据价值,这才是难点。
比如我们的物联网系统,协议都不统一,数据格式就无法统一,数据没法统一,数据挖掘就很难做起来。

使用道具 举报

回复

您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

TOP技术积分榜 社区积分榜 徽章 团队 统计 知识索引树 积分竞拍 文本模式 帮助
  ITPUB首页 | ITPUB论坛 | 数据库技术 | 企业信息化 | 开发技术 | 微软技术 | 软件工程与项目管理 | IBM技术园地 | 行业纵向讨论 | IT招聘 | IT文档
  ChinaUnix | ChinaUnix博客 | ChinaUnix论坛
CopyRight 1999-2011 itpub.net All Right Reserved. 北京盛拓优讯信息技术有限公司版权所有 联系我们 未成年人举报专区 
京ICP备16024965号-8  北京市公安局海淀分局网监中心备案编号:11010802021510 广播电视节目制作经营许可证:编号(京)字第1149号
  
快速回复 返回顶部 返回列表