从数据中挖掘宝藏，你真地准备好了吗？

小尾巴鱼

        随着与大数据相关的一系列技术的不断发展，企业拥有的大量财务数据、生产数据、销售数据，以及来自客户的浏览、询价等实时数据，都有望通过实时的数据处理和分析技术，转变为帮助企业快速响应业务需求，制订全新决策的高价值信息。为此，我们真的需要做好准备。

        云计算平台的兴起，算是给我们数据的存储和处理带来了很大的便利，这需要借重能够快速横向扩展的计算和存储系统的能力，而拥有密集计算能力，并能通过大容量内存实现内存计算技术，支持内存数据库的纵向扩充型系统，依然是承载实时数据分析应用的主力，这两大类系统及相关的应用软件体系，就形成了大数据时代数据处理和分析的基础设施。

        说起构建IT基础设施，我们不得不提起此前引发激烈讨论的“架构是选X86，还是选POWER”的话题，它涉及到了IBM和英特尔的核心新产品。最终，至强E7v3刚上市不久，就赢了众多用户的青睐，成为承载大数据实时分析的重要平台，这与大家在线讨论的结果基本相符。这也表明，多数企业如今在数据分析应用上，都转向了开放，易用且能兼顾横扩展和纵向扩充的X86平台，来快速响应市场变化。就在此时此刻，英特尔又开启了一场说走就走，且涵盖了行业大数据处理和分析应用的至强E7 v3行业应用方案全国路演活动，这对于急着跟上数据处理和分析应用大潮，又缺乏实践案例参考的企业IT同仁们，真是一场及时雨啊！

话题讨论：

1）对于公司不断增加的数据存储，处理和分析需求，您是更倾向于选择增加硬件设备自建和升级数据中心?还是开始尝试来自公有云的相关服务?

2）为数据类的应用自建数据中心，硬件选型是选择单纯x86架构?还是选择非x86架构，抑或是将x86与非x86架构混合部署和应用，做出相关决策时最主要的依据是成本，安全，性能、可扩展性还是系统兼容性？

3）尝试用外部的云平台或云服务承载数据应用需求时，会侧重考虑哪个方面的因素？是价格、知名度、稳定性、响应能力还是客户端的易用性？

4）请具体谈谈对于推进大数据及数据分析应用时力不从心的地方或环节有哪些？可以涵盖硬件，软件和服务层面。

活动时间： 2015年9月11日--10月20日

活动奖励：本活动由大话IT栏目在ITPUB社区发起，活动结束后将评选17名获奖会员，欢迎亲们踊跃参与！

最佳评论1名：美的（Midea）便携蒸汽挂烫机

优秀评论奖10名：商务保温杯

评论奖6名：迷你充电宝

获奖名单公布：

一等奖挂烫机 1台

fatelyliang

二等奖商务保温杯：10个

kukisama  ，佚名是译名 ，phoenix1981  ，xdsnet  ，harkjim ，

王江玉  ，woshiyiziyu ，rickcafe  ，hiyachen  ，ylky_2000 ，

三等奖 迷你充电宝6个

xiehuanzhong ，shenlanyouyu ，bfmo   ，xuexiaogang  ，workflow263  ，may0505

oracle_cj

站位。。。

kukisama

1）对于公司不断增加的数据存储，处理和分析需求，您是更倾向于选择增加硬件设备自建和升级数据中心?还是开始尝试来自公有云的相关服务?

针对公司增长的海量数据，我觉得根据需要根据业务、公司规模、愿意投入的资金来具体对待。

首先对于中小企业来说，使用公有云在很长一个时间段内，都是省钱的。在前期的飞速扩张（或者发展不愠不火）的时候，投入多少钱，收入多少产值，没有太多固定资产积压，按需付费。这都是公有云的特点。要知道如果想要本地部署，甭管盈利不盈利，好用不好用，钱都是需要在初期一次性投入一大笔，投入之后的维护费用也省不了。

但是对于较大规模的企业而言，内部部署的私有云，以及多分支的公有云组合的混合云模式，更为合适一些。毕竟从数据安全（不是指物理层面的安全）角度，放在本地，更容易获得领导层的支持，也更容易让更多人认可数据的安全性。但是即使可以接受内部部署的高昂成本，此时采用部分业务的公有云，也是很有必要的。因为只要扩张，就可能在某个阶段产生瓶颈，而公司规模较大的情况下，各种审批流程的速度不会太快。

2）为数据类的应用自建数据中心，硬件选型是选择单纯x86架构?还是选择非x86架构，抑或是将x86与非x86架构混合部署和应用，做出相关决策时最主要的依据是成本，安全，性能、可扩展性还是系统兼容性？

产品选型上，X86是比较成熟的，不过如果是有目的的，针对数据类的应用，其实这个时候选择何种架构就不需要太纠结。因为针对数据而言，最重要的第一个属性是安全，不能说考虑省钱了，就用非常低廉的X86服务器，用一些没有支持的服务搭建一个简单的环境。

我觉得做出决策的主要依据是

1、首先必须满足设计需求，如安全、数据吞吐、价格因素等

2、满足之后，公开招标

3、各自厂商肯定有自己的独到之处，如果有特别好的，考虑是否愿意为好的功能买单。

4、架构可能存在优点和缺点，但是更重要的是在软件层面的研发。

3）尝试用外部的云平台或云服务承载数据应用需求时，会侧重考虑哪个方面的因素？是价格、知名度、稳定性、响应能力还是客户端的易用性？

1、稳定性

2、价格

3、易用性

4）请具体谈谈对于推进大数据及数据分析应用时力不从心的地方或环节有哪些？可以涵盖硬件，软件和服务层面。

一般来说，推进大数据的时候在开始最容易遇到的问题是，基于未来考虑的基础架构设计，会因为预算庞大的问题，被财务部门砍一刀或者砍好几刀，到手后的硬件可能无法满足需求。

软件方面说难也容易，这个环节的关键是要有一个或者很多个“靠谱”的程序媛/程序猿，但是“靠谱”这个属性，比较难界定。

wmxcn2000

占位待编辑

yanggq

1）对于公司不断增加的数据存储，处理和分析需求，您是更倾向于选择增加硬件设备自建和升级数据中心?还是开始尝试来自公有云的相关服务?

自建，数据量太大，网络消费太大。共有云存些不重要的log就行了。

2）为数据类的应用自建数据中心，硬件选型是选择单纯x86架构?还是选择非x86架构，抑或是将x86与非x86架构混合部署和应用，做出相关决策时最主要的依据是成本，安全，性能、可扩展性还是系统兼容性？

基本上X86架构

3）尝试用外部的云平台或云服务承载数据应用需求时，会侧重考虑哪个方面的因素？是价格、知名度、稳定性、响应能力还是客户端的易用性？

稳定性，响应能力

4）请具体谈谈对于推进大数据及数据分析应用时力不从心的地方或环节有哪些？可以涵盖硬件，软件和服务层面。

人才。。。

佚名是译名

火钳留名 占楼更新

1）对于公司不断增加的数据存储，处理和分析需求，您是更倾向于选择增加硬件设备自建和升级数据中心?还是开始尝试来自公有云的相关服务?

我更倾向于算则增加硬件设备自建和升级数据中心，主要是公司的数据量就那么多，增长的速度没那么快，增加硬件设备就够用了，云相关的服务还是有些担心的，怕丢失，怕泄露。
2）为数据类的应用自建数据中心，硬件选型是选择单纯x86架构?还是选择非x86架构，抑或是将x86与非x86架构混合部署和应用，做出相关决策时最主要的依据是成本，安全，性能、可扩展性还是系统兼容性？
为数据类的应用自建数据中心，硬件选型公司会选择单纯X86架构，做出相关决策时最主要的依据是：
   易用可扩展性   因而X86架构的易用性较高。企业业务扩展需求的必然性要求服务器具有一定可扩展性。在服务器可扩展性方面，传统非X86服务器可扩展性方面比如小型机可扩展至8个CPU以上，而X86架构产品在至强E7/E5推出之后，在支持八路方面也有不俗的表现，同时X86集群也可实现较高扩展。
  成本   从价格看，从软硬件采购到机器运维管理与升级，等等，X86的价格都较传统定制化的非X86服务器架构实惠。毕竟通用型X86遵循“One For ALL ，单一架构合适所有”标准化生产理念，如此一来，开放批量标准化生产的X86架构服务器自然成本较封闭的定制化产品价位低。
  安全 传统非X86架构服务器产品的三性要优于X86架构服务器。然而，随着X86服务器产品在冗余技术和高可用技术方面扩展，也使得双方在三性方面的差距正在缩短。
  兼容性  X86素来有兼容性超于其他的美誉。
3）尝试用外部的云平台或云服务承载数据应用需求时，会侧重考虑哪个方面的因素？是价格、知名度、稳定性、响应能力还是客户端的易用性？
会侧重考虑知名度，稳定性和响应能力。

4）请具体谈谈对于推进大数据及数据分析应用时力不从心的地方或环节有哪些？可以涵盖硬件，软件和服务层面。

人员方面吧，要有这方面的储备人员，没人的话，要向前进还是很难的，毕竟现在还打不到自动化的地步。

1983yu

大公司才需要这玩意
小公司挖毛啊

jieforest

看看先。。。。。

xkf01

占位待编辑

phoenix1981

话题讨论：

1）对于公司不断增加的数据存储，处理和分析需求，您是更倾向于选择增加硬件设备自建和升级数据中心?还是开始尝试来自公有云的相关服务?

个人观点：我们公司这边结合自身情况，运用的策略是“增加硬件设备自建和升级数据中心”。原因有二，

一、每年全公司各种系统产生的数据也就那么多（大概2点几个T左右），发现磁盘阵列容量报警，就把之前的数据迁出去或是增加硬盘即可；

二、主要还是担心云服务的数据安全性，不是怕丢，而是怕看。

2）为数据类的应用自建数据中心，硬件选型是选择单纯x86架构?还是选择非x86架构，抑或是将x86与非x86架构混合部署和应用，做出相关决策时最主要的依据是成本，安全，性能、可扩展性还是系统兼容性？

个人观点：我们这边基本都是X86，主要是由于技术水平有限，也用习惯了，换成非X86的要迁移应用，要面临很多未知的问题，而且非JAVA开发的系统也没法直接迁到非X86上。关于这方面的事情，由信息部门决策，就是出于对成本、安全、性能、可扩展性和系统兼容性考虑才会做这样的决策。采用非X86架构不是完全不可行，但管理成本会增加，系统兼容性可能会受影响，所以还不敢尝试大范围应用。

3）尝试用外部的云平台或云服务承载数据应用需求时，会侧重考虑哪个方面的因素？是价格、知名度、稳定性、响应能力还是客户端的易用性？

个人观点：如果我们这边考虑使用云平台或云服务，指标优先级从高到低应该是这样的：知名度、稳定性、价格、响应能力、客户端的易用性。

我们老板比较喜欢用知名品牌的产品（在商会分享时有面子），然后才是IT考虑的要素：稳定性和响应能力，其次是客户端的易用性（专业人员操作，小众需求，不优先考虑）。但是做事情得考虑成本不是，那就把价格往前移一移，拿稳定性来比较吧。

4）请具体谈谈对于推进大数据及数据分析应用时力不从心的地方或环节有哪些？可以涵盖硬件，软件和服务层面。

个人观点：刚好，应领导要求，最近正在研究一般国内知名报表软件产品，就是为了快速在不同终端上展现数据分析结果。说到“力不从心”，硬件和软件都会有。

硬件：我们公司物理服务器就那几台，硬着头皮虚拟出十几台服务器，就算是不断地调整各个服务器的配置，可是对系统性能的提升做用微乎其微。一句话全包括：老板觉得够用。

软件：我们公司在这个行业里算是IT建设开展得比较早的，数据量级也基本达到挖掘的程度了。可是大量的系统数据，有结构化的，有非结构化的，让人无从下手。前期邀请了几个数据分析软件厂商来交流，开始聊得挺好，后来老板一听价格，就没有后话了。后来我们想先从结构化的数据入手，弄个报表系统，可以把最实用的一部分数据分析结果以报表形势展现出来，等后面需求多了，再找老板批款上大系统。