【大话IT】大数据2.0再掀狂潮 堪比Windows变革，你准备好了吗？

aslo_brook

占位...

sky凌乱

路过，支持

prf199

在大数据2.0时代，企业会面临着哪些机遇与挑战？什么样的软件工具或者系统将成为企业处理海量数据的救世主？数据采集、存储、处理与优化一体化的大数据系统？还是可视化、个性化的系统？
  在大数据2.0时代，企业的机遇与挑战是并存的，谁能从数据的海洋中，获取到高价值的信息更多，将在市场上占据制高点，从而获取更多的经济利益。
  由于各家企业所储备的技术力量不一样，投入到数据分析中的人力资源也不一定充足，因此企业中，大部分的人员，还是针对企业内部的数据进行一些分析与挖掘，能获得的价值数据就是有限的客户行
  为分析数据。对于外界的数据，可能涉及的还较少，或者根本就没有涉及。比如，客户是否利用支付宝平台在进行理财，客户是否在其它银行在借贷关系 等。
  
  海量数据主要包含两个主要的含义：一是数据量确实较大，二是数据类型丰富，包括结构化数据，也包含大量的非结构化数据（如图片，影音等）。就这个特点来看，当下较流行的关系型或面向对象的
  关系型数据库均不能高效的满足需求。可能在处理海量数据时，结构化数据与非结构化数据会分开在不同的数据库平台上进行处理，最后合并在一处进行分析。
  结构化数据，大多是由企业内部产生的，可能还是会在关系型数据库平台上进行存储，分析。
  非结构化数据，大多是由客户在企业外部产生的，但又有利于对客户进行行为分析的数据，这类数据可能需要借助HADOOP平台，利用NOSQL数据库进行处理，
  然后，借助R语言或大数据SAS工具，对所需数据进行分析、挖掘。得到能支撑企业决策的依据数据。
  
  就我们公司的大数据研究及实施来看，一体化的大数据系统可能不太现实，因为各企业都有各自的需求与特点，就算是一体化的系统，可能也需要进行客户化。 我们目前采用的是各厂商供应一部分，
  属于组装系统。

xkf01

支持一个 拉分

wolfop

泼冷水，除了个别互联网公司，大部分的大数据不过是然并卵或者挂羊头卖狗肉。

hiyachen

1.在您们眼中，数据1.0时代与数据2.0时代有啥区别？在企业工作或者生活中是否真实感触到了数据2.0时代的到来？
  在1.0 与2.0 时代，在经典存储与操作系统上的变化并不是特别的突出。
  可能现在大多数的大型企业都涉及到了一些大数据的研究，速度快的企业，可能实现了一些大数据的应用。
  就目前，我所在的金融行业，大数据的应用确实存在，但其数据的主要来源还是关系型数据，非结构化数据处理较少。主要是针对公司内部的数据进行分析，挖掘。
  从事这部分工作的人员占比也不是很大，对公司的整体价值还没有得到充分的体现。

2.很多人把大数据比喻成海洋，而金子就隐藏在矿脉里，一旦挖不出来，再多的数据也仅仅是一种积累，您是否认同这种观点？您所在的企业是否也遇到过类似的困局？您所熟知的“挖矿”的工具有哪些呢？
现在大多数的企业中，都会基于数据进行报表的分析、模型分析、实时推荐 等一些数据类的应用，这一些都是为了发现数据的价值。
  但是，目前，我们能从数据中发现的价值还是有限的，因为数据链可能并不是特别完整。这方面，阿里可能做得比较好，从渠道、客户、交易、银行支付、社交等一连串的数据都拥有，就可以更好的利用
  这些数据为每一个客户画出一幅金融肖像图。
  当前，针对于数据分析的工具，可能比较多，诸如R语言、SAS工具等 工具都能较好的完成数据的分析。

3.数据1.0时代的经典存储、操作系统及软件是否会在数据2.0时代被慢慢淘汰掉？数据2.0时代对软硬件会催生出哪些新的需求？
  网络速度也有着本质性的提升，传输速度可望提升至 10Gbps。FC、HBA等。

4.在大数据2.0时代，企业会面临着哪些机遇与挑战？什么样的软件工具或者系统将成为企业处理海量数据的救世主？数据采集、存储、处理与优化一体化的大数据系统？还是可视化、个性化的系统？
海量数据主要包含两个主要的含义：一是数据量确实较大，二是数据类型丰富，包括结构化数据，也包含大量的非结构化数据（如图片，影音等）。就这个特点来看，当下较流行的关系型或面向对象的
  关系型数据库均不能高效的满足需求。可能在处理海量数据时，结构化数据与非结构化数据会分开在不同的数据库平台上进行处理，最后合并在一处进行分析。
  结构化数据，大多是由企业内部产生的，可能还是会在关系型数据库平台上进行存储，分析。
  非结构化数据，大多是由客户在企业外部产生的，但又有利于对客户进行行为分析的数据，这类数据可能需要借助HADOOP平台，利用NOSQL数据库进行处理，
  然后，借助R语言或SAS工具，对所需数据进行分析、挖掘。得到能支撑企业决策的依据数据。
  
5.在数据2.0时代，存储和计算方式转向了分布式进化，操作系统向IAAS、PAAS进化，软件也向SAAS进化，有人觉得由此可能催生出新的大数据管理系统的变革，其意义将不亚于当年DOS向WINDOWS系统进化的革命性成果。是否产生的影响真会如此？对此您怎么看？

没有可比性。
DOS到WINDOWS的改变，是彻底的改变了全社会的生活方式，数据电子化。开启了信息化时代。我记得当年用DOS操作系统时，干什么都得敲命令，搞得很专业一样，其实又没有干多少事情。
  到了WINDOWS操作系统上，做什么都显得不那么专业，但确干了很多事情。
  
  虽然，大数据时代来临了，但他的影响，应该不及WINDOWS取代DOS。

phoenix1981

苏上人 发表于 2015-7-13 19:43
支持啊啊支持啊

头象人物的牙不错。
像小铲子似的。  

phoenix1981

占一层，空了更新。

heguangwu

1.在您们眼中，数据1.0时代与数据2.0时代有啥区别？在企业工作或者生活中是否真实感触到了数据2.0时代的到来？
数据1.0时代还是传统的数据分析的路子，2.0开始了DaaS，即数据即服务，得益于大数据技术的成熟，大数据作为一个服务可以对外提供商业支持，数据的分享和可视化进一步推动了大数据2.0的进展

2.很多人把大数据比喻成海洋，而金子就隐藏在矿脉里，一旦挖不出来，再多的数据也仅仅是一种积累，您是否认同这种观点？您所在的企业是否也遇到过类似的困局？您所熟知的“挖矿”的工具有哪些呢？
认同，大数据2.0时代的一个重要的特征就是如何从大量的不重要的数据中快速提取有价值的数据。现在无论是机器学习还是其他各种BI都没法做到，挖坑的工具请移步apache hadoop社区，此外伯克利的BlinkDB也是一个很重要的挖矿工具

3.数据1.0时代的经典存储、操作系统及软件是否会在数据2.0时代被慢慢淘汰掉？数据2.0时代对软硬件会催生出哪些新的需求？
主要从传统的单机往分布式发展，数据2.0时代也会对存储、OS以及软件提出新的需求

4.在大数据2.0时代，企业会面临着哪些机遇与挑战？什么样的软件工具或者系统将成为企业处理海量数据的救世主？数据采集、存储、处理与优化一体化的大数据系统？还是可视化、个性化的系统？
个人认为可视化和个性化系统对企业更为重要，采集存储及处理会变成通用的平台，而企业需要的是找出数据的价值，每一个企业本身的数据情况不一样，所以个性化系统才能更大的迎合企业需求

5.在数据2.0时代，存储和计算方式转向了分布式进化，操作系统向IAAS、PAAS进化，软件也向SAAS进化，有人觉得由此可能催生出新的大数据管理系统的变革，其意义将不亚于当年DOS向WINDOWS系统进化的革命性成果。是否产生的影响真会如此？对此您怎么看？
确实，其实比DOS向WINDOWS系统进化更具备革命性，从此诞生的众多的技术进一步推动其它行业的发展，包含生物数据、数学计算、航空航天、气象等

goldrobin

静静的看着讨论，学习