话题讨论：大数据是天使还是魔鬼？

2009532140

华孙 发表于 2014-3-13 17:57
我觉得无法直接能判断出来，否则就不是数据挖掘了，很多时候我们是在做发现的工作，最开始根本就不知道运 ...

要说数据挖掘，要是用在预测某种经济形式之类的更简单..
预测人的行为走向，可能并不能时时灵验..

2009532140

qingduo04 发表于 2014-3-14 06:54
这方面应该公安或者国安自己有一套这方面的分析系统，通过物联网（比较先进的词）等等，比如指纹，拍照， ...

这都是时候才会判断可疑人物。
很难事先判断的吧....

华孙

2009532140 发表于 2014-3-14 09:03
再者，您觉得大数据中是否会被人为加载一些干扰数据..
就像恐怖组织知道有帕兰蒂尔这种公司的存在，并且 ...

无所谓嘛，噪音数据本来就有，人为的噪音可以干扰判断，但其实成本是极高的。安全维稳的部门会获取几十个方面的数据，如金融，电信，税务，海关，QQ，微信等等，想制造出一个合理的假象非常不容易。

2009532140

华孙 发表于 2014-3-14 09:31
无所谓嘛，噪音数据本来就有，人为的噪音可以干扰判断，但其实成本是极高的。安全维稳的部门会获取几十个 ...

啊，也是.....造一个合理的假象，代价也不小....

华孙

2009532140 发表于 2014-3-14 09:04
要说数据挖掘，要是用在预测某种经济形式之类的更简单..
预测人的行为走向，可能并不能时时灵验..

有一本叫《爆发》的书说人类93%的行为可以预测，里面讲的是有道理的。我们帮运营商看信令数据，里面都是位置信息，比如拿某人1个月的位置信息进行分析，完全可以看到规律，比如能知道他的家在哪，公司在哪，经常去什么地方等等，甚至很搞笑的是，我们觉得应该能发现哪个官员在包二奶，呵呵。

2009532140

华孙 发表于 2014-3-14 09:40
有一本叫《爆发》的书说人类93%的行为可以预测，里面讲的是有道理的。我们帮运营商看信令数据，里面都是位 ...

http://www.amazon.cn/%E7%88%86%E ... 0%E6%80%9D%E7%BB%B4


是这本么？

华孙

我是在天云大数据公司做售前，经常会和用户一起基于其自身的数据进行创新业务的设想，甚至明知困难很大，但也在经常设计一些数据跨行业应用的场景，有点像头脑风暴。我是想说，最近一直在联系一些愿意思考大数据，喜欢创新，头脑思路不拘一格的朋友坐在一起聊大天儿（面对面的聊确实不一样），能聊出很多有意思的点子，甚至有时候觉得有些好点子就能成立一家公司，就能拿得到投资。

pipihappy8888

华孙 发表于 2014-3-13 17:57
我觉得无法直接能判断出来，否则就不是数据挖掘了，很多时候我们是在做发现的工作，最开始根本就不知道运 ...

深有感触！

pipihappy8888

华孙 发表于 2014-3-14 09:50
我是在天云大数据公司做售前，经常会和用户一起基于其自身的数据进行创新业务的设想，甚至明知困难很大，但 ...

在大数据方面找VC还是很有钱景的哈！

华孙

xgghxkhuang 发表于 2014-3-13 21:49
数据仓库对应的有数据集市，建模设计，好的模型是数据冗余与性能的折中。
然后就是物理设计，有td，gp， ...

不好意思，替Oracle说两句，Oracle并不是完全不适合做数据仓库，而是要看计算架构和数据量，如果强行把Oracle企业版根据业务类型划分为类似分布式架构来部署的化，其效率也是极高的；另外，行存储数据库对海量数据的统计分析挖掘应用支持的不好，就是因为I/O问题很难解决。但要是客户就想做几个TB的多维分析，或者BI展现，我还是会推荐Oracle这类产品。用Hadoop，我就会建议完全打破Oracle数据库里面的表结构，我会做成一张大表，这是玩起来最爽的。