专家坐堂：没有数据分析，掘金从何说起？

bobo307135136

刚刚试读过那本书,仔细看了前几页,后几页粗粗的过了一下,感觉还是不错的,挺详细 ,总体感觉适合于底层的开发实施人员阅读

zzqu629

bobo307135136 发表于 2015-8-5 11:23
我个人是做大数据分析的,目前从事的是政府行业大数据,在这个行业目前遇到最大的问题的 政府大数据项目落地比 ...

这位同行您好，对您的观点深表同意。玩数据真的是一个综合性的素质的体现，是需要多年的积累。
关于政府的数据方面，从我个人的职业生涯跟您分享一些吧，我自己是宁波市节能和清洁生产审核专家库成员，宁波市所有的规上企业每月要上报相关的数据到政府部门。但是统计数据由财务部门上报政府统计部门，能耗数据由生产部门上报至经委部门。有条件的公司甚至将实时数据库直接与政府的实时数据库进行对接，但是问题仍然是政府部门之间的壁垒没有打破，企业同一套数据要多处上报好几次，各个部门之间加工或处理之后的数据又不太相同。所以，如果您要做数据分析，我绝对首先看您针对的对象，再想办法看能不能链接到相关政府部门的数据库。
巧妇难为无米之炊，如果连数据都拿不到，分析什么呢。
但是个人觉得政府的很多数据的确不太好拿到

zzqu629

bobo307135136 发表于 2015-8-5 11:30
刚刚试读过那本书,仔细看了前几页,后几页粗粗的过了一下,感觉还是不错的,挺详细 ,总体感觉适合于底层的开发 ...

谢谢您的支持，太感谢了

bohrium

bobo307135136 发表于 2015-8-5 11:23
我个人是做大数据分析的,目前从事的是政府行业大数据,在这个行业目前遇到最大的问题的 政府大数据项目落地比 ...

我是在佛山的，下属的南海区最近成立了一个被外界称为数据统筹局的部门。当然里面的核心数据都是打包给北京某公司进行分析提取的，外行人或者公司想要插足这领域，很难，政府部门，你懂的。

bohrium

不管是用什么平台进行数据分析，在整个数据分析或者数据挖掘的流程中，最耗时的依然实在数据收集和清晰这方面。实际上进行数据分析也不是大家想象中的那样在平台上敲几行代码就可以谈笑风生的等待结果，然后写报告。更多时是在海量数据中，进行整理清晰工作，如标准化、排除缺失值，变量选择或者成分分析等。说穿了其实是很枯燥的工作。

zzqu629

bohrium 发表于 2015-8-5 16:17
我是在佛山的，下属的南海区最近成立了一个被外界称为数据统筹局的部门。当然里面的核心数据都是打包给北 ...

没错，有价值的就是数据本身

zzqu629

bohrium 发表于 2015-8-5 16:21
不管是用什么平台进行数据分析，在整个数据分析或者数据挖掘的流程中，最耗时的依然实在数据收集和清晰这方 ...

这位同行说的没错，一整段的数据分析过程，最耗时的往往是数据的整理工作，往往我们很多时候的数据都是不齐整的。在你整理数据的过程当中，本身也可以发现很多的问题。

esestt

zzqu629 发表于 2015-8-5 10:26
谢谢这位童鞋的问题，excel的确是存在这样的问题，解决方案如下:
1.多几张sheet，最笨的办法，也最简单。 ...

crystal ball不错，拟合、模拟、最优化、时间序列这些常用的都有了，新版本还支持hyperion planning和essbase。就是价格不便宜……

esestt

bobo307135136 发表于 2015-8-5 11:23
我个人是做大数据分析的,目前从事的是政府行业大数据,在这个行业目前遇到最大的问题的 政府大数据项目落地比 ...

政府行业大数据我觉得很多时候是个笑话，数据对不对都不清楚，有啥好分析的。
每季度统计局收集行业数据，要我们报数时，我们都瞎报，因为统计局给的excel模板根本不适应我们企业情况，对方也不对字段做说明和要求，反正都知道是捣糨糊。
不要说行业数据，就是企业内部数据也不好整，做合并报表，每个实体的coa都不一样，头痛死了，只能凑数。

elathen

， 占个位先