话题讨论：大数据集成对企业的重要性有哪些

wuhanlulu · 发表于 2014-4-22 16:54

Detaillee · 发表于 2014-4-22 21:36

1、大数据集成的重要性？
答：BigData时代，面临4V问题，大数据集成是大数据时代一项重要的技能。
2、说说你理解的大数据集成？
答：大数据集成：大数据技术和传统数据仓库的结合；大数据集成主要是包括日终数据批量处理、实时数据流集成；
当然数据标准、元数据、数据治理相关也都是相关重要的。
3、列举你能叫上名来的大数据集成平台？
答：inofmatica、kettle、hadoop、sqoop等
4、说说您阅读迷你书的感想？
答：迷你书看起来压力没那么大，能在最短的时间内掌握尽可能多的内容。

qingduo04 · 发表于 2014-4-24 07:12

1、大数据集成的重要性？

当前大数据比较流行，个人感觉大数据集成能够分析传统BI等领域不能分析的数据，从数据量的规模，从数据的存储方式，从数据的历史等各个层面。做好大数据集成可能输出给个人的爱好、喜乐、数据的走向等内容，然后为下一步的方向做考虑。
当前现网就从网管获取信令数据，从网络上通过hadoop爬取数据进行低级的分析。（还不算大数据）

2、说说你理解的大数据集成？

从数据量的规模，从数据的存储方式，从数据的历史等各个层面。做好大数据集成可能输出给个人的爱好、喜乐、数据的走向等内容，然后为下一步的方向做考虑。

3、列举你能叫上名来的大数据集成平台？

hadoop； Hydra

qingduo04 · 发表于 2014-4-24 07:27

本帖最后由 qingduo04 于 2014-4-24 07:29 编辑

qingduo04 发表于 2014-4-24 07:12
1、大数据集成的重要性？

补充试读的心得

《大数据管理：数据集成的技术、方法与最佳实践》迷你书中主要摘选了序言、前言、目录，并详细介绍了第一章数据集成的重要性、第二章什么是数据集成，第三章数据集成的类型和复杂性三章的内容。
通过查看前言和目录，发现此书对于整体想理解或者学习大数据集成是非常有帮助的，包含数据集成建模，实时数据更新、云数据、数据虚拟化、大数据集成的方式及架构等内容。
通过第一章、第二章、第三章，可以获悉大数据的网络架构，通过数据转换、内部转化、从一个系统到另一个系统，非结构化数据获取数据来形成大数据集成，以及最后介绍了数据集成的类型和复杂性。

发现此书对于整体想理解或者学习大数据集成是非常有帮助的

好色如歌 · 发表于 2014-4-25 20:08

1、大数据集成的重要性？
大数据已经不仅仅是互联网公司的事情，对于传统企业来说，将企业ERP和CRM和各种异质系统中的数据整合起来，以及将外部的数据（天气、地理等）结合起来，融汇贯通，对于企业创新，企业创造更有价值的产品已经至关重要。

   2、说说你理解的大数据集成？
将企业内部系统中的数据和外部数据整合起来。

   3、列举你能叫上名来的大数据集成平台？
hadoop
sparks

   4、说说您阅读迷你书的感想？
内容太少。

xgghxkhuang · 发表于 2014-4-26 12:16

我觉得就是数据仓库，数据集市加报表，各个源头系统入ods

xgghxkhuang · 发表于 2014-4-26 12:16

没有准确完整的数据，那么分析和报表都是没用的

xgghxkhuang · 发表于 2014-4-26 12:19

数准很难的，各个源头系统只有各个系统自己的人最了解，核对数据，报表间的数据和系统间的数据和口径核对会很难，有时就是不知道为什么对不上了。