ITPUB论坛－专业的IT技术社区

登录 注册
ITPUB论坛－专业的IT技术社区»论坛 › ≡ 大数据与数据库 ≡ › 大数据 › 大数据时代的来临：机遇还是挑战？
123456下一页
返回列表 发新帖
楼主: arron刘
收藏 | 打印 上一主题 下一主题

大数据时代的来临：机遇还是挑战？

[复制链接]
wayne.jiang
论坛徽章:
0
31#
发表于 2012-10-25 10:25 | 只看该作者
关注

使用道具 举报

回复
wang1352083
论坛徽章:
5
2011新春纪念徽章 日期:2011-02-18 11:43:32ITPUB十周年纪念徽章 日期:2011-11-01 16:26:292012新春纪念徽章 日期:2012-01-04 11:57:362012新春纪念徽章 日期:2012-02-07 09:59:35秀才 日期:2016-06-23 14:15:06
32#
发表于 2012-10-25 17:50 | 只看该作者
相信大数据能流行起来,举一个简单的生活例子:拍照片,最早用胶卷时,考虑成本,现在都用手机了.手机摄像头像素越来越高,一张照片占的空间也越来越大.相应的存储,检索...
再比如数据库,最早的时候,数据库只简单的记录关键数据,关键日志.现在呢,要求记录操作历史,登录历史...

使用道具 举报

回复
diashad
论坛徽章:
55
秀才 日期:2016-02-18 10:06:46技术图书徽章 日期:2014-08-28 15:59:45技术图书徽章 日期:2014-08-28 15:59:45蓝色妖姬 日期:2014-08-28 15:17:25技术图书徽章 日期:2014-08-22 13:56:58海蓝宝石 日期:2014-08-06 14:09:322014系统架构师大会纪念章 日期:2014-08-04 09:33:532013系统架构师大会纪念章 日期:2014-08-04 09:33:532012系统架构师大会纪念章 日期:2014-08-04 09:33:532011系统架构师大会纪念章 日期:2014-08-04 09:33:53
33#
发表于 2012-10-27 09:43 | 只看该作者
up...

使用道具 举报

回复
xgghxkhuang
论坛徽章:
57
SQL极客 日期:2013-12-09 14:13:35秀才 日期:2016-01-21 13:42:39秀才 日期:2016-01-13 12:14:26SQL大赛参与纪念 日期:2016-01-13 10:32:19SQL数据库编程大师 日期:2016-01-13 10:30:43秀才 日期:2015-12-14 14:47:54秀才 日期:2015-10-19 15:50:392015年新春福章 日期:2015-03-06 11:58:18懒羊羊 日期:2015-03-04 14:52:11优秀写手 日期:2014-11-08 06:00:14
34#
发表于 2012-10-27 13:37 | 只看该作者
2.挑战和机遇并存，关键是做这个事情的人能否满足业务的需求

使用道具 举报

回复
xgghxkhuang
论坛徽章:
57
SQL极客 日期:2013-12-09 14:13:35秀才 日期:2016-01-21 13:42:39秀才 日期:2016-01-13 12:14:26SQL大赛参与纪念 日期:2016-01-13 10:32:19SQL数据库编程大师 日期:2016-01-13 10:30:43秀才 日期:2015-12-14 14:47:54秀才 日期:2015-10-19 15:50:392015年新春福章 日期:2015-03-06 11:58:18懒羊羊 日期:2015-03-04 14:52:11优秀写手 日期:2014-11-08 06:00:14
35#
发表于 2012-10-27 13:40 | 只看该作者
3大数据就是数据分析和挖掘，只不过数据量巨大，如果操作概念就没有意思了，太虚了，最好能给业务带来实际的价值。增加销售，减少成本，稳定运营，控制风险。

使用道具 举报

回复
xgghxkhuang
论坛徽章:
57
SQL极客 日期:2013-12-09 14:13:35秀才 日期:2016-01-21 13:42:39秀才 日期:2016-01-13 12:14:26SQL大赛参与纪念 日期:2016-01-13 10:32:19SQL数据库编程大师 日期:2016-01-13 10:30:43秀才 日期:2015-12-14 14:47:54秀才 日期:2015-10-19 15:50:392015年新春福章 日期:2015-03-06 11:58:18懒羊羊 日期:2015-03-04 14:52:11优秀写手 日期:2014-11-08 06:00:14
36#
发表于 2012-10-27 13:41 | 只看该作者
我这是greenplum数据库做etl，通过perl卸载数据到oracle，然后通过cognos和sas展现和分析

使用道具 举报

回复
xgghxkhuang
论坛徽章:
57
SQL极客 日期:2013-12-09 14:13:35秀才 日期:2016-01-21 13:42:39秀才 日期:2016-01-13 12:14:26SQL大赛参与纪念 日期:2016-01-13 10:32:19SQL数据库编程大师 日期:2016-01-13 10:30:43秀才 日期:2015-12-14 14:47:54秀才 日期:2015-10-19 15:50:392015年新春福章 日期:2015-03-06 11:58:18懒羊羊 日期:2015-03-04 14:52:11优秀写手 日期:2014-11-08 06:00:14
37#
发表于 2012-10-27 13:43 | 只看该作者
一天的数据量就几千万条，我都怀疑上线后oracle跑不动，基本都是全表扫描，优化除了分区很有限，是olap的

使用道具 举报

回复
xgghxkhuang
论坛徽章:
57
SQL极客 日期:2013-12-09 14:13:35秀才 日期:2016-01-21 13:42:39秀才 日期:2016-01-13 12:14:26SQL大赛参与纪念 日期:2016-01-13 10:32:19SQL数据库编程大师 日期:2016-01-13 10:30:43秀才 日期:2015-12-14 14:47:54秀才 日期:2015-10-19 15:50:392015年新春福章 日期:2015-03-06 11:58:18懒羊羊 日期:2015-03-04 14:52:11优秀写手 日期:2014-11-08 06:00:14
38#
发表于 2012-10-27 13:46 | 只看该作者
大数据要取出业务需要的指标也很难的，尤其是口径和逻辑，因为整个从原系统到数据仓库到集市到报表流程太长了，定位和解决问题的成本就比较大了，业务只会反馈数据不准，但是查起来就很难了。

使用道具 举报

回复
xgghxkhuang
论坛徽章:
57
SQL极客 日期:2013-12-09 14:13:35秀才 日期:2016-01-21 13:42:39秀才 日期:2016-01-13 12:14:26SQL大赛参与纪念 日期:2016-01-13 10:32:19SQL数据库编程大师 日期:2016-01-13 10:30:43秀才 日期:2015-12-14 14:47:54秀才 日期:2015-10-19 15:50:392015年新春福章 日期:2015-03-06 11:58:18懒羊羊 日期:2015-03-04 14:52:11优秀写手 日期:2014-11-08 06:00:14
39#
发表于 2012-10-27 13:48 | 只看该作者
大数据量要跑etl很困难的，oracle几个大表关联，就算已经优化了，大表join也是十分消耗时间的。

使用道具 举报

回复
xgghxkhuang
论坛徽章:
57
SQL极客 日期:2013-12-09 14:13:35秀才 日期:2016-01-21 13:42:39秀才 日期:2016-01-13 12:14:26SQL大赛参与纪念 日期:2016-01-13 10:32:19SQL数据库编程大师 日期:2016-01-13 10:30:43秀才 日期:2015-12-14 14:47:54秀才 日期:2015-10-19 15:50:392015年新春福章 日期:2015-03-06 11:58:18懒羊羊 日期:2015-03-04 14:52:11优秀写手 日期:2014-11-08 06:00:14
40#
发表于 2012-10-27 13:50 | 只看该作者
现在大的数据量加工在greenplum和teradata等mpp架构的数据仓库中，但是mpp架构也不是万能的，分布键不一致就相当恐怖了

使用道具 举报

回复

123456下一页
返回列表 发新帖
高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

TOP技术积分榜 社区积分榜 徽章 团队 统计 知识索引树 积分竞拍 文本模式 帮助
  ITPUB首页 | ITPUB论坛 | 数据库技术 | 企业信息化 | 开发技术 | 微软技术 | 软件工程与项目管理 | IBM技术园地 | 行业纵向讨论 | IT招聘 | IT文档
  ChinaUnix | ChinaUnix博客 | ChinaUnix论坛
CopyRight 1999-2011 itpub.net All Right Reserved. 北京盛拓优讯信息技术有限公司版权所有　联系我们 未成年人举报专区　
京ICP备16024965号-8 　北京市公安局海淀分局网监中心备案编号：11010802021510　广播电视节目制作经营许可证：编号（京）字第1149号   
快速回复 返回顶部 返回列表