《大规模分布式存储系统》有奖图书试读活动

bq_wang

现在正在搞云详单存储方案，已经和厂商做了下初步交流。
对于日志的处理逻辑还是比较简单的，只涉及到简单的入库查询，预计在加载上优势不大
都是基于现有的HDFS和HBASE技术，优势在于价格便宜、扩展性强、读写不冲突、查询速度有优势
劣势在于运维会困难些，且对数据准确性有一定疑虑

xgghxkhuang

bq_wang 发表于 2013-9-27 00:12
现在正在搞云详单存储方案，已经和厂商做了下初步交流。
对于日志的处理逻辑还是比较简单的，只涉及到简单 ...

读写不冲突，查询速度有优势，如何做到的？
意思是读写互不阻塞吗？使用的是多版本一致读吗？

xgghxkhuang

bq_wang 发表于 2013-9-27 00:12
现在正在搞云详单存储方案，已经和厂商做了下初步交流。
对于日志的处理逻辑还是比较简单的，只涉及到简单 ...

如果是结构化的也可以考虑greenplum，mpp架构，性能卓越，价格适中

bq_wang

xgghxkhuang 发表于 2013-9-28 10:59
读写不冲突，查询速度有优势，如何做到的？
意思是读写互不阻塞吗？使用的是多版本一致读吗？

摈弃了事务吧，对数据的查询要求较高，毕竟都是数百亿的记录查询，gp也在用，可能节点太少的原因，效果达不到期望值

jstjk021

书不错。

jieforest

1、谈谈您对分布式存储系统的核心是什么？
分布式存储系统的核心应该是分布式文件系统。比如Google的GFS，或者Hadoop的HDFS，又或者是淘宝的TFS。
自动容错虽然也极其重要，但应该不算核心。

2、您觉得分布式存储系统与传统存储相比有哪些优劣势？
分布式存储系统将数据分散存储在多台独立的设备，而传统存储采用集中的存储服务器存放所有数据。因此，传统存储的存储服务器很容易成为系统性能的瓶颈，而且也存在可靠性和安全性的方面的问题，不能满足大规模存储应用的需要。
分布式存储系统采用可扩展的系统结构，利用多台存储服务器分担存储负荷，利用位置服务器定位存储信息。因此，与传统存储相比，分布式存储系统不但提高了系统的可靠性、可用性和存取效率，还易于扩展。

3、谈谈您对读完本书样章的一些想法和感受？
《大规模分布式存储系统：原理解析与架构实战》是很有趣的一本书，是淘宝开发OceanBase的杨传辉写的，从样章来看，侧重于大规模分布式存储系统的原理的讲解，不错的书。