【IT名人堂】专访高级架构师：京东双11背后的NoSQL数据库与分布式存储内幕

bfmo

您好，我有个问题想请教一下，数据治理，可以作为一个大数据方面的体系，它与数据质量监管，元数据之间有哪些不同，作为架构师，能谈谈一下看法么

hangyuancn

duanzhi1984 发表于 2015-2-9 16:10
1）如何理解：个人认为NoSQL时代，DBA关注的重心有所不同，会更加侧重于服务.

2) 京东有这么多系统JSF、 ...

１．　NoSQL是伴随互联网发展而发展起来的额，相比传统的关系数据库，它更强调分布式，　可扩展性, 涉及迁移，扩容，秒级切换．另外　不同NoSql数据库根据子的特点不同，会分别侧重：速度，　灵活可变的数据结构，　对索引和全文检索的支持，等．　整个的涉及的知识体系是很庞大的．　对运维也提出了更高的挑战．　同时NoSQL是新生事物，　大多数人对他并不熟悉;新词想对于已经发展了几十年的关系数据库，　服务更加重要．

２．　JSF, JMQ, JFS, JimDB作为基础软件平台，　并非是只适用于京东业务模式的特定系统．


３．　作为一家互联网公司，京东开发基础软件，　首先是考虑公司业务系统的需求和痛点，　需要服务于本公司的各个业务系统;　同时会在架构设计上充分考虑公司至少３－５年的规模发展需要; 　在开发初期是采取原型开发，快速迭代;　初步成型后上线使用，接受反馈; 不断发展，不断完善．　目标上是会不断向易于部署，易于维护，使用友好的产品迈进的．

hangyuancn

duanzhi1984 发表于 2015-1-31 08:26
顶，现在的NOSQL很火，不知道京东自己研发的JimDB是用什么语言开发的?

Jimdb 的单机存储引擎使用的是C语言，　分布式服务组件使用了Go语言．　管理平台使用了Java语言

hangyuancn

zhangdberic 发表于 2015-2-3 12:53
Redis存储超过内存的那部分怎么办？

从Jimdb２.0开始，我们重写了单机存储引擎，　冷数据会被自动交换到磁盘，　内存只保留热点数据．

qingduo04

正在开会，稍后拜读一下，就喜欢这种接地气的内容。

qingduo04

你好，首先感谢皮皮和袁老师激情碰撞，拜读袁老师的内容，还有几个问题想咨询一下

1. X86服务器的硬件配置，我看文档中提到内存和SSD盘，是不是为了提高性能，SAS和SATA盘一般都不配置，直接配置高内存和SSD盘？

2. JimDB的实现机制以及实现语言？投票的方式判定节点死活，是怎么实现秒级恢复？

3. 针对并发控制，不会直接访问数据库，最后怎么实现数据库事务一致性呢？

4. 能否共享一下京东组网图或者架构图，以供学习。（如果涉及到机密，就不用提供了）

最后很感谢袁老师给出的经验分享

听海★蓝心梦

vage 发表于 2015-2-3 13:41
我们开始招dba了，有没兴趣？

你们招DBA了吗，ORACLE运维的要不要？

浮砂1996

天生我材必有用嘛！

76711031

表示支持！！！

shisifengyun

京东最近几年迅速崛起，听突出的，redis不是特别了解