RAC更适合跑OLTP还是OLAP？

anlinew

原帖由 anlinew 于 2008-11-20 10:38 发表

假设4node，你们的存储能到2400MB/s？

而这2.4GB/s的带宽如果在一台主机上需要几块HBA卡？赶紧搜搜去

blue_prince

原帖由 anlinew 于 2008-11-20 10:32 发表

我上面并行测试的iostat信息里
并行为3的时候可以看到user%要更高一些
实际上是因为有两个笛卡尔级的计算，这样的计算量不算小吧，而cpu仍然是很空闲

呵呵，假如你有多张大表关联，然后再用很多函数，你就会发现CPU就满了。可能你这个笛卡尔本身并不消耗太多CPU

蛋白粉

巴乔，你们那里用不用Nic Bonding？
两三块千兆网卡可以并联使用，我们这里用下来效果还不错

blue_prince

原帖由 anlinew 于 2008-11-20 10:42 发表

而这2.4GB/s的带宽如果在一台主机上需要几块HBA卡？赶紧搜搜去

你这样假设都是单机，2.4GB/s,现在HBA卡都是800MB/S(4g bit/s)，理论上是需要3块就够了，其实实际4块也能够达到

blue_prince

原帖由 蛋白粉 于 2008-11-20 10:45 发表
巴乔，你们那里用不用Nic Bonding？
两三块千兆网卡可以并联使用，我们这里用下来效果还不错

我们对外网卡当然是BOND，内部互联方案暂时还在调整中，没有BOND。假如说是采用BOND，分别连到不同交换机，一台交换机宕机的话，那么RAC还能稳定运行吗？你们有没有测试过？这个我目前比较感兴趣。

[ 本帖最后由 blue_prince 于 2008-11-20 10:53 编辑 ]

biti_rainy

原帖由 anlinew 于 2008-11-20 10:38 发表

假设4node，你们的存储能到2400MB/s？

我们测试过各厂家很多种高中端存储，基本上来讲，对于数据仓库这种应用采用 中低段存储是最合适的。 我们测试 ibm ds8300 224块盘吞吐量也就只有1.4GB/S，iops有接近4w。  3par 和 emc  dmx的表现也只是好一点。

目前暂时我们采购的是 EMC  cx3-40 和 cx3-80，在测试中一台  cx3-80吞吐量也能达到1.6GB/S （120块15k  fc磁盘）。 目前我们的系统是  2套 cx3-80,明年会继续扩容。 taobao应该是5套 cx3－80。

biti_rainy

原帖由 蛋白粉 于 2008-11-20 10:45 发表
巴乔，你们那里用不用Nic Bonding？
两三块千兆网卡可以并联使用，我们这里用下来效果还不错

bonding 是所有服务器的基本要求，一般服务器只是 failover就可以了，需要流量的就是  avtice-avtice 了。
我们有采用2块绑定avtive的，目前正在测试4块绑定拼，利用iscsi接一堆pc server。

biti_rainy

原帖由 blue_prince 于 2008-11-20 10:46 发表


你这样假设都是单机，2.4GB/s,现在HBA卡都是800MB/S(4g bit/s)，理论上是需要3块就够了，其实实际4块也能够达到

hba的流量的计算，不是以 4Gb/8 来计算的，是 4Gb/10 = 400 MB/S，这是标准算法
但是我们实际测试，基本上比较靠谱的是 350MB/S ，所以2块是 700MB/S ,4块是大约 1.4GB/S ，这都是测试的值不是理论计算。

blue_prince

原帖由 biti_rainy 于 2008-11-20 10:53 发表


hba的流量的计算，不是以 4Gb/8 来计算的，是 4Gb/10 = 400 MB/S，这是标准算法
但是我们实际测试，基本上比较靠谱的是 350MB/S ，所以2块是 700MB/S ,4块是大约 1.4GB/S ，这都是测试的值不是理论计算。

嗯，其实我也弄错了，本来意思是除以8，应该是500MB/S，单块HBA

anlinew

原帖由 blue_prince 于 2008-11-20 10:44 发表


呵呵，假如你有多张大表关联，然后再用很多函数，你就会发现CPU就满了。可能你这个笛卡尔本身并不消耗太多CPU

1、大表关联使用hash join 带来一定的join运算，不过整个join过程里可能还是IO瓶颈更突出
2、使用函数，是会有些运算，不过要说运算强度，与笛卡尔级估计没法比


现在OLAP的瓶颈回到CPU瓶颈上了。。。。