大家公司mysql库中单表数据记录条数最多少条呢？

mchdba

grantguan 发表于 2014-7-16 10:42
实时性如何保证？曾经建议把数据每10分钟拉到SQL Server 做报表，但10分钟的延迟都不能够被接受

嗯，那你们对实时性要求蛮高的啊，这点确实难以保证，如果不分库的话，单表容量太大，没有办法。

有一种思路如下：
1 在N个从库(N1,N2,N3,N4,N5......)上面，运行一个程序，将N1个从库的数据拉倒NoSQL或者数据仓库上面。这其中也会有一点点延迟，不过如果控制好的话，可以控制在1分钟内。

2 然后数据仓库或者NoSQL上对汇总的大数据进行统计分析。

mchdba

grantguan 发表于 2014-7-16 10:42
实时性如何保证？曾经建议把数据每10分钟拉到SQL Server 做报表，但10分钟的延迟都不能够被接受

还有一种思路：

1 在N1,N2,N3上分别统计(应该很快的)，统计之后汇总出来数据。这样也是效率不错的吧。

lixunpeng

grantguan 发表于 2013-1-18 11:55
另外感觉SQL Server处理单表大数据能力比mySQL 强很多，单表几个亿SQL Server 处理起来还可以接受，mySQL 真 ...

机器配置一样吗？

lixunpeng

约1.3亿。
mysql> select count(*)from image;
+-----------+
| count(*)  |
+-----------+
| 125709818 |
+-----------+
1 row in set (4 min 5.66 sec)

这是一个ssd raid10上的一个分区表，按月。是我们的一个小库，最近迁移到了ssd。count时间还算可以接受。
大库正打算迁到ssd，现在就不count了，迁到ssd后再count一下看看有多少记录。

青禾华丽

速度是有点慢，哈哈

kaixinguo8115

zabbix是监控系统

lixunpeng

青禾华丽 发表于 2015-1-10 10:52
速度是有点慢，哈哈

是说这个count吗？你的有多快？

carniege

单表一天2亿条如何处理

carniege

或许更多

hmy_362322

mchdba 发表于 2013-1-18 10:29
谢谢兄弟的支持，我们也是这样考虑的，还有一个分区表。

公司也是这样的