SYBASE IQ 在线问题解决帖

zq5143

原帖由 Black-L 于 2009-12-16 17:20 发表
问一下，如何实现sybase ase 到，sybase iq的实时复制。

-------------------------------------------------------------------------

你的需求是一定需要real time的？也就是不允许有任何的延迟？还是可以有几分钟的延迟？

如果是需要 real time的，那么使用Sybase的复制服务器可以实现，即 replication server, 简称 RS。

少数据量的同步可以用RS来实现，大批量的数据同步同RS的效果就不理想了。毕竟是按列存储的。
但是15版本的IQ会对RS有更好的支持，同时RS15.2也支持批量加载。
对于12.6或12.7，目前有效的方法是准实时的（有几分中的延时），通过中间暂存库（ASE）定时往IQ中load数据。
官网上有相关的文档。

zq5143

原帖由 distliu 于 2010-1-24 12:33 发表
请问IQ中的索引都是bitwise的吗？bitwise怎么理解？我看到的资料是在原有bitmap基础上加入不同值的信息。

不是。

distliu

那是怎么回事？

Black-L

再见Sybase. 再见Sybase.

[ 本帖最后由 Black-L 于 2010-10-20 09:54 编辑 ]

Black-L

再见Sybase. 再见Sybase.

[ 本帖最后由 Black-L 于 2010-10-20 09:55 编辑 ]

Black-L

再见Sybase. 再见Sybase.

[ 本帖最后由 Black-L 于 2010-10-20 09:55 编辑 ]

zq5143

看得出来,楼主是内行,呵呵.我已经给你发短信了~

zq5143

原帖由 Black-L 于 2010-1-25 10:54 发表


-------------------------------------------------------------------------------------------------------------

您所指的有几分钟延迟的加载，是否是指的 Micro-Batch 解决方案？该方案不是real-time方案。

在新的RS15.5中（还没正式release），已经能够实现到IQ的实时批量加载。目前的测试速度是 5000行/秒的复制速度。基本可以满足现在大多数应用的需要。

在RS原来的版本中，基本每秒复制200行。

RS15.5中，向IQ 中进行复制的原理，已经进行了改变。

没错,是Micro-Batch.
另外我想问你，你说的RS15.5对IQ的实时批量加载是只针对IQ15的还是12.6、12.7的也支持？

[ 本帖最后由 zq5143 于 2010-1-25 12:16 编辑 ]

zq5143

我这里的环境是这样的.
Linux 64bit
64G物理内存
swap空间 64G
4U16核cpu
IQ12.7+ESD6版本
iqmc 20G
iqtc   30G
采用Micro-Bitch方式同步数据.
数据同步加载程序每隔几分钟采用insert location方式加载一次数据。
但是偶尔会出现资源耗尽的情况，症状是：数据库登不上去，一般的linux命令也执行不了（像top、df、shutdown等），只能直接按reset键重器服务器。
请问是不是iqmc和iqtc这两个参数射得太大了？

zq5143

还有一个问题，就是就向您前面所说的系统发生core dump时，会导致一些大表的索引会坏掉。一般非FP索引就直接重建索引了，如果是FP索引坏掉的话就只能是重建表了。请问为什么索引会坏掉呢？是因为core dump时正在访问这些大表吗？