楼主: Black-L

SYBASE IQ 在线问题解决帖

[复制链接]
论坛徽章:
14
祖国60周年纪念徽章
日期:2009-10-09 08:28:00马上有对象
日期:2014-02-19 11:55:14马上有钱
日期:2014-02-19 11:55:14马上有房
日期:2014-02-19 11:55:14马上有车
日期:2014-02-19 11:55:14管理团队成员
日期:2013-05-08 15:27:07版主1段
日期:2012-05-15 15:24:112012新春纪念徽章
日期:2012-02-13 15:08:092012新春纪念徽章
日期:2012-02-13 15:08:092012新春纪念徽章
日期:2012-02-13 15:08:09
发表于 2010-1-24 15:39 | 显示全部楼层
原帖由 Black-L 于 2009-12-16 17:20 发表
问一下,如何实现sybase ase 到,sybase iq的实时复制。

-------------------------------------------------------------------------

你的需求是一定需要real time的?也就是不允许有任何的延迟?还是可以有几分钟的延迟?

如果是需要 real time的,那么使用Sybase的复制服务器可以实现,即 replication server, 简称 RS。


少数据量的同步可以用RS来实现,大批量的数据同步同RS的效果就不理想了。毕竟是按列存储的。
但是15版本的IQ会对RS有更好的支持,同时RS15.2也支持批量加载。
对于12.6或12.7,目前有效的方法是准实时的(有几分中的延时),通过中间暂存库(ASE)定时往IQ中load数据。
官网上有相关的文档。

使用道具 举报

回复
论坛徽章:
14
祖国60周年纪念徽章
日期:2009-10-09 08:28:00马上有对象
日期:2014-02-19 11:55:14马上有钱
日期:2014-02-19 11:55:14马上有房
日期:2014-02-19 11:55:14马上有车
日期:2014-02-19 11:55:14管理团队成员
日期:2013-05-08 15:27:07版主1段
日期:2012-05-15 15:24:112012新春纪念徽章
日期:2012-02-13 15:08:092012新春纪念徽章
日期:2012-02-13 15:08:092012新春纪念徽章
日期:2012-02-13 15:08:09
发表于 2010-1-24 15:50 | 显示全部楼层
原帖由 distliu 于 2010-1-24 12:33 发表
请问IQ中的索引都是bitwise的吗?bitwise怎么理解?我看到的资料是在原有bitmap基础上加入不同值的信息。


不是。

使用道具 举报

回复
论坛徽章:
0
发表于 2010-1-24 16:56 | 显示全部楼层
那是怎么回事?

使用道具 举报

回复
论坛徽章:
1
2010新春纪念徽章
日期:2010-03-01 11:08:25
 楼主| 发表于 2010-1-25 10:45 | 显示全部楼层
再见Sybase. 再见Sybase.

[ 本帖最后由 Black-L 于 2010-10-20 09:54 编辑 ]

使用道具 举报

回复
论坛徽章:
1
2010新春纪念徽章
日期:2010-03-01 11:08:25
 楼主| 发表于 2010-1-25 10:49 | 显示全部楼层

回复 #29 zq5143 的帖子

再见Sybase. 再见Sybase.

[ 本帖最后由 Black-L 于 2010-10-20 09:55 编辑 ]

使用道具 举报

回复
论坛徽章:
1
2010新春纪念徽章
日期:2010-03-01 11:08:25
 楼主| 发表于 2010-1-25 10:54 | 显示全部楼层
再见Sybase. 再见Sybase.

[ 本帖最后由 Black-L 于 2010-10-20 09:55 编辑 ]

使用道具 举报

回复
论坛徽章:
14
祖国60周年纪念徽章
日期:2009-10-09 08:28:00马上有对象
日期:2014-02-19 11:55:14马上有钱
日期:2014-02-19 11:55:14马上有房
日期:2014-02-19 11:55:14马上有车
日期:2014-02-19 11:55:14管理团队成员
日期:2013-05-08 15:27:07版主1段
日期:2012-05-15 15:24:112012新春纪念徽章
日期:2012-02-13 15:08:092012新春纪念徽章
日期:2012-02-13 15:08:092012新春纪念徽章
日期:2012-02-13 15:08:09
发表于 2010-1-25 11:57 | 显示全部楼层

回复 #36 Black-L 的帖子

看得出来,楼主是内行,呵呵.我已经给你发短信了~

使用道具 举报

回复
论坛徽章:
14
祖国60周年纪念徽章
日期:2009-10-09 08:28:00马上有对象
日期:2014-02-19 11:55:14马上有钱
日期:2014-02-19 11:55:14马上有房
日期:2014-02-19 11:55:14马上有车
日期:2014-02-19 11:55:14管理团队成员
日期:2013-05-08 15:27:07版主1段
日期:2012-05-15 15:24:112012新春纪念徽章
日期:2012-02-13 15:08:092012新春纪念徽章
日期:2012-02-13 15:08:092012新春纪念徽章
日期:2012-02-13 15:08:09
发表于 2010-1-25 11:58 | 显示全部楼层
原帖由 Black-L 于 2010-1-25 10:54 发表


-------------------------------------------------------------------------------------------------------------

您所指的有几分钟延迟的加载,是否是指的 Micro-Batch 解决方案?该方案不是real-time方案。

在新的RS15.5中(还没正式release),已经能够实现到IQ的实时批量加载。目前的测试速度是 5000行/秒的复制速度。基本可以满足现在大多数应用的需要。

在RS原来的版本中,基本每秒复制200行。

RS15.5中,向IQ 中进行复制的原理,已经进行了改变。


没错,是Micro-Batch.
另外我想问你,你说的RS15.5对IQ的实时批量加载是只针对IQ15的还是12.6、12.7的也支持?

[ 本帖最后由 zq5143 于 2010-1-25 12:16 编辑 ]

使用道具 举报

回复
论坛徽章:
14
祖国60周年纪念徽章
日期:2009-10-09 08:28:00马上有对象
日期:2014-02-19 11:55:14马上有钱
日期:2014-02-19 11:55:14马上有房
日期:2014-02-19 11:55:14马上有车
日期:2014-02-19 11:55:14管理团队成员
日期:2013-05-08 15:27:07版主1段
日期:2012-05-15 15:24:112012新春纪念徽章
日期:2012-02-13 15:08:092012新春纪念徽章
日期:2012-02-13 15:08:092012新春纪念徽章
日期:2012-02-13 15:08:09
发表于 2010-1-25 12:09 | 显示全部楼层
我这里的环境是这样的.
Linux 64bit
64G物理内存
swap空间 64G
4U16核cpu
IQ12.7+ESD6版本
iqmc 20G
iqtc   30G
采用Micro-Bitch方式同步数据.
数据同步加载程序每隔几分钟采用insert location方式加载一次数据。
但是偶尔会出现资源耗尽的情况,症状是:数据库登不上去,一般的linux命令也执行不了(像top、df、shutdown等),只能直接按reset键重器服务器。
请问是不是iqmc和iqtc这两个参数射得太大了?

使用道具 举报

回复
论坛徽章:
14
祖国60周年纪念徽章
日期:2009-10-09 08:28:00马上有对象
日期:2014-02-19 11:55:14马上有钱
日期:2014-02-19 11:55:14马上有房
日期:2014-02-19 11:55:14马上有车
日期:2014-02-19 11:55:14管理团队成员
日期:2013-05-08 15:27:07版主1段
日期:2012-05-15 15:24:112012新春纪念徽章
日期:2012-02-13 15:08:092012新春纪念徽章
日期:2012-02-13 15:08:092012新春纪念徽章
日期:2012-02-13 15:08:09
发表于 2010-1-25 12:14 | 显示全部楼层
还有一个问题,就是就向您前面所说的系统发生core dump时,会导致一些大表的索引会坏掉。一般非FP索引就直接重建索引了,如果是FP索引坏掉的话就只能是重建表了。请问为什么索引会坏掉呢?是因为core dump时正在访问这些大表吗?

使用道具 举报

回复

您需要登录后才可以回帖 登录 | 注册

本版积分规则 发表回复

TOP技术积分榜 社区积分榜 徽章 团队 统计 知识索引树 积分竞拍 文本模式 帮助
  ITPUB首页 | ITPUB论坛 | 数据库技术 | 企业信息化 | 开发技术 | 微软技术 | 软件工程与项目管理 | IBM技术园地 | 行业纵向讨论 | IT招聘 | IT文档
  ChinaUnix | ChinaUnix博客 | ChinaUnix论坛
CopyRight 1999-2011 itpub.net All Right Reserved. 北京盛拓优讯信息技术有限公司版权所有 联系我们 
京ICP备09055130号-4  北京市公安局海淀分局网监中心备案编号:11010802021510 广播电视节目制作经营许可证:编号(京)字第1149号
  
快速回复 返回顶部 返回列表