mysql cluster，持续研究，一点点深入，最终希望部署到生产环境去

arron刘

mchdba

arron刘 发表于 2012-8-17 15:46

-- =============================================================================
【22】 管理台老是报警，诡异
-- =============================================================================
一次性批量录入了100W数据，管理节点控制台报如下信息：


ndb_mgm> Node 7: Data usage increased to 80%(64016 32K pages of total 80000)
Node 4: Data usage increased to 80%(64007 32K pages of total 80000)
Node 5: Data usage increased to 80%(64014 32K pages of total 80000)
Node 6: Data usage increased to 80%(64001 32K pages of total 80000)
Node 4: Data usage increased to 90%(72005 32K pages of total 80000)
Node 5: Data usage increased to 90%(72014 32K pages of total 80000)
Node 7: Data usage increased to 90%(72010 32K pages of total 80000)
Node 6: Data usage increased to 90%(72009 32K pages of total 80000)
Node 6: Data usage decreased to 89%(71772 32K pages of total 80000)
Node 7: Data usage decreased to 89%(71271 32K pages of total 80000)
Node 4: Data usage decreased to 89%(71215 32K pages of total 80000)
Node 5: Data usage decreased to 88%(70607 32K pages of total 80000)
Node 5: Data usage decreased to 79%(63850 32K pages of total 80000)
Node 7: Data usage decreased to 79%(63673 32K pages of total 80000)
Node 4: Data usage decreased to 78%(62947 32K pages of total 80000)
Node 6: Data usage decreased to 78%(62932 32K pages of total 80000)

没有搞懂这是什么情况呢？

mchdba

-- =============================================================================
【23】 ERROR 1297 (HY000)
-- =============================================================================
mysql> insert into bu.up_2012 select * from test.up_2012 limit 1200000,10000;
ERROR 1297 (HY000): Got temporary error 899 'Rowid already allocated' from NDBCLUSTER
mysql>

【ok】网上都说需要调大datamemory，但是我的是磁盘表，应该不是这个原因，不得已只有restart cluster了试试了，还好搞定了！
mysql>  replace into bu.up_2012 select * from test.up_2012 limit 1200000,300000;
Query OK, 300000 rows affected (59.97 sec)
Records: 300000  Duplicates: 0  Warnings: 0

赞叹一句，网上关于STORAGE DISK ndbcluster table的测试的资料好少啊！

mchdba

-- =============================================================================
【25】 修改了config.in之后，data node 启动，需要 ndbd --initial重新加载之后，
原有的*.dat数据文件无效，启动不起来，sql节点启动之后，show tables; 原来的磁盘表都不见了，诡异啊！
-- =============================================================================
1 修改config.inf
2 ndb_mgmd -f /usr/local/mysql/cluster-conf/config.ini --reload 重新加载管理节点
3 ndbd --initial  重新启动data node
4 service mysqld start
5 use bu; show tables; 原来的表不存在了，丢失了。

看的文档是说，原有的数据文件加载不了，我想问的是：
1 如果我已经导入了很多数据，这个时候发现自己的配置参数不合理，我要修改配置参数，能不能在线修改并生效。
2 如果1失败，我能否在重新启动管理节点之后，启动data node的时候，能加载进去以前的数据呢？

kerlion

想修改配置，需要以--initial或reload的方式重新启动ndb_mgmd
ndbd一般不需要--initial启动，只有当有文件文件损坏的时候，它会删除所有本地文件，然后从其他节点的member取回数据，如果其它都是down的，那数据库就丢失了

mysql cluster很不稳定，启动很可能失败，修改场数据前最好备份一下，实在不行全部--initial启动，恢复数据

mchdba

kerlion 发表于 2012-8-20 10:06
想修改配置，需要以--initial或reload的方式重新启动ndb_mgmd
ndbd一般不需要--initial启动，只有当有文件 ...

你好，谢谢提醒，我记得了，我再去尝试试试看！

mchdba

kerlion 发表于 2012-8-20 10:06
想修改配置，需要以--initial或reload的方式重新启动ndb_mgmd
ndbd一般不需要--initial启动，只有当有文件 ...

再请教一个小问题：

ERROR 1297 (HY000): Got temporary error 410 'REDO log files overloaded (decrease TimeBetweenLocalCheckpoints or increase NoOfFragmentLogFiles)' from NDBCLUSTER

cluster里面的 redo log file 在哪里可以看到，我知道undo log文件，但是不知道redo log file 在哪里呢？

kerlion

我也不知道，都是内部文件，也不用管，但有参数控制其大小

mchdba

kerlion 发表于 2012-8-20 17:04
我也不知道，都是内部文件，也不用管，但有参数控制其大小

那个参数我知道的，有控制文件数量的，有控制文件大小的，但是就是不知道这些文件在哪里，也不知道redo log到底使用了多少？

mchdba

-- =============================================================================
【26】 批量insert 500W记录报错
-- =============================================================================
2012-08-26 00:37:25 [ndbd] INFO     -- findNeighbours from: 4861 old (left: 5 right: 5) new (65535 65535)
2012-08-26 00:37:25 [ndbd] INFO     -- Watchdog: User time: 976564  System time: 1189718
2012-08-26 00:37:25 [ndbd] WARNING  -- Watchdog: Warning overslept 410 ms, expected 100 ms.
2012-08-26 00:37:25 [ndbd] INFO     -- Arbitrator decided to shutdown this node
2012-08-26 00:37:25 [ndbd] INFO     -- QMGR (Line: 5975) 0x00000002
2012-08-26 00:37:25 [ndbd] INFO     -- Error handler shutting down system
2012-08-26 00:37:25 [ndbd] INFO     -- Error handler shutdown completed - exiting
2012-08-26 00:37:38 [ndbd] ALERT    -- Node 6: Forced node shutdown completed. Caused by error 2305: 'Node lost connection to other nodes and can not form a unpartitioned cluster, please investigate if there are error(s) on other node(s)(Arbitration error). Temporary error, restart node'.

[ok]：google之，大部分的方案都是 restart data node。

而且一般的ndbd启动无效，需要ndbd --initial 重新加载才行。