【讨论】用从库的从库实现短时间迁移mysql的可行性

lixunpeng

dian010418 发表于 2014-12-26 12:53
楼主为何要建成从库的从库？先在从库上备份，然后用这个备份建一个新的从库就行了，切换的时候就是一个一主 ...

从库上哪种方式备份？file和pos用谁的？

dian010418

lixunpeng 发表于 2014-12-26 13:33
从库上哪种方式备份？file和pos用谁的？

mysqldump就可以，加上--dump-slave参数，备份里就会包含主库binlog的FILE和POSITION。

lixunpeng

dian010418 发表于 2014-12-26 13:50
mysqldump就可以，加上--dump-slave参数，备份里就会包含主库binlog的FILE和POSITION。

太好了，多谢!
你真是高手啊！

幕南风

把现有的备份备库停了，迁移到新机子，然后把主库切换过去，不就好了吗？干嘛那么费事

lixunpeng

幕南风 发表于 2014-12-28 16:30
把现有的备份备库停了，迁移到新机子，然后把主库切换过去，不就好了吗？干嘛那么费事

你是说停备库直接cp从库的file到新机器吧？可是我觉得这样文件里面的结构比较乱，尤其是dml比较多的情况，有可能行迁移、chaned row什么的比较多。
如果用dump，新的文件结构就比较整齐。

lixunpeng

dian010418 发表于 2014-12-26 13:50
mysqldump就可以，加上--dump-slave参数，备份里就会包含主库binlog的FILE和POSITION。

感觉基本就是在主库上执行了，不用第三方的迁移工具了，这样只在主库锁一会所有的表，备份期间不能有ddl操作：

mysqldump -A  --single-transaction --dump-slave --include-master-host-port --master-data > lxp.sql

lixunpeng

华夏小卒 发表于 2014-12-25 17:56
一直用的innobackupex 。居然mysqldump 也有这参数。有和弊端否？

只在主库锁一会所有的表，备份期间不能有ddl操作。

仔细读了一下mysqldump的--help，很有收获，原来众里寻他千百度，那人却近在咫尺

I need to use:

mysqldump -A  --single-transaction --dump-slave --include-master-host-port --master-data > lxp.sql


-----------------------------------------------------------
mysqldump --help:

  --dump-slave[=#]    This causes the binary log position and filename of the
                      master to be appended to the dumped data output. Setting
                      the value to 1, will printit as a CHANGE MASTER command
                      in the dumped data output; if equal to 2, that command
                      will be prefixed with a comment symbol. This option will
                      turn --lock-all-tables on, unless --single-transaction is    --***************
                      specified too (in which case a global read lock is only
                      taken a short time at the beginning of the dump - don't
                      forget to read about --single-transaction below). In all
                      cases any action on logs will happen at the exact moment
                      of the dump.Option automatically turns --lock-tables off.
                     
                     
  --include-master-host-port
                      Adds 'MASTER_HOST=<host>, MASTER_PORT=<port>' to 'CHANGE
                      MASTER TO..' in dump produced with --dump-slave.
                     
                     
  --master-data[=#]   This causes the binary log position and filename to be
                      appended to the output. If equal to 1, will print it as a
                      CHANGE MASTER command; if equal to 2, that command will
                      be prefixed with a comment symbol. This option will turn
                      --lock-all-tables on, unless --single-transaction is
                      specified too (in which case a global read lock is only
                      taken a short time at the beginning of the dump; don't
                      forget to read about --single-transaction below). In all
                      cases, any action on logs will happen at the exact moment
                      of the dump. Option automatically turns --lock-tables
                      off.

  
    --single-transaction
                      Creates a consistent snapshot by dumping all tables in a
                      single transaction. Works ONLY for tables stored in
                      storage engines which support multiversioning (currently
                      only InnoDB does); the dump is NOT guaranteed to be
                      consistent for other storage engines. While a
                      --single-transaction dump is in process, to ensure a
                      valid dump file (correct table contents and binary log
                      position), no other connection should use the following
                      statements: ALTER TABLE, DROP TABLE, RENAME TABLE,
                      TRUNCATE TABLE, as consistent snapshot is not isolated
                      from them. Option automatically turns off --lock-tables.

lixunpeng

myownstars 发表于 2014-12-25 17:45
mysql --dump-slave记录change master to ，可以在slave导出备份

我在slave试验了，竟然也是找到了主库信息，很不错：
mysqldump -p  --single-transaction --dump-slave --include-master-host-port --master-data lxptest > /root/testlxp.sql

导出文件如下：

# more testlxp.sql
-- MySQL dump 10.13  Distrib 5.6.22, for Linux (x86_64)
--
-- Host: localhost    Database: lxptest
-- ------------------------------------------------------
-- Server version       5.6.22-log

/*!40101 SET @OLD_CHARACTER_SET_CLIENT=@@CHARACTER_SET_CLIENT */;
/*!40101 SET @OLD_CHARACTER_SET_RESULTS=@@CHARACTER_SET_RESULTS */;
/*!40101 SET @OLD_COLLATION_CONNECTION=@@COLLATION_CONNECTION */;
/*!40101 SET NAMES utf8 */;
/*!40103 SET @OLD_TIME_ZONE=@@TIME_ZONE */;
/*!40103 SET TIME_ZONE='+00:00' */;
/*!40014 SET @OLD_UNIQUE_CHECKS=@@UNIQUE_CHECKS, UNIQUE_CHECKS=0 */;
/*!40014 SET @OLD_FOREIGN_KEY_CHECKS=@@FOREIGN_KEY_CHECKS, FOREIGN_KEY_CHECKS=0 */;
/*!40101 SET @OLD_SQL_MODE=@@SQL_MODE, SQL_MODE='NO_AUTO_VALUE_ON_ZERO' */;
/*!40111 SET @OLD_SQL_NOTES=@@SQL_NOTES, SQL_NOTES=0 */;

--
-- Position to start replication or point-in-time recovery from (the master of this slave)
--

CHANGE MASTER TO MASTER_HOST='172.16.0.25', MASTER_PORT=3306, MASTER_LOG_FILE='mysqlmaster-bin.000085', MASTER_LOG_POS=462766030;

--
-- Table structure for table `testlxp`
--

DROP TABLE IF EXISTS `testlxp`;
/*!40101 SET @saved_cs_client     = @@character_set_client */;
/*!40101 SET character_set_client = utf8 */;
CREATE TABLE `testlxp` (
  `id` int(11) DEFAULT NULL
) ENGINE=InnoDB DEFAULT CHARSET=utf8;
/*!40101 SET character_set_client = @saved_cs_client */;

--
-- Dumping data for table `testlxp`
--

LOCK TABLES `testlxp` WRITE;
/*!40000 ALTER TABLE `testlxp` DISABLE KEYS */;
INSERT INTO `testlxp` VALUES (1),(2);
/*!40000 ALTER TABLE `testlxp` ENABLE KEYS */;
UNLOCK TABLES;
/*!40103 SET TIME_ZONE=@OLD_TIME_ZONE */;

/*!40101 SET SQL_MODE=@OLD_SQL_MODE */;
/*!40014 SET FOREIGN_KEY_CHECKS=@OLD_FOREIGN_KEY_CHECKS */;
/*!40014 SET UNIQUE_CHECKS=@OLD_UNIQUE_CHECKS */;
/*!40101 SET CHARACTER_SET_CLIENT=@OLD_CHARACTER_SET_CLIENT */;
/*!40101 SET CHARACTER_SET_RESULTS=@OLD_CHARACTER_SET_RESULTS */;
/*!40101 SET COLLATION_CONNECTION=@OLD_COLLATION_CONNECTION */;
/*!40111 SET SQL_NOTES=@OLD_SQL_NOTES */;

-- Dump completed on 2015-01-05 15:36:55

lixunpeng

又在主库上试验了，发现不能在主库上用--dump-slave 参数：

mysqldump -p  --single-transaction --dump-slave --include-master-host-port --master-data lxptest > /root/testlxp.sql

mysqldump: Couldn't execute 'START SLAVE': The server is not configured as slave; fix in config file or with CHANGE MASTER TO (1200)

lixunpeng

原来从库上的这个备份要停掉从库，备份完再启动。主库上虽然报错Couldn't execute 'START SLAVE'，但是表是备份下来了。

more testlxp.sql
-- MySQL dump 10.13  Distrib 5.6.22, for Linux (x86_64)
--
-- Host: localhost    Database: lxptest
-- ------------------------------------------------------
-- Server version       5.6.22-log

/*!40101 SET @OLD_CHARACTER_SET_CLIENT=@@CHARACTER_SET_CLIENT */;
/*!40101 SET @OLD_CHARACTER_SET_RESULTS=@@CHARACTER_SET_RESULTS */;
/*!40101 SET @OLD_COLLATION_CONNECTION=@@COLLATION_CONNECTION */;
/*!40101 SET NAMES utf8 */;
/*!40103 SET @OLD_TIME_ZONE=@@TIME_ZONE */;
/*!40103 SET TIME_ZONE='+00:00' */;
/*!40014 SET @OLD_UNIQUE_CHECKS=@@UNIQUE_CHECKS, UNIQUE_CHECKS=0 */;
/*!40014 SET @OLD_FOREIGN_KEY_CHECKS=@@FOREIGN_KEY_CHECKS, FOREIGN_KEY_CHECKS=0 */;
/*!40101 SET @OLD_SQL_MODE=@@SQL_MODE, SQL_MODE='NO_AUTO_VALUE_ON_ZERO' */;
/*!40111 SET @OLD_SQL_NOTES=@@SQL_NOTES, SQL_NOTES=0 */;

--
-- Table structure for table `testlxp`
--

DROP TABLE IF EXISTS `testlxp`;
/*!40101 SET @saved_cs_client     = @@character_set_client */;
/*!40101 SET character_set_client = utf8 */;
CREATE TABLE `testlxp` (
  `id` int(11) DEFAULT NULL
) ENGINE=InnoDB DEFAULT CHARSET=utf8;
/*!40101 SET character_set_client = @saved_cs_client */;

--
-- Dumping data for table `testlxp`
--

LOCK TABLES `testlxp` WRITE;
/*!40000 ALTER TABLE `testlxp` DISABLE KEYS */;
INSERT INTO `testlxp` VALUES (1),(2);
/*!40000 ALTER TABLE `testlxp` ENABLE KEYS */;
UNLOCK TABLES;