Question

我们将Google Cloud SQL数据库与复制一起使用，因为三天后我们的主从复制不断落后而没有赶上。

可能是什么原因，我们可以做些什么？

到目前为止我们做了什么：

当我们意识到Google Cloud中的mysql副本与主服务器不同步时就开始了。我查看了日志，发现以下错误消息经常在3天前发生。

"2018-05-03T08:31:07.851491Z 0 [Note] InnoDB: page_cleaner: 1000ms intended loop took 5539ms. The settings might not be optimal. (flushed=289 and evicted=0, during the time.)"

到目前为止，此消息仍会显示在错误日志中。我用Google搜索并找到了这个stackoverflow线程：

How to solve mysql warning: "InnoDB: page_cleaner: 1000ms intended loop took XXX ms. The settings might not be optimal "?

提到以下设置可以帮助解决此问题 innodb_lru_scan_depth为256 。

但是，我们的数据库位于Google Cloud中，我们无法自定义 .my.cnf 。它无法改变上述标志。

大约三天前我们执行了一个脚本，删除了我们数据库中的大量数据。我认为，它创造了很多＆＃34; dirty_pages ＆＃34;我在上面链接的stackoverflow线程中提到过。要获取更多信息，我连接到副本并发出命令

SHOW SLAVE STATUS\G;

显示从属状态。以下是一些对我来说似乎很可疑的观点

        *************************** 1. row ***************************
               Slave_IO_State: Queueing master event to the relay log
                  Master_Host: IPAdress
                  Master_User: Master
                  Master_Port: Port
                Connect_Retry: 60
              Master_Log_File: mysql-bin.021462
          Read_Master_Log_Pos: 62489170
               Relay_Log_File: relay-log.069147
                Relay_Log_Pos: 22557859
        Relay_Master_Log_File: mysql-bin.020309
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes
              Replicate_Do_DB:
          Replicate_Ignore_DB:
           Replicate_Do_Table:
       Replicate_Ignore_Table:
      Replicate_Wild_Do_Table:
  Replicate_Wild_Ignore_Table:
                   Last_Errno: 0
                   Last_Error:
                 Skip_Counter: 0
          Exec_Master_Log_Pos: 22557686
              Relay_Log_Space: 121103459150
              Until_Condition: None
               Until_Log_File:
                Until_Log_Pos: 0
           Master_SSL_Allowed: Yes
           Master_SSL_CA_File: master_server_ca.pem
           Master_SSL_CA_Path: /mysql/datadir
              Master_SSL_Cert: replica_cert.pem
            Master_SSL_Cipher:
               Master_SSL_Key: replica_pkey.pem
        Seconds_Behind_Master: 196092
Master_SSL_Verify_Server_Cert: No
                Last_IO_Errno: 0
                Last_IO_Error:
               Last_SQL_Errno: 0
               Last_SQL_Error:
  Replicate_Ignore_Server_Ids:
             Master_Server_Id: 3852200383
                  Master_UUID: 48880dc9-4603-11e7-8ac2-42010af01028
             Master_Info_File: mysql.slave_master_info
                    SQL_Delay: 0
          SQL_Remaining_Delay: NULL
      Slave_SQL_Running_State: System lock
           Master_Retry_Count: 86400
                  Master_Bind:
      Last_IO_Error_Timestamp:
     Last_SQL_Error_Timestamp:
               Master_SSL_Crl:
           Master_SSL_Crlpath:
           Retrieved_Gtid_Set: 48880dc9-4603-11e7-8ac2-42010af01028:414490186-432330581
            Executed_Gtid_Set: 48880dc9-4603-11e7-8ac2-42010af01028:1-414777044,9cc92cb1-1a09-11e7-8bcc-42010af00a79:1-277822489
                Auto_Position: 1
         Replicate_Rewrite_DB:
                 Channel_Name:
           Master_TLS_Version:
1 row in set (0.04 sec)

ERROR: No query specified

复制品是196092秒落后于主人并且还在上升。

据我所知：

Master_Log_File：mysql-bin.021462 显示主人的实际bin文件
Relay_Master_Log_File：mysql-bin.020309 显示副本的实际bin文件。

我检查了状态一段时间，并确认 Master_Log_File 的上升速度比 Relay_Master_Log_File 快。

那么这是否意味着我们的副本永远不会与主人保持同步？

看起来数据库正在处理 Relay_Master_Log_File ，但Binlogfile需要很长时间。

此外，＆＃34; SHOW PROCESSLIST＆＃34; 表示有系统用户指定系统锁。

+------+-------------+----------------------------+-----------------+---------+--------+----------------------------------------+------------------------------------------------------------------------------------------------------+
| Id   | User        | Host                       | db              | Command | Time   | State                                  | Info                                                                                                 |
+------+-------------+----------------------------+-----------------+---------+--------+----------------------------------------+------------------------------------------------------------------------------------------------------+
|    1 | system user |                            | NULL            | Connect |  16023 | Queueing master event to the relay log | NULL                                                                                                 |
|    2 | system user |                            | NULL            | Connect | 196577 | System lock                            | NULL                                                                                                 |

接下来我做的是为副本提供更多的CPU和内存。因为CPU的利用率始终为100％。凭借8核和30GB内存，服务器目前尚未得到充分利用，但仍有超过一半的资源被使用。我假设这是将dirty_pages写入硬盘的page_cleaner

我认为这可以解决我们的问题，因为在增加副本硬件之前，主设备有大约四倍的功率。但目前一切都没有改变。

page_cleaner现在是否会破坏dirty_pages，因此需要很多性能才能使副本的同步非常慢？

Google SQL副本落后于主人

0 个答案: