我的编程空间,编程开发者的网络收藏夹
学习永远不晚

详解MySQL的Seconds_Behind_Master

短信预约 信息系统项目管理师 报名、考试、查分时间动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

详解MySQL的Seconds_Behind_Master

目录
  • Seconds_Behind_Master
  • 原始实现
  • last_master_timestamp
  • clock_diff_with_master
  • 其他
    • exec_time
    • 时间函数
  • 总结

    Seconds_Behind_Master

    对于mysql主备实例,seconds_behind_master是衡量master与slave之间延时的一个重要参数。通过在slave上执行"show slave status;"可以获取seconds_behind_master的值。

    原始实现

    Definition:The number of seconds that the slave SQL thread is behind processing the master binary log.

    Type:time_t(long)

    计算方式如下:

    
    rpl_slave.cc::show_slave_status_send_data()
    if ((mi->get_master_log_pos() == mi->rli->get_group_master_log_pos()) &&
           (!strcmp(mi->get_master_log_name(),
                    mi->rli->get_group_master_log_name()))) {
         if (mi->slave_running == MYSQL_SLAVE_RUN_CONNECT)
           protocol->store(0LL);
         else
           protocol->store_null();
       } else {
         long time_diff = ((long)(time(0) - mi->rli->last_master_timestamp) -
                           mi->clock_diff_with_master);
         protocol->store(
             (longlong)(mi->rli->last_master_timestamp ? max(0L, time_diff) : 0));
       }

    主要分为以下两种情况:

    • SQL线程等待IO线程获取主机binlog,此时seconds_behind_master为0,表示备机与主机之间无延时;
    • SQL线程处理relay log,此时seconds_behind_master通过(long)(time(0) ? mi->rli->last_master_timestamp) ? mi->clock_diff_with_master计算得到;

    last_master_timestamp

    定义:

    主库binlog中事件的时间。

    type: time_t (long)

    计算方式:

    last_master_timestamp根据备机是否并行复制有不同的计算方式。

    非并行复制:

    
    rpl_slave.cc:exec_relay_log_event()
    if ((!rli->is_parallel_exec() || rli->last_master_timestamp == 0) &&
        !(ev->is_artificial_event() || ev->is_relay_log_event() ||
         (ev->common_header->when.tv_sec == 0) ||
         ev->get_type_code() == binary_log::FORMAT_DESCRIPTION_EVENT ||
         ev->server_id == 0))
    {
     rli->last_master_timestamp= ev->common_header->when.tv_sec +
                                 (time_t) ev->exec_time;
     DBUG_ASSERT(rli->last_master_timestamp >= 0);
    }

    在该模式下,last_master_timestamp表示为每一个event的结束时间,其中when.tv_sec表示event的开始时间,exec_time表示事务的执行时间。该值的计算在apply_event之前,所以event还未执行时,last_master_timestamp已经被更新。由于exec_time仅在Query_log_event中存在,所以last_master_timestamp在应用一个事务的不同event阶段变化。以一个包含两条insert语句的事务为例,在该代码段的调用时,打印出event的类型、时间戳和执行时间

    
    create table t1(a int PRIMARY KEY AUTO_INCREMENT ,b longblob) engine=innodb;
    begin;
    insert into t1(b) select repeat('a',104857600);
    insert into t1(b) select repeat('a',104857600);
    commit;

    10T06:41:32.628554Z 11 [Note] [MY-000000] [Repl] event_type: 33 GTID_LOG_EVENT

    2020-02-10T06:41:32.628601Z 11 [Note] [MY-000000] [Repl] event_time: 1581316890

    2020-02-10T06:41:32.628614Z 11 [Note] [MY-000000] [Repl] event_exec_time: 0

    2020-02-10T06:41:32.628692Z 11 [Note] [MY-000000] [Repl] event_type: 2   QUERY_EVENT

    2020-02-10T06:41:32.628704Z 11 [Note] [MY-000000] [Repl] event_time: 1581316823

    2020-02-10T06:41:32.628713Z 11 [Note] [MY-000000] [Repl] event_exec_time: 35

    2020-02-10T06:41:32.629037Z 11 [Note] [MY-000000] [Repl] event_type: 19   TABLE_MAP_EVENT

    2020-02-10T06:41:32.629057Z 11 [Note] [MY-000000] [Repl] event_time: 1581316823

    2020-02-10T06:41:32.629063Z 11 [Note] [MY-000000] [Repl] event_exec_time: 0

    2020-02-10T06:41:33.644111Z 11 [Note] [MY-000000] [Repl] event_type: 30    WRITE_ROWS_EVENT

    2020-02-10T06:41:33.644149Z 11 [Note] [MY-000000] [Repl] event_time: 1581316823

    2020-02-10T06:41:33.644156Z 11 [Note] [MY-000000] [Repl] event_exec_time: 0

    2020-02-10T06:41:43.520272Z 0 [Note] [MY-011953] [InnoDB] Page cleaner took 9185ms to flush 3 and evict 0 pages

    2020-02-10T06:42:05.982458Z 11 [Note] [MY-000000] [Repl] event_type: 19   TABLE_MAP_EVENT

    2020-02-10T06:42:05.982488Z 11 [Note] [MY-000000] [Repl] event_time: 1581316858

    2020-02-10T06:42:05.982495Z 11 [Note] [MY-000000] [Repl] event_exec_time: 0

    2020-02-10T06:42:06.569345Z 11 [Note] [MY-000000] [Repl] event_type: 30    WRITE_ROWS_EVENT

    2020-02-10T06:42:06.569376Z 11 [Note] [MY-000000] [Repl] event_time: 1581316858

    2020-02-10T06:42:06.569384Z 11 [Note] [MY-000000] [Repl] event_exec_time: 0

    2020-02-10T06:42:16.506176Z 0 [Note] [MY-011953] [InnoDB] Page cleaner took 9352ms to flush 8 and evict 0 pages

    2020-02-10T06:42:37.202507Z 11 [Note] [MY-000000] [Repl] event_type: 16    XID_EVENT

    2020-02-10T06:42:37.202539Z 11 [Note] [MY-000000] [Repl] event_time: 1581316890

    2020-02-10T06:42:37.202546Z 11 [Note] [MY-000000] [Repl] event_exec_time: 0

    并行复制:

    
    rpl_slave.cc   mts_checkpoint_routine
    ts = rli->gaq->empty()
              ? 0
              : reinterpret_cast<Slave_job_group *>(rli->gaq->head_queue())->ts;
     rli->reset_notified_checkpoint(cnt, ts, true);
     

    在该模式下备机上存在一个分发队列gaq,如果gaq为空,则设置last_commit_timestamp为0;如果gaq不为空,则此时维护一个checkpoint点lwm,lwm之前的事务全部在备机上执行完成,此时last_commit_timestamp被更新为lwm所在事务执行完成后的时间。该时间类型为time_t类型。

    
    ptr_group->ts = common_header->when.tv_sec +
                       (time_t)exec_time;  // Seconds_behind_master related
    rli->rli_checkpoint_seqno++;
    
    if (update_timestamp) {
     mysql_mutex_lock(&data_lock);
     last_master_timestamp = new_ts;
     mysql_mutex_unlock(&data_lock);
    }

    在并行复制下,event执行完成之后才会更新last_master_timestamp,所以非并行复制和并行复制下的seconds_behind_master会存在差异。

    clock_diff_with_master

    定义:

    • The difference in seconds between the clock of the master and the clock of the slave (second - first). It must be signed as it may be <0 or >0. clock_diff_with_master is computed when the I/O thread starts; for this the I/O thread does a SELECT UNIX_TIMESTAMP() on the master.
    • type: long
    
    rpl_slave.cc::get_master_version_and_clock()
    if (!mysql_real_query(mysql, STRING_WITH_LEN("SELECT UNIX_TIMESTAMP()")) &&
         (master_res= mysql_store_result(mysql)) &&
         (master_row= mysql_fetch_row(master_res)))
     {
       mysql_mutex_lock(&mi->data_lock);
       mi->clock_diff_with_master=
         (long) (time((time_t*) 0) - strtoul(master_row[0], 0, 10));
       DBUG_EXECUTE_IF("dbug.mts.force_clock_diff_eq_0",
         mi->clock_diff_with_master= 0;);
       mysql_mutex_unlock(&mi->data_lock);
     }

    该差值仅被计算一次,在master与slave建立联系时处理。

    其他

    exec_time

    定义:

    • the difference from the statement's original start timestamp and the time at which it completed executing.
    • type: unsigned long
    
    struct timeval end_time;
    ulonglong micro_end_time = my_micro_time();
    my_micro_time_to_timeval(micro_end_time, &end_time);
    exec_time = end_time.tv_sec - thd_arg->query_start_in_secs();

    时间函数

    (1)time_t time(time_t timer) time_t为long类型,返回的数值仅精确到秒;

    (2)int gettimeofday (struct timeval *tv, struct timezone *tz) 可以获得微秒级的当前时间;

    (3)timeval结构

    
    #include <time.h>
    stuct timeval {
       time_t tv_sec; 
       suseconds_t tv_usec; 
    }

    总结

    使用seconds_behind_master衡量主备延时只能精确到秒级别,且在某些场景下,seconds_behind_master并不能准确反映主备之间的延时。主备异常时,可以结合seconds_behind_master源码进行具体分析。

    以上就是详解MySQL的Seconds_Behind_Master的详细内容,更多关于MySQL Seconds_Behind_Master的资料请关注自学编程网其它相关文章!

    免责声明:

    ① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

    ② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

    详解MySQL的Seconds_Behind_Master

    下载Word文档到电脑,方便收藏和打印~

    下载Word文档

    猜你喜欢

    详解MySQL的Seconds_Behind_Master

    目录Seconds_Behind_Master原始实现last_master_timestampclock_diff_with_master其他exec_time时间函数总结Seconds_Behind_Master 对于mysql主备实例
    2022-05-26

    MySQL的Seconds_Behind_Master是什么

    这篇文章给大家分享的是有关MySQL的Seconds_Behind_Master是什么的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。Seconds_Behind_Master对于mysql主备实例,seconds
    2023-06-15

    mysql之 误用SECONDS_BEHIND_MASTER衡量MYSQL主备的延迟时间

    链接:http://www.woqutech.com/?p=1116 MySQL 本身通过 show slave status 提供了 Seconds_Behind_Master ,用于衡量主备之间的复制延迟,但是今天碰到了一个场景,发现
    2023-06-06

    MySQL 发生同步延迟时Seconds_Behind_Master还为0的原因

    目录问题描述原理简析问题分析拓展一下总结一下问题描述用户在主库上执行了一个 alter 操作,持续约一小时。操作完成之后,从库发现存在同步延迟,但是监控图表中的 Seconds_Behind_Master 指标显示为 0,且 binlog
    2022-05-16

    MySQL详解

    MySQL 1、初识MySQL javaEE:企业级java开发 Web 前端(页面:展示,数据!) 后台(连接点:连接数据库JDBC,连接前端(控制视图跳转和给前端传递数据)) 数据库(存取数据,主要是存数据) 只会写代码,只是一个基
    2023-08-18
    2023-10-22

    MySQL的事务详解

    ✨博客主页: 荣 ✨系列专栏: MySQL ✨一句短话: 难在坚持,贵在坚持,成在坚持! 文章目录 一. 事务的业务场景二. 事务的使用三. 事务的特性(ACID)1. 原子性(Atomicity)2. 一致性(Consistenc
    2023-08-17

    MySQL中constraint的详解

    MySQL中constraint的详解在MySQL数据库中,constraint(约束)是用来定义和限制表中列的取值范围和数据完整性的规则。通过在表的创建过程中为列添加约束,可以确保数据的正确性和一致性。本文将介绍MySQL中常用的约束类
    MySQL中constraint的详解
    2024-02-22

    【MySQL】MySQL索引详解

    Mysql索引 0.写在前面1.为什么要使用索引2.常见的索引模型3.索引维护4.回表?举例子。 0.写在前面 文章中包含了: 1.什么是索引 2.索引的数据结构,以及各自的使用场景 3.为什么要设置主键自增? 4.基于主键
    2023-08-16

    详解 MySQL的FreeList机制

    一、前言 MySQL启动后,BufferPool就会被初始化,在你没有执行任何查询操作之前,BufferPool中的缓存页都是一块块空的内存,未被使用过也没有任何数据保存在里面。 而且你也知道了通过缓冲页的描述信息可以直接且唯一的找到它所指
    2022-05-13

    详解MySQL的半同步

    前言年后在进行腾讯二面的时候,写完算法的后问的第一个问题就是,MySQL的半同步是什么?我当时直接懵了,我以为是问的MySQL的两阶段提交的问题呢?结果确认了一下后不是两阶段提交,然后面试官看我连问的是啥都不知道,就直接跳过这个问题,直接聊
    2022-05-14

    mysql的锁机制详解

    这段时间一直在学习mysql数据库。项目组一直用的是oracle,所以对mysql的了解也不深。本文主要是对mysql锁的总结。Mysql的锁主要分为3大类:   表级锁:存储引擎为Myisam。锁住整个表,特点是开销小,加锁快,锁定力度大,发生锁冲突的概率最
    2021-08-13

    MySQL sql_mode的使用详解

    前言相信看过上一篇文章《MySQL案例:一个数据丢失惨案》的童鞋,都应该意识到,sql_mode是一个非常关键的配置,接下来就带来该配置项的详细解析。 sql_mode详解sql_mode,会直接影响SQL语法支持和数据校验,它包含非常多的
    2022-05-19

    MySQL JDBC详解

    MySQL JDBC是Java连接MySQL数据库的一种方式,JDBC全称为Java Database Connectivity,即Java数据库连接。JDBC提供了一组用于连接和操作各种数据库的API。MySQL JDBC是基于JDBC规
    2023-09-11

    详解mysql中explain的type

    导语:很多情况下,有很多人用各种select语句查询到了他们想要的数据后,往往便以为工作圆满结束了。 这些事情往往发生在一些学生亦或刚入职场但之前又没有很好数据库基础的小白身上,但所谓闻道有先后,只要我们小白好好学习,天天向上,还是很靠谱的
    2022-05-24

    编程热搜

    目录