• MySQL数据库运维第一篇(日志与主从复制)



    在这篇深入的技术文章中,作者将以明晰透彻的方式详细介绍MySQL数据库中关键的日志类型,如错误日志、二进制日志、查询日志和慢查询日志,以及它们的配置方法和应用场景。文章不仅探讨了日志的重要性,如在故障排除和数据恢复中的关键作用,还步入了主从数据库复制的核心运营,详细讲解了主从复制的设置和测试过程。读者通过本文可以获得对MySQL数据库管理和排错的全方位认识,为数据库的高效维护和安全管理打下坚实基础。

    一、错误日志

    在这里插入图片描述
    错误日志是 MySQL 中最重要的日志之一,它记录了当 mysqld 启动和停止时,以及服务器在运行过程中发生任何严重错误时的相关信息。当数据库出现任何故障导致无法正常使用时,可以首先查看此日志。

    该日志是默认开启的 , 默认存放目录为 mysql 的数据目录, 默认的日志文件名为 hostname.err(hostname是主机名)。

    查看日志位置的命令:

    show variables like 'log_error%';
    
    
    • 1
    • 2

    二、二进制日志

    二进制日志(BINLOG)记录了所有的 DDL(数据定义语言)语句和 DML(数据操纵语言)语句,但是不包括数据查询语句。此日志对于灾难时的数据恢复起着极其重要的作用,MySQL的主从复制, 就是通过该binlog实现的。
    在这里插入图片描述

    二进制日志,MySQl8.0默认已经开启,低版本的MySQL的需要通过配置文件开启,并配置MySQL日志的格式。
    Windows系统:my.ini Linux系统:my.cnf

    #配置开启binlog日志, 日志的文件前缀为 mysqlbin -----> 生成的文件名如 : mysqlbin.000001,mysqlbin.000002
    log_bin=mysqlbin
    
    #配置二进制日志的格式
    binlog_format=STATEMENT
    
    • 1
    • 2
    • 3
    • 4
    • 5

    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述

    -- 查看MySQL是否开启了binlog日志
    show variables like 'log_bin';
     
     
    -- 查看binlog日志的格式
    show variables like 'binlog_format';
     
    -- 查看所有日志
    show binlog events;
     
    -- 查看最新的日志
    show master status;
     
    -- 查询指定的binlog日志
    show binlog events in 'binlog.000010';
    select * from mydb1.emp2;
    select count(*) from mydb1.emp2;
    update mydb1.emp2 set salary = 8000;
    -- 从指定的位置开始,查看指定的Binlog日志
    show binlog events in 'binlog.000010' from 156;
     
     
    -- 从指定的位置开始,查看指定的Binlog日志,限制查询的条数
    show binlog events in 'binlog.000010' from 156 limit 2;
    --从指定的位置开始,带有偏移,查看指定的Binlog日志,限制查询的条数
    show binlog events in 'binlog.000010' from 666 limit 1, 2;
     
    -- 清空所有的 binlog 日志文件
    reset master
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12
    • 13
    • 14
    • 15
    • 16
    • 17
    • 18
    • 19
    • 20
    • 21
    • 22
    • 23
    • 24
    • 25
    • 26
    • 27
    • 28
    • 29

    三、查询日志

    在这里插入图片描述
    查询日志中记录了客户端的所有操作语句,而二进制日志不包含查询数据的SQL语句。

    默认情况下, 查询日志是未开启的。如果需要开启查询日志,可以设置以下配置 :

    #该选项用来开启查询日志 , 可选值 : 0 或者 10 代表关闭, 1 代表开启 
    general_log=1
    
    #设置日志的文件名 , 如果没有指定, 默认的文件名为 host_name.log 
    general_log_file=file_name
    
    • 1
    • 2
    • 3
    • 4
    • 5

    查询日志的相关操作

    -- 查看MySQL是否开启了查询日志
    show variables like 'general_log';
     
    -- 开启查询日志
    set global  general_log=1;
     
    select * from mydb1.emp2;
    select * from mydb6_view.emp;
     
    select count(*) from mydb1.emp2;
    select count(*) from mydb6_view.emp;
    update mydb1.emp2 set salary = 9000;
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12

    四、慢查询日志(记录超时的sql语句)

    慢查询日志记录了所有执行时间超过参数 long_query_time 设置值并且扫描记录数不小于 min_examined_row_limit 的所有的SQL语句的日志。long_query_time 默认为 10 秒,最小为 0, 精度可以到微秒。
    在这里插入图片描述

    # 该参数用来控制慢查询日志是否开启, 可取值: 101 代表开启, 0 代表关闭
    slow_query_log=1
    
     # 该参数用来指定慢查询日志的文件名
    slow_query_log_file=slow_query.log
    
    # 该选项用来配置查询的时间限制, 超过这个时间将认为值慢查询, 将需要进行日志记录, 默认10s
    
    long_query_time=10
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9

    注意:查询日志和慢查询日志都是8.0之后才默认开启的,sql语句开启只能暂时开启,要想永久开启需要区配置文件里开启。

    五、主从复制概括

    在这里插入图片描述

    六、主从复制原理

    在这里插入图片描述
    核心是:二进制文件

    从上图看,复制分为三步:

    1、master主库在事务提交的时候会把数据变更记录写进二进制日志文件binlog中;

    2、从库通过IOthread读取二进制日志文件binlog,写入到从库的中继日志 Relay log中;

    3、从库重做中继日志中的事件,将改变反映;

    七、搭建主从复制

    服务器准备
    在这里插入图片描述
    请关闭防火墙,不让端口访问会有问题

    主库配置
    在这里插入图片描述

    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述

    # 修改配置文件
    [root@db01 ~]# vim /etc/my.cnf
    [mysqld]
    server_id=1 
    #mysql服务ID,不要相同和从库
     
    # 修改配置文件后重启数据库&&&&&&&&&&
    #######
     
     
     
    # 创建主从复制用户,赋予主从复制的权限
    mysql> create user 'repl'@'%' identified by 'repl@123';
    mysql> GRANT REPLICATION SLAVE ON *.* TO 'repl'@'%';
    mysql> flush privileges;
     
    # 查看主库master状态
    mysql> show master status;
    +------------------+----------+--------------+------------------+------------------------------------------+
    | File             | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set                        |
    +------------------+----------+--------------+------------------+------------------------------------------+
    | mysql-bin.000006 |      193 |              |                  | 54a2c4bc-89dc-11ee-a732-5254d7f9c2f7:1-5 |
    +------------------+----------+--------------+------------------+------------------------------------------+
    1 row in set (0.00 sec)
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12
    • 13
    • 14
    • 15
    • 16
    • 17
    • 18
    • 19
    • 20
    • 21
    • 22
    • 23
    • 24

    从库配置
    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述

    # 执行change master to 语句
    CHANGE MASTER TO
    MASTER_HOST='172.16.1.51',
    MASTER_PORT = 3306,
    MASTER_USER='rep',
    MASTER_PASSWORD='rep@123',
    MASTER_LOG_FILE='mysql-bin.000006',
    MASTER_LOG_POS=193;
     
      master_port:主库的ip地址
      master_port:主库的端口
      master_user:用户名
      master_password:密码
      master_log_file:上节中主库查询的file项对应的值
      master_log_pos:上节中主库查询的的值
     
    # 开启主从复制
    mysql> start slave;
     
    # 查看主从复制状态
    mysql> show slave status\G
    
    • 1
    • 2
    • 3
    • 4
    • 5
    • 6
    • 7
    • 8
    • 9
    • 10
    • 11
    • 12
    • 13
    • 14
    • 15
    • 16
    • 17
    • 18
    • 19
    • 20
    • 21

    八、主从复制的测试

    在这里插入图片描述

  • 相关阅读:
    如何用jxTMS开发一个功能(六)
    HIVE高级调优(四)
    CSRF攻击
    Python学习笔记:导入txt、xlsx文件并做简单函数处理
    如何获取GC(垃圾回收器)的STW(暂停)时间?
    测试时大量TIME_WAIT
    洋葱架构、三层架构及两者区别
    4月25日,每日信息差
    司空见惯 - 体彩中奖交多少税
    hive,hbase集群拷贝注意事项
  • 原文地址:https://blog.csdn.net/Du_XiaoNan/article/details/136338626