ICode9

精准搜索请尝试: 精确搜索
首页 > 数据库> 文章详细

MySQL 事务日志和错误日志

2022-09-17 01:00:08  阅读:382  来源: 互联网

标签:事务 log 16 23 MySQL Sep mysql 日志


日志的概念:

MySQL的日志是用来记录用户的相关操作、系统的运行状态等信息的文件结合。

MySQL的事务日志:transaction log

事务日志就是mysql执行事务过程中产生的日志。

mysql事务日志的分类:
  • redo log:基于WAl机制在数据更改前先把对应操作记录下来。

  • undo log:记录和日志操作相反的操作。(例如撤销以前的操作)

注意:
  • 事务日志一般是存储引擎自行管理和使用的,默认存放在mysql数据文件夹里面的。

  • 因为事务日志是追加写入的,所以推荐将事务日志单独放在一个磁盘上面。

innodb事务日志的相关配置:
  • 查看和日志相关的信息(日志大小、所在位置、有几个日志等)
mysql> show variables like '%innodb_log%';
+-----------------------------+----------+
| Variable_name               | Value    |
+-----------------------------+----------+
| innodb_log_buffer_size      | 16777216 | --- #每个日志文件大小(字节为单位)
| innodb_log_checksums        | ON       |
| innodb_log_compressed_pages | ON       |
| innodb_log_file_size        | 50331648 |
| innodb_log_files_in_group   | 2        | --- #日志组成员个数(有几个日志)
| innodb_log_group_home_dir   | ./       | --- ##事务文件路径
| innodb_log_write_ahead_size | 8192     |
+-----------------------------+----------+
7 rows in set (0.00 sec)
[root@CentOS8 mysql]# ll -h /var/lib/mysql/
total 121M
-rw-r----- 1 mysql mysql   56 Sep 16 23:36 auto.cnf
-rw------- 1 mysql mysql 1.7K Sep 16 23:36 ca-key.pem
-rw-r--r-- 1 mysql mysql 1.1K Sep 16 23:36 ca.pem
-rw-r--r-- 1 mysql mysql 1.1K Sep 16 23:36 client-cert.pem
-rw------- 1 mysql mysql 1.7K Sep 16 23:36 client-key.pem
-rw-r----- 1 mysql mysql  277 Sep 16 23:49 ib_buffer_pool
-rw-r----- 1 mysql mysql  12M Sep 16 23:49 ibdata1
-rw-r----- 1 mysql mysql  48M Sep 16 23:49 ib_logfile0
-rw-r----- 1 mysql mysql  48M Sep 16 23:36 ib_logfile1
-rw-r----- 1 mysql mysql  12M Sep 16 23:49 ibtmp1
drwxr-x--- 2 mysql mysql 4.0K Sep 16 23:36 mysql
srwxrwxrwx 1 mysql mysql    0 Sep 16 23:49 mysql.sock
-rw------- 1 mysql mysql    6 Sep 16 23:49 mysql.sock.lock
drwxr-x--- 2 mysql mysql 4.0K Sep 16 23:36 performance_schema
-rw------- 1 mysql mysql 1.7K Sep 16 23:36 private_key.pem
-rw-r--r-- 1 mysql mysql  452 Sep 16 23:36 public_key.pem
-rw-r--r-- 1 mysql mysql 1.1K Sep 16 23:36 server-cert.pem
-rw------- 1 mysql mysql 1.7K Sep 16 23:36 server-key.pem
drwxr-x--- 2 mysql mysql  12K Sep 16 23:36 sys

优化建议:
  • 调整日志文件的个数和单个日志文件的大小

  • 将事务日志等文件迁移到一个新的分区中,和其他文件分开,因为事务日志文件写入方式是追加写入的。放在独立的分区中使得数据存放连续,可以减少磁盘的碎片。

事务日志的优化;

MySQL写文件有两块缓存,一块是MySQL的缓冲区,还有一块是操作系统内核的缓冲区。

  • 通过 innodb_flush_log_at_trx_commit 定义事务的提交方式:
innodb_flush_log_at_trx_commit=0 --- 1S写一次磁盘

每隔一秒把MySQL缓冲区(log buffer)刷到文件系统中(os buffer)去,并且调用文件系统的“flush”操作将缓存刷新到磁盘上去。

也就是说一秒之前的日志都保存在日志缓冲区,也就是内存上,如果机器宕掉,可能丢失1秒的事务数据


innodb_flush_log_at_trx_commit=1:只要提交数据就把数据写入磁盘,但是会带来比较多的ip操作。

表示在每次事务提交的时候,都把log buffer刷到文件系统中(os buffer)去,并且调用文件系统的“flush”操作将缓存刷新到磁盘上去。

这样的话,数据库对IO的要求就非常高了,如果底层的硬件提供的IOPS比较差,那么MySQL数据库的并发很快就会由于硬件IO的问题而无法提升


innodb_flush_log_at_trx_commit=2 --- 1S写一次磁盘

表示在每次事务提交的时候会把mysql缓冲区(log buffer)刷到文件系统(os buffer)中去,但并不会立即刷写到磁盘。

如果只是MySQL数据库挂掉了,由于文件系统没有问题,那么对应的事务数据并没有丢失。

# mysql崩溃的概率比操作系统崩溃的概率高,所以安全性比0要强一点
优化建议:

高并发业务行业最佳实践,是使用第三种折衷配置(=2)

MySQL错误日志

MySQL错误日志记录的就是mysql启动、运行过程中产生的错误信息。

MySQL错误日志的存放位置:

查看MySQL错误日志的存放位置:

mysql> SHOW GLOBAL VARIABLES LIKE 'log_error';

例如:

mysql5.6:
mysql> show variables like 'log_error';
+---------------+------------------+
| Variable_name | Value            |
+---------------+------------------+
| log_error     | ./CentOS8.cc.err |
+---------------+------------------+
1 row in set (0.01 sec)

mysql5.7:
mysql> show variables like 'log_error';
+---------------+---------------------+
| Variable_name | Value               |
+---------------+---------------------+
| log_error     | /var/log/mysqld.log |
+---------------+---------------------+
1 row in set (0.00 sec)


mysql8.0:
mysql> show global variables like 'log_error';
+---------------+---------------------------+
| Variable_name | Value                     |
+---------------+---------------------------+
| log_error     | /var/log/mysql/mysqld.log |
+---------------+---------------------------+
1 row in set (0.01 sec)

注意:(MySQL5.6)
  • 默认情况下,错误日志存储在mysql数据库的数据文件中

  • 错误日志文件通常的名称为hostname.err

MySQL的三个目录:
二进制/源码包目录:网上下载的安装包存放位置

mysql的数据存放目录:MySQL数据存放位置

mysql程序存放目录:MySQL应用程序的安装位置
更改mysql错误日志的存放路径:
log-err是定义是否启用错误日志的功能和错误日志的存储位置

例如:

[root@CentOS8 mysql]# cat /etc/my.cnf | grep -v -E '^#';

[mysqld]
datadir=/var/lib/mysql
log-error=/var/log/mysqld.log

mysql记录哪些警告信息至错误日志文件

log_warnings用于标识警告信息是否一并记录到错误日志中

  • log_warnings的值为0,表示不记录警告信息。

  • log_warnings的值为1,表示警告信息一并记录到错误日志中。

  • log_warnings的值大于1,表示”失败的连接”的信息和创建新连接时”拒绝访问”类的错误信息也会被记录到错误日志中。

mysq5.6默认值:
mysql> SHOW GLOBAL VARIABLES LIKE 'log_warnings';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| log_warnings  | 1     |
+---------------+-------+
1 row in set (0.00 sec)

mysql8.0或5.7默认值:
mysql> SHOW GLOBAL VARIABLES LIKE 'log_error_verbosity';
+---------------------+-------+
| Variable_name       | Value |
+---------------------+-------+
| log_error_verbosity | 2     |
+---------------------+-------+
1 row in set (0.00 sec)

注意:mysql8.0将log_warnings变成了long_error_verbosity

标签:事务,log,16,23,MySQL,Sep,mysql,日志
来源: https://www.cnblogs.com/heyongshen/p/16698810.html

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有