首页 技术 正文
技术 2022年11月23日
0 收藏 807 点赞 3,451 浏览 6532 个字

日志

事务日志: transaction log

中继日志: reley log错误日志: error log

通用日志: general log

慢查询日志: slow query log

二进制日志: binary log

事务日志

transaction log:事务型存储引擎自行管理和使用

在一个事务提交后还没有存到磁盘的情况下会记录到事务日志,这个时候如果系统断电,再次开机后会自动将已提交的事务重做(redo log)写入磁盘;如果事务还没有提交的情况下断电重启后会执行撤销操作(undo log)

相关变量

mysql —日志记录

innodb_log_file_size默认大小为5M,innodb_log_files_in_group个数默认2个;强烈建议调大这俩个值;

如果事务操作的数据大于事务日志文件总大小,在执行ROLLBACK时:可以撤销,但是数据文件会被占用,需要使用OPTIMIZE TABLE命令来释放数据空间;

使用TRUNCATE删除表记录可以缩小占用空间,DELETE命令不会释放磁盘空间,如果需要释放需要使用OPTIMIZE命令从新整理碎片来释放空间。

注意:修改innodb_log_file_size时需要先删除原来的日志文件

错误日志

错误日志中记录项目:

  1. mysqld启动和关闭过程中输出的事件信息
  2. mysqld运行中产生的错误信息
  3. event scheduler运行一个event时产生的日志信息
  4. 在主从复制架构中的从服务器上启动从服务器线程时产生的信息

相关变量

mysql —日志记录

log_warnings=1|0 默认值1(是):是否记录警告信息至错误日志文件

查询日志

记录用户的操作日志,一般不建议启用

mysql —日志记录

MariaDB [hellodb]> SHOW VARIABLES LIKE 'log_output';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| log_output | FILE | # 以什么方式存放日志,(TABLE|FILE|NONE)
+---------------+-------+

mysql.general_log:表存放查询日志,前提是以表方式存放的

慢查询日志

记录执行查询时长超出指定时长的操作

MariaDB [hellodb]> show variables like 'slow_query%';
+---------------------+------------------+
| Variable_name | Value |
+---------------------+------------------+
| slow_query_log | OFF |--开启或关闭慢查询日志
| slow_query_log_file | centos7-slow.log |--慢查询日志文件
+---------------------+------------------+
rows in set (0.00 sec)
MariaDB [hellodb]> SHOW VARIABLES LIKE 'long_query_time';
+-----------------+-----------+
| Variable_name | Value |
+-----------------+-----------+
| long_query_time | 10.000000 |--慢查询的阀值,单位秒,查询时间超过10则记录到慢查询日志
+-----------------+-----------+
row in set (0.00 sec)MariaDB [hellodb]> SHOW VARIABLES LIKE 'log_slow%';
+---------------------+------------------------------+
| Variable_name | Value |
| log_slow_rate_limit | |-- 多少次查询才记录,mariadb特有
| log_slow_verbosity | |-- 记录内容的详细程度(Query_plan,explain)
+---------------------+------------------------------+
rows in set (0.00 sec)MariaDB [hellodb]> SHOW VARIABLES LIKE 'log_queries_not_using_indexes';
+-------------------------------+-------+
| Variable_name | Value |
+-------------------------------+-------+
| log_queries_not_using_indexes | OFF |-- 记录没有利用索引查询,而使用全文扫描的语句;默认关闭,建议开启
+-------------------------------+-------+
row in set (0.00 sec)
log_slow_filter :根据查询结果过滤
admin
filesort
filesort_on_disk
full_join
full_scan
query_cache
query_cache_miss
tmp_table
tmp_table_on_disk

补充:利用 profiling 跟踪查询语句所用的详细时间

MariaDB [hellodb]> show variables like 'profiling';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| profiling | OFF |-- 开启或关闭,默认关闭
+---------------+-------+
row in set (0.00 sec)MariaDB [hellodb]> SET profiling=ON; #开启查询语句跟踪功能
Query OK, rows affected (0.00 sec)MariaDB [hellodb]> SHOW profiles; #查询语句执行的时间列表
+----------+------------+---------------------------------+
| Query_ID | Duration | Query |
+----------+------------+---------------------------------+
| | 0.00006851 | SET profiling=ON |
| | 0.00049469 | show variables like 'profiling' | |
+----------+------------+---------------------------------+
rows in set (0.00 sec)
MariaDB [hellodb]> SHOW profile FOR query ;  #查询指定编号的SQL语句的详细执行过程
+----------------------+----------+
| Status | Duration |
+----------------------+----------+
| starting | 0.000035 |
| Opening tables | 0.000003 |
| After opening tables | 0.000006 |
| query end | 0.000003 |
| closing tables | 0.000002 |
| freeing items | 0.000011 |
| updating status | 0.000006 |
| cleaning up | 0.000001 |
+----------------------+----------+

二进制日志

记录已提交事务导致数据改变或潜在导致数据改变的SQL语句,通过“重放”日志文件中的事件来生成数据副本,不依赖存储引擎类型。

注意:开启二进制日志,默认是关闭的,二进制日志和数据分开存放

开启记录二进制文件的功能:在my.cnf的[mysqld]下加入log_bin[=/path/somefile]

默认二进制日志在数据库目录下,mariadb-bin.000001 为二进制日志数据文件,mariadb-bin.index 为二进制日志索引文件

记录二进制日志的三种方式:

  • 基于语句的记录方式,每一条改变数据的语句记录为一条语句,节省空间,系统默认为此模式,但是不推荐使用,会有隐藏的风险
  • 基于行的记录方式,每一行的改变都会将使其改变的语句记录为一条语句,日志量会很大,但是对数据的安全保护非常高
  • 混合模式:mixed, 让系统自行判定该基于哪种方式进行
MariaDB [hellodb]> show variables like 'binlog_format';
+---------------+-----------+
| Variable_name | Value |
+---------------+-----------+
| binlog_format | STATEMENT |--记录方式,系统默认基于语句方式
+---------------+-----------+
row in set (0.00 sec)
SET binlog_format='ROW|STATEMENT|MIXED'; -- 修改二进制日志记录方式

二进制日志的相关变量

开启二进制日志

MariaDB [(none)]> show variables like 'sql_log_bin';-- 是否记录二进制日志,默认ON
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| sql_log_bin | ON |
+---------------+-------+
row in set (0.00 sec)

由于SHOW VARIABLES LIKE ‘log_bin’;不支持动态修改,所以编辑配置文件vim /etc/my.cnf

mysql —日志记录

新建mkdir /data/mysqllogs/

修改所有者所有组chown -g mysql.mysql /data/mysqllogs/

指定文件位置;默认OFF,表示不启用二进制日志功能,上述两项都开启才可

MariaDB [(none)]> show variables like 'max_binlog_size';
+-----------------+------------+
| Variable_name | Value |
+-----------------+------------+
| max_binlog_size | |-- 单个二进制日志文件的最大体积,到达最大值会自动滚动,默认为1G
+-----------------+------------+
row in set (0.00 sec)MariaDB [(none)]> show variables like 'sync_binlog';
+---------------+-------+
| Variable_name | Value |
+---------------+-------+
| sync_binlog | |-- 设定是否启动二进制日志即时同步磁盘功能,默认0,由操作系统负责同步日志到磁盘
+---------------+-------+
row in set (0.00 sec)MariaDB [(none)]> show variables like 'expire_logs_days';
+------------------+-------+
| Variable_name | Value |
+------------------+-------+
| expire_logs_days | |-- 二进制日志可以自动删除的天数。 默认为0,即不自动删除
+------------------+-------+
row in set (0.00 sec)
MariaDB [(none)]> SHOW MASTER|BINARY LOGS; -- 查看mariadb自行管理使用中的二进制日志文件列表
+--------------------+-----------+
| Log_name | File_size |
+--------------------+-----------+
| mariadb-bin. | |
| mariadb-bin. | |
| mariadb-bin. | |
| mariadb-bin. | |
+--------------------+-----------+
MariaDB [(none)]> SHOW MASTER STATUS; -- 查看使用中的二进制日志文件
+--------------------+----------+--------------+------------------+
| File | Position | Binlog_Do_DB | Binlog_Ignore_DB |
+--------------------+----------+--------------+------------------+
| mariadb-bin. | | | |
+--------------------+----------+--------------+------------------+
MariaDB [(none)]> SHOW BINLOG EVENTS IN 'mariadb-bin.000004' FROM LIMIT ,\G -- 查看二进制文件中的指定内容

mysqlbinlog命令

二进制日志的客户端命令工具

--start-position=# 指定开始位置
--stop-position=# 指定结束位置
--start-datetime=(YYYY-MM-DD hh:mm:ss) 指定开始时间
--stop-datetime=(YYYY-MM-DD hh:mm:ss) 指定结束时间
--base64-output=decode-row
-v |-vv |-vvv |-vvvv 显示详细信息
[root@centos7 mysql]# mysqlbinlog --start-position= --stop-position= mariadb-bin. --base64-output=decode-row -v
# at
# :: server id end_log_pos Query thread_id= exec_time= error_code=
use `school`/*!*/;
SET TIMESTAMP=/*!*/;
INSERT students(StuID,Name,Age,Gender) VALUES (,'Tom',,'M') #改变数据的SQL语句
/*!*/;事件发生的日期和时间: ::
事件发生的服务器标识:server id
事件的结束位置:end_log_pos
事件的类型:Query
事件发生时所在服务器执行此事件的线程的ID:thread_id=
语句的时间戳与将其写入二进制文件中的时间差:exec_time=
错误代码:error_code=
事件内容:
GTID:Global Transaction ID,mysql5.6以mariadb10以上版本专属属性:GTID

使用mysqlbinlog mariadb-bin.000001 > file.sql命令重定向到SQL文件中,再使用mysql -uroot -p < file.sql命令可以直接导入数据,实现了备份还原的功能

二进制日志的管理

MariaDB [(none)]> PURGE BINARY LOGS TO 'mariadb.000002'; -- 删除到02,注意:02不删除
MariaDB [(none)]> PURGE BINARY LOGS BEFORE '2018-01-23'; -- 删除2018--23之前的日志
MariaDB [(none)]> PURGE BINARY LOGS BEFORE '2017-03-22 09:25:30';
MariaDB [(none)]> RESET MASTER; -- 删除所有二进制日志,index文件重新记数
MariaDB [(none)]> FLUSH LOGS; -- 手动触发日志滚动

微信扫一扫

支付宝扫一扫

本文网址:https://www.zhankr.net/141591.html

相关推荐
python开发_常用的python模块及安装方法
adodb:我们领导推荐的数据库连接组件bsddb3:BerkeleyDB的连接组件Cheetah-1.0:我比较喜欢这个版本的cheeta…
日期:2022-11-24 点赞:875 阅读:5,090
Educational Codeforces Round 11 C. Hard Process 二分
C. Hard Process题目连接:http://www.codeforces.com/contest/660/problem/CDes…
日期:2022-11-24 点赞:806 阅读:3,509
下载Ubuntn 17.04 内核源代码
zengkefu@server1:/usr/src$ uname -aLinux server1 4.10.0-19-generic #21…
日期:2022-11-24 点赞:565 阅读:4,320
可用Active Desktop Calendar V7.86 注册码序列号
可用Active Desktop Calendar V7.86 注册码序列号Name: www.greendown.cn Code: &nb…
日期:2022-11-24 点赞:730 阅读:4,315
Android调用系统相机、自定义相机、处理大图片
Android调用系统相机和自定义相机实例本博文主要是介绍了android上使用相机进行拍照并显示的两种方式,并且由于涉及到要把拍到的照片显…
日期:2022-11-24 点赞:512 阅读:4,920
Struts的使用
一、Struts2的获取  Struts的官方网站为:http://struts.apache.org/  下载完Struts2的jar包,…
日期:2022-11-24 点赞:671 阅读:3,105
发表评论
暂无评论

还没有评论呢,快来抢沙发~

助力内容变现

将您的收入提升到一个新的水平

点击联系客服

在线时间:8:00-16:00

客服电话

400-888-8888

客服邮箱

ceotheme@ceo.com

扫描二维码

关注微信公众号

扫描二维码

手机访问本站