MySQL通用查询日志和慢查询日志的简单分析

本篇文章给大家带来的内容是关于mysql通用查询日志和慢查询日志的简单分析,有一定的参考价值,有需要的朋友可以参考一下,希望对你有所帮助。

MySQL中的日志包括:错误日志、二进制日志、通用查询日志、慢查询日志等等。这里主要介绍下比较常用的两个功能:通用查询日志和慢查询日志。

1)通用查询日志:记录建立的客户端连接和执行的语句。

2)慢查询日志:记录所有执行时间超过longquerytime秒的所有查询或者不使用索引的查询

(1)通用查询日志

在学习通用日志查询时,需要知道两个数据库中的常用命令:

1) show variables like ‘%general%’;

可以查看,当前的通用日志查询是否开启,如果general_log的值为ON则为开启,为OFF则为关闭(默认情况下是关闭的)。

1) show variables like ‘%log_output%’;

查看当前慢查询日志输出的格式,可以是FILE(存储在数数据库的数据文件中的hostname.log),也可以是TABLE(存储在数据库中的mysql.general_log)

问题:如何开启MySQL通用查询日志,以及如何设置要输出的通用日志输出格式呢?

开启通用日志查询: set global general_log=on;

关闭通用日志查询: set global general_log=off;

设置通用日志输出为表方式: set global log_output=’TABLE’;

设置通用日志输出为文件方式: set global log_output=’FILE’;

设置通用日志输出为表和文件方式:set global log_output=’FILE,TABLE’;

(注意:上述命令只对当前生效,当MySQL重启失效,如果要永久生效,需要配置 my.cnf)

my.cnf文件的配置如下:

general_log=1  #为1表示开启通用日志查询,值为0表示关闭通用日志查询

log_output=FILE,TABLE#设置通用日志的输出格式为文件和表

(2)慢查询日志

MySQL的慢查询日志是MySQL提供的一种日志记录,用来记录在MySQL中响应时间超过阈值的语句,具体指运行时间超过long_query_time值的SQL,则会被记录到慢查询日志中(日志可以写入文件或者数据库表,如果对性能要求高的话,建议写文件)。默认情况下,MySQL数据库是不开启慢查询日志的,long_query_time的默认值为10(即10秒,通常设置为1秒),即运行10秒以上的语句是慢查询语句。

一般来说,慢查询发生在大表(比如:一个表的数据量有几百万),且查询条件的字段没有建立索引,此时,要匹配查询条件的字段会进行全表扫描,耗时查过long_query_time,

则为慢查询语句。

问题:如何查看当前慢查询日志的开启情况?

在MySQL中输入命令:

show variables like ‘%quer%’;

主要掌握以下的几个参数:

(1)slow_query_log的值为ON为开启慢查询日志,OFF则为关闭慢查询日志。

(2)slow_query_log_file 的值是记录的慢查询日志到文件中(注意:默认名为主机名.log,慢查询日志是否写入指定文件中,需要指定慢查询的输出日志格式为文件,相关命令为:show variables like ‘%log_output%’;去查看输出的格式)。

(3)long_query_time 指定了慢查询的阈值,即如果执行语句的时间超过该阈值则为慢查询语句,默认值为10秒。

(4)log_queries_not_using_indexes 如果值设置为ON,则会记录所有没有利用索引的查询(注意:如果只是将log_queries_not_using_indexes设置为ON,而将slow_query_log设置为OFF,此时该设置也不会生效,即该设置生效的前提是slow_query_log的值设置为ON),一般在性能调优的时候会暂时开启。

问题:设置MySQL慢查询的输出日志格式为文件还是表,或者两者都有?

通过命令:show variables like ‘%log_output%’;

通过log_output的值可以查看到输出的格式,上面的值为TABLE。当然,我们也可以设置输出的格式为文本,或者同时记录文本和数据库表中,设置的命令如下:

慢查询日志输出到表中(即mysql.slow_log)

蓝心千询 蓝心千询

蓝心千询是vivo推出的一个多功能AI智能助手

蓝心千询 34 查看详情 蓝心千询

set globallog_output=’TABLE’;

慢查询日志仅输出到文本中(即:slow_query_log_file指定的文件)

setglobal log_output=’FILE’;

在此我向大家推荐一个架构学习交流群。交流学习群号:478030634  里面会分享一些资深架构师录制的视频录像:有Spring,MyBatis,Netty源码分析,高并发、高性能、分布式、微服务架构的原理,JVM性能优化、分布式架构等这些成为架构师必备的知识体系。还能领取免费的学习资源,目前受益良多

慢查询日志同时输出到文本和表中

setglobal log_output=’FILE,TABLE’;

关于慢查询日志的表中的数据个文本中的数据格式分析:

慢查询的日志记录myql.slow_log表中,格式如下:

2688408975-5bbe0f4d420b5_articlex.png

慢查询的日志记录到hostname.log文件中,格式如下:

5798021-5bbe0f5e71288_articlex.png

可以看到,不管是表还是文件,都具体记录了:是那条语句导致慢查询(sql_text),该慢查询语句的查询时间(query_time),锁表时间(Lock_time),以及扫描过的行数(rows_examined)等信息。

问题:如何查询当前慢查询的语句的个数?

在MySQL中有一个变量专门记录当前慢查询语句的个数:

输入命令:show global status like ‘%slow%’;

3877382473-5bbe0f6e43d00_articlex.png

(注意:上述所有命令,如果都是通过MySQL的shell将参数设置进去,如果重启MySQL,所有设置好的参数将失效,如果想要永久的生效,需要将配置参数写入my.cnf文件中)。

补充知识点:如何利用MySQL自带的慢查询日志分析工具mysqldumpslow分析日志?

perlmysqldumpslow –s c –t 10 slow-query.log

具体参数设置如下:

-s 表示按何种方式排序,c、t、l、r分别是按照记录次数、时间、查询时间、返回的记录数来排序,ac、at、al、ar,表示相应的倒叙;

-t 表示top的意思,后面跟着的数据表示返回前面多少条;

-g 后面可以写正则表达式匹配,大小写不敏感。

59782395-5bbe0f85b3389_articlex.png

上述中的参数含义如下:

Count:414            语句出现了414次;

Time=3.51s(1454)  执行最长时间为3.51s,累计总耗费时间1454s;

Lock=0.0s(0)           等待锁最长时间为0s,累计等待锁耗费时间为0s;

Rows=2194.9(9097604) 发送给客户端最多的行数为2194.9,累计发送给客户端的函数为90976404

(注意:mysqldumpslow脚本是用perl语言写的,具体mysqldumpslow的用法后期再讲)

问题:实际在学习过程中,如何得知设置的慢查询是有效的?

很简单,我们可以手动产生一条慢查询语句,比如,如果我们的慢查询log_query_time的值设置为1,则我们可以执行如下语句:

selectsleep(1);

该条语句即是慢查询语句,之后,便可以在相应的日志输出文件或表中去查看是否有该条语句。

以上就是MySQL通用查询日志和慢查询日志的简单分析的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/381425.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年11月6日 11:30:59
下一篇 2025年11月6日 11:31:43

相关推荐

  • GolangWeb开发如何管理数据库连接 集成GORM与连接池配置技巧

    在 golang 的 web 开发中正确使用 gorm 和配置连接池的方法如下:1. 初始化连接时确保 dsn 正确、设置全局唯一实例并检查错误;2. 设置连接池参数,包括最大打开连接数、最大空闲连接数和连接最大存活时间;3. 避免连接泄漏需配合 defer 关闭资源、开启监控及使用分析工具;4. …

    2025年12月15日 好文分享
    000
  • GolangWeb安全防护进阶技巧 防范SQL注入与参数篡改攻击

    要有效保护golang web应用,需从防御sql注入、参数篡改等多个层面建立完整安全体系。1. 防御sql注入应使用参数化查询或预编译语句,通过database/sql包的prepare和query方法确保输入被视为数据而非可执行代码;2. 输入验证与过滤作为辅助手段,例如移除html标签和转义特…

    2025年12月15日 好文分享
    000
  • Golang编码规范:避免常见的变量作用域错误

    要有效管理golang变量作用域,需理解规则并遵循规范。1. 短变量声明陷阱:使用:=在if或循环块内会创建新局部变量,应改用=赋值以修改外部变量;2. 循环变量捕获问题:闭包应通过参数传递或局部变量保存当前值,避免所有goroutine引用最终值;3. 命名冲突导致遮蔽:避免同名变量覆盖,若必须使…

    2025年12月15日 好文分享
    000
  • Golang中实现高可用微服务的架构设计

    实现高可用微服务架构的关键在于服务解耦、容错和自动化。1. 服务发现与注册是基础,可使用 etcd、consul 或 kubernetes dns 实现;2. 负载均衡分为客户端负载均衡和服务端负载均衡,grpc 提供了 roundrobin 算法,kubernetes service 也可作为负载…

    2025年12月15日 好文分享
    000
  • 从Java到Go:后端服务迁移的关键考量与实践建议

    本文旨在为考虑将现有Java后端服务迁移至Go语言的开发者提供一份全面的考量指南。特别是对于涉及从数据库读取命令、并行执行Shell脚本并存储结果这类任务,Go语言展现出其独特的优势与挑战。 Go语言的成熟度与生态考量 在决定采用Go语言进行后端重构之前,首要考量是其语言本身的成熟度和稳定性。Go语…

    2025年12月15日
    000
  • Go语言后端迁移:并行任务处理与数据库集成策略

    本文为将Java后端应用迁移至Go语言提供了专业指导。文章深入分析了Go在处理并行任务方面的强大能力,特别是goroutine和os/exec包的应用。同时,也坦诚地探讨了Go语言在早期阶段可能面临的挑战,包括语言本身的演进、垃圾回收机制的成熟度以及MySQL数据库核心支持的现状。旨在为计划迁移的开…

    2025年12月15日
    000
  • 从Java到Go:后端服务迁移的考量与实践建议

    本文探讨了将Java后端服务迁移至Go语言的实用建议。针对从Java背景转向Go的开发者,文章分析了Go在并行处理、命令行执行方面的优势,并深入剖析了当前Go语言在稳定性、垃圾回收机制以及核心数据库支持方面的潜在挑战。文中提供了Go语言实现并发任务和数据库交互的示例代码,旨在帮助开发者全面评估Go的…

    2025年12月15日
    000
  • 评估Go语言在后端服务迁移中的应用与考量

    评估Go语言在后端服务迁移中的应用与考量 本文旨在探讨将现有Java后端服务迁移至Go语言的可行性与注意事项,特别是针对从MySQL读取、并行执行Shell命令并保存输出这类特定任务。Go语言凭借其出色的并发模型,在此类场景中展现出巨大潜力,可有效利用goroutines和exec包实现高效的任务处…

    2025年12月15日
    000
  • 从Java到Go:后端服务迁移的考量与实践

    本文探讨了将Java后端服务迁移至Go语言的可行性与关键考量。针对读取数据库命令、并行执行Shell并保存输出的场景,Go在并发处理方面具有显著优势,但迁移过程中需重点关注其语言和生态的成熟度、垃圾回收机制以及对MySQL等数据库的官方支持情况。 Go语言在并行任务处理中的优势 对于需要从数据库读取…

    2025年12月15日
    000
  • 如何用Golang实现访问者模式 双重分发的实现技巧

    访问者模式在golang中通过接口和类型断言模拟双重分发实现,其核心步骤为:1. 定义visitor和element接口,每个具体元素实现accept方法调用访问者的对应visit函数;2. 具体访问者为每种元素实现visit逻辑,实现操作与数据结构分离;3. 适用于结构稳定、操作多变的场景,但新增…

    2025年12月15日 好文分享
    000
  • 怎样用Golang构建高效的日志聚合器 详解Loki日志驱动开发实践

    golang构建高效日志聚合器结合loki的核心优势在于其并发模型和高性能特性。1. 通过goroutines实现轻量级并发处理,支持高吞吐日志采集;2. 使用channels机制保障goroutine间安全高效通信,适配日志管道式处理流程;3. 利用sync.pool减少gc压力,提升内存复用效率…

    2025年12月15日 好文分享
    000
  • Golang如何连接并操作MySQL数据库 介绍database/sql标准用法

    golang连接并操作mysql数据库的关键步骤如下:1.安装驱动包,使用go get -u github.com/go-sql-driver/mysql下载驱动,并在代码中通过import _ “github.com/go-sql-driver/mysql”引入;2.连接数…

    2025年12月15日 好文分享
    200
  • Golang如何处理文件上传与下载 讲解multipart表单与静态文件服务

    golang处理文件上传与下载的核心在于解析multipart/form-data格式和提供静态文件服务。1. 文件上传需解析表单数据,验证文件类型、限制大小,并生成唯一文件名以确保安全;2. 下载则通过将文件内容写入http响应实现,推荐使用http.servecontent支持断点续传;3. 静…

    2025年12月15日 好文分享
    000
  • Golang如何优化数据库访问 使用预处理语句与连接池配置

    在golang中优化数据库访问的核心方法是使用预处理语句和配置连接池。1. 预处理语句通过减少sql解析开销提升性能,数据库仅需一次解析、编译sql模板,后续执行只需传入参数;2. 连接池通过复用已建立的连接降低新建连接的开销,关键配置包括设置最大打开连接数(setmaxopenconns)、最大空…

    2025年12月15日 好文分享
    000
  • Golang如何管理数据库驱动依赖 分析database/sql解耦设计原理

    golang的database/sql包通过接口抽象和驱动注册机制实现数据库解耦。1. database/sql定义driver、conn、stmt等接口,2.具体驱动如mysql或postgresql实现这些接口,3.通过sql.register函数注册驱动,4.使用匿名导入触发驱动初始化,5.s…

    2025年12月15日 好文分享
    000
  • Golang模块化开发有哪些优势 探索Golang模块化编程的价值

    go模块化开发成为主流的原因包括更清晰的依赖管理、支持多版本共存与私有模块、更好的项目组织与复用能力以及对开发者体验的提升。具体而言:1. 通过go.mod和go.sum实现依赖版本可控、版本锁定和可追溯性,避免依赖混乱;2. 支持同一依赖的多版本共存,并可通过设置goprivate拉取私有模块;3…

    2025年12月15日 好文分享
    000
  • Golang如何构建WebSocket服务 使用gorilla/websocket库实践指南

    使用gorilla/websocket库可快速构建websocket服务,具体步骤如下:1. 初始化连接需配置upgrader参数并注册处理函数;2. 通过readmessage和writemessage收发消息,建议分开goroutine处理;3. 部署时需设置超时与心跳机制;4. 使用全局map…

    2025年12月15日 好文分享
    000
  • Golang数据库操作指南_go连接MySQL实战

    golang连接mysql需使用database/sql包及驱动。1.安装推荐的mysql驱动github.com/go-sql-driver/mysql;2.通过sql.open创建连接池并用db.ping测试连接;3.查询时使用rows.scan读取数据并确保关闭rows;4.更新操作使用db.…

    2025年12月15日 好文分享
    000
  • Golang如何提升DevOps中的部署可靠性 分享蓝绿部署实现代码

    蓝绿部署是一种通过维护两个独立环境实现零停机更新的策略。其核心在于新版本先部署到非活跃环境,测试通过后切换流量以实现无缝更新。使用golang实现蓝绿部署时,可通过结构体模拟环境状态,并编写部署与流量切换逻辑。实际部署中需关注以下关键点:1. 使用基础设施即代码工具保障环境一致性;2. 采用兼容或可…

    2025年12月15日 好文分享
    000
  • Golang集成测试与单元测试如何区分 分享测试金字塔实践心得

    集成测试的价值在于验证不同模块或服务之间的协作是否正确,它可以发现单元测试无法捕捉的问题如配置错误、网络问题或数据格式不兼容等。例如在web应用中集成测试会模拟数据库、api接口和前端组件的交互检查数据传递和流程是否正常。编写集成测试通常需要搭建测试环境可使用docker compose管理依赖或用…

    2025年12月15日 好文分享
    000

发表回复

登录后才能评论
关注微信