详细介绍mysql理论和基础知识

本篇文章给大家详细介绍mysql理论和基础知识。有一定的参考价值,有需要的朋友可以参考一下,希望对大家有所帮助。

详细介绍mysql理论和基础知识

mysql架构

一、网络连接层

客户端连接器(Client Connectors):提供与MySQL服务器建立的支持。目前几乎支持所有主流 的服务端编程技术,例如常见的 Java、C、Python、.NET等,它们通过各自API技术与MySQL建立连接

二、服务层(MySQL Server)

服务层是MySQL Server的核心,主要包含系统管理和控制工具、连接池、SQL接口、解析器、查询优化器和缓存六个部分。

连接池(Connection Pool):负责存储和管理客户端与数据库的连接,一个线程负责管理一个连接。

系统管理和控制工具(Management Services & Utilities):例如备份恢复、安全管理、集群 管理等

SQL接口(SQL Interface):用于接受客户端发送的各种SQL命令,并且返回用户需要查询的结 果。比如DML、DDL、存储过程、视图、触发器等。

解析器(Parser):负责将请求的SQL解析生成一个”解析树”。然后根据一些MySQL规则进一步 检查解析树是否合法。

查询优化器(Optimizer):当“解析树”通过解析器语法检查后,将交由优化器将其转化成执行计 划,然后与存储引擎交互。

select uid,name from user where gender=1;

选取–》投影–》联接 策略

1)select先根据where语句进行选取,并不是查询出全部数据再过滤

2)select查询根据uid和name进行属性投影,并不是取出所有字段

3)将前面选取和投影联接起来最终生成查询结果

缓存(Cache&Buffer): 缓存机制是由一系列小缓存组成的。比如表缓存,记录缓存,权限缓 存,引擎缓存等。如果查询缓存有命中的查询结果,查询语句就可以直接去查询缓存中取数据。

三、存储引擎层(Pluggable Storage Engines)

存储引擎负责MySQL中数据的存储与提取,与底层系统文件进行交互。MySQL存储引擎是插件式的, 服务器中的查询执行引擎通过接口与存储引擎进行通信,接口屏蔽了不同存储引擎之间的差异 。现在有 很多种存储引擎,各有各的特点,最常见的是MyISAM和InnoDB。

四、系统文件层(File System) 

该层负责将数据库的数据和日志存储在文件系统之上,并完成与存储引擎的交互,是文件的物理存储层。主要包含日志文件,数据文件,配置文件,pid 文件,socket 文件等。

日志文件

错误日志(Error log)

默认开启,show variables like ‘%log_error%’

通用查询日志(General query log)

记录一般查询语句,show variables like ‘%general%’;

二进制日志(binary log)

记录了对MySQL数据库执行的更改操作,并且记录了语句的发生时间、执行时长;但是它不 记录select、show等不修改数据库的SQL。主要用于数据库恢复和主从复制。

show variables like ‘%log_bin%’; //是否开启

show variables like ‘%binlog%’; //参数查看

show binary logs;//查看日志文件 慢

查询日志(Slow query log)

记录所有执行时间超时的查询SQL,默认是10秒。

show variables like ‘%slow_query%’; //是否开启

show variables like ‘%long_query_time%’; //时长

配置文件

用于存放MySQL所有的配置信息文件,比如my.cnf、my.ini等。

数据文件

db.opt 文件:记录这个库的默认使用的字符集和校验规则。

frm 文件:存储与表相关的元数据(meta)信息,包括表结构的定义信息等,每一张表都会 有一个frm 文件。

飞书知识问答 飞书知识问答

飞书平台推出的AI知识库管理和智能搜索工具

飞书知识问答 45 查看详情 飞书知识问答

MYD 文件:MyISAM 存储引擎专用,存放 MyISAM 表的数据(data),每一张表都会有一个 .MYD 文件。

MYI 文件:MyISAM 存储引擎专用,存放 MyISAM 表的索引相关信息,每一张 MyISAM 表对 应一个 .MYI 文件。

ibd文件和 IBDATA 文件:存放 InnoDB 的数据文件(包括索引)。InnoDB 存储引擎有两种 表空间方式:独享表空间和共享表空间。独享表空间使用 .ibd 文件来存放数据,且每一张 InnoDB 表对应一个 .ibd 文件。共享表空间使用 .ibdata 文件,所有表共同使用一个(或多 个,自行配置).ibdata 文件。

ibdata1 文件:系统表空间数据文件,存储表元数据、Undo日志等 。

ib_logfile0、ib_logfile1 文件:Redo log 日志文件。

pid 文件

pid 文件是 mysqld 应用程序在 Unix/Linux 环境下的一个进程文件,和许多其他 Unix/Linux 服务端程序一样,它存放着自己的进程 id。

socket 文件

socket 文件也是在 Unix/Linux 环境下才有的,用户在 Unix/Linux 环境下客户端连接可以不通过 TCP/IP 网络而直接使用 Unix Socket 来连接 MySQL。

InnoDB和MyISAM

事务和外键

InnoDB支持事务和外键,具有安全性和完整性,适合大量insert或update操作 

MyISAM不支持事务和外键,它提供高速存储和检索,适合大量的select查询操作

锁机制

InnoDB支持行级锁,锁定指定记录。基于索引来加锁实现。

MyISAM支持表级锁,锁定整张表。

索引结构

InnoDB使用聚集索引(聚簇索引),索引和记录在一起存储,既缓存索引,也缓存记录。

MyISAM使用非聚集索引(非聚簇索引),索引和记录分开。

并发处理能力

MyISAM使用表锁,会导致写操作并发率低,读之间并不阻塞,读写阻塞。

InnoDB读写阻塞可以与隔离级别有关,可以采用多版本并发控制(MVCC)来支持高并发

存储文件

InnoDB表对应两个文件,一个.frm表结构文件,一个.ibd数据文件。InnoDB表最大支持64TB;

MyISAM表对应三个文件,一个.frm表结构文件,一个MYD表数据文件,一个.MYI索引文件。从 MySQL5.0开始默认限制是256TB。

Redo Log和Binlog区别

Redo Log是属于InnoDB引擎功能,Binlog是属于MySQL Server自带功能,并且是以二进制 文件记录。

Redo Log属于物理日志,记录该数据页更新状态内容,Binlog是逻辑日志,记录更新过程。

Redo Log日志是循环写,日志空间大小是固定,Binlog是追加写入,写完一个写下一个,不 会覆盖使用。

Redo Log作为服务器异常宕机后事务数据自动恢复使用,Binlog可以作为主从复制和数据恢 复使用。Binlog没有自动crash-safe能力。

在应用中可以在从库追加多个索引来优化查询,主库这些索引可以不加,用于提升写效率。

读写分离方案

1写后立刻读

在写入数据库后,某个时间段内读操作就去主库,之后读操作访问从库。

2二次查询

先去从库读取数据,找不到时就去主库进行数据读取。该操作容易将读压力返还给主库,为了避免 恶意攻击,建议对数据库访问API操作进行封装,有利于安全和低耦合。

3根据业务特殊处理

根据业务特点和重要程度进行调整,比如重要的,实时性要求高的业务数据读写可以放在主库。对 于次要的业务,实时性要求不高可以进行读写分离,查询时去从库查询。

相关推荐:《mysql教程》

以上就是详细介绍mysql理论和基础知识的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/290354.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年11月4日 20:22:06
下一篇 2025年11月4日 20:25:57

相关推荐

  • 如何保证Python代码的安全性和健壮性?

    答案:Python代码的安全性与健壮性需通过多层次防御实现。核心包括:1. 输入验证与数据清洗,防止注入攻击,使用Pydantic等工具校验数据;2. 精确的异常处理,捕获具体异常类型,结合finally进行资源清理;3. 依赖安全管理,使用pip-audit扫描漏洞,锁定版本并定期更新;4. 遵循…

    2025年12月14日
    000
  • 谈谈你对Python协程和asyncio的理解。

    Python协程与asyncio通过协作式并发高效处理I/O密集任务,相比多线程/多进程,其在单线程内以await暂停协程,由事件循环调度,避免GIL限制与线程切换开销,适用于爬虫、异步Web服务、数据库操作等场景,并通过asyncio.create_task、gather和异常处理机制实现任务管理…

    2025年12月14日
    000
  • 如何使用Python操作数据库(SQLite/MySQL)?

    选择合适的数据库驱动需根据数据库类型和项目需求,如SQLite用自带sqlite3,MySQL选mysql-connector-python或pymysql,PostgreSQL用psycopg2,并综合考虑性能、兼容性、功能和易用性;操作流程包括安装驱动、建立连接、执行SQL、提交事务和关闭连接;…

    2025年12月14日
    000
  • 什么是ORM?它的优点和缺点是什么?

    ORM通过将数据库表映射为类、行映射为对象、列映射为属性,实现关系型数据库与面向对象编程的桥接,提升开发效率、代码可读性与维护性,支持多数据库迁移并增强SQL注入防护;但其存在性能开销、学习曲线陡峭、过度封装导致掌控力下降及N+1查询等性能陷阱问题;实际应用中应根据项目需求、团队能力权衡使用,CRU…

    2025年12月14日
    000
  • 如何用Python实现一个简单的Web服务器?

    Python内置http.server模块可快速搭建Web服务器,适合本地文件共享、教学演示等简单场景,优势是无需第三方库、实现便捷,但存在性能差、功能有限、安全性弱等局限,不适用于高并发或生产环境。通过继承BaseHTTPRequestHandler重写do_GET/do_POST方法可实现动态内…

    2025年12月14日
    000
  • python怎么连接mysql数据库_python数据库操作指南

    Python连接MySQL需使用PyMySQL等库作为“桥梁”,通过API发送SQL指令。首先安装库并建立连接,注意配置host、user、password等参数,推荐使用环境变量避免硬编码。常见认证问题包括用户名密码错误、权限不足(如’@localhost’与’…

    2025年12月14日
    000
  • Python中数据库如何连接 Python中数据库连接教程

    Python连接数据库需依赖特定驱动,遵循DB-API 2.0规范,核心流程为连接、游标、执行、提交、关闭;不同数据库在驱动安装、参数配置、SQL方言、占位符(如?或%s)等方面存在差异,需注意事务管理与异常处理;推荐使用ORM(如SQLAlchemy)提升代码可维护性并防范SQL注入,复杂场景可结…

    2025年12月14日
    000
  • Python如何爬取网页数据_Python网络爬虫步骤详解

    答案:Python爬取网页数据需经历发送请求、解析内容和存储数据三步。首先用requests库获取网页HTML,结合headers和timeout参数模拟浏览器行为;接着使用BeautifulSoup或lxml解析HTML,通过标签、CSS选择器或XPath提取目标信息;若内容由JavaScript…

    2025年12月14日
    000
  • Python怎样操作数据库_Python数据库CRUD步骤解析

    Python操作数据库需通过驱动建立连接并执行SQL,遵循连接、创建游标、执行SQL、提交事务、关闭连接的流程,使用参数化查询防SQL注入,结合try-except-finally管理事务确保数据一致性。 Python操作数据库的核心在于通过特定的数据库驱动(如 sqlite3 、 psycopg2…

    2025年12月14日
    000
  • Python怎么连接数据库_Python数据库连接步骤详解

    答案:Python连接数据库需选对驱动库,通过连接、游标、SQL执行、事务提交与资源关闭完成操作,使用参数化查询防注入,结合连接池、环境变量、ORM和with语句提升安全与性能。 说起Python连接数据库,其实并不复杂,核心就是‘找对钥匙’——也就是那个能让Python和特定数据库对话的驱动库。一…

    2025年12月14日
    000
  • 解决Django ORM在PostgreSQL中正则表达式词边界失效的问题

    本文旨在解决Django ORM在使用PostgreSQL数据库时,正则表达式中(词边界)无法正确匹配的问题。许多开发者在使用text__regex=r’some’等模式时会发现其失效。究其原因,在PostgreSQL的正则表达式中并非词边界,而是退格符。正确的词边界匹配符应…

    2025年12月14日
    000
  • Django ORM与PostgreSQL:解决正则表达式词边界无效问题

    在使用Django ORM通过__regex查询PostgreSQL数据库时,Python正则表达式中的b(词边界)元字符可能无法按预期工作。这是因为PostgreSQL的正则表达式引擎将b解释为退格符,而非词边界。本文将详细解释此问题,并提供解决方案:使用PostgreSQL特有的词边界元字符y来…

    2025年12月14日
    000
  • PostgreSQL正则表达式中的单词边界:与y的辨析与应用

    在使用Django ORM对PostgreSQL数据库执行正则表达式查询时,开发者常会遇到b(单词边界)字符无法按预期工作的问题。这并非Django ORM的缺陷,而是由于PostgreSQL的正则表达式语法中,b代表退格符而非单词边界。正确的单词边界元字符应为y。本文将深入探讨这一差异,并提供在D…

    2025年12月14日
    000
  • 解决Django ORM中PostgreSQL正则表达式字边界失效问题

    在Django ORM中使用PostgreSQL数据库时,开发者可能会发现正则表达式中的b(字边界)无法正确匹配。这是因为PostgreSQL的正则表达式语法与Python标准库有所不同,b在PostgreSQL中被解释为退格符而非字边界。本文将详细解释这一差异,并提供解决方案:在PostgreSQ…

    2025年12月14日
    000
  • Django ORM在PostgreSQL中正确使用正则表达式单词边界y

    本文旨在解决Django ORM在PostgreSQL数据库中使用正则表达式时,单词边界元字符无法按预期工作的问题。核心原因是PostgreSQL的正则表达式语法中,并非表示单词边界,而是退格符。正确的解决方案是使用PostgreSQL特有的y元字符来匹配单词的起始或结束位置,从而实现精确的单词匹配…

    2025年12月14日
    000
  • Python如何制作网络爬虫?Scrapy框架

    使用python和scrapy制作网络爬虫的核心流程包括:安装scrapy、创建项目、定义spider、编写解析逻辑并利用选择器提取数据;2. scrapy通过设置user-agent、使用代理ip池、配置下载延迟和autothrottle、集成selenium或scrapy-splash等方式应对…

    2025年12月14日
    000
  • Python如何实现网页爬虫?requests+BeautifulSoup

    使用python实现网页爬虫的核心流程包括:发起请求、获取响应、解析html、提取数据;2. 选择requests和beautifulsoup组合的原因是其学习曲线平缓、功能强大且灵活,requests库封装了http请求的复杂性,beautifulsoup能高效解析不规范的html结构;3. 应对…

    2025年12月14日
    000
  • SQLAlchemy 将 UUID 主键映射为字符串问题的解决与实践

    本文旨在解决在使用 SQLAlchemy (SQLModel) 时,UUID 主键被错误地映射为字符串类型的问题。通过分析问题原因,提供解决方案,并给出示例代码,帮助开发者正确处理 UUID 类型,确保数据类型的一致性,避免潜在的类型错误。本文适合使用 SQLAlchemy 和 SQLModel 进…

    2025年12月14日
    000
  • Python怎样操作MariaDB数据库?mariadb连接器

    python操作mariadb应优先选择pymysql或mysql-connector-python,pymysql因纯python实现、安装简便、社区活跃而更适合大多数场景;2. 防止sql注入必须使用参数化查询,通过占位符(如%s)与参数元组分离sql结构与数据,避免恶意输入篡改语句;3. 事务…

    2025年12月14日
    000
  • 如何用Python源码开发追剧提醒系统 Python源码定时任务与接口集成

    要开发python追剧提醒系统,关键步骤如下:1.选择数据库存储信息,小型项目用sqlite,大型用mysql;2.调用视频源api或使用爬虫获取更新数据,注意频率限制和合规性;3.使用schedule或apscheduler实现定时任务,前者适合简单任务,后者支持复杂调度;4.通过邮件、短信或微信…

    2025年12月14日 好文分享
    000

发表回复

登录后才能评论
关注微信