NUMA导致的MySQL服务器SWAP问题分析与解决方案

【swap产生原理】

我们通过问答形式来探讨swap产生的原理,以帮助大家更好地理解Linux内存管理的复杂性:

1、什么是swap及其产生原因?

swap是指交换分区或文件,主要在内存使用压力大时触发内存回收,可能会将部分内存数据交换到swap空间。

2、内存回收的机制是什么?

Linux内核使用cache来缓存部分文件,提高文件读写效率。因此,引入了kswapd进程进行定期检查,以确保有足够的剩余内存空间。

当内存分配空间不足时,会直接进行内存回收。

3、如何实现内存回收?

内存回收的实现非常复杂,简而言之,主要针对文件页和匿名页,这些页通过LRU链表管理。

其中,匿名页主要通过swap进行回收,而文件页通过写回和清空进行释放。

4、几个重要的概念是什么?

内存节点(node):在NUMA架构下,CPU访问不同位置的内存会有本地内存和远端内存之分,这些是不同的节点。

内存分区(zone):Linux将内存节点进一步划分为不同的区,内存管理以zone为单位。

内存水位标记:分为high、low、min。

通过下图可以更直观地理解这些概念:

NUMA导致的MySQL服务器SWAP问题分析与解决方案

5、内存回收的行为是怎样的?

当系统剩余内存低于low时,kswapd开始进行内存回收,直到内存达到high水位。

当剩余内存达到min时,会触发直接回收。

当触发全局回收,并且file+free满足条件时,会进行进一步的回收操作。

例如,在数据库进行全备份时,cache大量使用,导致可用空间不足,从而触发内存回收:

NUMA导致的MySQL服务器SWAP问题分析与解决方案

上图展示了/proc/zoneinfo的部分内容,可以看到满足了file+free条件:

AI建筑知识问答 AI建筑知识问答

用人工智能ChatGPT帮你解答所有建筑问题

AI建筑知识问答 22 查看详情 AI建筑知识问答

NUMA导致的MySQL服务器SWAP问题分析与解决方案

为什么会有大量的文件页cache?这是因为系统在进行内存管理时,文件页的缓存机制会导致这种情况。

【关闭NUMA的方案】

1、在MySQLd_safe脚本中添加“numactl –interleave all”来启动mysqld。

2、在Linux Kernel启动参数中添加numa=off,需要重启服务器。

3、在BIOS层面关闭NUMA。

4、MySQL 5.6.27/5.7.9开始引入innodb_numa_interleave选项。

对于方案2、3、4关闭NUMA的步骤较为简单,这里不做详细描述,下面重点介绍方案1。

【开启numa interleave访问的步骤】

1、安装numactl:yum install numactl -y。

2、修改/usr/bin/mysqld_safe文件,在cmd=”mysqld_ld_preload_text$NOHUP_NICENESS”下添加以下脚本:

cmd=”/usr/bin/numactl –interleave all $cmd”

NUMA导致的MySQL服务器SWAP问题分析与解决方案

3、停止MySQL服务:service mysql stop。

4、写入硬盘,防止数据丢失:sync;sync;sync。

5、延迟10秒:sleep 10。

6、清理pagecache、dentries和inodes:sysctl -q -w vm.drop_caches=3。

7、启动MySQL服务:service mysql start。

8、验证numactl –interleave all是否生效,可以通过以下命令查看,interleave_hit是采用interleave策略从该节点分配的次数,未启动interleave策略的服务器,这个值会很低:

numastat -mn -p pidof mysqld

NUMA导致的MySQL服务器SWAP问题分析与解决方案

以上就是NUMA导致的MySQL服务器SWAP问题分析与解决方案的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/462201.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
什么是人工智能民主化?如何让AI技术进一步被社会认可
上一篇 2025年11月8日 03:55:14
VSCode怎么把标题居中_VSCodeMarkdown和HTML标题居中设置教程
下一篇 2025年11月8日 03:55:17

相关推荐

  • MySQL安装时端口冲突如何解决?

    MySQL安装时端口冲突如何解决?MySQL安装时端口冲突如何解决?MySQL安装时端口冲突如何解决?MySQL安装时端口冲突如何解决?

    mysql安装时3306端口冲突的解决方法有两类:1.修改mysql默认端口;2.找出并停止占用端口的进程。在安装过程中可通过mysql安装向导直接修改端口号,或安装后编辑配置文件my.ini(windows)或my.cnf(linux)中的port参数,并重启mysql服务生效。若确认3306应为…

    2026年9月22日 用户投稿
    700
  • Linux进程调度学习!

    进程调度决定了哪个进程将被执行以及执行的时间,操作系统通过合理的进程调度实现资源的最大化利用。 在单片机上,常见的方式是系统初始化后进入 while(1){} 循环。当然,单片机也可以运行类似 FreeRTOS 的系统,从而实现进程切换。 在带有操作系统的 CPU 上运行的逻辑是允许多个进程(实际上…

    2026年9月22日
    000
  • 夸克浏览器为什么会自动跳转到其他应用_夸克浏览器自动跳转应用原因

    1、检查链接是否含唤起协议,如intent://或weixin://;2、关闭夸克浏览器“智能打开App”功能;3、重置系统默认应用设置,确保夸克优先处理链接;4、更新或重装夸克浏览器以修复潜在问题。 如果您在使用夸克浏览器时发现页面点击后自动跳转到其他应用程序,这可能是由于浏览器与系统之间的协议调…

    2026年9月22日
    100
  • CanvaPro中AI生成图片如何导出为PDF?快速保存图像的方法

    在Canva Pro中导出AI生成图片为PDF,需先将图片添加至设计,点击“分享”→“下载”→选择“PDF标准”或“PDF打印”即可。2. PDF标准适用于在线分享,文件小、加载快;PDF打印适用于高质量印刷,支持300 DPI和CMYK色彩模式,确保色彩准确与细节清晰。3. 为保证AI图片导出质量…

    2026年9月22日
    100
  • Laravel 文件上传:解决数据库存储物理路径而非可访问 URL 的问题

    本教程旨在解决 laravel 文件上传后,数据库中存储文件物理路径而非可访问 url 的常见问题。通过分析 move() 方法的返回值,并引入 url() 辅助函数,我们将演示如何正确地将文件移动到指定目录,同时确保数据库记录的是可供前端访问的图片资源链接,从而避免图片无法正常显示。 在 Lara…

    2026年9月22日
    000
  • 抖音达人橱窗账号怎么起号的?抖音橱窗在哪里

    越来越多的达人纷纷入驻,希望通过橱窗账号实现变现。如何起号、运营,才能在众多达人中脱颖而出,成为爆款呢?本文将从以下几个方面为您解析抖音达人橱窗账号起号攻略。 一、关键词选择与定位 1. 关键词选择 关键词是抖音达人橱窗账号的核心,它决定了你的内容方向和受众群体。以下是一些建议: (1)关注热点:紧…

    2026年9月22日
    000
  • VSCode设置Markdown写作环境(实用技巧,排版美化指南)

    要在vscode里打造舒服又高效的markdown写作环境,答案是通过安装核心扩展并进行个性化配置来实现;需安装markdown all in one、markdown preview enhanced、prettier和paste image等扩展,结合settings.json中的编辑器设置、自…

    2026年9月22日
    100
  • 好用的终端复用神器-Tmux

    好用的终端复用神器-Tmux好用的终端复用神器-Tmux好用的终端复用神器-Tmux好用的终端复用神器-Tmux

    前言 许久之前就听说过tmux,但是一直没上手,直到最近需要一直在linux下完成一些任务,我才切实感受到了tmux的优点:任意分屏、保存工作 就单单这两点,就足够实用了。分屏,曾今还十分痴迷i3wm和dwm这样的窗口管理工具,尤其是dwm的操作逻辑,大大提升linux工作效率。其他详情可以查看阮一…

    2026年9月22日 用户投稿
    100
  • LINUX如何比较两个文件的差异_Linux使用diff命令比较文件差异

    diff命令用于比较文件差异,基本用法为diff file1 file2,输出显示修改、添加或删除的行;结合-u、-i、-w等选项可提升可读性,常用于比较配置文件、代码版本、生成补丁(diff -u生成.patch文件)及验证文件一致性。 在Linux系统中,比较两个文件的差异是日常运维、开发和配置…

    2026年9月22日
    000
  • Java项目类路径管理:引用与实现外部.class文件定义的接口

    在Java项目中引用并实现由.class文件定义的接口,核心在于正确配置Java的类路径(Classpath)。本文将详细介绍类路径的概念、其重要性,以及如何在命令行和集成开发环境(IDE)中有效地设置类路径,确保编译器和JVM能够找到所需的.class文件,从而成功编译和运行包含外部接口实现的代码…

    2026年9月22日
    000
  • VSCode一键配置Rust:中文文档、语法高亮、Cargo集成

    安装Rust Analyzer扩展是VS Code配置Rust开发环境的核心,它提供语法高亮、智能补全、错误提示、定义跳转、Cargo集成等功能,并通过本地中文文档组件支持中文提示,实现开箱即用的高效开发体验。 VS Code配置Rust开发环境,尤其是要兼顾中文文档、语法高亮和Cargo项目管理,…

    2026年9月22日
    100
  • MAC上的虚拟机哪个最好用_MAC虚拟机软件推荐

    首选Parallels Desktop,因其在Mac上性能卓越、集成度高,适合运行Windows及图形密集型应用;UTM作为开源替代方案,基于QEMU,支持多系统且可定制性强,适合技术爱好者;VMware Fusion稳定性强,尤其适合企业级Linux虚拟化需求。三者均需通过ISO镜像安装系统,并推…

    2026年9月22日
    000
  • 动手实验+源码分析,彻底弄懂 Linux 网络命名空间

    动手实验+源码分析,彻底弄懂 Linux 网络命名空间动手实验+源码分析,彻底弄懂 Linux 网络命名空间动手实验+源码分析,彻底弄懂 Linux 网络命名空间动手实验+源码分析,彻底弄懂 Linux 网络命名空间

    大家好,我是飞哥! 在 Linux 上通过 veth 我们可以创建出许多的虚拟设备。通过 Bridge 模拟以太网交换机的方式可以让这些网络设备之间进行通信。不过虚拟化中还有很重要的一步,那就是隔离。借用 Docker 的概念来说,那就是不能让 A 容器用到 B 容器的设备,甚至连看一眼都不可以。只…

    2026年9月22日 用户投稿
    000
  • 苹果手机小红点怎么消除

    为什么想要去掉小红点? 小红点的消失能让界面显得更清爽,避免视觉干扰。对部分用户而言,满屏的小红点象征着大量未处理事项,容易引发焦虑情绪。此外,清除不必要的提示标记有助于集中注意力在当前使用的应用上,提升操作效率。 具体操作指南 1. 打开设置:解锁您的iPhone,点击主屏幕上的“设置”图标,进入…

    2026年9月22日
    100
  • DALL-E3如何导出生成的AI图片?一步步教你保存高分辨率图像

    DALL-E 3生成图片的默认分辨率为1024×1024像素,获取高清原图的关键是使用平台提供的官方下载按钮,而非右键“图片另存为”,以避免保存低分辨率缩略图;为防止画质损失,应避免二次压缩,并通过建立清晰的文件夹结构、规范命名、本地与云端同步等方式进行有效管理和备份;根据OpenAI政策…

    2026年9月22日
    000
  • 如何在PyTorchGeometric训练AI大模型?图神经网络的训练方法

    如何在PyTorchGeometric训练AI大模型?图神经网络的训练方法如何在PyTorchGeometric训练AI大模型?图神经网络的训练方法如何在PyTorchGeometric训练AI大模型?图神经网络的训练方法如何在PyTorchGeometric训练AI大模型?图神经网络的训练方法

    PyTorch Geometric中训练大型GNN模型的核心挑战在于内存管理与计算效率,需通过邻居采样、子图采样等技术实现高效数据加载;采用GraphSAGE、PinSAGE等可扩展模型架构;结合梯度累积与混合精度训练优化资源利用;利用稀疏张量存储、特征降维、ClusterLoader等策略进行内存…

    2026年9月22日 用户投稿
    000
  • 电脑win11使用vnc连接手机ubuntu

    电脑win11使用vnc连接手机ubuntu电脑win11使用vnc连接手机ubuntu电脑win11使用vnc连接手机ubuntu电脑win11使用vnc连接手机ubuntu

    由于互联需要,使用vnc,手机端开发代码太伤眼睛了。 www.realvnc.com/en/connect/download/viewer/ 选择standalone exe x64,试一试看看??? 使用版本VNC-Viewer-6.21.1109-Windows-64bit。 双击打开,同意条款…

    2026年9月22日 用户投稿
    100
  • VSCode极速配置TypeScript:类型检查、中文报错、编译优化

    答案:合理配置tsconfig.json并结合VSCode插件可提升TypeScript开发效率。1. tsconfig.json中设置target、module、strict、skipLibCheck及paths优化类型检查与编译速度;2. 使用TypeScript ESLint和Prettier…

    2026年9月22日
    000
  • 如何通过HD Tune和CrystalDiskInfo检测SSD健康度与寿命?

    CrystalDiskInfo和HD Tune可准确评估SSD健康状态与寿命。首先使用CrystalDiskInfo查看健康等级及SMART参数,重点关注重新分配扇区计数、磨损均衡计数和剩余寿命百分比;开启AUTOSAVE功能记录长期状态。再通过HD Tune检查SMART警告项,执行错误扫描排查读…

    2026年9月22日
    300
  • Docker的安装与卸载

    Docker的安装与卸载Docker的安装与卸载Docker的安装与卸载Docker的安装与卸载

    docker并不是一个通用的容器工具,它依赖于linux内核环境。实际上,docker是在运行的linux系统下创建一个隔离的文件环境,因此它的执行效率几乎与宿主环境相当。因此,在windows上部署docker需要先安装wsl子系统来提供linux环境,然后才能安装docker。 Docker由三…

    2026年9月22日 用户投稿
    100

发表回复

登录后才能评论
关注微信