MySQL什么是物理备份(lvm-snapshot)

本篇文章给大家带来的内容是介绍mysql什么是物理备份lvm-snapshot)。有一定的参考价值,有需要的朋友可以参考一下,希望对你们有所帮助。

lvm-snapshot(工具备份)

优点:

几乎是热备(穿件快照前把表上锁,创建完成后立即释放)

支持所有引擎

备份速度快

无需使用昂贵的商业软件(它是操作系统级别的)

缺点:

可能需要跨部门协作(使用操作系统级别的命令,DBA一般没有权限)

无法预计服务停止时间

数据如果分布在多个卷上比较麻烦(针对存储级别而言)

逻辑卷快照的原理

为什么选择lvm快照备份?

原因:因为锁表的时间不一致,在锁表的瞬间是不能写入的,对其进行快照备份,备份完成后立即解锁,然后服务可以正常使用(写入等操作)比如数据量大的时候,做快照一下子就拍了,然后立即解锁,就不影响写入等操作。如果用mysqldump备份,那么数据量大的时候,锁表时间长,就会影响效率。

操作流程

1、flush table with read locak;   2、create snapshot  3、show master status; show slave status; [可选]4、unlock tables;5、Copy files from the snapshot6、Unmount the snapshot. 7、Remove snapshot
快照备份:1.迁移数据到逻辑卷(不是必须,视情况而定)2.锁表(时间)3.给数据库所在的逻辑卷拍快照4.解锁5.将快照挂载到临时挂载点上6.将快照上的所有数据拷贝到相应的备份目录里(不同主机)7.卸载快照并删除

lvm备份示例

一、数据迁移到逻辑卷上

 环境:数据文件不在逻辑卷上,那么需要将数据文件迁移到逻辑卷上

1、创建一个逻辑卷

造好物 造好物

一站式AI造物设计平台

造好物 70 查看详情 造好物

[root@Admin ~]# pvcreate /dev/sdb[root@Admin ~]# vgcreate vg01 /dev/sdb[root@Admin ~]# lvcreate -n lv_mysql -L 4G vg01[root@Admin ~]# mkfs.ext4 /dev/mapper/vg01-lv_mysql

2、将当前的mysql数据库迁移到逻辑卷上

1>先停止应用2>停止mysql服务[root@Admin ~]# service mysqld stop3>备份所有的数据文件到指定的地方[root@Admin ~]# tar -czvf /tmp/backmysql/mysql.tar.gz /data/DB/*4>挂载逻辑卷到当前mysql的数据目录里[root@Admin ~]# mount /dev/mapper/vg01-lv_mysql /data/DB/5>将刚刚备份的数据解压到数据目录里[root@Admin ~]# tar xf /tmp/backmysql/mysql.tar.gz -C /data/DB/[root@Admin ~]# mv /data/DB/data/DB/* /data/DB/ && rm -rf /data/DB/data/6>启动数据库[root@Admin ~]# service mysqld start此处启动失败原因/data/DB/数据目录的权限变成了root,更改权限重新启动[root@Admin ~]# chown mysql. -R /data/DB/ && service mysqld start

 二、快照备份数据库

 1、给数据库加读锁

mysql> flush table with read lock;

2、给mysql的数据库所在的逻辑卷创建快照

[root@Admin ~]# lvcreate -n lv_mysql_s -L 50M -s /dev/vg01/lv_mysql[root@Admin ~]# dmsetup --tree lsvg01-lv_mysql (253:0) └─vg01-lv_mysql-real (253:1)    └─ (8:16)vg01-lv_mysql_s (253:3) ├─vg01-lv_mysql_s-cow (253:2) │  └─ (8:16) └─vg01-lv_mysql-real (253:1)    └─ (8:16)

3、解锁数据库

[root@Admin ~]# unlock tables

上面1~3步可以合并为一步

[root@Admin ~]# echo "flush tables with read lock; system lvcreate -n lv_mysql_s -L 50M -s /dev/vg01/lv_mysql;unlock tables;" |mysql -p123

4、将快照挂载到临时目录里

[root@Admin ~]# mkdir /mnt/mysql && mount /dev/vg01/lv_mysql_s /mnt/mysql/

5、备份数据

[root@Admin ~]# ls /mnt/mysql/    # 可以看到新的挂载目录里面的数据Admin.pid  db01     ib_logfile0  mysql             mysql-bin.000003  mysql-bin.000006  mysql-bin.000009  performance_schemaauto.cnf   db02     ib_logfile1  mysql-bin.000001  mysql-bin.000004  mysql-bin.000007  mysql-bin.000010  testbinlog     ibdata1  login        mysql-bin.000002  mysql-bin.000005  mysql-bin.000008  mysql-bin.index[root@Admin ~]# mkdir /backup && rsync -av /mnt/mysql /backup

6、卸载快照并删除

[root@Admin ~]# umount /mnt/mysql/ && lvremove /dev/vg01/lv_mysql_s

7、测试验证(将数据目录里面的东西全部删除)然后再将备份的数据目录恢复过来

    1>我们来点狠的,直接把mysql的数据目录/data/DB/删除。    [root@Admin ~]# rm -rf /data/DB/* && ls /data/DB/    2>删除后可以看到重启mysql直接报错了    [root@Admin ~]# service mysqld restart     MySQL server PID file could not be found!                  [失败]    Starting MySQL...The server quit without updating PID file [失败]/DB/Admin.pid).    3>根据上面的/backup里面备份的数据进行恢复    [root@Admin ~]# mv /backup/mysql/* /data/DB/    [root@Admin ~]# ls /data/DB/    auto.cnf  db02         ib_logfile1  mysql-bin.000001  mysql-bin.000004  mysql-bin.000007  mysql-bin.000010    test    binlog    ibdata1      login        mysql-bin.000002  mysql-bin.000005  mysql-bin.000008  mysql-bin.index    db01      ib_logfile0  mysql        mysql-bin.000003  mysql-bin.000006  mysql-bin.000009  performance_schema    4>重新启动    [root@Admin ~]# chown mysql. /data/DB/ -R     [root@Admin ~]# service mysqld restart    这里权限更改了如果启动还是报错的话,查看下是否mysql进程还存在,如果存在,将其kill掉再重启就OK    [root@Admin ~]# mysql -p123    mysql> show databases;    +--------------------+    | Database           |    +--------------------+    | information_schema |    | binlog             |    | db01               |    | db02               |    | login              |    | mysql              |    | performance_schema |    | test               |    +--------------------+rows in set (0.00 sec)

 将上面备份整理为脚本 + Crontab 计划任务定时完成备份

#!/bin/bash#LVM BackMysqlback_dir=/backup/`date +%F`[ -d $back_dir ]  mkdir -p $back_direcho "flush tables with read lock; system lvcreate -n lv_mysql_s -L 50M -s /dev/vg01/lv_mysql;unlock tables;" |mysql -p123mount /dev/vg01/lv_mysql_s /mnt/mysql/rsync -a /mnt/mysql/ $back_dirif [ $? -eq 0 ];then    umount /mnt/mysql/ && lvremove -f /dev/vg01/lv_mysql_sfi

自动化实现快照备份mylvmbackup

1、安装相应的软件

2、两种备份方式

  1>mylvmbackup    xxx终端备份

  2>修改配置文件指定相应的参数

正常安装MySQL:1. 安装系统2. 准备LVM,例如 /dev/vg_back/lv-mysql,mount /usr/local/mysql3. 源码安装MySQL到 /usr/local/mysql可选操作: 将现在的数据迁移到LVM1. 准备lvm及文件系统# lvcreate -L 2G -n lv-mysql vg_back# mkfs.ext4 /dev/vg_back/lv-mysql 2. 将数据迁移到LVM# service mysqld stop# mount /dev/vg_back/lv-mysql /u01/ //临时挂载点# rsync -va /usr/local/mysql/ /u01/ //将MySQL原数据镜像到临时挂载点# umount /u01/# mount /dev/vg_back/lv-mysql /usr/local/mysql //加入fstab开机挂载# df -Th/dev/mapper/vg_back-lv-mysql ext4 2.0G 274M 1.7G 15% /usr/local/mysql# service mysqld start手动基于LVM快照实现备份:1. 加锁mysql> flush table with read lock;2.创建快照# lvcreate -L 500M -s -n lv-mysql-snap /dev/vg_back/lv-mysql# mysql -uroot -p123 -e 'show master status' > /backup/`date +%F`_position.txt或者mysql> show master status;+-------------------+----------+--------------+------------------+-------------------+| File | Position | Binlog_Do_DB | Binlog_Ignore_DB | Executed_Gtid_Set |+-------------------+----------+--------------+------------------+-------------------+| mysqld-bin.00003 | 135 | | | |+-------------------+----------+--------------+------------------+-------------------+3. 释放锁mysql> unlock tables;4. 从快照中备份# mount -o ro /dev/vg_back/lv-mysql-snap /u01/# mkdir /backup/`date +%F`# rsync -a /u01/ /backup/2015-07-02/5. 移除快照# umount /u01/# lvremove -f /dev/vg_back/lv-mysql-snap脚本 + Cron完成:#!/bin/bash#LVM backmysql...back_dir=/backup/`date +%F`[ -d $back_dir ] || mkdir -p $back_dirmysql -uroot -p123 -e 'flush table with read lock'lvcreate -L 500M -s -n lv-mysql-snap /dev/vg_back/lv-mysqlmysql -uroot -p123 -e 'show master status' |grep mysql > $back_dir/position.txtmysql -uroot -p123 -e 'flush logs'mysql -uroot -p123 -e 'unlock tables'mount -o ro /dev/vg_back/lv-mysql-snap /u01rsync -a /u01/ $back_dirif [ $? -eq 0 ];thenumount /u01/lvremove -f /dev/vg_back/lv-mysql-snapfi===============================================================mylvmbackup功能:利用LVM快照实现物理备份,即LVM快照备份的自动版安装perl模块1. 在线安装http://www.lenzg.net/mylvmbackup它依赖于perl 模块,可用以下命令安装perl -MCPAN -e 'install Config::IniFiles'2. 离线安装# rpm -ivh mylvmbackup-0.16-0.noarch.rpmwarning: mylvmbackup-0.16-0.noarch.rpm: Header V4 DSA/SHA1 Signature, key ID b27291f2: NOKEYerror: Failed dependencies:perl(Config::IniFiles) is needed by mylvmbackup-0.16-0.noarchperl(Date::Format) is needed by mylvmbackup-0.16-0.noarchperl(File::Copy::Recursive) is needed by mylvmbackup-0.16-0.noarch解决:# yum -y localinstall atrpms-77-1.noarch.rpm perl-File-Copy-Recursive-0.38-1.el6.rfx.noarch.rpm perl-IO-stringy-2.110-1.2.el6.rfx.noarch.rpm perl-Config-IniFiles-2.56-1.el6.rf.noarch.rpm安装mylvmbackup软件包# yum -y install mylvmbackup-0.15-0.noarch.rpm 解决依赖关系perl-TimeDate备份方法一:# mylvmbackup --user=root --password=123 --host=localhost --mycnf=/etc/my.cnf --vgname=vg_back --lvname=lv-mysql --backuptype=tar --lvsize=100M --backupdir=/backup# tar xf backup-20140903_000236_mysql.tar.gz# lsbackup backup-cnf-20150702_000236_mysqlbackup-20150702_000236_mysql.tar.gz backup-pos备份方法二:# vim /etc/mylvmbackup.conf[mysql] #连接数据库配置user=rootpassword=123456host=localhostport=3306socket=/tmp/mysql.sockmycnf=/etc/my.cnf[lvm] #LVM逻辑卷的配置vgname=vg_server #卷组名称lvname=lv_mysql #逻辑卷名称backuplv=mysql_snap #快照卷名称lvsize=500M[fs] #文件系统配置xfs=0mountdir=/var/tmp/mylvmbackup/mnt/ #挂载目录backupdir=/backup #备份目录,也可以备份到行程主机[misc] #定义备份选项backuptype=tar #定义备份的类型backupretention=0prefix=backup #定义备份文件名前缀suffix=_mysql #定义备份文件名后缀tararg=cvf #定义tar参数,默认为cvftarfilesuffix=.tar.gz #定义备份文件后缀名格式datefmt=%Y%m%d_%H%M%S #定义备份文件名时间戳格式keep_snapshot=0 #是否保留snaphotkeep_mount=0 #是否卸载snaphotquiet=0 #定义记录日志类型注释:其他配置保持输入即可然后直接执行mylvmbackup即可mylvmbackup 参考示例

以上就是MySQL什么是物理备份(lvm-snapshot)的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/380965.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年11月6日 11:19:19
下一篇 2025年11月6日 11:20:02

相关推荐

  • Go database/sql 包:如何查询并打印多字段结果

    本文详细介绍了在go语言中使用`database/sql`包和`go-sql-driver/mysql`驱动时,如何从数据库查询中获取并打印多个字段。通过修改sql查询语句以选择所需列,并调整`rows.scan`方法以正确绑定多列数据到相应的go变量,文章演示了实现灵活数据检索和展示的关键步骤,并…

    2025年12月16日
    000
  • Go HTTP Handler 依赖注入:使用闭包优雅地传递类型

    本教程探讨了在go语言http服务中,如何将数据库连接等自定义类型或依赖项安全有效地传递给http处理函数。通过引入闭包(closure)的概念,我们能够避免使用全局变量,实现更清晰、可测试且易于维护的架构设计,确保每个请求处理都能访问到必要的资源。 在构建Go语言的Web应用程序时,HTTP处理函…

    2025年12月16日
    000
  • Go 包初始化机制详解

    go语言中,包的初始化是一个严格且有序的过程。无论一个包被程序中的多少个文件或多少个其他包导入,它都只会初始化一次。初始化流程包括按依赖顺序处理包级变量和常量,然后执行所有`init()`函数。这一机制确保了程序状态的确定性,并避免了重复初始化带来的潜在问题。 Go语言的包初始化机制是其程序执行模型…

    2025年12月16日
    000
  • 如何在Go语言中使用database/sql包查询并处理多字段结果

    本文详细介绍了如何在go语言中利用`database/sql`包和mysql驱动查询数据库,并正确处理包含多个字段的查询结果。教程涵盖了如何修改sql查询语句以选择多个列,以及如何使用`rows.scan()`方法将这些列的值绑定到go变量,并最终输出这些数据,旨在帮助开发者高效地从关系型数据库中检…

    2025年12月16日
    000
  • Go语言 database/sql 包多字段查询与数据获取指南

    本教程详细介绍了如何使用go语言的`database/sql`包配合mysql驱动从数据库中查询并获取多字段数据。核心内容包括修改sql查询语句以选择多个列,以及正确调整`rows.scan`方法来绑定这些列到go变量,确保数据被准确地读取和处理。通过示例代码,读者将掌握在go应用中高效处理数据库多…

    2025年12月16日
    000
  • Go语言 database/sql 包:如何高效查询并处理多个数据库字段

    本文详细介绍了在go语言中使用`database/sql`包和`go-sql-driver/mysql`驱动时,如何从sql查询中获取并处理多个数据库字段。核心在于正确修改sql查询语句的`select`子句以包含所有目标字段,并相应地调整`rows.scan()`方法的参数列表,确保变量顺序与查询…

    2025年12月16日
    000
  • Go 语言中如何使用 database/sql 查询并处理多个数据库字段

    本文将指导读者如何利用 go 语言的 `database/sql` 包结合 mysql 驱动,高效地从数据库查询结果中获取并处理多个字段。通过修改 sql 查询语句以选择所需列,并正确使用 `rows.scan()` 方法将多字段数据绑定到 go 变量,最终实现数据的灵活打印和应用。教程包含详细代码…

    2025年12月16日
    000
  • Golang数据库操作出错如何处理

    Go语言中数据库操作需显式处理错误,确保程序健壮性。1. 连接错误发生在sql.Open或db.Ping()时,如服务未启动或凭证错误;2. 执行错误需检查Query、Exec等返回的error;3. 结果处理时遍历*sql.Rows后必须调用rows.Err()确认迭代无误;4. 正确做法包括每次…

    2025年12月16日
    000
  • Go 语言错误处理:遵循惯例与最佳实践

    go 语言中,`if err != nil` 模式是处理错误的惯用且推荐的最佳实践。这种显式的错误检查机制贯穿于标准库,强制开发者直面并处理每个潜在错误,从而提升代码的健壮性、可读性和可维护性。本文将深入探讨这一核心模式及其在实际开发中的应用策略。 Go 语言错误处理的核心模式 在 Go 语言中,函…

    2025年12月16日
    000
  • Go语言链式系统调用中的错误处理:模式、权衡与实践

    本文深入探讨Go语言中处理一系列系统调用时遇到的错误处理挑战。通过分析Go显式错误返回模式与传统异常机制的异同,阐述Go设计哲学在提供精细化错误控制和清晰错误路径方面的优势,同时指出其在某些场景下可能带来的代码冗余,并探讨了panic及函数式编程中Either模式的关联性,旨在帮助开发者更好地理解和…

    2025年12月16日
    000
  • 解耦 App Engine Go 运行时上下文以避免平台锁定

    本文探讨了在 go 语言 app engine 应用中,如何优雅地管理 `appengine.context`,以实现与 app engine 平台的解耦。通过引入配置标志和自定义外观模式,可以在不同环境下切换使用 app engine 服务或替代服务,从而提高代码的可移植性和可维护性。 在开发 G…

    2025年12月16日
    000
  • 如何使用Golang开发Web后台管理系统

    使用Golang开发Web后台管理系统需选择高效框架如gin,设计RESTful API并划分路由组,集成GORM操作数据库实现用户、角色等模块,通过JWT实现鉴权中间件保护接口,返回统一数据格式对接前端,结合validator、zap和Swagger提升系统稳定性和可维护性。 开发一个Web后台管…

    2025年12月16日
    000
  • Golang如何开发图书管理系统

    答案:使用Golang开发图书管理系统需分层设计,包括model定义图书结构,store实现数据存储,service处理业务逻辑,handler响应HTTP请求。通过Gin框架搭建RESTful API,用内存或数据库存储数据,结合路由与中间件实现增删改查功能,并注重错误处理与输入验证,便于后期扩展…

    2025年12月16日
    000
  • Golang如何开发用户登录注册功能

    使用Go语言实现用户登录注册功能,需处理HTTP请求、验证数据、加密密码并管理会话。2. 项目结构包含handlers、models、middleware等目录,依赖net/http、gorilla/mux和bcrypt。3. 定义User模型并设计数据库表存储用户名和哈希密码。4. 注册时验证输入…

    2025年12月16日
    000
  • 如何使用Golang开发爬虫数据存储

    使用Golang开发爬虫需先发送HTTP请求获取网页内容,可采用net/http库或colly等第三方库;接着用goquery解析HTML,通过CSS选择器提取标题、链接等结构化数据;随后将数据存储至MySQL、MongoDB或本地JSON/CSV文件;最后利用goroutine实现并发抓取,并设置…

    2025年12月16日
    000
  • Golang单元测试数据库操作实践

    使用内存数据库如SQLite配合事务回滚可实现高效隔离的单元测试,通过接口抽象与Mock提升逻辑独立性,集成测试则可用Docker启动真实数据库验证兼容性,确保测试可重复且无副作用。 在Go语言开发中,数据库操作的单元测试是保障数据层逻辑正确性的关键环节。直接使用生产数据库进行测试会带来副作用,比如…

    2025年12月16日
    000
  • Golang Factory工厂模式创建对象实践

    工厂模式通过封装对象创建逻辑,提升代码解耦与扩展性。1. 简单工厂使用函数根据参数返回不同实现,如支付方式选择;2. 抽象工厂支持多产品族,如不同地区支付与通知组合;3. 适用于数据库驱动、缓存、配置加载等场景。 在Go语言中,Factory(工厂)模式是一种创建型设计模式,用于解耦对象的创建逻辑。…

    2025年12月16日
    000
  • Golang简单博客系统开发实战

    答案:用Go语言可快速搭建一个具备文章发布、查看和管理功能的简单博客系统。通过合理设计项目结构,定义文章模型并使用内存存储,结合HTTP路由与处理器实现CRUD操作,利用模板引擎渲染HTML页面,并提供静态资源访问支持,最终运行服务即可在浏览器中访问基础博客首页,具备完整雏形且易于扩展。 想快速上手…

    2025年12月16日
    000
  • Golang包重命名与导入别名使用方法

    在Go语言中,包重命名通过import别名解决命名冲突、提升可读性。例如import ( myfmt “fmt” )将fmt重命名为myfmt,后续用myfmt.Println调用;当导入同名包如json和jsoniter时,别名可明确区分标准库与第三方;使用_进行匿名导入可…

    2025年12月16日
    000
  • Go语言中实现动态IN查询的指南

    本文详细介绍了在Go语言中使用database/sql包执行带有动态参数列表的IN查询的方法。由于database/sql不直接支持将切片作为单个占位符的参数,因此需要通过动态生成SQL占位符字符串并使用interface{}切片配合可变参数来构建查询,同时考虑了空切片等边界情况。 理解databa…

    2025年12月16日
    000

发表回复

登录后才能评论
关注微信