一文搞懂│mysql 中的备份恢复、分区分表、主从复制、读写分离
mysql 的备份和恢复
- 创建备份管理员
- 创建备份管理员,并授予管理员相应的权限
- 备份所需权限:
select,reload,lock tables,replication client,show view,event,process
# 创建管理员
create user 'backup'@'localhost' identified by '123456';
# 给管理员授权
grant select,reload,lock tables,replication client,show view,event,process on *.* to 'backup'@'localhost';
- sql 文件恢复之全量恢复
- 只要将备份的
sql
文件直接导入数据库即可
mysql -uroot -p 数据库 < sql文件
- sql 文件恢复之基于时间点的恢复
# 首先进行一次基于最近一次的全量备份的文件进行一次全量恢复
mysql -uroot -p 数据库 < sql文件
# 然后查看备份的sql文件的 CHANGE MASTER 值,基于该值进行二进制日志的还原
CHANGE MASTER TO MASTER_LOG_FILE='binlog.000007', MASTER_LOG_POS=154;
# 查看二进制日志,根据时间点找到误操作前一段时间的二进制日志
cd /var/lib/mysql
mysqlbinlog --base64-output=decode-rows -vv --start-position=154 --database=数据库名 binlog.000008 | grep -B3 DELETE | more
# 记录最早删除记录的节点值,执行日志导出
mysqlbinlog --start-position=开始节点 --stop-position=结束节点 --database=数据库 二进制日志名 > 导出的sql文件名
mysqlbinlog --start-position=154 --stop-position=26158 --database=laravel binlog.000007 > laravel.sql
# 对导出的sql文件进行全量的还原
mysql -uroot -p 数据库 < sql文件
- mysqldump逻辑备份
- 指定数据库多个表进行备份:
mysqldump [OPTIONS] database [table]
- 指定多个数据库备份:
mysqldump [OPTIONS] database [OPTIONS] DB1 DB2
- 整个数据库实例进行备份:
mysqldump [OPTIONS] --all-database [OPTIONS]
- 参数
--single-transaction
:开启事务保证备份数据的完整性,innodb
特有 - 参数
-l或--lock-tables
:依次锁定备份数据库所有表保证备份数据的完整性 - 参数
-x或--lock-all-table
:一次性锁定整个数据库实例所有数据表保证数据完整性 - 参数
--master-data=[1/2]
:CHANGE MASTER TO
语句会被写成一个sql
注释;1
不会被写成注释,2
写成注释,默认1
- 参数
-R或--routines
:备份数据库存储过程 - 参数
--triggers
:备份数据库触发器 - 参数
-E或--events
:备份数据库调度事件 - 参数
--hex-blob
:16
进制导出bit
列和blob
列数据 避免数据文本不可见 - 参数
--tab=path
:指定路径下为每个数据库生成两个文件:数据结构
、数据
- 参数
-w或--where=过滤条件
:过滤指定数据,仅支持单表导出 - 注意:
--single-transaction
,--lock-tables
参数是互斥的,所以,如果同一个数据库下同时存在innodb
表和myisam
表只能使用--lock-tables
来保证备份数据的一致性,但是--lock-tables
只能保证某一备份数据库的完整性,不能保证整个实例备份的完整性
mysqldump -ubackup -p --master-data=2 --single-transaction --routines --triggers --events 数据库 > 备份文件.sql
- XtraBackup备份
- 自定义下载地址:Percona 存储库
- 命令下载:
yum install http://www.percona.com/downloads/percona-release/redhat/0.1-4/percona-release-0.1-4.noarch.rpm
- 测试储存库安装是否成功命令:
yum list | grep percona
# 下载 libev软件包
yum install https://dl.fedoraproject.org/pub/epel/epel-release-latest-6.noarch.rpm
# 安装 libev软件包
yum install percona-xtrabackup-24
# 全量备份
innobackupex --user=管理员账号 --password=密码 --parallel=2 备份路径
innobackupex --user=backup --password=Gzjunyu19970925. --parallel=2 /home/db_backup/
# 全量恢复,建议恢复前停止mysql服务,且清空mysql数据文件
innobackupex --datadir=mysql数据路径 --copy-back 备份路径
innobackupex --datadir=/var/lib/mysql --copy-back /home/db_backup/2018-04-21_10-44-22/
# 修改mysql数据路径的权限为777
chmod -R 777 /var/lib/mysql
mysql 的分区分表
- 查看是否支持分区分表:
show plugins;
- 删除分区命令:
ALTER TABLE 表名 DROP PARTITION 分表名称;
- 分区分类:
范围分区
、哈希分区
、时间分区
# 范围分区
CREATE TABLE `表名`(
-- 数据字段
)engine=INNODB
PARTITION BY RANGE(`字段名称`) (
PARTITION 分表名称 VALUES LESS THAN(范围),
PARTITION 分表名称 VALUES LESS THAN(范围)
);
# 哈希分区
create table `表名`(
-- 数据字段
)engine=INNODB
PARTITION BY HASH(UNIX TIMESTAMP(`字段名称`)) PATITIONS 4;
# 时间分区
create table `表名`(
-- 数据字段
)engine=INNODB
PARTITION BY RANGE(YEAR(`字段名称`))(
PARTITION p0 VALUES LESS THAN(2017),
PARTITION p1 VALUES LESS THAN(2018),
PARTITION p2 VALUES LESS THAN(2019)
);
# 查看分区情况
SELECT
table_name,partition_name,partition_description,table_rows
FROM
information_schema.`PARTITIONS`
WHERE table_name = '表名';
# 归档分区数据,mysql数据库版本需要大于等于5.7
-- 分区归档操作步骤
-- 1.新建和分区表字段一致的数据表 归档表前缀为 arch_
CREATE TABLE `归档表表名`(
)engine=INNODB
-- 2.进行数据交换 p0为分区名
ALTER TABLE `原数据表表名` exchange PARTITION p0 WITH TABLE `归档表表名`;
-- 3.删除分区,避免对数据的再次写入
ALTER TABLE `原数据表表名` DROP PARTITION p0;
-- 4.将归档表引擎设置为 archive 在检表语句中mysql引擎必须和原数据表引擎一致,否则无法进行数据交换
ALTER TABLE `归档表表名` ENGINE=ARCHIVE;
mysql 的主从复制读写分离
- 授权远程访问 mysql 数据库
- 新建相关数据库管理员,授权并开启远程访问权限
-- 建议新建一个备份和主从复制的数据库管理员
CREATE USER 'backup'@'localhost' IDENTIFIED BY '密码';
-- 分配相关权限
grant select,reload,lock tables,replication client,show view,event,process on *.* to 'backup'@'localhost';
-- 开启远程访问权限
GRANT ALL PRIVILEGES ON *.* TO 授权用户名@被授权服务器的IP IDENTIFIED BY '授权密码';
FLUSH PRIVILEGES;
- 配置mysql主服务器
- 需要在
master
服务器和slave
服务器都建立一个同名的数据(备份数据库) - 在主服务器中开启
binlog
日志和设置要发生主从同步数据库,使用vim
打开/etc/my.cnf
文件,修改配置如下 - 配置完毕后,需要重启服务:
service mysqld restart;
#mysql的bin-log日志配置选项,假设做读写(主从),这个选项在从服务器必须关闭
log_bin = binlog
#端口信息,其实可以不写
port = 3306
#主服务器的id,这id不一定设为1,只要主从不一样就行
server-id = 1
#要做同步的数据库名字,可以是多个数据库,之间用分号分割。
binlog_do_db = test
- 检查配置
- 登录
mysql
查看binlog
日志相关参数是否正确
show master status;
show variables like 'log_bin';
- 配置mysql从服务器
- 主服务器已经配置成功,这时要切换到从服务器开始配置
- 在从服务器中开启
binlog
日志和设置要发生主从同步数据库,使用vim
打开/etc/my.cnf
文件,修改配置如下
#从服务器的id,必须与主服务器的id是不同
server-id = 2
#主服务器的ip地址
master-host = 192.168.56.2
#grant授权的可复制用户账号
master-user = backup
#grant授权的可复制密码
master-password = 123456
#主服务器的mysql端口
master-port = 3306
#这个参数是用来设置在和主服务器连接丢失的时候,重试的时间间隔,默认是60秒
master-connect-retry = 20
#需要同步的主服务器数据库
replicate-do-db = test
- 检测主从复制配置是否成功
show slave status\G
-- 如果结果包含如下参数,则证明主从已经配置成功
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
一文搞懂│mysql 中的备份恢复、分区分表、主从复制、读写分离的更多相关文章
- 一文搞懂 js 中的各种 for 循环的不同之处
一文搞懂 js 中的各种 for 循环的不同之处 See the Pen for...in vs for...of by xgqfrms (@xgqfrms) on CodePen. for &quo ...
- 一文搞懂MySQL体系架构!!
写在前面 很多小伙伴工作很长时间了,对于MySQL的掌握程度却仅仅停留在表面的CRUD,对于MySQL深层次的原理和技术知识了解的少之又少,随着工作年限的不断增长,职场竞争力却是不断降低的.很多时候, ...
- 一文搞懂mysql索引底层逻辑,干货满满!
一.什么是索引 在mysql中,索引是一种特殊的数据库结构,由数据表中的一列或多列组合而成,可以用来快速查询数据表中有某一特定值的记录.通过索引,查询数据时不用读完记录的所有信息,而只是查询索引列即可 ...
- 一文搞懂--Java中重写equals方法为什么要重写hashcode方法?
Java中重写equals方法为什么要重写hashcode方法? 直接看下面的例子: 首先我们只重写equals()方法 public class Test { public static void ...
- 一文搞懂MySQL前缀索引
引入 通常在开发中我们需要定义字符串类型的字段,例如用户名或者用户邮箱等. 假设我们在维护一个用户登录系统,用户表的定义: create table User( ID bigint unsigned ...
- 一文搞懂 SLAM 中的Extension Kalman Filter 算法编程
作者 | Doreen 01 问题描述 预先知道事物未来的状态总是很有价值的! √ 预知台风的路线可以避免或减轻重大自然灾害的损失. √ 敌国打过来的导弹,如果能够高精度预测轨迹,就能有效拦截. √ ...
- 一文搞懂MySQL事务的隔离性如何实现|MVCC
关注公众号[程序员白泽],带你走进一个不一样的程序员/学生党 前言 MySQL有ACID四大特性,本文着重讲解MySQL不同事务之间的隔离性的概念,以及MySQL如何实现隔离性.下面先罗列一下MySQ ...
- 一文搞懂Python中的所有数组数据类型
关于我 一个有思想的程序猿,终身学习实践者,目前在一个创业团队任team lead,技术栈涉及Android.Python.Java和Go,这个也是我们团队的主要技术栈. Github:https:/ ...
- 一文搞懂 Java 中的枚举,写得非常好!
知识点 概念 enum的全称为 enumeration, 是 JDK 1.5 中引入的新特性. 在Java中,被 enum关键字修饰的类型就是枚举类型.形式如下: enum Color { RED, ...
随机推荐
- HMS Core分析服务6.5.0版本更新啦
卸载用户价值的合理评估对制定相应的用户召回策略具有重要意义. HMS Core分析服务新版本支持查看用户卸载前使用次数.崩溃次数等指标.通过这些数据,您可以更直观地判断已卸载人群粘性以及崩溃问题对用户 ...
- Django-Model随笔
Django数据库之Model 常用命令 生成迁移文件 python manage.py makemigrations 实行数据库迁移 python manage.py migrate 数据库表结构反 ...
- 如何在Uniapp中访问CabloyJS后端API管理系统
介绍 CabloyJS是一款免费开源的NodeJS全栈开发框架,采用前后端分离设计,具备开箱即用的后台管理系统 Cabloy-SDK是专门为Uniapp应用量身定制的前端SDK,用于便捷的访问Cabl ...
- vue根据后端菜单自动生成路由(动态路由)
vue根据后端菜单自动生成路由(动态路由) router.js import Vue from 'vue' import Router from 'vue-router' import store f ...
- Redis配置文件所在位置
更新记录 2022年6月13日 发布. Windows系统 Redis 配置文件位于 Redis 安装目录下文件名为 redis.conf 注意:Windows系统下名为 redis.windows. ...
- 倾斜摄影3D模型|手工建模|BIM模型 轻量化处理
一.什么是大场景? 顾名思义,大场景就是能够从一个鸟瞰的角度看到一个大型场景的全貌,比如一个园区.一座城市.一个国家甚至是整个地球.但过去都以图片记录下大场景,如今我们可以通过建造3D模型来还原大场景 ...
- ABAP CDS-基础语法规则
The general syntax rules for the DDL and the DCL in ABAP CDS are: Keywords Keywords must be all uppe ...
- SAP 实例 12 List Box with Value List from PBO Module
REPORT demo_dynpro_dropdown_listbox. DATA: name TYPE vrm_id, list TYPE vrm_values, value LIKE LINE O ...
- Linux命令格式、终端类型和获取帮助的方法
Linux用户类型 Root用户:超级管理员,权限很大 普通用户:权限有限 终端 terminal 终端类型 物理终端:鼠标.键盘.显示器 虚拟终端:软件模拟出来的终端 控制台终端: /dev/con ...
- vue在Docker上运行
Dockerfile # 设置基础镜像 FROM nginx:latest # 定义作者 MAINTAINER test # 将dist文件中的内容复制到 /etc/nginx/html/ 这个目录下 ...