百万级运维经验一:Mongodb和Redis数据不能放在同一个服务器 一开始时,为了省服务器,把Mongodb和Redis放在一个服务器上.网站每到高峰期都特别卡,还经常出现502.找了很久的原因,发现硬盘的写数据很大,IOPS也很高,排查了很多原因都没找到.然后再仔细研究监控,发现写硬盘的操作很有规律,每隔几分钟就有一次频繁的写硬盘,联想到Redis同步数据到硬盘的间隔就是几分钟,所以开始怀疑是Redis引起的.于是加了一台服务器,把Redis单独放在那里,发现网站瞬间快了,502问题也不再出…
Redis 数据备份与恢复 Redis SAVE 命令用于创建当前数据库的备份. 实例 redis > SAVE OK 恢复数据 如果需要恢复数据,只需将备份文件 (dump.rdb) 移动到 redis 安装目录并启动服务即可.获取 redis 目录可以使用 CONFIG 命令,如下所示: redis > CONFIG GET dir ) "dir" ) "F:\\DB\\Redis" Bgsave 创建 redis 备份文件也可以使用命令 BGSAV…
为了保证公司知识管理服务器数据的安全性,所以计划每天同步confluence服务器上面数据 一.安装rsync服务端 1.查看是否安装rsync ps -ef | grep rsync 2.添加配置文件 rsync没有默认配置文件,需要手动创建/etc/rsyncd.conf 服务端配置文件/etc/rsyncd.conf 内容如下: 配置两个同步的目录data1,data2 [root@host-10-0-100-156 ~]# cat /etc/rsyncd.conf pid file=/v…
一.对Redis持久化的探讨与理解 目前Redis持久化的方式有两种: RDB 和 AOF 首先,我们应该明确持久化的数据有什么用,答案是用于重启后的数据恢复. Redis是一个内存数据库,无论是RDB还是AOF,都只是其保证数据恢复的措施. 所以Redis在利用RDB和AOF进行恢复的时候,都会读取RDB或AOF文件,重新加载到内存中. RDB就是Snapshot快照存储,是默认的持久化方式. 可理解为半持久化模式,即按照一定的策略周期性的将数据保存到磁盘. 对应产生的数据文件为dump.rd…
上一篇文章中写到了数据库的本地备份,这一篇主要分享一下关于不同服务器的数据备份,主要是使用sql server中的本地发布,本地订阅功能,在数据库的读写分离中,也会经常性的用到这个功能. 复制->本地订阅 第一步:新建发布 选择需要备份的数据库: 第二步:选择发布类型 这里我选择的是事务发布.链接中的文章详细的介绍了这四种发布类型的详细介绍  链接地址 第三步:选择发布对象 发现需要发布同步的表需要有主键才能够选择,所以尽量在建表的时候都创建主键,报错同步数据时所以表都能够进行同步. 第四步:筛…
一.对Redis持久化的探讨与理解 目前Redis持久化的方式有两种: RDB 和 AOF 首先,我们应该明确持久化的数据有什么用,答案是用于重启后的数据恢复.Redis是一个内存数据库,无论是RDB还是AOF,都只是其保证数据恢复的措施.所以Redis在利用RDB和AOF进行恢复的时候,都会读取RDB或AOF文件,重新加载到内存中. RDB就是Snapshot快照存储,是默认的持久化方式.可理解为半持久化模式,即按照一定的策略周期性的将数据保存到磁盘.对应产生的数据文件为dump.rdb,通过…
数据备份与还原   1.mysqldump 1.1 文件地址: E:\xampp\mysql\bin 文件名:mysqldump.exe CMD下进入mysqldump.exe cd E:\xampp_new\mysql\bin 1.2 调用mysqldump的参数 Mysqldump –u 用户名 [-h 主机] [-p 密码] 数据库名  [表名称 表名称] > 备份到的路径及文件名 备份多个数据库的全部表: Mysqldump –u 用户名 [-h 主机] [-p 密码] –databas…
REDIS 版本 < 4.0 笔者用的是 v=3.0.7 REDIS集群创建镜像:registry.cn-shenzhen.aliyuncs.com/cp_m/redis-trib:0.1.3 REDIS节点镜像:registry.cn-shenzhen.aliyuncs.com/cp_m/redis:3.0.7 REDIS数据同步工具:https://github.com/vipshop/redis-migrate-tool   alessandrob/redis-migrate-tool r…
本文链接:http://www.cnblogs.com/zhenghongxin/p/9050219.html 使用两种备份方案 备份方案选择RDB和AOF同时进行备份,必须打开AOF的持久化机制,除非能接受在故障环境下丢失几分钟的数据. 在redis重启的时候,是优先通过AOF进行数据恢复的,因为AOF数据比较完整. RDB的生成策略 要修改的是该条命令: save 该条命令是60秒内,如果有1万条命令执行,那么就进行快照备份.这个值略大,可以根据自己的业务量而定,可以调小至1000.但也同时…
最近在部署一个系统,处于数据安全的考虑,因此对相应的数据库服务器定时备份,以及数据同步到备份服务上.之前在另外的一个项目中也做过相应的操作,但是操作都是按照查找到的文章一步一步的操作,碰到一些细节问题没有记录下来,因而在这次部署过程中在碰到同样问题的时候自乱脚步,耽误了很多时间 避免下次需要处理相同情况下能够调高自己效率,特记录这一些操作过程 主要备份处理有: 1.Sql Server 代理->作业 通过脚本的方式,通过调用sql自带的备份服务备份数据库文件到本地 2.复制->本地订阅  本地…