阿里云-云小站(无限量代金券发放中)
【腾讯云】云服务器、云数据库、COS、CDN、短信等热卖云产品特惠抢购

Redis的数据持久化

427次阅读
没有评论

共计 1519 个字符,预计需要花费 4 分钟才能阅读完成。

主从同步数据选择的方式 —– 数据持久化操作  Redis 在正常关闭时触发 rdb 操作

rdb 持久化是指在客户端输入 save 和 bgsave 或者达到配置文件自动保存快照条件时,将 redis 在内存的数

生成快照保存在 dump.rdb 文件中

save 会阻塞 redis 主进程,直到 rdb 文件创建完毕

bgsave 命令的原理

1.redis 主进程 fork 一个和组进程完全一样的子进程进行持久化, 验证方法,执行 bgsave 后另一个终端 ps -ef | grep redis

2. 子进程将内存中的数据写入到一个临时 RDB 文件中,主进程不进行 IO 操作,确保主进程极高的性能,这个就是解释为什么要 fork 子进程 (redis 单线程)

3. 当子进程完成 rdb 文件时,redis 会使用新的 rdb 文件替代旧的文件,之后删除旧的文件

在备份数据时,当进程的内存空间为 G 时,无法正常的分配内存,可以修改系统参数

/etc/sysctl.conf

vm.overcommit_memory=1

退出执行 sysctl -p

0: 请求分配的虚拟内存和系统当前空闲内存 +swap 内存进行比较

1: 直接放行

2: 比较进程已经占用的内存 + 请求分配的内存与系统的空闲内存 +swap 内存

flushall,清空 redis 内存中的数据,此时就会异常宕机,再次重启 redis 时,会再次读取 rdb 文件,相当于 flushall 的操作无意义,所以会触发 rdb 机制。

生产上一般的选择,redis4.0 以后才提供 rdb 和 aof 重新,当两个持久化方式都存在时优先使用 aof

append-only file(AOF)– 数据实时追加的方式把操作及记录保存在磁盘中,会影响 redis 使用的效率

为了压缩 AOF 的持久化文件,Redis 提供了 bgrewriteaof 命令。

收到此命令后 Redis 将使用与快照类似的方式将内存中的数据以二进制的数据方式保存到临时文件中,其他的 aof 日志还是以命令字符串的方式保存,

这样会较少 aof 文件的大小

最后替换原来的文件,以此来实现控制 AOF 文件的增长

appendonlya.aof 文件重写,就是把一些命令相互抵消,或者命令整合达到 aof 文件瘦身的效果。

重写会 fork 一个和主进程完全一样的子进程,基于内存中的数据,以 rdb 文件存储格式替换旧的 aof 文件

appendonly no(默认关闭状态)

开启的话在 /usr/local/redis/bin 目录下生成 appendonly.aof 文件

no-appendfsync-on-rewrite yes #在日志重写时,命令只是将其放在缓冲区里。

auto-aof-rewrite-percentage 100 #当前 AOF 文件大小是上次日志重写得到 AOF 文件大小的二倍时,自动启动新的日志重写过程。

auto-aof-rewrite-min-size 5GB, 最少 #当前 AOF 文件启动新的日志重写过程的最小值,避免刚刚启动 Reids 时由于文件尺寸较小导致频繁的重写

为什么出现 aof 持久化

rdb 触发机制:shutdown;save 时间可能较长;bgsave;  如果没有这些人工的操作,宕机时丢失数据较多

aof 触发机制: 指定更新日志条件

appendfsync  no:表示等操作系统进行数据缓存同步到磁盘 (效率快,持久化没保证),不建议

always: 同步持久化,每次发生数据变化时,立即记录到磁盘 (效率慢,安全)

everysec:表示每秒同步一次 (m 默认值,很快,但可能会丢失一秒的数据)

没有子进程,开启 aof 会有一个缓冲区 1M,主进程把数据缓存在缓存区在存储在 aof 文件中

rdb 基于内存中的数据持久化的,二进制文件,较少

aof 基于命令字符串文件较大,把 set 命令保存,再次恢复时再次执行命令

Redis 的数据持久化

正文完
星哥玩云-微信公众号
post-qrcode
 0
星锅
版权声明:本站原创文章,由 星锅 于2022-01-22发表,共计1519字。
转载说明:除特殊说明外本站文章皆由CC-4.0协议发布,转载请注明出处。
【腾讯云】推广者专属福利,新客户无门槛领取总价值高达2860元代金券,每种代金券限量500张,先到先得。
阿里云-最新活动爆款每日限量供应
评论(没有评论)
验证码
【腾讯云】云服务器、云数据库、COS、CDN、短信等云产品特惠热卖中

星哥玩云

星哥玩云
星哥玩云
分享互联网知识
用户数
4
文章数
19350
评论数
4
阅读量
7877344
文章搜索
热门文章
开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南

开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南

开发者必备神器:阿里云 Qoder CLI 全面解析与上手指南 大家好,我是星哥。之前介绍了腾讯云的 Code...
星哥带你玩飞牛NAS-6:抖音视频同步工具,视频下载自动下载保存

星哥带你玩飞牛NAS-6:抖音视频同步工具,视频下载自动下载保存

星哥带你玩飞牛 NAS-6:抖音视频同步工具,视频下载自动下载保存 前言 各位玩 NAS 的朋友好,我是星哥!...
云服务器部署服务器面板1Panel:小白轻松构建Web服务与面板加固指南

云服务器部署服务器面板1Panel:小白轻松构建Web服务与面板加固指南

云服务器部署服务器面板 1Panel:小白轻松构建 Web 服务与面板加固指南 哈喽,我是星哥,经常有人问我不...
星哥带你玩飞牛NAS-3:安装飞牛NAS后的很有必要的操作

星哥带你玩飞牛NAS-3:安装飞牛NAS后的很有必要的操作

星哥带你玩飞牛 NAS-3:安装飞牛 NAS 后的很有必要的操作 前言 如果你已经有了飞牛 NAS 系统,之前...
我把用了20年的360安全卫士卸载了

我把用了20年的360安全卫士卸载了

我把用了 20 年的 360 安全卫士卸载了 是的,正如标题你看到的。 原因 偷摸安装自家的软件 莫名其妙安装...
阿里云CDN
阿里云CDN-提高用户访问的响应速度和成功率
随机文章
支付宝、淘宝、闲鱼又双叕崩了,Cloudflare也瘫了连监控都挂,根因藏在哪?

支付宝、淘宝、闲鱼又双叕崩了,Cloudflare也瘫了连监控都挂,根因藏在哪?

支付宝、淘宝、闲鱼又双叕崩了,Cloudflare 也瘫了连监控都挂,根因藏在哪? 最近两天的互联网堪称“故障...
飞牛NAS中安装Navidrome音乐文件中文标签乱码问题解决、安装FntermX终端

飞牛NAS中安装Navidrome音乐文件中文标签乱码问题解决、安装FntermX终端

飞牛 NAS 中安装 Navidrome 音乐文件中文标签乱码问题解决、安装 FntermX 终端 问题背景 ...
开源MoneyPrinterTurbo 利用AI大模型,一键生成高清短视频!

开源MoneyPrinterTurbo 利用AI大模型,一键生成高清短视频!

  开源 MoneyPrinterTurbo 利用 AI 大模型,一键生成高清短视频! 在短视频内容...
星哥带你玩飞牛NAS硬件03:五盘位+N5105+双网口的成品NAS值得入手吗

星哥带你玩飞牛NAS硬件03:五盘位+N5105+双网口的成品NAS值得入手吗

星哥带你玩飞牛 NAS 硬件 03:五盘位 +N5105+ 双网口的成品 NAS 值得入手吗 前言 大家好,我...
星哥带你玩飞牛NAS-12:开源笔记的进化之路,效率玩家的新选择

星哥带你玩飞牛NAS-12:开源笔记的进化之路,效率玩家的新选择

星哥带你玩飞牛 NAS-12:开源笔记的进化之路,效率玩家的新选择 前言 如何高效管理知识与笔记,已经成为技术...

免费图片视频管理工具让灵感库告别混乱

一言一句话
-「
手气不错
星哥带你玩飞牛 NAS-10:备份微信聊天记录、数据到你的NAS中!

星哥带你玩飞牛 NAS-10:备份微信聊天记录、数据到你的NAS中!

星哥带你玩飞牛 NAS-10:备份微信聊天记录、数据到你的 NAS 中! 大家对「数据安全感」的需求越来越高 ...
恶意团伙利用 PHP-FPM 未授权访问漏洞发起大规模攻击

恶意团伙利用 PHP-FPM 未授权访问漏洞发起大规模攻击

恶意团伙利用 PHP-FPM 未授权访问漏洞发起大规模攻击 PHP-FPM(FastCGl Process M...
还在找免费服务器?无广告免费主机,新手也能轻松上手!

还在找免费服务器?无广告免费主机,新手也能轻松上手!

还在找免费服务器?无广告免费主机,新手也能轻松上手! 前言 对于个人开发者、建站新手或是想搭建测试站点的从业者...
免费无广告!这款跨平台AI RSS阅读器,拯救你的信息焦虑

免费无广告!这款跨平台AI RSS阅读器,拯救你的信息焦虑

  免费无广告!这款跨平台 AI RSS 阅读器,拯救你的信息焦虑 在算法推荐主导信息流的时代,我们...
手把手教你,购买云服务器并且安装宝塔面板

手把手教你,购买云服务器并且安装宝塔面板

手把手教你,购买云服务器并且安装宝塔面板 前言 大家好,我是星哥。星哥发现很多新手刚接触服务器时,都会被“选购...