首页 / REDIS / 2020 12 16 关于Redis持久化的问题

2020 12 16 关于Redis持久化的问题

内容导读

互联网集市收集整理的这篇技术教程文章主要介绍了2020 12 16 关于Redis持久化的问题，小编现在分享给大家，供广大互联网技能从业者学习和参考。文章包含2955字，纯文字阅读大概需要5分钟。

内容图文

1、什么是持久化？

Redis运行环境在内存中，如果Redis服务器关闭，则内存数据将会丢失
解决方案：可以定期将内存数据持久化到磁盘中。
当redis正常运行时，定期的将数据保存到磁盘中，当redis服务器重启时，则根据配置文件中指定的持久化的方式，实现数据的恢复。

RDB模式

RDB模式特点说明

RDB模式是redis默认的策略
RDB模式能够定期（时间间隔）持久化。弊端是可能导致数据的丢失
RDB模式记录的是内存数据的快照，持久化效率较高，快照只保留最新的记录

RDB模式命令

1.save命令: 将内存数据持久化到磁盘中主动的操作会造成线程阻塞
2.bgsave命令: 将内存数据采用后台运行的方式,持久化到文件中. 不会造成阻塞.
3.默认的持久化的机制
save 900 1 如果在900秒内,执行了1次更新操作,则持久化一次
save 300 10 如果在300秒内,执行了10次更新操作,则持久化一次
save 60 10000 如果在60秒内,执行了10000次更新操作,则持久化一次

AOF模式

AOF模式特点

AOF模式默认条件下是关闭的，需要手动开启
AOF模式记录的是用户的操作过程，所以可以实现实时持久化操作
AOF模式由于记录的是实时的操作过程，所以持久化文件较大，需要定期维护

持久化操作总结

当内存数据允许少量丢失时，采用RDB模式（快）
当内存数据不允许丢失时，采用AOF模式（定期维护持久化文件）
一般在工作中采用RDB+AOF模式共同作用，保证数据的有效性

内存优化策略

为什么需要内存优化？
说明：由于redis在内存中保存数据，如果一直存储，则内除数据必然溢出，所以需要定期维护内除数据的大小。
维护策略：删除旧的不用的数据，保留新的常用的数据。

那么有哪些常用内存优化算法呢？

LRU算法

LUR 是Least Recently Used的缩写，即最近最少使用，是一种常用的页面置换算法，选择最近最久未使用的页面予以淘汰。该算法赋予每个页面一个访问字段，用来记录一个页面自上次被访问以来所经历的时间t，当须淘汰一个页面的时候，选择现有页面只其t值最大的，即最近最少使用的页面予以淘汰。
计算维度：时间 t
注意事项：LRU算法是迄今为止内存中最好用的数据置换算法

LFU算法

LFU（least frequently used (LFU) page-replacement algorithm）。即最不经常使用页置换算法，要求在页置换引用计数最小的页。因为经常使用的页应该有一个比较大的引用次数。但是有些页在开始时使用次数很多，但以后就不再使用。这类页将会长时间留在内存中，因此可以将引用计数寄存器定时右移一位，形成指数衰减的平均使用次数。
维度：使用次数

随机算法

TTL算法（提前删除）

根据剩余的存活时间，将马上要超时的数据提前删除

关于缓存遇到的问题

由于缓存失效，导致大量的用户的请求，直接访问数据库服务器。导致负载过高，从而引用整体宕机的风险

缓存穿透

说明：用户频繁访问数据库中不存在的数据，可能出现缓存穿透的现象。如果该操作是高并发操作，则可能直接威胁数据库服务器。
解决方案：

采用IP限流的方式降低用户访问服务器次数。IP动态代理（1分钟变一次）
微服务的处理方式：利用断路器返回执行的业务数据即可不执行数据库操作从而保护了数据库
微服务的处理方式：API网关设计。不允许做非法操作

缓存击穿

说明：由于redis中某个热点数据由于超时/删除等操作造成数据失效。同时用户高并发访问该数据，则可能导致数据库宕机。该操作称之为缓存击穿
解决方案：可以采用多级缓存的设计。同时数据的超时时间采用随机数的方式

缓存雪崩

说明：由于redis内存数据大量失效。导致用户的访问命中率太低。大量的用户直接访问数据库，可能导致数据库服务器宕机。这种现象称之为缓存雪崩
解决：

采用多级缓存
设定不同的超时时间
禁止执行flushAll 等敏感操作

内容总结

以上是互联网集市为您收集整理的2020 12 16 关于Redis持久化的问题全部内容，希望文章能够帮你解决2020 12 16 关于Redis持久化的问题所遇到的程序开发问题。如果觉得互联网集市技术教程内容还不错，欢迎将互联网集市网站推荐给程序员好友。

内容备注

版权声明：本文内容由互联网用户自发贡献，该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至 gblab@vip.qq.com 举报，一经查实，本站将立刻删除。

内容手机端

扫描二维码推送至手机访问。

本文链接：https://qyyshop.com/info/867396.html

来源：【匿名】

【上一篇】redis配置远程连接【下一篇】redis可以做什么？

更多 ►

【2020 12 16 关于Redis持久化的问题】教程文章相关的互联网学习教程文章

redis两种持久化方式RDB和AOF【代码】

目录前言1. Redis 数据库结构2. RDB 持久化2.1. RDB 的创建和载入2.1.1. 手动触发保存SAVE 命令BGSAVE 命令SAVE 和 BGSAVE 的比较2.1.2. 自动触发保存2.1.3. 启动自动载入2.2. RDB 的文件结构2.2.1. 存储路径2.2.2. 文件格式databasekey_value_pairs2.3. RDB 常用的配置项3. AOF 持久化3.1. AOF 的创建和载入3.1.1. AOF 的创建3.1.2. AOF 的载入3.2. AOF 的执行流程3.2.1. 命令追加3.2.2. 文件写入和文件同步write()fsync()3.2.3. ...

redis的数据持久化

就目前自己的理解redis和memcache的区别就是redis可以数据持久化，支持的数据类型有5种所以就数据持久化这块可以好好了解一下我们安装的redis的2.6版本，安装之后默认就已经开启了rdb数据持久化分rdb和aof快照:(snapshotting)它将某一时刻的的所以数据写入硬盘只追加文件:(append-only file) 他会在执行写命令时，将会把写命令复制到磁盘里面快照（rdb）：save 900 1 #900秒时间，至少有一条数据更新，则保存到数据文件中save ...

Redis 持久化的两种方式【图】

RDB:如果我们配置这样的方式，那么它的效率很高，因为不需要每一步都存储，执行效率低，相当于快照一样，但是它有缺点，因为当我们达到配置的要求时，它不会执行存储，那么突然宕机，数据将无法恢复 AOF：如果我们用AOF方式，那么这种方式将保存你的持久化数据完整性，但是效率低，因为每次都会存储，根据你的执行步骤存储，这样的方式使用于对数据完整性要求高的，效率没有太高要求的。把下面的参数设置为 yes 注意：RDB和AOF可以...

Redis(7)——持久化【一文了解】【代码】【图】

原文:Redis(7)——持久化【一文了解】目录一、持久化简介持久化发生了什么 | 从内存到磁盘如何尽可能保证持久化的安全二、Redis 中的两种持久化方式方式一：快照方式二：AOFRedis 4.0 混合持久化相关阅读扩展阅读参考资料回到顶部一、持久化简介Redis 的数据全部存储在内存中，如果突然宕机，数据就会全部丢失，因此必须有一套机制来保证 Redis 的数据不会因为故障而丢失，这种机制就是 Redis 的持久化机制，它会将内存中的...

.net core 3.0/3.1session持久化redis,session id为空【代码】【图】

.net core 3.1中将session持久化到redis，从core1.0开始，2.0/2.1,3.0/3.1每次搭建开发框架都因为session的问题搞的头大，次次踩坑，花了半天时间再次捋了一遍，发出来如果大家有跟我一样，希望能帮到你，另外如果有帮到你，记得点赞哈！！！1.需引入的库文件 1.1：Microsoft.AspNetCore.Http.Extensions，因为.net core中的session默认只能存储字节，所以引入该库是为了解决session存储字符串2.Microsoft.AspNetCore.Session，Mic...

Redis的持久化-AOF【图】

Redis的持久化AOF模式，以日志的形式记录服务器所处理的每一个写操作，在Redis服务启动之初会读取该文件来重新构建数据库，以保证启动后数据库中的数据是完整的。AOF的优点：1、可以带来更高的数据安全性。2、由于对日志文件的写入操作采用的是append模式，因此在写入过程汇总即使出现宕机，也不会破坏日志文件中已经存在的内容，然而如果我们本次操作写入一半数据就出现系统崩溃，可以在Redis下一次启动之前，通过redis-check-aof...

redis数据库持久化问题处理【图】

redis数据库问题整理一、数据无法持久化1、背景介绍：经开发人员告知redis有3万多条数据无法写入内存，数据持久化停滞状态。2、排查过程：经过排查redis日志，发现报错信息如下，经过查询得知为此报错为7月10日导入大量数据后导致的，判断为内存突增导致写入失败。3、解决办法：从系统层面优化Centos系统，添加系统参数vm.overcommit_memory = 1?到/etc/sysctl.conf配置文件中，然后执行sysctl -p命令。vm.overcommit_memory参数说...

Redis：持久化篇一（RDB）【图】

RDB和AOF是redis持久化的基本！一，RDB（Redis DataBase）在指定的时间间隔内将内存中的数据集快照写入磁盘，实现持久化，也就是Snapshot快照，它恢复时是将快照文件直接读到内存里 RDB工作过程：　　Redis会单独创建一个（fork）子进程来进行持久化，他的数据来源于（OS写的复制机制）父进程与它的共享内存中，fork会将数据写入到一个临时文件中，等到持久化都结束了，再用这个临时文件替换上次持久化好的文件，整个过程中，主进...

Redis发布-不重启转换-持久化-主从同步【代码】【图】

redis发布订阅应用场景1、今日头条订阅号、微信订阅公众号、新浪微博关注、邮件订阅系统 2、即使通信系统 3、群聊部落系统（微信群）使用方法:# 发布者: PUBLISH 频道消息# 订阅者: SUBSCRIBE 频道# 正则匹配:(订阅者订阅) PSUBSCRIBE *频道 (例: *zhibo或zhibo*)例子redis-cli: # 发布者: > PUBLISH wang 123 redis-cli: # 订阅者: > SUBSCRIBE wang # 发布者发送123,这边就可以收到123 # 另一个订阅者: > SUBSCRIBE wang #...

Redis事务/持久化/发布订阅【图】

Redis事物Redis事物Redis 事务可以一次执行多个命令，并且带有以下两个重要的保证：事务是一个单独的隔离操作：事务中的所有命令都会序列化、按顺序地执行。事务在执行的过程中，不会被其他客户端发送来的命令请求所打断。事务是一个原子操作：事务中的命令要么全部被执行，要么全部都不执行。一个事务从开始到执行会经历以下三个阶段：开始事务。命令入队。执行事务。实例以下是一个事务的例子，它先以 MULTI 开始一个事务，然后...

Redis持久化机制【图】

Redis是一个支持持久化的内存数据库,也就是说Redis需要经常将内存中的数据同步到硬盘来保证持久化.Redis支持两种持久化方式:1. Snapshot(快照),也是默认方式;这种方式是将内存中数据以快照的方式写入二进制文件中,默认的文件名为dump.rdb.可以通过配置设置自动做快照持久化的方式.save 900 1 　　　　#900秒内如果超过1个key被修改,则发起快照save 300 10　　　　#300秒内如果超过10个key被修改,则发起快照save 60 10000　　 #60...

redis持久化【图】

redis高效的原因是数据在内存中，为了保证重启redis后数据不丢失，需要把内存中的数据写入到硬盘中，这个过程就叫持久化原文：http://www.cnblogs.com/hwgok/p/7050995.html

redis持久化备份恢复【代码】

1.启动redis进入redis目录redis-cli 2.数据备份redis 127.0.0.1:6379> SAVE该命令将在 redis 备份目录中创建dump.rdb文件。 3.恢复数据1、获取备份目录redis 127.0.0.1:6379> CONFIG GET dir 1) "dir" 2) "/usr/local/redis/bin"以上命令 CONFIG GET dir 输出的 redis 备份目录为 /usr/local/redis/bin。2、停止redis服务3、拷贝备份文件到 /usr/local/redis/bin目录下4、重新启动redis服务 redis作为windows服务启动方式redis-ser...

redis-持久化【代码】【图】

一持久化的作用1.1 什么是持久化redis的所有数据保存在内存中，对数据的更新将异步的保存到硬盘上1.2 持久化的实现方式快照：某时某刻数据的一个完成备份，-mysql的Dump-redis的RDB 写日志：任何操作记录日志，要恢复数据，只要把日志重新走一遍即可-mysql的 Binlog-Hhase的 HLog-Redis的 AOF二 RDB2.1 什么是RDB 2.2 触发机制-主要三种方式‘‘‘ save(同步) 1 客户端执行save命令----》redis服务端----》同步创建RDB二进制文件...

Redis研究（十一）—数据持久化

一、持久化 Redis的强劲性能很大程度上是由于其将所有数据都存储在了内存中，为了使Redis在重启之后仍能保证数据不丢失，需要将数据从内存中以某种形式同步到硬盘中，这一过程就是持久化。 Redis支持两种方式的持久化，一种是RDB方式，一种是AOF方式。可以单独使用其中一种或将二者结合使用。1. RDB方式 RDB方式的持久化是通过快照（snapshotting ）完成的，当符合一定条件时Redis会自动将内存中的所有数据进行...

REDIS - 技术教程分类

Redis 教程 Redis 简介 Redis 安装 Redis 配置 Redis 数据类型 Redis 命令 Redis 键(key) Redis 字符串(String) Redis 哈希(Hash) Redis 列表(List) Redis 集合(Set) Redis 有序集合(sorted set) Redis HyperLogLog Redis 发布订阅 Redis 事务 Redis 脚本 Redis 连接 Redis 服务器 Redis GEO Redis Stream Redis 数据备份与恢复 Redis 安全 Redis 性能测试 Redis 客户端连接 Redis 分区 Redis 全部

REDIS - 最热教程

redis中批量删除key的方法 redis设置密码，取消密码 node.js利用redis数据库缓存数据 PHP swoole和redis异步任务实现方法分析 Laravel使用Redis共享Session步骤详解 mac下卸载干净redis 如何通过命令行修改redis的配置使用Port Forwarding连接k8s集群的pod（...实现商品秒杀之——Redis Watch机制 redis雪崩、穿透、击穿、热点分别代表什...

首页 / REDIS / 2020 12 16 关于Redis持久化的问题

2020 12 16 关于Redis持久化的问题

内容导读

内容图文

1、什么是持久化？

RDB模式

RDB模式特点说明

RDB模式命令

AOF模式

AOF模式特点

内存优化策略

LRU算法

LFU算法

随机算法

TTL算法（提前删除）

关于缓存遇到的问题

缓存穿透

缓存击穿

缓存雪崩

内容总结

内容备注

内容手机端

【2020 12 16 关于Redis持久化的问题】教程文章相关的互联网学习教程文章

REDIS - 相关标签

REDIS - 技术教程分类

REDIS - 最新教程

REDIS - 最热教程