百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

6个节省 Redis 内存的技巧

nanshan 2025-03-01 14:51 15 浏览 0 评论

Redis 之所以具有如此高的性能,是因为它的数据存储在“内存”中,因此访问Redis中的数据速度极快。但从资源利用的角度来看,机器的内存资源相对于磁盘来说比较昂贵的。

当我们的应用程序在Redis中存储的数据量很少时,我们大可不必太过担心内存资源的使用情况。但随着业务的发展,Redis 中存储的数据越来越多时,那这种担心是非要不可的。

如果没有提前指定内存优化的策略,那么随着业务开始增长时,Redis 占用的内存也会开始扩大。因此,提前指定合理的内存优化策略对于提高资源利用率是非常有必要的。

那么,在使用Redis时,如何才能节省更多的内存呢?以下是总结的六点建议思维导图:

1. 控制Key的长度

最简单、最直接的内存优化就是控制key的长度。在开发业务代码时,需要提前预估整个 Redis 写入的key数量。如果key的数量达到百万级别,那么过长的key名会占用过多的内存空间。

所有,需要在保证key名简单清晰的前提下,定义尽可能端的key名。例如,原始key名是user:book:123,可以优化为u:bk:123。这样,我们的Redis就可以节省出大量的内存。这个方案对于优化内存来说是非常直接且高效的。

2. 避免存储大值Key

大值Key,通俗叫法:bigkey。

除了控制key的长度外,还需要注意存储值长度的大小。如果存储大量的bigkey,也会大致Redis的内存增长过快。另外,客户端读取bigkey时,也会出现性能问题(以后文章再做介绍)。所以,我们需要避免在 Redis 中存储 bigkey。建议是:

  • 对于 String 类型,大小应控制在 10KB以下。
  • 对于 List、Hash、Set、ZSet类型,元素数量应控制在 1万以下。

3. 选择合理的数据类型

Redis 提供了丰富的数据类型。在实现中,这些数据类型优化了内存使用。具体地,一种数据类型对应多种数据结构来实现。

例如String、Set存储整数数据时,采用整数编码进行存储。对于Hash和ZSet来说,当元素数量比较少(可配置)时,采用压缩列表(ziplist)进行存储。只有当存储大量数据时才会将它们转换为哈希表和跳表。

作者这样设计的目的是为了进一步节省内存资源。所以,在存储数据时,可以利用这些特性来优化Redis的内存,以下建议:

  • 对于 String 和 Set:尽可能存储整型数据。
  • 对于 Hash 和 ZSet:控制存储元素的数量低于结构转换的阈值。并以压缩列表的形式存储以节省内存资源。

4. 使用 Redis 作为缓存

Redis 的数据存储在内存中,这意味着它的存储资源是有限的。所以,在使用 Redis 时,应该将其视为缓存而不是数据库。

所以,对于写入Redis的数据,都应该尽可能设置“过期时间”。当应用程序在 Redis 中找不到数据时,会再次从后端数据库加载到Redis中。

采用这种方案可以保证Redis中只保留经常访问的“热数据”,内存利用率也会比较高。

5. 设置实例的最大内存和淘汰策略

虽然我们为Redis中的所有Key都设置了过期时间,但是如果业务写入量还是很大,并且过期时间设置得比较长,那么在很短的时间内,Redis的内存仍然会快速增长。

如果不控制Redis的内存上限,也会导致内存资源的过度使用。

对于这种场景,我们需要提前预估业务数据量,然后设置该实例的最大内存(maxmemory),以控制该实例的内存上限。这样可以防止Redis内存的不断扩张。

配置完maxmemory后,还需要设置数据淘汰策略。至于如何选择淘汰策略,需要根据实际业务的特点来确定:

  • volatile-lru/allkeys-lru:优先保留最近访问的数据。
  • volatile-lfu/allkeys-lfu:优先保留访问次数最频繁的数据(4.0+版本支持)。
  • volatile-ttl:优先淘汰即将过期的数据。
  • volatile-random/allkeys-random:随机淘汰数据。

6. 数据压缩

遵循以上的建议,如果想进一步优化Redis内存,还可以先将业务应用中的数据先进行压缩,然后再写入Redis(例如使用snappy,gzip等压缩算法)。

当然,对于压缩存储的数据,客户端在读取时需要解压,这期间也会花费更多的CPU资源。所以,我们需要根据实际情况权衡。

7. 总结

以上就是对于节省内存资源的6点建议,你有更好的解决方案吗?欢迎评论区留下您的建议,不吝赐教。

相关推荐

0722-6.2.0-如何在RedHat7.2使用rpm安装CDH(无CM)

文档编写目的在前面的文档中,介绍了在有CM和无CM两种情况下使用rpm方式安装CDH5.10.0,本文档将介绍如何在无CM的情况下使用rpm方式安装CDH6.2.0,与之前安装C5进行对比。环境介绍:...

ARM64 平台基于 openEuler + iSula 环境部署 Kubernetes

为什么要在arm64平台上部署Kubernetes,而且还是鲲鹏920的架构。说来话长。。。此处省略5000字。介绍下系统信息;o架构:鲲鹏920(Kunpeng920)oOS:ope...

生产环境starrocks 3.1存算一体集群部署

集群规划FE:节点主要负责元数据管理、客户端连接管理、查询计划和查询调度。>3节点。BE:节点负责数据存储和SQL执行。>3节点。CN:无存储功能能的BE。环境准备CPU检查JDK...

在CentOS上添加swap虚拟内存并设置优先级

现如今很多云服务器都会自己配置好虚拟内存,当然也有很多没有配置虚拟内存的,虚拟内存可以让我们的低配服务器使用更多的内存,可以减少很多硬件成本,比如我们运行很多服务的时候,内存常常会满,当配置了虚拟内存...

国产深度(deepin)操作系统优化指南

1.升级内核随着deepin版本的更新,会自动升级系统内核,但是我们依旧可以通过命令行手动升级内核,以获取更好的性能和更多的硬件支持。具体操作:-添加PPAs使用以下命令添加PPAs:```...

postgresql-15.4 多节点主从(读写分离)

1、下载软件[root@TX-CN-PostgreSQL01-252software]#wgethttps://ftp.postgresql.org/pub/source/v15.4/postg...

Docker 容器 Java 服务内存与 GC 优化实施方案

一、设置Docker容器内存限制(生产环境建议)1.查看宿主机可用内存bashfree-h#示例输出(假设宿主机剩余16GB可用内存)#Mem:64G...

虚拟内存设置、解决linux内存不够问题

虚拟内存设置(解决linux内存不够情况)背景介绍  Memory指机器物理内存,读写速度低于CPU一个量级,但是高于磁盘不止一个量级。所以,程序和数据如果在内存的话,会有非常快的读写速度。但是,内存...

Elasticsearch性能调优(5):服务器配置选择

在选择elasticsearch服务器时,要尽可能地选择与当前业务量相匹配的服务器。如果服务器配置太低,则意味着需要更多的节点来满足需求,一个集群的节点太多时会增加集群管理的成本。如果服务器配置太高,...

Es如何落地

一、配置准备节点类型CPU内存硬盘网络机器数操作系统data节点16C64G2000G本地SSD所有es同一可用区3(ecs)Centos7master节点2C8G200G云SSD所有es同一可用区...

针对Linux内存管理知识学习总结

现在的服务器大部分都是运行在Linux上面的,所以,作为一个程序员有必要简单地了解一下系统是如何运行的。对于内存部分需要知道:地址映射内存管理的方式缺页异常先来看一些基本的知识,在进程看来,内存分为内...

MySQL进阶之性能优化

概述MySQL的性能优化,包括了服务器硬件优化、操作系统的优化、MySQL数据库配置优化、数据库表设计的优化、SQL语句优化等5个方面的优化。在进行优化之前,需要先掌握性能分析的思路和方法,找出问题,...

Linux Cgroups(Control Groups)原理

LinuxCgroups(ControlGroups)是内核提供的资源分配、限制和监控机制,通过层级化进程分组实现资源的精细化控制。以下从核心原理、操作示例和版本演进三方面详细分析:一、核心原理与...

linux 常用性能优化参数及理解

1.优化内核相关参数配置文件/etc/sysctl.conf配置方法直接将参数添加进文件每条一行.sysctl-a可以查看默认配置sysctl-p执行并检测是否有错误例如设置错了参数:[roo...

如何在 Linux 中使用 Sysctl 命令?

sysctl是一个用于配置和查询Linux内核参数的命令行工具。它通过与/proc/sys虚拟文件系统交互,允许用户在运行时动态修改内核参数。这些参数控制着系统的各种行为,包括网络设置、文件...

取消回复欢迎 发表评论: