Redis之数据类型

原创 已于 2022-10-25 10:22:02 修改 · 985 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#redis #数据库 #java

于 2022-10-12 22:07:45 首次发布

文章目录

Redis常见数据类型与应用场景

Type1：String

内部实现

  • 也是key-value的形式。value 也可以是整数 不一定非得是String 最多容纳512mb

  • 底层数据结构是int 和 SDS（简单动态字符串） SDS和C的不一样，区别在于

    • 不仅能保存文本数据 还能保存二进制数据 根据长度len来判断是否结束而不是空值 存放在buf[]中
    • 本身就保存len 所以获取长度为O（1）（SDS包含free剩余空间 len内容长度 buf存放内容）
    • 安全、拼接不会溢出 因为空间不够会自动扩容，不是死的

  • 字符串对象内部编码int raw embstr

    • int 整数值保存在ptr属性里
    • embstr 长度小于32字节时 一次分配连续内存保存redisObject 和SDS（只读的，但能提升性能 修改时变成raw）
    • raw 长度大于32bit时用 两次内存分配分别存放redisObject 和SDS
      在这里插入图片描述

应用场景

  • 缓存对象
    • user:1:name---->xiaolin user:1:age---->18 user:2:name---->xiaomei user:2:age---->20
    • SET user:1 ‘{“name”:“xiaolin”, “age”:18}’ (json)
  • 常规计数：redis处理命令是单线程、原子性的 计数不会混乱 适合：计算访问次数、点赞、转发、库存数量
  • 分布式锁：利用”不存在才插入的特性“来实现分布式锁 key存在则加锁失败 并且可以设置过期时间 来释放锁（解锁：先判断是否是加了锁的 再解锁 这个需要保证原子性）
  • 共享session信息 :session常用来表示登录状态 当服务器分布式时，别的服务器不知道登录信息，就需要重新登录 ，这里可以用redis缓存来解决
    *在这里插入图片描述

Type2：List

内部实现

  • list按照插入顺序排序 包括头插和尾插 先进先出
  • 数据结构是quicklist 快速链表 快速链表是压缩链表和双向链表的集合体，将链表按段切分，每一段使用压缩链表ziplist来存储 ，多个段之间用双向指针串接起来。压缩链表是多个结点凑成一段，次序为 内存大小、 到尾部距离、结点数、各个结点、尾端
    在这里插入图片描述
    在这里插入图片描述

应用场景

  • 消息队列：处理消息要满足三个需求
    • 01、消息保序： 先发的消息先收到 因为list本身就是先入先出 刚好符合 LPUSH+RPOP（或者反过来） 生产者将消息插入到队列的头部 消费者依次读取消息
    • 注：有个潜在的性能风险点 ：生产者发消息时不会告诉消费者，消费者想及时处理消息就要不停的RPOP，有消息则得到消息，没有则得到空 。消费者的CPU一直在读消息 ，带来性能损失。
    • 解决办法：redis提供了BRPOP命令，即阻塞式读取，客户端没有消息时，自动阻塞，有消息才开始读取数据。节省性能开销。
      在这里插入图片描述
      BPORP
  • 02、处理重复的消息：消费者要记录消息id，对于重复的消息不会再处理。但是List并不会自动为消息生成id号。我们要自行为消息生成一个全局唯一id。因此push的消息是加了id的
  • 03、保证消息的可靠性：消费者读取消息后list不会保留这个消息了，如果消费者处理消息时宕机，那么就读不到这个消息了。redis的list提供了BRPOPLPUSH命令，消费者读完消息后，这个消息放到另一个list中作为备份。
  • 缺点：不支持多个消费者读取同一个消息。这个功能需要将消费者组成消费组，但是list不支持这个功能。需要靠后面的Stream

Type3：Hash

内部实现

  • 键值对集合 （key-value）其中value={(field1,value1),(field2,value2)…(field1,value2)}
  • 底层结构为压缩列表和哈希表 redis7.0之后用listpack实现
    在这里插入图片描述

应用场景

  • 缓存对象：key field value 和对象的 对象id 属性 值这种天然相似，所以可以用来存储对象
  • 本来string + json也可以存储对象 一般对象用它存储，那些属性值频繁改变的用hash存储
  • 购物车：用户id(key) 商品id(field) 商品数量（value）
    在这里插入图片描述

Type4：Set

内部实现

  • set是无序且唯一的键值集合。存储顺序与插入顺序无关；放进去多个一样的值只会保存其中一个。
  • 有集合的特性，除了支持集合内的增删改查，还支持多个set集合之间的交集、并集、差集。
  • k1----> it、music、sport、…
  • set 和 list 的区别
    • list按照插入的先后顺序排序
    • list可以存储重复元素
  • 内部实现：元素为int且<512个 用整数集合存 ，其余情况用哈希表存

应用场景

  • 应用场景取决于其特性：无序、唯一、支持并交差操作
  • 注：潜在风险是 求差集、交集、并集的计算复杂度很高，数据量较大的时候进行这些计算，会产生Redis实例阻塞。
  • 场景1：点赞 保证一个用户只能点一个赞（唯一性）eg: article1---->uid:1; article1---->uid:2;article1---->uid:3 重复点赞不会增加赞数
  • 场景2：共同关注（交集） 用交集来计算可以关注的共同好友、公众号
  • 场景3：抽奖 去重功能保证一个人不会中奖两次 存 lucky—>a,b,c,d,e,… 抽奖lucky 2得到 c,e

Type5：Zset

内部实现

  • Zset是有序集合类型，相比set多了个score用于排序 key---->score+内容
  • 元素数小于128且单个小于64用 用压缩列表实现
  • 其余用跳表实现
  • zset不支持差集运算 其他和set运算差不多
    在这里插入图片描述

应用场景

  • 排行榜：用score排序
  • 电话、姓名排序 这里要求score一样 按照内容排序（A-Z）

Type6：BitMap

内部实现

  • 这是位图，是一串连续的二进制数组01 可以通过偏移量（offset）来定位元素 、
  • 非常节省空间，特别适合于非常大数据量且用二进制值统计的场景
  • 底层数据结构是String 但每个位置存放01可以看成bit数组

应用场景

  • 签到统计 用01标记是否签到 101101010111111.。。一年也才365bit
  • 判断用户登录状态
  • 连续签到用户总数 周一 110 周二 111 周三 111 。。。周日101 这些一起与运算 得到 100说明就一个人连续七天打卡了、

Type6：HyperLogLog

介绍

  • 是一种用于{统计基数}的数据集合类型 基数统计就是统计一共集合中不重复元素个数
  • 它是基于概率完成的，不是非常准确的 误差率是0.81%
  • 简单来说功能就是提供不精确的去重计数
  • 优点：在输入元素数量级特别大的时候，计算所需内存空间总是固定的，而且很小 12kb空间就能计算2^64个元素的基数

应用场景

*统计百万级网页UV计数（独立访客数量） 比如统计直播间访问人数 100万 但可能真实结果是101万 不精确但是内存小

Type7：GEO

内部实现

  • 用sorted set集合类型
  • 存储地理空间位置的经纬度
  • 使用GeoHash编码的方法实现了经纬度到SortedSet元素权重分数的转化 按照权重可以查询地理位置的附近范围地址

应用场景

  • 滴滴叫车 根据用户自己的经纬度信息查找周围五公里内的车辆信息

Type8：Stream

介绍

  • 这时专门为消息队列设计的数据类型，弥补list的不足
  • List的不足：不能持久化 无法可靠的保存消息 不能重复消费消息 需要自行实现全局唯一id
应用场景

消息队列

  • 生产者通过XADD插入一条消息 而且可以同时生成唯一id (由插入数据时以毫秒为单位计算的时间+该毫秒内消息的次序)
  • 还可以实现阻塞读 设定阻塞时间 没有消息到来 阻塞一段时间再返回
  • XGROUP创建消费组 一堆消息来了 消费组1 2 3 都能读取这些消息 组内分工每个处理一部分消息 从而分担消息 实现负载的均衡（消息队列中的消息一旦被组内某个读取，就不能被组内其余读取）
  • 会使用内部队列留存消费者读取过的消息 直到用XACK通知stream消息已经处理完成（消费者重启后也可以去看看已读取为确认的消息）
    在这里插入图片描述
  • 总结：消息保序、阻塞读取、重复消息处理、消息可靠性、支持消费组读取数据。

Redis Stream会出现消息丢失吗

在这里插入图片描述
三大块：消息生产者、队列中间件、消费者 保证闭环就是保证这三个消息不丢失
在这里插入图片描述

Redis Stream会消息可堆积吗

Stream提供了可以指定队列最大长度的功能 长度超过上限后，删除旧消息 所以还是会有丢失风险的

场景

  • 业务场景简单，对数据丢失不敏感，消息积压概率较低的情况下，完全可以用redis
  • 如果不能接受上述，还是用专业的消息中间件吧
little&bug
关注
简述Redis类型type与编码encoding原理及使用方法是什么 ？
weixin_39291964的博客
07-01 24
核心价值：Redis 通过类型与编码的分离，实现底层数据结构的动态优化，在内存效率（如ziplist）与操作性能（如skiplist）间取得平衡[citation:1][citation:5]。使用准则优先依赖 Redis 自动编码，仅在性能瓶颈时手动调整阈值；小数据用紧凑编码（ziplistintset），大数据用高性能结构（hashtableskiplist通过理解编码机制，可针对性优化 Redis 存储设计，例如将大 Hash 拆分为多个小 Key 以维持ziplist编码，提升内存利用率。
深入了解Redis的TYPE命令
聽海的聲音
06-17 797
TYPE命令用于查询Redis中某个键的值的数据类型。TYPE key其中，key是你要查询的数据的键名。
无涯教程-Redis - TYPE 命令函数
无涯教程
01-09 423
RedisTYPE命令用于获取存储在键(key)中的值的数据类型。
redis type
kongkong的专栏
02-26 323
redis type define /* The actual Redis Object */ #define OBJ_STRING 0 /* String object. */ #define OBJ_LIST 1 /* List object. */ #define OBJ_SET 2 /* Set object. */ #define OBJ_ZSET 3 /* Sorted set object. */ #define OBJ_HASH 4 /*
Redis的类型(type)与编码(encoding)
wang_luwei的博客
07-16 545
Redis支持五种主要的数据类型：字符串(string)、列表(list)、集合(set)、有序集合(sorted set)和哈希(hash)。每种数据类型都有对应的编码方式。数据类型(type)编码方式(encoding)字符串(string)哈希表(hash)列表(list)集合(set)有序集合(zset)
Java 使用 Jedis 操作 Redis 各种数据类型详解
微笑听雨
06-06 5343
在这篇指南中，我们将详细介绍如何使用 Java 通过 Jedis 客户端操作 Redis 的各种数据类型。每个示例都展示了如何连接到 Redis 并使用 Jedis 客户端执行各种操作，涵盖了字符串、列表、集合、哈希、有序集合、位图、HyperLogLog、流、地理空间以及发布/订阅模式。通过这些示例，你将能够全面了解和掌握如何在 Java 中使用 Redis。
Redis 各数据类型使用场景详解
qq_42251944的博客
03-05 1098
高并发下对同一数值进行增减操作时，需保证原子性，避免竞态条件导致数据不一致。哈希表将对象字段存储为单键下的多个字段，减少键数量，支持按字段读写。：Redis 的原子操作确保增减操作的线程安全，无需额外锁机制。动态需按时间倒序展示，且需限制列表长度（如只保留最新100条）。每日签到状态只需记录是否签到（0/1），使用字符串浪费内存。直接计算交集，复杂度为 O(N*M)，但内存中操作极快。位图每个位表示一天，每月31天仅需4字节，内存占用极低。多生产者/消费者场景下，需保证消息的顺序性和可靠性。
redis的五种数据类型
热门推荐
学Java，找哪吒
05-15 6万+
（1）Redis（Remote Dictionary Server 远程字段服务）是一个开源的使用ANSI C语言编写、支持网络、科技与内存亦可持久化的日志型、key-value数据库，并提供多种语言的API。（2）Redis是一个key-value存储系统，它支持存储的value类型相对更多，包括string、list、set、zset（sorted set --有序集合）和hash。这些数据结构都支持push/pop、add/remove及取交集并集和差集及更丰富的操作，而且这些操作都是原子性的。
Redis 数据类型
12-16
Redis 数据类型是 Redis 内存数据存储的基础，它支持五种主要的数据结构，分别是 String、Hash、List、Set 以及 Sorted Set（ZSet）。每种数据类型都有其独特的特性和用途，下面将详细介绍这些类型。 1. **String...
【redis】Redis数据类型(二)Hash类型
低调做人，低调编码，神码都是浮云
04-27 2019
redis数据类型——Hash类型的数据结构、使用场景、常用命令
Redis数据类型
骑个小蜗牛的博客
12-03 4843
Redis介绍 RedisObject的结构 1. type 2. enconding 3. lru 4. refcount 5. *prt Redis源码结构 1. 基本数据结构 2. Redis数据类型的底层实现 3. Redis数据库的实现 4. Redis服务端和客户端实现 5. 其他 Redis数据类型 String List Set Zset Hash Stream Bloom Filter Bitmap HyperLogLog Geospatial 使用场景 使用示例
【Redis】Redis类型(Type)与编码(Encoding)
BookSea的博客
09-25 390
Redis是一款开源的高性能key-value数据库，广泛应用于各种场景。在Redis中， 数据类型（Type）和编码（Encoding） 是非常重要的概念。本篇博客将详细介绍Redis支持的数据类型以及相应的编码方式和底层实现原理。
Redis学习之type命令
爱喝水的qdy的博客
12-14 746
目录type命令语法返回值例子 type命令 Redis type 返回 key 所储存的值的类型 语法 type key 返回值 返回 key 的数据类型，数据类型有： nil (key不存在) string (字符串) list (列表) set (集合) zset (有序集) hash (哈希表) 例子 nil 127.0.0.1:6379> type no:no:nil (ni...
Redis理解之对象类型
不行就改名
04-03 708
       上篇博客提到过redis里面涉及到 字符串对象、列表对象、哈希对象、集合对象和有序对象 这五种对象类型。下面将分别对这五个对象做进一步了解。       redis对象都是由一个redisObject结构来表示的，该结构如下：      类型type包括以下五种： 编码encoding记录了对象所使用的编码，涉及到的编码如下图所示：redis中每个类型的对象最少使用两种不同的编码，下...
【redis】type命令和定时器的两种实现方式（优先级队列、时间轮）
最新发布
Yeeear的博客
03-09 450
此处Redis所有的key都是string，但是key对应的value可能会存在多种类型nonekeystringlistsetzsethashstreamvalue在Redis中，上述操作方式差别很大，使用的命令都是完全不同的。
关于redis的type和object encoding
lyy9902的博客
10-20 1048
redis 的value类型有5种： =================================我是分隔符====================================================== 首先看一个例子： mset是string分组下的，也就是说通过mset的value值，都是string类型。 通过type命令可以看到数据的类型，发现k1和k2都为string类型。 使用object encoding查看k1和k2的编码方式，k
Redis四种模式
qq_33807380的博客
06-15 7452
一、单机模式 单机模式就是在一台服务器上安装redis，然后启动，所有业务都调用这一台redis服务器。 优点： 部署简单，只需要在一台服务器上安装并启动redis就行。 成本低，没有备用节点，不需要其他的开支。 高性能，单机不需要同步数据，数据天然一致性。 缺点： 可靠性较弱，一旦服务器宕机，所有业务都无法使用redis服务。 单机模式redis性能受限于CPU的处理能力。 二、主从模式 主从模式是指有多台redis服务器，其中一台专门用来负责写入客户端请求数据，称为主节点（master），其他
Redis @type的一个坑
strggle_bin的博客
03-18 1247
如果LoginUser对象的包与存入时的包路径不一致，会报错java.lang.ClassCastException: com.alibaba.fastjson.JSONObject cannot be cast to。问题解决方案:去掉@type 或者 两边@type路径存放路径一致 (包名和实体类修改为一致)在使用redis注解将数据缓存的时候发现存储进去的数据是这样的，没有@type。是因为set方法的序列化方法和注解的序列化方法不同。将序列化方法更换成set方法所使用的序列化方法。
Redis String数据类型详解与命令实战
在本篇文章中，我们将全面探讨Redis中的String数据类型，这是Redis数据库中最基础且核心的数据结构之一。String类型允许存储二进制安全的数据，这意味着它可以处理各种复杂的数据类型，包括文本、图片、JSON对象等，...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值