2 天前 / carlosfl
最近经常有人问我，我这边学习Redis都有哪些资料，能不能发他们一下。作为一个习惯”慢慢啃”技术学习的人，我确实积累了大量资料，这里可以介绍给大家。 注明：本文提供的书籍、视频、源码、文档等，都是 非盈利性质，只代表个人观点，如有不对欢迎指正。 一、图书（按照发布时间排序） 1.《Redis设计与实现》，2014，黄健宏，机械工业出版社 了解Redis源码和原理的公认好书，虽然至今已时隔5年，Redis的版本发生了很多变化，但仍然不会觉得落时了。 2.《Redis入门指南》第二版，2015，李子骅，人民邮电出版社 这本书是我当年Redis的入......
5 天前 / carlosfl
去年我写过一个《阿里云Redis开发规范》，在网上转载很多，但其实说心里话，我并不认为写的多好，受制一些客观因素和篇幅，有些不够细致和深入，所以想在公众号里详细解析下，希望对大家有帮助。 本篇是第一篇：由键名设计想到的SDS内存优化 原文1. key名设计(1)【建议】: 可读性和可管理性 以业务名(或数据库名)为前缀(防止key冲突)，用冒号分隔，比如业务名:表名:id ugc:video:1 (2)【建议】：简洁性 保证语义的前提下，控制key的长度，当key较多时，内存占用也不容忽视，例如： user:{uid}:friends:messages:{mid}简化为u:{uid}:fr:m:{mi......
7 天前 / 比特币小白
| 导语 本文是一篇redis读书笔记，主要内容整理自 Redis设计与实现。如果你想快速了解redis底层数据结构，相信这篇文章会有所帮助。 文章主要分为两大部分，第一部分介绍了Redis对象的各种底层数据结构，第二部分总结了redis对象与各种底层数据结构的关系。 1 Redis对象底层数据结构 1.1 SDS(简单动态字符串) Redis没有直接使用C语言传统的字符串表示（以空字符结尾的字符数组，以下简称C字符串），而是自己构建了一种名为简单动态字符串（simple dynamic string，SDS）的抽象类型，并将SDS用作Redis的默认字符串表示。 在Redis里面，C字符串只......
9 天前 / Slogen
背景上周四晚上，月黑风高Coding夜，在公司的角落里，埋头研究研究webflux，组里的同事小D过来说碰到一个诡异的Redis的问题： 在UT(单元测试)中，通过Jedis的client执行lua脚本，每次都是lua脚本正常执行正常返回，但是Redis服务器挂了，执行其他的命令（非lua脚本）就没这个问题。client连接的是开发环境的Redis服务器，版本是2.8。但是连接本地启动的Redis服务器（5.x版本）就不会出现这个情况。 没有查到什么原因，找我帮忙一块看下。 作为一个有技术追求的人，碰到这种诡异的问题，果断不会错过研究的机会的。 这个问题花了好几个小时才查......
9 天前 / carlosfl
这是Redis开发运维实战的第一篇文章。 我先做个自我介绍。我在快手工作，负责公司亿万级别Cache相关工作。在这之前，我在阿里云Redis团队主要参与云上Redis的保障性工作，以及Redis诊断系统的开发，在那里我与各种使用Redis的公司打交道，了解了他们各自不同的Redis使用场景，遇到并解决了各种千奇百怪的问题。更早之前，我在搜狐视频开发了公司的Redis私有云平台CacheCloud，现在已经在Github开源，已经在很多公司使用。另外，在工作之余我和我之前的leader张益军写过一本书《Redis开发与运维》，这本书在社区也受到很好的评价。 对于我来说，从......
11 天前 / 果冻虾仁
首发于后台公论写文章为什么我说C/C++程序员都要阅读Redis源码之：通过Redis学习事件驱动设计果冻虾仁百度 研发工程师273 人赞同了该文章0. 为什么我说C/C++程序员都要阅读Redis源码主要原因就是『简洁』。如果你用源码编译过Redis，你会发现十分轻快，一步到位。其他语言的开发者可能不会了解这种痛，作为C/C++程序员，如果你源码编译安装过Nginx/Grpc/Thrift/Boost等开源产品，你会发现有很多依赖，而依赖本身又有依赖，十分痛苦。通常半天一天就耗进去了。由衷地羡慕 npm/maven/pip/composer/...这些包管理器。而Redis则给人惊喜，一行make了此......
11 天前 / 黑夜探路人
前言近期决定把redis的源码阅读分析一下，在官网下载了最新稳定版本5.0.3。整个代码包还是比较小的，下载之后整个包才9M，解压之后看src文件夹也才3.7M，也就是说redis的源码就这么点，其它占空间的主要是几个依赖组件:hiredis(redis的C客户端), lua, jemalloc（内存池）, linenoise（配置文件解析），这些代码占了大概6.3M. 看了redis的代码首先直观感觉就是：规范，非常规范。代码格式，缩紧，注释，命名都是非常规范的，可以说又是一个C代码的软件的典型。所以读起来也相对比较舒服。 计划从这几个方面开始 1. 基本的代码结构和服务启动过......
11 天前 / 公众号_肥朝
前言上一篇[面试官问我，使用Dubbo有没有遇到一些坑？我笑了。]之后,又有一位粉丝和我说在面试过程中被虐了.鉴于这位粉丝是之前肥朝的老粉丝,而且周一又要开启新一轮的面试,为了回馈他长期以来的支持,所以连夜写了本篇,希望能对他接下来的面试有所帮助. 真实案例 Redis分布式锁的正确姿势据肥朝了解,很多同学在用分布式锁时,都是直接百度搜索找一个Redis分布式锁工具类就直接用了.关键是该工具类中还充斥着很多System.out.println();等语句.其实Redis分布式锁比较正确的姿势是采用redisson这个客户端工具.具体介绍可以搜索最大的同性交友网站gith......
16 天前 / Jackeyzhe
HyperLogLog是Redis的高级数据结构，是统计基数的利器。前文我们已经介绍过HyperLogLog的基本用法，如果只求会用，只需要掌握HyperLogLog的三个命令即可，如果想要更进一步了解HyperLogLog的原理以及源码实现，相信这篇文章会给你带来一些启发。 基数在数学上，基数或势，即集合中包含的元素的“个数”（参见势的比较），是日常交流中基数的概念在数学上的精确化（并使之不再受限于有限情形）。有限集合的基数，其意义与日常用语中的“基数”相同，例如{\displaystyle {a,b,c}}的基数是3。无限集合的基数，其意义在于比较两个集的大小，例如整数集......
17 天前 / Jackeyzhe
HyperLogLog是Redis的高级数据结构，它在做基数统计的时候非常有用，每个HyperLogLog的键可以计算接近264不同元素的基数，而大小只需要12KB。 HyperLogLog目前只支持3个命令，PFADD、PFCOUNT、PFMERGE。我们先来逐一介绍一下。 PFADD最早可用版本：2.8.9 时间复杂度：O(1) 将参数中的元素都加入指定的HyperLogLog数据结构中，这个命令会影响基数的计算。如果执行命令之后，基数估计改变了，就返回1；否则返回0。如果指定的key不存在，那么就创建一个空的HyperLogLog数据结构。该命令也支持不指定元素而只指定键值，如果不存在，则会创建一个新......
17 天前 / 零售云技术
什么是单点登录 单点登录（Single Sign On），简称为 SSO，是目前比较流行的企业业务整合的解决方案之一。SSO的定义是在多个应用系统中，用户只需要登录一次就可以访问所有相互信任的应用系统。 我们目前的系统存在诸多子系统，而这些子系统是分别部署在不同的服务器中，那么使用传统方式的session是无法解决的，我们需要使用相关的单点登录技术来解决。 我们为何要单点登录系统 现在随着微服务的概念拆分的系统越来越多，对于服务与服务之间可以采用分布式服务通信，前台系统交互或终端与服务系统交互可以采用HTTP或RESTful接口通信。 什么是......
20 天前 / phperzone
对于分布式系统而言，整个集群处理请求的效率和存储容量，往往取决于集群中响应最慢或存储增长最快的节点。所以在系统设计和容量规划时，我们尽量保障集群中各节点的“数据和请求分布均衡“。但在实际生产系统中，出现数据容量和请求倾斜(类似Data Skew）问题是比较常见的。 示例：2019年春节抽奖服务，业务评估峰值qps是2w，转化到redis集群为10w qps和5GB内存存储，部署5个分片每个分片1GB+2W qps的redis集群（包含预留容量）。结果活动开始时，才发现服务存在”热点key"，请求严重倾斜, 峰值时的6w qps都集中到其中一个分片,导致这分片过载，整......
20 天前 / 不去彼岸
哈希方案：slot(槽位)Redis Cluster中有一个16384长度的槽的概念，每个key都会通过公式CRC16(key)% 16384来计算键key属于哪个槽，槽位是虚拟的，可以在不同节点之前迁移 客户端对key做哈希，得到槽位，并到本地路由缓存查找槽位对应的服务器节点，其中会有一些特殊情况要处理 访问到了错误的节点，该节点会返回正确的节点地址，让客户端重新访问访问到正在迁移的节点，分好几种情况访问的key还存储在旧的节点，直接操作访问的key已经迁移到新的节点了，但是整个槽位还没有完成迁移，返回一个一次性的ask 指令，让客户端尝试去新的节点查找这个key......
22 天前 / 深广大数据Club
微信公众号：深广大数据Club 关注可了解更多大数据相关的咨询。问题或建议，请公众号留言; 如果你觉得深广大数据Club对你有帮助，欢迎转发朋友圈推荐关注 每当我们拥有一个拥有大量用户的数据库时，遇到数据库中的热点并不罕见。对于Redis，频繁访问分区中的相同Key称为热点。在本文中，我们将讨论热点的常见原因，评估此问题的影响，并提出有效的解决方案来处理热点。 热点的常见原因 原因1：用户消费数据的大小远远大于生产数据的大小，包括热门项目，热门新闻，热门评论和名人直播。 在你的日常工作和生活中出现意外事件，例如：当天降价......