2 天前 / 杀死那个程序员
点击上方"程序员历小冰"，选择“置顶或者星标” 你的关注意义重大! 在上一篇文章中《Redis 命令执行过程(上)》中，我们首先了解 Redis 命令执行的整体流程，然后细致分析了从 Redis 启动到建立 socket 连接，再到读取 socket 数据到输入缓冲区，解析命令，执行命令等过程的原理和实现细节。 接下来，我们来具体看一下 set 和 get 命令的实现细节和如何将命令结果通过输出缓冲区和 socket 发送给 Redis 客户端。 set 和 get 命令具体实现前文讲到 processCommand 方法会从输入缓冲区中解析出对应的 redisCommand，然后调用 call 方法执行......
3 天前 / 平头哥的技术博文
点击上方“平头哥的技术博文”，选择“关注公众号” 技术文章第一时间送达！ 最近看 redis cluster 集群，在 Redis Cluster 集群中涉及到了数据分布问题，因为 redis cluster 是多 master 的结构，每个 master 都是可以提供存储服务的，这就会涉及到数据分布的问题，所以借着个机会聊一聊分布式中的数据分布算法，在新的 redis 版本中采用的是虚拟槽分区技术来解决数据分布的问题，关于什么是虚拟槽分区技术我们后面会详细的介绍。在分布式集群中除了虚拟槽分区技术之外，还有几种数据分布的算法，比如哈希算法，一致性哈希算法，......
4 天前 / 杀死那个程序员
点击上方"程序员历小冰"，选择“置顶或者星标” 你的关注意义重大! 今天我们来了解一下 Redis 命令执行的过程。在之前的文章中《当 Redis 发生高延迟时，到底发生了什么》我们曾简单的描述了一条命令的执行过程，本篇文章展示深入说明一下，加深读者对 Redis 的了解。 如下图所示，一条命令执行完成并且返回数据一共涉及三部分，第一步是建立连接阶段，响应了socket的建立，并且创建了client对象；第二步是处理阶段，从socket读取数据到输入缓冲区，然后解析并获得命令，执行命令并将返回值存储到输出缓冲区中；第三步是数据返回阶段，将返......
10 天前 / xF0rk
点击关注美图技术，置顶公众号 美图最新技术解读，不容错过 lmstfy(Let Me Schedule Task For You) 是美图架构基础服务团队在 2018 年初基于 Redis 实现的简单任务队列(Task Queue)服务，目前在美图多个线上产品使用接近两年的时间。主要提供以下特性: 任务具备延时、自动重试、优先级以及过期等功能 通过 HTTP restful API 提供服务 具备横向扩展能力 丰富的业务和性能指标 Github 项目地址: https://github.com/meitu/lmstfy 使用场景 任务队列跟消息队列在使用场景上最大的区别是：任务之间是没有顺序约束而消息要求顺序(FIFO)，且......
13 天前 / RyuGou
redis有五种基本数据结构：字符串、hash、set、zset、list。但是你知道构成这五种结构的底层数据结构是怎样的吗？今天我们来花费五分钟的时间了解一下。(目前redis版本为3.0.6) 动态字符串SDSSDS是"simple dynamic string"的缩写。redis中所有场景中出现的字符串，基本都是由SDS来实现的 所有非数字的key。例如setmsg"hello world"中的key msg. 字符串数据类型的值。例如`` set msg "hello world"中的msg的值"hello wolrd" 非字符串数据类型中的“字符串值”。例如RPUSH fruits"apple""banana""cherry"中的"apple" "banana" "cherry" SDS长这......
22 天前 / cyhone
Redis作为一个单线程高性能的内存缓存Server而被人熟知。作为一个典型的Reactor式网络应用，Redis能够达到如此高的性能，必然要依靠足够可靠的事件循环库。Redis内置了一个高性能事件循环器，叫做AE。其定义和实现可以在ae*.h/cpp这些文件中找到。 AE本身就是Redis的一部分，所以整体设计原则就是够用就行。也正因为这个背景，AE的代码才可以简短干净，非常适合阅读和学习。 本文将基于Redis 5.0.6的源码分析下其事件循环器(AE)的实现原理。 同时本人也提供了一个Redis注释版，用以辅助理解Redis的源码。 eventloop的创建Redis通过以下接口进行......
22 天前 / 鱼尾
不忘初心，砥砺前行 作者 | 陌无崖 转载请联系授权 Nosql 基本概念为了解决高并发、高可用、高可扩展，大数据存储等一系列问题而产生的数据库解决方案，就是NoSql。 NoSql，叫非关系型数据库，它的全名Not only sql。它不能替代关系型数据库，只能作为关系型数据库的一个良好补充。 基本数据类型字符串SET 如果值存在，将会被新值覆盖； SETkeyvalue SETTNX 如果只存在，将不会有任何改动；命令在设置成功时返回 1 ， 设置失败时返回 0 。 SETTNXkeyvalue SETEX 将键 key 的值设置为 value ， 并将键 key 的生......
23 天前 / php-v
Redis是一个高性能的key-value内存数据库，与Memcached只能存储字符串数据类型不一样，它支持存储的数据结构类型包括：字符串（string）、链表（lists）、哈希表（hash）、集合（set）、有序集合（zset）等。 Redis的高性能得益于其I/O事件驱动模型，当然本文并不是讨论Redis的所有知识点，下面主要介绍Redis的核心数据结构：字典的设计和实现。 哈希表介绍Redis本质上就是在字典上挂载着各种数据结构，我们先来看看字典这种数据结构。Redis中的字典其实是就是哈希表（HashTable），我们来看看哈希表的定义： 哈希表（HashTable）是根据键值(Key......
24 天前 / 鱼尾
不忘初心，砥砺前行 作者 | 陌无崖 转载请联系授权 持久化 RDB持久化RDB持久化是指将当前进程中的数据生成快照的方式保存到硬盘中。保存的文件名后缀时rdb。Redis重新启动的时候会读取快照中的文件进行恢复数据； AOF持久化AOF持久化是指将Redis中每次写的命令记录到单独的日志文件中；当Redis重启的时候再次执行文件中的命令恢复数据；Redis服务器默认开启RDB，关闭AOF；要开启AOF，需要在配置文件中配置。 RDB和AOF的优缺点 RDB持久化：优点：RDB的文件体积小。网络传输快，适合全量复制，恢复速度快；对性......
27 天前 / 魔笛手CTO
WEB服务，尤其是分布式的WEB服务，通常会面临需要实现安全高效的全局锁的服务场景。而redis的诸多特性，使得借助其实现的全局锁显得如此简单。本篇文章借助小明应聘魔笛手研发岗位的面试，层层递进的来介绍一下如何通过redis实现全局锁。 面试官老张：看你简历上说，之前的项目中使用了redis，你知道redis为什么是单线程的吗？ 小明：多进程或者多线程更多的为了高效利用CPU，但是却对开发人员提出了更高的要求。而redis作为内存型数据库，其性能瓶颈往往不是CPU，而是内存和网络。单线程对于redis来说已经足够快了，也就没有必要再引入复杂的......
30 天前 / WsztRush
总体来说：做性能比较高的队列，可以方便的把增量数据中转到各个节点上。网上逛发现Redis 5的Stream貌似看起来挺符合的。 功能读写： XADD：唯一的向Stream中插入数据的命令，传入多个KEY-VALUE，返回Stream ID（递增唯一键，可以手工指定）：XADD key ID field string [field string ...]XADD mystream * name Sara surname OConnorXADD mystream * field1 value1 field2 value2 field3 value3XADD mystream MAXLEN ~ 1000 * ... entry fields here ...（设置最大长度）XLEN：Stream中的数量，Stream不存在时返回0；XRANGE：根据Stream ID返回一......
34 天前 / 杀死那个程序员
点击上方"程序员历小冰"，选择“置顶或者星标” 你的关注意义重大! Redis 是一种内存数据库，将数据保存在内存中，读写效率要比传统的将数据保存在磁盘上的数据库要快很多。但是 Redis 也会发生延迟时，这是就需要我们对其产生原因有深刻的了解，以便于快速排查问题，解决 Redis的延迟问题 一条命令执行过程在本文场景下，延迟 (latency) 是指从客户端发送命令到客户端接收到命令返回值的时间间隔。所以我们先来看一下 Redis 一条命令执行的步骤，其中每个步骤出问题都可能导致高延迟。 上图是 Redis 客户端发送一条命令的执行过程示意......
46 天前 / 知了一笑
一、Redis集群简介1、RedisCluster概念Redis的分布式解决方案，在3.0版本后推出的方案，有效地解决了Redis分布式的需求，当一个服务宕机可以快速的切换到另外一个服务。redis cluster主要是针对海量数据+高并发+高可用的场景。 2、Redis环境搭建Linux系统：Centos7搭建Redis单台和集群环境 二、与SpringBoot2.0整合1、核心依赖 org.springframework.boot spring-boot-starter-data-redis ${spring-boot.version} redis.clients jedis ${redis-client.version} 2、核心配置spring: #Redis集群 redis: sentinel: #sentinel配置......