2 天前 / reesunhuang
缓存有助于减少延迟，提高重读工作负载的可扩展性，并且节省成本。实际上缓存是无处不在的，它也在你的手机和你的浏览器中运行。例如，CDN 和 DNS 本质上是地理复制的缓存。正是由于许多缓存在幕后工作，你现在才能阅读这篇文章。 Phil Karlton 有句名言："计算机科学中只有两个难题：缓存失效和命名"。如果你曾经处理过的无效缓存，那么你很有可能遇到过缓存不一致这个恼人的问题。 在 Meta，我们运营着世界上最大的高速缓存，包括 TAO 和 Memcache。
14 天前 / linyb极客之路
点击上方 蓝字 关注我们 1 前言 有这么一个业务场景：部门 A 服务要使用部门 B 服务的业务数据，部门 A 服务使用部门 B 服务的业务数据前置条件是 B 部门必须要给 A 授权。B 部门的授权和业务数据分属为不同服务。其请求流程如下 因为 A 的鉴权信息的请求值是固定的，因此鉴权结果大概率也是固定值。当时 B 部门的业务服务开发同事，为了提高效率。就加了缓存，即 B 的业务服务会将 A 的鉴权结果缓存起来。当时写法形如下 privatefinal LoadingCache checkSvcCache = Caffeine .newBuilder().maximumSize(Constants.MAX_SIZE) .expireAfterWrite(Conastan...
14 天前 / BloomingRose
大家好，我是楼仔！ 今天写的这个主题内容，其实非常基础，但是作为高并发非常重要的几个场景，绝对绕不开，估计大家面试时，也经常会遇到。 这个主题的文章，网上非常多，本来想直接转载一篇，但是感觉没有合适的，要么文章不够精炼，要么就是精简过头，所以还是自己写一篇吧。 内容虽然基础，但我还是秉承以往的写作风格，参考众多优秀的博客后，打算写一篇能通俗易懂，又不失全面的文章。 前言 我们先看一下正常情况的查询过程： 先查询 Redis，如果查询成功，直接返回，查询不存在，去查询 DB；如果 DB 查询成功，数据回写 Redis，查询不存在...
32 天前 / 携程技术
作者简介 一十，携程资深后端开发工程师；振青，携程高级后端开发专家。 一、前言 携程酒店查询服务是酒店 BU 后端的核心服务，主要负责提供所有酒店动态数据计算的统一接口。在处理请求的过程中，需要使用到酒店基础属性信息、价格信息等多维度的数据信息。为了保证服务的响应性能，酒店查询服务对所有在请求过程中需要使用到的相关数据进行了缓存。随着携程酒店业务的发展，查询服务目前在保证数据最终一致性以及增量秒级更新延迟的情况下，在包括服务器本地内存以及 Redis 等多种介质上缓存了百亿级的数据。
39 天前 / Dr_Hydra
哈喽大家好啊，我是 Hydra。 在前面的文章中，我们介绍了 Redis6.0 中的新特性客户端缓存 client-side caching，通过 telnet 连接模拟客户端，测试了三种客户端缓存的工作模式，这篇文章我们就来点硬核实战，看看客户端缓存在 java 项目中应该如何落地。 铺垫首先介绍一下今天要使用到的工具 Lettuce，它是一个可伸缩线程安全的 redis 客户端。多个线程可以共享同一个 RedisConnection，利用 nio 框架 Netty 来高效地管理多个连接。
41 天前 / 方丈的寺院
背景随着业务的发展，微服务越来越多，缓存相关的场景也比较多，通常的做法是基于缓存数据库（如 redis),client 来进行缓存操作。这样的问题有两个 如果更换缓存数据库改造成本比较高对于批量查缓存、缓存穿透等场景没有统一实现，逻辑分散所以需要一个统一的缓存框架。 另外针对一些活动、大促场景需要对缓存数据进行预热。所以需要设计一套通用的预热系统。所谓预热，其实就是提前请求数据，使缓存生效。缓存和预热有关联，但是可以设计成独立的两套系统。
41 天前 / 叶东富
概述大量的实际的项目中，都会引入 Redis 缓存来缓解数据库的查询压力，此时由于一个数据在 Redis 和数据库两处进行了存储，就会有数据一致性的问题。目前业界尚未见到成熟的能够确保最终一致性的方案，特别是当如下场景发生时，会直接导致缓存数据与数据库数据不一致。 在上述场景下，缓冲中的数据最终版本为 v1，而数据库的最终版本为 v2，可能给应用带来较大问题。 dtm-labs 致力于解决数据一致性问题，在分析了行业的现有做法后，提出了新解决方案 dtm + rockscache，彻底解决了上述问题。
59 天前 / 携程技术
作者简介 荣华，携程高级研发经理，专注于后端技术项目研发管理。 军威，携程软件技术专家，负责分布式缓存系统开发 & 存储架构迁移项目。 金永，携程资深软件工程师，专注于实时计算，数据分析工程。 俊强，携程高级后端开发工程师，拥有丰富 SQLServer 使用经验。 前言 携程酒店订单系统的存储设计从 1999 年收录第一单以来，已经完成了从单一 SQLServer 数据库到多 IDC 容灾、完成分库分表等多个阶段，在见证了大量业务奇迹的同时，也开始逐渐暴露出老骥伏枥的心有余而力不足之态。
59 天前 / Dr_Hydra
哈喽大家好啊，我是没更新就是在家忙着带娃的 Hydra。 在前面介绍两级缓存的文章中，我们总共给出了 4 种实现方案，在项目中整合了本地缓存 Caffeine 和远程缓存 Redis，将应用的性能从仅适用单独远程缓存的基础上，再次提高了一个层次。 而今天 Hydra 要和大家分享的技术，在思想上和上面两级缓存有些类似，不过不需要借助其他本地缓存中间件，只使用 Redis 自身服务端和客户端就可以实现。这就是 Redis6 中的客户端缓存 Client-side caching 这一项新特性，它允许将数据缓存在应用服务端以及远程缓存两个位置。
67 天前 / HueiFeng
导语|提到本地缓存大家都不陌生，只要是个有点经验的后台开发人员，都知道缓存的作用和弊端。本篇文章我们就来简单聊聊在 golang 做业务开发的过程中，本地缓存的一些可选的开源方案，分析它们的特点，以及内部的实现原理。 一、本地缓存需求分析 首先来梳理一下业务开发过程中经常面临的本地缓存的一些需求。我们一般做缓存就是为了能提高系统的读写性能，缓存的命中率越高，也就意味着缓存的效果越好。其次本地缓存一般都受限于本地内存的大小，所有全量的数据一般存不下。
81 天前 / 逗逗
作者：vivo 互联网服务器团队 -Zhang Peng 一、缓存简介 1.1 什么是缓存 缓存就是数据交换的缓冲区。缓存的本质是一个内存 Hash。缓存是一种利用空间换时间的设计，其目标就是更快、更近：极大的提高。 将数据写入 / 读取速度更快的存储（设备）； 将数据缓存到离应用最近的位置； 将数据缓存到离用户最近的位置。 缓存是用于存储数据的硬件或软件的组成部分，以使得后续更快访问相应的数据。缓存中的数据可能是提前计算好的结果、数据的副本等。典型的应用场景：有 cpu cache, 磁盘 cache 等。本文中提及到缓存主要是指互联网应用中所使用的缓存组件。
83 天前 / Dr_Hydra
在上一篇文章 Redis+Caffeine 两级缓存，让访问速度纵享丝滑中，我们介绍了 3 种整合 Caffeine 和 Redis 作为两级缓存使用的方法，虽然说能够实现功能，但实现手法还是太粗糙了，并且遗留了一些问题没有处理。本文将在上一篇的基础上，围绕两个方面进行进一步的改造： JSR107 定义了缓存使用规范，spring 中提供了基于这个规范的接口，所以我们可以直接使用 spring 中的接口进行 Caffeine 和 Redis 两级缓存的整合改造在分布式环境下，如果一台主机的本地缓存进行修改，需要通知其他主机修改本地缓存，解决分布式环境下本地缓存一致性问题好了...
89 天前 / 苏三说技术
大家好，我是苏三，又跟大家见面了。前言数据库和缓存（比如：redis）双写数据一致性问题，是一个跟开发语言无关的公共问题。尤其在高并发的场景下，这个问题变得更加严重。 我很负责的告诉大家，该问题无论在面试，还是工作中遇到的概率非常大，所以非常有必要跟大家一起探讨一下。 今天这篇文章我会从浅入深，跟大家一起聊聊，数据库和缓存双写数据一致性问题常见的解决方案，这些方案中可能存在的坑，以及最优方案是什么。 1. 常见方案通常情况下，我们使用缓存的主要目的是为了提升查询的性能。
92 天前 / Dr_Hydra
在高性能的服务架构设计中，缓存是一个不可或缺的环节。在实际的项目中，我们通常会将一些热点数据存储到 Redis 或 MemCache 这类缓存中间件中，只有当缓存的访问没有命中时再查询数据库。在提升访问速度的同时，也能降低数据库的压力。 随着不断的发展，这一架构也产生了改进，在一些场景下可能单纯使用 Redis 类的远程缓存已经不够了，还需要进一步配合本地缓存使用，例如 Guava cache 或 Caffeine，从而再次提升程序的响应速度与服务性能。于是，就产生了使用本地缓存作为一级缓存，再加上远程缓存作为二级缓存的两级缓存架构。
93 天前 / 冷星1024
前言 浏览器缓存设计一直是 web 性能优化中非常重要的一个环节，也是 SPA 应用盛行的今天不得不考虑的问题。作为一名优秀的前端工程师，为了让我们的应用更流畅，用户体验更好，我们有必要做好浏览器缓存策略。每个 Web 应用体验都必须快速，对于渐进式 Web 应用更是如此。快速是指在屏幕上获取有意义内容所需的时间，要在不到 5 秒的时间内提供交互式体验。并且，它必须真的很快。很难形容可靠的高性能有多重要。可以这样想： 本机应用的首次加载令人沮丧。已安装的渐进式 Web 应用必须能让用户获得可靠的性能。