6 天前 / 编程一生
点击上方「编程一生」，获取更多技术干货！ 简介 这里的并发不是高并发，只是将正式环境的一小段流量同时打到我的自测环境。一个请求同时多次发送，真正意义上并发处理同一个数据，主要需求是保证数据幂等性和正确性。 主要技术是用分布式缓存做多次相同请求的幂等处理和用有限状态机来解决MQ消息的不保证有序。 场景 k8s集群可以进行事件监听，静儿这次使用了一个美团内网线下的小集群。把这个小集群的对node节点和pod节点的监听事件发送到MQ，3台服务器在同时工作。也就是说一个事件会被重复收到三次。其中两台机器事件发送基......
10 天前 / vivo互联网技术
本文对 MySQL 数据库中有关锁、事务及并发控制的知识及其原理做了系统化的介绍和总结，希望帮助读者能更加深刻地理解 MySQL 中的锁和事务，从而在业务系统开发过程中可以更好地优化与数据库的交互。 1、MySQL 服务器逻辑架构 （图片来源MySQL官网） 每个连接都会在 MySQL 服务端产生一个线程（内部通过线程池管理线程），比如一个 select 语句进入，MySQL 首先会在查询缓存中查找是否缓存了这个 select 的结果集，如果没有则继续执行解析、优化、执行的过程；否则会之间从缓存中获取结果集。 2、MySQL 锁 2.1、Shared......
11 天前 / 王下_邀月熊
本文节选自：关系型数据库理论 https://url.wx-coder.cn/DJNQn，涉及引用/整理的文章列举在了Database-List。关系型数据库中的事务管理详解：并发控制与事务日志数据库系统的萌芽出现于 60 年代。当时计算机开始广泛地应用于数据管理，对数据的共享提出了越来越高的要求。传统的文件系统已经不能满足人们的需要。能够统一管理和共享数据的数据库管理系统（DBMS）应运而生。1961 年通用电气公司（General ElectricCo.）的 Charles Bachman 成功地开发出世界上第一个网状 DBMS 也是第一个数据库管理系统—— 集成数据存储（Integrated DataStore IDS......
13 天前 / 兜里有辣条
这篇文章的目的并不是想教你如何造火箭（面试造火箭，工作拧螺丝），而是想通过对原理和应用案例的有限度剖析来协助你构建起并发的思维，并将操作系统的理论知识与工程实践结合起来，贯穿从学到会的全过程。当然，虽然我们是从实用角度出发，但具有实践意义的深层次知识点永远会是面试中的杀手锏，这可比只能口头造火箭的理论知识更吸引面试官。 本文适合谁： 1. 希望能了解并发概念的初学者 2. 需要理清并发概念与技术的工程师 3. 对并发在工作中的应用与其底层实现原理感兴趣的读者 在这篇文章中，你将了解到并发与多线程相关的一系列概念，通......
13 天前 / sjf0115
提示：公众号展示代码会自动折行，建议横屏阅读 大家好，今天为大家分享一次 ES 的填坑经验。主要是关于集群恢复过程中，分片恢复并发数调整过大导致集群 hang 住的问题。 一、场景描述废话不多说，先来描述场景。某日，腾讯云某 ES 集群，15个节点，2700+ 索引，15000+ 分片，数十 TB 数据。由于机器故障，某个节点被重启，此时集群有大量的 unassigned 分片，集群处于 yellow 状态。为了加快集群恢复的速度，调整分片恢复并发数，将默认值为2的 node_concurrent_recoveries 调整为100： curl -X PUT "localhost:9200/_cluster/settings" -......
17 天前 / 守望晨风
专栏的介绍可以参考 《CaseGolang专栏》，代码可以看《宝库-Case》。 这里主要是一步步实现一个并发的聊天室，很简单的案例。 设计实现细节可能会冗杂一些，但是大致的实现思路却非常简单。 12//总体流程//server -(处理连接 或者 转发)-> message --->Client.C ---> 读conn.Write给Client端具体的功能可以按照客户端发送的消息不同，而处理方式不同： 已经连接时，向所有客户端显示已经登录客户端发消息要求更改客户端显示名字发送聊天消息则简单转发给所有用户离线时，向所有客户端显示某客户端已经离线查看在线人数或者哪些用户在线大致思路......
20 天前 / Yourtion
由于营销活动（创造营销节点、扩大影响力的需要），总有很多产品策划、运营乐此不疲的玩着一个game---在足够集中的时间内比如秒级处理足够多的用户请求，让世界为此狂欢，同时也是彰显技术实力的一次大考。 小米卖着抢号的手机、天猫发明了双11光棍节、微信和支付宝连续2年做着新春红包。营销活动的时候要使用前2板斧，保证可用性和简单可扩展性，同时还要祭出第三板绝杀—拦河大坝、缓存为王、去热点资源的并发。 为啥要拦？很简单，用户很热情（感性），但系统必须得理性！就3个苹果手机，凭啥让几十万人都涌入柜台！在大秒系统一文中......
23 天前 / googege
只有cpu中线程之间的数据交换才可以是共享内存，进程之间是无法进行信息交换的 首先我们谈谈关于cpu和操作系统线程，进程的那些事：我们通常都听过这个一个词，cpu 4核8线程，这里的意思就是cpu实际内核是4核，但是在操作系统看来是8核cpu，这里的8线程就是指的是8个虚拟内核。然后再操作系统层面，划分为进程和线程，这里的进程是cpu资源分配（io储存等）的基本单位，在线程出现之前它也是cpu进行调度分配的基本单位，注意这里的线程是操作系统的概念，跟4核8线程里的概念不是一回事，而协程也就是coroutine是编程语言层面上的最近才有的一个东西......
35 天前 / XY8080
接上篇。在写完ReentrantLock之后，其实可以基于ReentrantLock写一个ReadWriteLock，《the art of multiprocessor programming》第八章有介绍。但是，本着不完全AQS（AbstractQueuedSynchronizer）介绍的系列主题，这里从零开始重新写一个ReentrantReadWriteLock。 按照ReadWriteLock的定义，任何时候都满足 没有线程持有锁有1~n个线程持有共享锁（Read）有1个线程持有独占锁（Write）中的一个。 其次公平的ReadWriteLock要求新来的Read或者Write线程必须在队列中等待，非公平的ReadWriteLock允许新来的Read或者Write比队列中等待的线程先获取锁......
55 天前 / XY8080
接着上篇，本篇主要介绍如何添加限时tryLock方法。介绍完之后，ReentrantLock除了condition之外都会实现，而且基本和实际ReentrantLock代码接近。上篇也提到过，实际ReentrantLock依赖AQS，但是本文不会直接介绍AQS，只是AQS的一个不完全分析。 顺便提一下，“自己写ReentrantLock和ReentrantReadWriteLock”由于篇幅比较长，预计会分成3到4篇左右。 在进入限时tryLock方法的介绍之前，考虑一个问题：上篇中FairLock1和UnfairLock1是否可以复用Node？ 为什么要问这个问题？因为C++代码比较关注对象的生命周期。使用C++实现锁的话必须关注何时可......
83 天前 / 蚂蚁金服移动开发平台mPaaS
根据《mPaaS 服务端核心组件体系概述：移动 API 网关 MGS》，我们已经初步了解 mPaaS 服务端众多组件中移动 API 网关 MGS 的具体架构设计和简介。 本文结合贾岛在 TGO 鲲鹏会举办的「走进蚂蚁金服：双十一背后的蚂蚁金服技术支持」活动现场分享内容《亿级并发下的蚂蚁移动端到端网络接入架构》，着重探讨网络接入架构在蚂蚁金服体系内如何演进、如何应对“新春红包”等亿级并发挑战、以及相应的技术架构实践与优化思路如何在 mPaaS 中得到沉淀。 1 前言 支付宝移动端架构已完成了工具型 App、平台型 App，以及超级 App 三个阶段的迭代与逐步......
93 天前 / jackyrong
点击上方"蓝字",右上角选择“设为星标” 周一至五早8点半！精品技术文章准时送上！ 一、写在前面 上篇文章（《大白话聊聊Java并发面试问题之谈谈你对AQS的理解？》）聊了一下java并发包中的AQS的工作原理，也间接说明了ReentrantLock的工作原理。 这篇文章接着来聊一个话题，java并发包中的公平锁与非公平锁有啥区别？ 二、什么是非公平锁？ 先来聊聊非公平锁是啥，现在大家先回过头来看下面这张图。 如上图，现在线程1加了锁，然后线程2尝试加锁，失败后进入了等待队列，处于阻塞中。然后线程1释放了锁，准......