12 天前 / u128287
本文根据魏亚东老师在〖2021 DAMS 中国数据智能管理峰会〗现场演讲内容整理而成。 （点击文末“阅读原文”可获取完整 PPT） 讲师介绍 魏亚东，中国工商银行 软件开发中心三级经理，资深架构师，杭州研发部数据库专家团队牵头人和开发中心安全团队成员，负责技术管理、数据库、安全相关工作，目前负责 SaaS 云产品建设。2009 年加入中国工商银行软件开发中心，致力于推动管理创新、效能提升，提供全面技术管控，推动自动化实施，实现业务价值的高质量快速交付；同时作为技术专家，为生产安全提供技术支持。
25 天前 / HueiFeng
提示：公众号展示代码会自动折行，建议横屏阅读 「前言」连接操作是一种数据库中最基本的操作，连接算法的执行效率直接影响到整个数据库的效率、吞吐和资源。通常商业数据库系统一般有三种主流的连接实现：Nested Loop Join、Hash Join 和 Sort Merge Join。本文概述目前主流的 Hash Join 实现方式，以及分析 MySQL 中 Hash Join 的实现方式。 MySQL 8.0.18 版本增加了对 Hash Join 算法的支持，在此之前，连接算法仅支持嵌套循环连接 Nested Loop Join。
27 天前 / Juicedata
如何把 MySQL 备份验证性能提升 10 倍Davies, Liyong2020.07.24JuiceFS 非常适合用来做 MySQL 物理备份，具体使用参考我们的官方文档[1]。最近有个客户在测试时反馈，备份验证的数据准备（xtrabackup --prepare）过程非常慢。我们借助 JuiceFS 提供的性能分析工具做了分析，快速发现性能瓶颈，通过不断调整 XtraBackup 的参数和 JuiceFS 的挂载参数，在一个小时内将时间缩短到原先的 1/10。本文将我们性能分析和优化的过程记录分享下来，给大家分析和优化 IO 性能提供参考。
33 天前 / 浪客书心
索引可以说是数据库中的一个大心脏了，如果说一个数据库少了索引，那么数据库本身存在的意义就不大了，和普通的文件没什么两样。所以说一个好的索引对数据库系统尤其重要，今天来说说 MySQL 索引，从细节和实际业务的角度看看在 MySQL 中 B+ 树索引好处，以及我们在使用索引时需要注意的知识点。 1. 合理利用索引 在工作中，我们可能判断数据表中的一个字段是不是需要加索引的最直接办法就是：这个字段会不会经常出现在我们的 where 条件中。
42 天前 / 微观技术
大家好，我是 Tom 哥~ 今天跟大家聊一聊 MySQL 的事务隔离，并通过一些实验做了些总结。光说不练，假把式，没有经过实践就没有话语权。 我们都知道数据库有四种隔离级别，分别是： 读未提交（READ UNCOMMITTED）读已提交 （READ COMMITTED）可重复读 （REPEATABLE READ）串行化 （SERIALIZABLE） 实验前的准备工作 1、基础环境 当前的数据库版本 mysql>selectversion(); +-----------+ |version()| +-----------+ |8.0.27| +-----------+ 1rowinset(0.00sec) 当前的事务隔离级别 mysql>showvariableslike'transaction_isolation'; +----------------------...
43 天前 / crane-yuan
目录 1、背景 2、表锁导致的慢查询的问题 3、线上修改表结构有哪些风险？ 4、一个死锁问题的分析 5、锁等待问题的分析 6、小结 1、背景 对于数据库系统来说在多用户并发条件下提高并发性的同时又要保证数据的一致性一直是数据库系统追求的目标，既要满足大量并发访问的需求又必须保证在此条件下数据的安全，为了满足这一目标大多数数据库通过锁和事务机制来实现，MySQL 数据库也不例外。尽管如此我们仍然会在业务开发过程中遇到各种各样的疑难问题，本文将以案例的方式演示常见的并发问题并分析解决思路。
54 天前 / u561252
常有人说，阅读源码是每个优秀开发工程师的必经之路，但是在面对像类似 TiDB 这样复杂的系统时，源码阅读是一个非常庞大的工程。而对一些 TiDB User 来说，从自己日常遇到的问题出发，反过来阅读源码就是一个不错的切入点，因此我们策划了《带着问题读源码》系列文章。 本文为该系列的第二篇，从一个 Power BI Desktop 在 TiDB 上表现异常的问题为例，介绍从问题的发现、定位，到通过开源社区提 issue、写 PR 解决问题的流程，从代码实现的角度来做 trouble shooting，希望能够帮助大家更好地了解 TiDB 源码。
63 天前 / yes的练级攻略
你好，我是 yes。 前段时间写了一篇关于 MySQL 锁的文章，一些小伙伴们在阅读之后产生了一些疑问，这些问题还挺有代表性的，所以在这里做个实验，来用事实探究一番。 那篇文章提到了记录锁（Record Locks），顾名思义锁的是记录，作用在索引上的记录。 锁是作用在索引上这句话可能不太好理解，并且对于在可重复读和读提交两个隔离级别下，关于是否命中二级索引的锁之间的阻塞也不太清晰。 这句话读着可能有点拗口，没事，我来给你看几个实验，对这一切就异常清晰了。 实验的 MySQL 版本为：5.7.26。
70 天前 / yybbb
目标：实现自定义字段，字段的内容是可扩展的，高性能查询，高扩展性（功能扩展）。 1.比如项目管理中一个项目涉及到多个参与人，可以对项目打标签（不用多表关联的方式，采用多表关联要求一个项目对应多个相关人，是一对多的关系），将项目和标签的数据都存储在一个项目表里面，降低多表关联，提高查询性能。 2.项目又分不同类型，不同类型对应的扩展字段存储的内容不一样，比如研发类型的项目，测试类型的项目，每一个都会有一些特有的扩展内容。 扩展字段比如叫 extValue,存储内容不一样。
74 天前 / 搬运工来架构
一 背景 最近项目组在版本迭代时，组件也要进行升级，此时涉及到 MySQL 驱动包 jdbc 的版本升级。即从 5.1.X 升级到 8.0.X。 然鹅在上线之后就出现了一部分兼容性问题，造成了一次“事故”：调用接口出现“系统错误”。查看日志：java.time.LocalDateTime cannot be cast to java.util.Date，也就是出现时间转换异常。 二 问题排查 根据异常堆栈，找到异常抛出的位置： 由此得知，使用 mybatis 进行 SQL 的查询时，使用的是 Map 来接收数据，key 是字段名，value 则是具体的数据，且为 Object，即可接收任何类型的对象数据。
77 天前 / 趣编程
作者：sinxu，腾讯 CSIG 后台开发工程师 1. 什么是数据的一致性“数据一致”一般指的是：缓存中有数据，缓存的数据值 = 数据库中的值。 但根据缓存中是有数据为依据，则”一致“可以包含两种情况： 缓存中有数据，缓存的数据值 = 数据库中的值（需均为最新值，本文将“旧值的一致”归类为“不一致状态”）缓存中本没有数据，数据库中的值 = 最新值（有请求查询数据库时，会将数据写入缓存，则变为上面的“一致”状态）”数据不一致“：缓存的数据值 ≠ 数据库中的值；缓存或者数据库中存在旧值...
77 天前 / Hollis
GitHub 19k Star 的 Java 工程师成神之路，不来了解一下吗！我之前写过一篇文章《为什么 MySQL 选择 REPEATABLE READ 作为默认隔离级别？》介绍过 MySQL 的默认隔离级别是 Repeatable Reads 以及背后的原因。 主要是因为 MySQL 在主从复制的过程是通过 bin log 进行数据同步的，而 MySQL 早期只有 statement 这种 bin log 格式，这种格式下，bin log 记录的是 SQL 语句的原文。 当出现事务乱序的时候，就会导致备库在 SQL 回放之后，结果和主库内容不一致。