6 天前 / backkoms
聊聊MySQL系存储库 早就耳闻TiDB，一直没实操，这两天不忙的功夫，在测试机上手操作了一把TiDB，这个国产NewSQL存储的杰出代表，协议基本兼容MySQL，想必这也是TiDB顺利攫取用户的重要亮点，目前Github上star数超18K+，增长势头不减。 MySQL无疑是RDMS数据库中开源、免费的扛把子，从db-engines.com排名上可以看出，除Oracle外，长期占据第二把交椅。 MySQL Community Server一般来讲，中小企业采用的就是这个社区版本，开源免费，但不提供官方技术支持。最新版本已经更新8.0+，版本命名方式也不同于以往的5.5/5.6/5.7的方式。一如Java，早期......
6 天前 / 董鹏
先抛出几个问题1.为什么不建议使用订单号作为主键 2.为什么要在需要排序的字段上加索引 3.for update 的记录不存在会导致锁住全表 4.redolog 和 binlog 有什么区别 5.MySQL 如何回滚一条 sql 6.char(50) 和 varchar(50) 效果是一样的么 索引知识回顾对于 MySQL 数据库而言,数据是存储在文件里的，而为了能够快速定位到某张表里的某条记录进行查询和修改,我们需要将这些数据以一定的数据结构进行存储，这个数据结构就是我们说的索引。回忆一下我们大学里学过的算法与数据结构，能够支持快速查找的数据结构有：顺序数组、哈希、搜索树。 数组......
7 天前 / php-v
文 |柳树on 美业 一、缘起 假设你想给别人说明，Mysql 里面是有锁的，你会怎么做？ 大多数人，都会开两个窗口，分别起两个事务，然后 update 同一条记录，在发起第二次 update 请求时，block，这样就说明这行记录被锁住了： 二、禁锢 问题来了，貌似只有显式的开启一个事务，才会有锁，如果直接执行一条 update 语句，会不会加锁呢？ 比如直接执行： update t set c = c + 1 where id = 1; 这条语句，前面不加 begin，不显式开启事务，那么 Mysql 会不会加锁呢？ 直觉告诉你，会。 但是为什么要加锁？ 给你五秒钟，说出答案。 .........
14 天前 / 龙羽
引言在面试中，大家应该经历过如下场景 面试官:"用过mysql吧，你们是用自增主键还是UUID？" 你:"用的是自增主键" 面试官:"为什么是自增主键？" 你:"因为采用自增主键，数据在物理结构上是顺序存储，性能最好，blabla…" 面试官:"那自增主键达到最大值了，用完了怎么办？" 你:"what，没复习啊！！" (然后，你就可以回去等通知了！) 这个问题是一个粉丝给我提的，我觉得挺有意(KENG)思(B)! 于是，今天我们就来谈一谈，这个自增主键用完了该怎么办！ 正文简单版 我们先明白一点，在mysql中，Int整型的范围如下 我们以无符号整型为例，......
14 天前 / 阿飞的博客
什么？你们的测试是小哥哥？那就不要往下看了，让他们怎么难怎么来。 建议根据你的业务特点，单表 > 分区 > 单库分表 > 分库分表，在满足业务前提下，优先级从左到右，不接受任何反驳。嘿嘿 背景做过分表的（单库分表或者分库分表）都知道，在你没有依赖任何中间件之前，使用Navicat或者其他类似工具操作MySQL，那将是灾难，如下图所示： sharding table view如果是类似取模这类简单算法分表还好说，能一眼根据分片键知道分表结，比如根据用户ID对128取模分表，那么用户ID为128的用户数据就在表tb_user_0中。但是如果是采用类似一致性hash算法......
29 天前 / 周梦康
免费领取阿里云优惠券我的直播 - 《PHP 进阶之路》 最近通过一个日志表做排行的时候发现特别卡，最后问题得到了解决，梳理一些索引和MySQL执行过程的经验，但是最后还是有5个谜题没解开，希望大家帮忙解答下。 谢谢丁奇老师的《MySQL实战45讲》 主要包含如下知识点 用数据说话证明慢日志的扫描行数到底是如何统计出来的从 group by 执行原理找出优化方案排序的实现细节gdb 源码调试背景需要分别统计本月、本周被访问的文章的 TOP10。日志表如下 CREATE TABLE `article_rank` (`id` int(11) unsigned NOT NULL AUTO_INCREMENT,`aid` int(11) un......
31 天前 / laoyang360
题记关系型数据库Mysql/Oracle增量同步Elasticsearch是持续关注的问题，也是社区、QQ群等讨论最多的问题之一。问题包含但不限于：1、Mysql如何同步到Elasticsearch2、Logstash、kafka_connector、canal选型有什么不同，如何取舍？3、能实现同步增删改查吗？ .....本文给出答案。 1、Canal同步1.1 canal官方已支持Mysql同步ES6.X同步原理，参见之前: 干货 | Debezium实现Mysql到Elasticsearch高效实时同步。 canal 1.1.1版本之后, 增加客户端数据落地的适配及启动功能。canal adapter 的 Elastic Search 版本支持6.x.x以上。需要借助adapter实现。......
34 天前 / 杀死那个程序员
事务是数据库最为重要的机制之一，凡是使用过数据库的人，都了解数据库的事务机制，也对ACID四个基本特性如数家珍。但是聊起事务或者ACID的底层实现原理，往往言之不详，不明所以。所以，今天我们就一起来分析和探讨InnoDB的事务机制，希望能建立起对事务底层实现原理的具体了解。 事务的四大特性数据库事务具有ACID四大特性。ACID是以下4个词的缩写： 原子性(atomicity) ：事务最小工作单元，要么全成功，要么全失败 。 一致性(consistency)： 事务开始和结束后，数据库的完整性不会被破坏 。 隔离性(isolation) ：不同事务之间互不影响，四种......
35 天前 / Shurlormes
下载mysql库先到mysql官网找到需要安装的版本https://dev.mysql.com/downloa... 然后再linux上执行 wget 将对应的rpm下载下来 shell> wget https://dev.mysql.com/get/mysql80-community-release-el7-2.noarch.rpm yum 安装mysql把下载下来的包添加到yum库 shell> rpm -Uvh mysql80-community-release-el7-2.noarch.rpm看一下是否添加成功了 shell> yum repolist all | grep mysql 可以开始安装了 shell> yum -y install mysql-community-server安装成功后，启动服务,并且查看mysql的状态 shell> systemctl start mysqld.serviceshell> sys......
36 天前 / 小旋锋
maxwell 简介Maxwell是一个能实时读取MySQL二进制日志binlog，并生成 JSON 格式的消息，作为生产者发送给 Kafka，Kinesis、RabbitMQ、Redis、Google Cloud Pub/Sub、文件或其它平台的应用程序。它的常见应用场景有ETL、维护缓存、收集表级别的dml指标、增量到搜索引擎、数据分区迁移、切库binlog回滚方案等。官网(http://maxwells-daemon.io)、GitHub(https://github.com/zendesk/maxwell) Maxwell主要提供了下列功能： 支持SELECT*FROM table的方式进行全量数据初始化 支持在主库发生failover后，自动恢复binlog位置(GTID) 可以对数据进行分区......
36 天前 / vivo互联网技术
本文对 MySQL 数据库中有关锁、事务及并发控制的知识及其原理做了系统化的介绍和总结，希望帮助读者能更加深刻地理解 MySQL 中的锁和事务，从而在业务系统开发过程中可以更好地优化与数据库的交互。 1、MySQL 服务器逻辑架构 （图片来源MySQL官网） 每个连接都会在 MySQL 服务端产生一个线程（内部通过线程池管理线程），比如一个 select 语句进入，MySQL 首先会在查询缓存中查找是否缓存了这个 select 的结果集，如果没有则继续执行解析、优化、执行的过程；否则会之间从缓存中获取结果集。 2、MySQL 锁 2.1、Shared......
37 天前 / yiHui
给表新增字段时，发现锁表了，查看进程，提示Waiting for table metadata lock，等待锁释放；然而蛋疼的是几分钟过去了，依然没有任何的进展，特此记录下这个问题的定位过程以及MDL的相关背景知识 看到上面的表现，基本问题就来了 Metadata Lock 是什么鬼 是什么原因导致一直等待 I. 问题定位首先需要确认什么地方加锁，从mysql出发，应该怎么定位？ 1. 定位过程对于mysql而言，一般来讲上锁和事物时伴生关系，所以我们的直观出发点就是查找db当前正在执行的事物 -- 查询当前正在执行的事物的sql SELECT * FROM information_schema.INNODB......
39 天前 / Jackeyzhe
原文地址：https://www.percona.com/blog/2019/02/25/mysql-challenge-100k-connections/ 本文的目的是探索一种在一台MySQL服务器上建立10w个连接的方法。我们要建立的是可以执行查询的连接，而不是10w个空闲连接。 你可能会问，我的MySQL服务器真的需要10w连接吗？我见过很多不同的部署方案，例如使用连接池，每个应用的连接池里放1000个连接，部署100个这样的应用服务器。还有一些非常糟糕的实践，使用“查询慢则重连并重试”的技术。这会造成雪球效应，有可能导致在几秒内需要建立上千个连接的情况。 所以我决定设置一个“小目标”，看能否实......