分类：Mysql

2021
06-19

MySQL DDL 引发的同步延迟该如何解决

前言写作案例分析，主要是工具介绍&推荐。MySQL的同步机制比较单纯，主库上执行过的DML和DDL会在从库上再执行一次，那么主库上需要10min才能执行完的DDL理论上在从库至少也要花费10min才能执行完，这意味着从库的同步会延迟10min以上，等DDL执行完之后才会继续追同步。解决方案从MySQL的同步原理来看，主要是DDL这个单独的操作会花费太久的时间，导致从库也会被卡主。那么解决这个问题的办法就很容易想到：“拆... 继续阅读 >
2021
06-19

MySQL 丢失数据的原因及解决

前言最近偶尔会收到用户反馈数据不见了，数据丢失了的问题。从现象上来看，这类问题在数据库层面就是紧急程度最高的那一类了，抛开客观条件来说，针对这一类问题的恢复手段几乎只有备份恢复+回放Binlog，耗时一般比较久，对业务的影响也会很大。但是，作为一个以稳定为主的软件，其实丢数据的概率是非常低的，所以这些反馈的问题，是不是真的“丢失数据了”？问题描述某日中午接到用户反馈，用业务账号登录数据库以后，业务库不见... 继续阅读 >
2021
06-19

详解Mysql order by与limit混用陷阱

详解Mysql order by与limit混用陷阱 在Mysql中我们常常用orderby来进行排序，使用limit来进行分页，当需要先排序后分页时我们往往使用类似的写法select*from表名orderby排序字段limtM,N。但是这种写法却隐藏着较深的使用陷阱。在排序字段有数据重复的情况下，会很容易出现排序结果与预期不一致的问题。如表：查询第一页跟最后一页时出现：解决办法：SELECT*FROMpurchaseinfoORDERBYactiontime,idLIMIT0,2;上面的实际执行结果已经证明现实与想像往往... 继续阅读 >
2021
06-19

MySQL Delete 删数据后磁盘空间未释放的原因

问题描述在MySQL中使用delete语句删除数据之后，监控视图中可用的磁盘空间没有增加，磁盘使用率没有下降等等。解决方案delete不释放空间是MySQL自身机制的原因，需要重建表才可以释放磁盘空间，可以参考的操作：执行optimizetable${table_name}。如果是InnoDB的表，执行altertable${table_name}engine=innodb。需要注意以下两个问题：这两个命令都会重建表，尽量不要在磁盘空间紧张（>90%）的时候进... 继续阅读 >
2021
06-19

MySQL sql_mode修改不生效的原因及解决

前言近期多次聊到sql_mode的话题，也是多次遇到相关问题，今天就趁热打铁，再给大家带来一个sql_mode的案例分享。场景模拟基于业务敏感性的考虑，下面涉及的表、存储过程等均非真实数据，但并不影响排查过程。（1）客户侧开发童鞋创建了一个存储过程，该存储过程没有严格遵守groupby标准语法session1：mysql>delimiter//mysql>createproceduretest_for_group_by()->begin->selectk,pad,count(*)fromtest.test... 继续阅读 >
2021
06-13

MySQL 表空间碎片的概念及相关问题解决

背景经常使用MySQL的话，会发现MySQL数据文件的磁盘空间一般会不停的增长，而且有时候删了数据或者插入一批数据的时候，磁盘空间有时候还会毫无变化。引发这个其妙现象的就是MySQL的表空间碎片。什么是表空间碎片？表空间碎片指的是表空间中存在碎片，形象一点来比喻的话，就像是一张A4纸，“表空间碎片”就像是把这张A4纸撕碎，再重新拼起来，各个碎片之间都会有一些缝隙存在，这些缝隙就是“表空间碎片”。重新拼起来... 继续阅读 >
2021
06-13

MySQL kill不掉线程的原因

背景在日常的使用过程中，时不时会遇到个别，或者大量的连接堆积在MySQL中的现象，这时一般会考虑使用kill命令强制杀死这些长时间堆积起来的连接，尽快释放连接数和数据库服务器的CPU资源。问题描述在实际操作kill命令的时候，有时候会发现连接并没有第一时间被kill掉，仍旧在processlist里面能看到，但是显示的Command为Killed，而不是常见的Query或者是Execute等。例如：mysql>showprocesslist;+----+-----... 继续阅读 >
2021
06-07

MySQL创建高性能索引的全步骤

一、索引基础1.索引的类型1.1B-Tree索引大多数MySQL存储引擎默认使用的是B+树的索引，不同的存储引擎用不同的方式使用B+树索引，MyISAM使用前缀压缩技术使得索引更小，但是InnoDB则按照元数据格式进行存储；MyISAM索引通过数据的物理位置引用被索引的行，而InnoDB则根据主键引用被索引的行。B树和B+树B树：B+树：区别：B树的关键字和记录是放在一起的，叶子节点可以看作外部节点，不包含任何信息；B+树的非叶子节点中只... 继续阅读 >
2021
06-04

MySQL的join buffer原理

一、MySQL的joinbuffer在MySQL对于join操作的处理过程中，joinbuffer是一个重要的概念，也是MySQL对于tablejoin的一个重要的优化手段。虽然这个概念实现并不复杂，但是这个是实现MySQLjoin连接优化的一个重要方法，在"暴力"连接的时候可以极大提高join查询的效率。关于这个概念的权威说明当然是来自MySQL文档中对于这个概念的说明，说明的文字不多，但是言简意赅，说明了这个优化的主要实现思想：Assumeyouhavethefollowin... 继续阅读 >
2021
06-04

Mysql服务添加 iptables防火墙策略的方案

如果你的Mysql数据库安装在centos7的系统上，并且你的操作系统启用了防火墙。应用要访问mysql数据库，你有2个解决方案。方案一：停止防火墙服务方案二：在防火墙中添加策略，让应用能正常访问mysql服务端口停止Centos7防火墙查看防火墙运行状态[root@mysql~]#firewall-cmd--staterunning停止防火墙服务[root@mysql~]#systemctlstopfirewalld.service启动Centos7防火墙查看防火墙运行状态[root@mysql~]#firewall-cmd--sta... 继续阅读 >
2021
06-04

MySQL数据迁移相关总结

前言：在平时工作中，经常会遇到数据迁移的需求，比如要迁移某个表、某个库或某个实例。根据不同的需求可能要采取不同的迁移方案，数据迁移过程中也可能会遇到各种大小问题。本篇文章，我们一起来看下MySQL数据迁移那些事儿，希望能帮助到各位。 1.关于数据迁移首先引用下维基百科中对数据迁移的解释：数据迁移（datamigration）是指选择、准备、提取和转换数据，并将数据从一个计算机存储系统永久地传输到另一个计算机存... 继续阅读 >
2021
05-29

解决MySQL存储时间出现不一致的问题

解决MySQL存储时间出现不一致的问题 用Java在获取了系统时间后，存入MySQL数据库时，当时间的类型为datetime或Timestamp时发现数据库的存储与本地时间不一致。很大原因是，MySQL设置的时区与你本地时区不一致造成的，解决办法可以修改MySQL的时区配置，这个大家网上搜一下就有了。本人推荐第二种方法就是在数据库连接的那个DBUtil类里根据你项目的实际需要进行设置，不如我在如下代码里更改了时区与亚洲上海同时区privatestaticStringdriver="com.mysql.cj.jdbc.... 继续阅读 >
2021
05-23

MySQL Router的安装部署

01MySQLRouter介绍  前面的文章中，我们说了ReplicaSet的基本概念MySQLShell工具以及如何使用MySQLShell搭建InnodbReplicaset。今天我们来看InnoDBReplicaSet部署过程中的另一个重要组件MySQLRouter。MySQLRouter是什么？   为了更好的理解InnodbReplicaset，我们把之前的那张图搬迁过来，如下： 通过上面的图，不难看出，MySQLRouter是应用程序连接的入口，它的存在，让底层的架构对... 继续阅读 >
2021
05-23

MySQL Shell的介绍以及安装

01ReplicaSet的架构  前面的文章中，我们说了ReplicaSet的基本概念和限制以及部署前的基本知识。今天我们来看InnoDBReplicaSet部署过程中的两个重要组件之一的MySQLShell，为了更好的理解MySQLShell，画了一张图，如下：  通过上面的图，不难看出，MySQLShell是运维人员管理底层MySQL节点的入口，也就是DBA执行管理命令的地方，而MySQLRouter是应用程序连接的入口，它的存在，让底层的架构对应用程序... 继续阅读 >
2021
05-23

MySQL InnoDB ReplicaSet(副本集)简单介绍

01InnoDBReplicaSet（副本集）介绍    在MySQL8.0引入了InnoDBReplicaSet，它提供了我们熟悉的复制特性，如果有mongodb副本集的概念，理解InnoDBReplicaSet会比较容易。   InnoDBReplicaSet使用了下面的技术：1、MySQLShell，一个功能更强大的客户端2、MySQLRouter，一个轻量级别的中间件，可以类比MongoDB中的mongos的角色；3、MySQLServer，也就是MySQL服务   ... 继续阅读 >
2021
05-23

MySQL 角色(role)功能介绍

前言：上篇文章，我们介绍了MySQL权限管理相关知识。当数据库实例中存在大量的库或用户时，权限管理将会变得越来越繁琐，可能要频繁进行权限变更。MySQL8.0新增了role功能，使得权限管理更加方便，本篇文章我们来看下8.0下的role功能。 1.role简介role角色功能对于Oracle数据库来说不算是什么特殊，在Oracle中经常被用到。MySQL8.0版本终于新增了role功能，为数据库用户权限管理提供了一种新思路。role... 继续阅读 >