分类：MySql

2021
08-26

解析MySQL binlog

目录一、binlog简介二、binlog相关参数三、解析binlog内容四、总结一、binlog简介binlog即binarylog，二进制日志文件。它记录了数据库所有执行的DDL和DML语句（除了数据查询语句select、show等），以事件形式记录并保存在二进制文件中。binlog主要有两个应用场景，一是用于复制，master把它的二进制日志传递给slaves来达到master-slave数据一致的目的。二是用于数据恢复，例如还原备份后，可以重新执行备份后新产生的binlog，使得... 继续阅读 >
2021
08-26

详细谈谈MYSQL中的COLLATE是什么

前言在mysql中执行showcreatetable<tablename>指令，可以看到一张表的建表语句，example如下：CREATETABLE`table1`(`id`bigint(20)unsignedNOTNULLAUTO_INCREMENT,`field1`textCOLLATEutf8_unicode_ciNOTNULLCOMMENT'字段1',`field2`varchar(128)COLLATEutf8_unicode_ciNOTNULLDEFAULT''COMMENT'字段2',PRIMARYKEY(`id`))ENGINE=InnoDBDEFAULTCHARSET=utf8mb4COLLATE=utf8_unico... 继续阅读 >
2021
08-26

mysql高效查询left join和group by(加索引)

mysql高效查询mysql牺牲了groupby来增加leftjoin的速度（前提是加了索引）。user表：10万数据实例1：200秒左右SELECTU.id,A.favorite_countFROM(SELECTidfromuser)ULEFTJOIN(--点赞数SELECTfavorite_byASuser_id,SUM(favorite_count)ASfavorite_countFROMfavoriteGROUPBYfavorite_by)AONU.id=A.user_idLEFTJOIN(--评论数量SELECTuser_id,COUNT(*)AScomment_countFROMphoto_comme... 继续阅读 >
2021
08-23

安装配置mysql及Navicat prenium的详细流程

安装配置mysql及Navicat prenium的详细流程 前提：Mac，还安装了zsh，之前是bash时下载过mysql，删除过再下载。mysql下载下载地址：https://dev.mysql.com/downloads/mysql/不在乎版本的就直接在这里下dmg格式的文件即可，在乎版本的就去Archives里可以选版本（我下完了才想起是不是要看版本，还在初步学习中就随便了就这个吧……）选这个可以直接下载不登录不注册，比较方便安装这一步可能会有差别，因为这台电脑之前下过mysql。重新安装直接一路同意向下安装即可，最后一步... 继续阅读 >
2021
08-20

mysql中between的边界,范围说明

mysql中between的边界,范围说明 mysqlbetween的边界范围between的范围是包含两边的边界值eg：idbetween3and7等价与id>=3andid<=7notbetween的范围是不包含边界值eg：idnotbetween3and7等价与id<3orid>7SELECT*FROM`test`whereidBETWEEN3and7;等价于SELECT*FROM`test`whereid>=3andid<=7;-----------------------------------------------------------SELECT*FROM`test`whereidNOTBETWEEN3and7;等价于SELECT... 继续阅读 >
2021
08-12

MySQL 百万级数据的4种查询优化方式

目录一.limit越往后越慢的原因二.百万数据模拟1、创建员工表和部门表，编写存储过程插数据2.执行存储过程三.4种查询方式1.普通limit分页2.使用索引覆盖+子查询优化3.起始位置重定义4,降级策略（百度的做法）一.limit越往后越慢的原因当我们使用limit来对数据进行分页操作的时，会发现：查看前几页的时候，发现速度非常快，比如limit200,25，瞬间就出来了。但是越往后，速度就越慢，特别是百万条之后，卡到不行，那这个是什么原理... 继续阅读 >
2021
08-11

MySQL 全文检索的使用示例

目录1.环境准备2.数据准备3.开始表演4.分词引擎总结参考资料1.环境准备MySQL5.7.6之前，全文索引只支持英文全文索引，不支持中文全文索引，需要利用分词器把中文段落预处理拆分成单词，然后存入数据库。MySQL5.7.6开始，MySQL内置了ngram全文解析器，用来支持中文、日文、韩文分词。本文使用的MySQL版本是5.7.22，InnoDB数据库引擎。所以这里需要MySQL的版本大于5.7.6--查看mysql的版本mysql>selectversion();+------... 继续阅读 >
2021
08-11

MySQL 常见的数据表设计误区汇总

目录误区一：过多的数据列误区二：过多的联合查询误区三：滥用SET替代ENUM误区四：生硬地避免NULL误区五：使用整数替换时间戳误区六：忘记字段的最大存储范围结语：误区一：过多的数据列MySQL存储引擎的API是按照行缓冲区方式从服务端和存储引擎复制数据。服务端将缓冲区数据解码成数据列。然而，将行缓冲区的格式转换为数据行数据结构的列可能会代价很高。MyISAM固定使用与服务端匹配的行格式，因此无需转换。然而，MyISAM... 继续阅读 >
2021
08-11

浅谈MySQL next-key lock 加锁范围

浅谈MySQL next-key lock 加锁范围 前言某天，突然被问到MySQL的next-keylock，我瞬间的反应就是：这都是啥啥啥？？？这一个截图我啥也看不出来呀？仔细一看，好像似曾相识，这不是《MySQL45讲》里面的内容么？什么是next-keylockAnext-keylockisacombinationofarecordlockontheindexrecordandagaplockonthegapbeforetheindexrecord.官网的解释大概意思就是：next-key锁是索引记录上的记录锁和索引记录之前的间隙上的间隙锁的组合... 继续阅读 >
2021
08-11

MySQL为id选择合适的数据类型

目录分布式ID方案总结数据库自增ID数据库多主模式号段模式雪花算法选择id的数据类型，不仅仅需要考虑数据存储类型，还需要了解MySQL对该种类型如何计算和比较。例如，MySQL将ENUM和SET类型在内部使用整型存储，但是在字符串场景下会当做字符串进行比较。一旦选择了id的数据类型后，需要保证引用id的相关数据表的数据类型一致，而且是完全一致，这包括属性，例如长度、是否有符号！如果混用不同的数据类型可能导致性能... 继续阅读 >
2021
08-08

MySQL单表千万级数据处理的思路分享

目录项目背景改进思路观察数据特征多进程处理思路总结数据处理技巧项目背景在处理过程中，今天上午需要更新A字段，下午爬虫组完成了规格书或图片的爬取又需要更新图片和规格书字段，由于单表千万级深度翻页会导致处理速度越来越慢。selecta,b,cfromdb.tblimit10000offset9000000但是时间是有限的，是否有更好的方法去解决这种问题呢？改进思路是否有可以不需要深度翻页也可以进行数据更新的凭据？是的，利用自增id列观察数... 继续阅读 >
2021
08-08

MySQL 时间类型的选择

目录DATETIMETIMESTAMP如何选择如何存储毫秒级时间结语MySQL提供了DATETIME和TIMESTAMP两种非常相似的类型处理日期和时间，大部分情况下两种都是OK的，但是有些情况二者会互有优劣。DATETIMEDATETIME的时间跨度更大，可以从1001年到9999年，精度是秒。并且存储的格式是将日期和时间打包使用YYYYMMDDhhmmss格式的整数存储，这个时间与时区无关，需要占用8个字节的存储空间。默认，MySQL显示的DATETIME是有序的，明确的格... 继续阅读 >
2021
08-08

MySQL库表名大小写的选择

目录1.决定大小写是否敏感的参数2.参数变更注意事项总结：1.决定大小写是否敏感的参数在MySQL中，数据库与data目录中的目录相对应。数据库中的每个表都对应于数据库目录中的至少一个文件（可能是多个文件，具体取决于存储引擎）。因此，操作系统的大小写是否敏感决定了数据库大小写是否敏感，而Windows系统是对大小写不敏感的，Linux系统对大小写敏感。默认情况下，库表名在Windows系统下是不区分大小写的，而在Linux系... 继续阅读 >
2021
08-08

Mysql 如何实现多张无关联表查询数据并分页

Mysql 如何实现多张无关联表查询数据并分页 Mysql多张无关联表查询数据并分页功能需求在三张没有主外键关联的表中取出自己想要的数据，并且分页。数据库表结构水果表：坚果表： 饮料表：数据库随便建的，重在方法。主要使用UNIONALL操作符UNIONALL操作符用于合并两个或多个SELECT语句的结果集。请注意，UNIONALL内部的SELECT语句必须拥有相同数量的列。列也必须拥有相似的数据类型。同时，每条SELECT语句中的列的顺序必须相同;另外，UNIONALL结果集中的... 继续阅读 >
2021
08-08

Mysql中存储引擎的区别及比较

Mysql中存储引擎的区别及比较 MyISAM存储引擎MyISAM基于ISAM存储引擎，并对其进行扩展。它是在Web、数据仓储和其他应用环境下最常使用的存储引擎之一。MyISAM拥有较高的插入、查询速度，但不支持事务。MyISAM主要特性有：1、大文件（达到63位文件长度）在支持大文件的文件系统和操作系统上被支持。2、当把删除和更新及插入操作混合使用的时候，动态尺寸的行产生更少碎片。这要通过合并相邻被删除的块，以及若下一个块被删除，就扩展到下一块自动完成。3、每个My... 继续阅读 >