分类：mySQL

2021
03-24

MySQL数据备份方法的选择与思考

      从事DBA的行业也有两年多了，在数据备份上无论是理论和实践上，都积累了一些经验，恰逢这两天又出现一些数据备份方面的问题，这里，我将之前遇到过的数据备份方法简单做个整理。      我们都知道，保障数据库的稳定、安全、高效运行，是DBA的工作职责所在。对于DBA来讲，要想实现数据安全，数据备份可能是至关重要的一个环节。     ... 继续阅读 >
2021
03-23

MySQL 分表分库怎么进行数据切分

关系型数据库本身比较容易成为系统瓶颈，单机存储容量、连接数、处理能力都有限。当单表的数据量达到1000W或100G以后，由于查询维度较多，即使添加从库、优化索引，做很多操作时性能仍下降严重。此时就要考虑对其进行切分了，切分的目的就在于减少数据库的负担，缩短查询时间。数据库分布式核心内容无非就是数据切分（Sharding）以及切分后对数据的定位、整合。数据切分就是将数据分散存储到多个数据库中，使得单一数据库中的数据... 继续阅读 >
2021
03-23

MySQL使用B+Tree当索引的优势有哪些

数据库为什么需要索引呢？我们都是知道数据库的数据都是存储在磁盘上的，当我们程序启动起来的时候，就相当于一个进程运行在了机器的内存当中。所以当我们程序要查询数据时，必须要从内存出来到磁盘里面去查找数据，然后将数据写回到内存当中。但是磁盘的io效率是远不如内存的，所有查找数据的快慢直接影响程序运行的效率。而数据库加索引的主要目的就是为了使用一种合适的数据结构，可以使得查询数据的效率变高，减少磁盘io的次数... 继续阅读 >
2021
03-23

mysql中的7种日志小结

mysql中的7种日志小结 MySQL中有以下日志文件，分别是：1：重做日志（redolog）2：回滚日志（undolog）3：二进制日志（binlog）4：错误日志（errorlog）5：慢查询日志（slowquerylog）6：一般查询日志（generallog）7：中继日志（relaylog）其中重做日志和回滚日志与事务操作息息相关，二进制日志也与事务操作有一定的关系，这三种日志，对理解MySQL中的事务操作有着重要的意义。一、重做日志（redolog）作用：确保事务的持久性。redo日志记... 继续阅读 >
2021
03-23

docker容器访问宿主机的MySQL操作

docker容器访问宿主机的MySQL操作 背景：有一个flask项目提供接口，使用docker容器构建并且运行，MySQL在宿主机运行，需要在容器中可以让flask连接上宿主机的mysql使用ifconfig命令可以看到，有一个docker0和eth0，在docker容器中可以通过eth0的IP地址加上端口号（3306）这样就可以连接上宿主机的MySQL了；另外，nginx可以通过docker0的IP地址加上构建容器时指定的端口号进行访问容器。补充：docker的mysql容器运行正常，但是宿主机却连不上数据库，解决方法来啦doc... 继续阅读 >
2021
03-19

MySQL使用binlog日志做数据恢复的实现

MySQL使用binlog日志做数据恢复的实现 MySQL的binlog日志是MySQL日志中非常重要的一种日志，记录了数据库所有的DML操作。通过binlog日志我们可以进行数据库的读写分离、数据增量备份以及服务器宕机时的数据恢复。定期备份固然可以在服务器发生宕机的时候快速的恢复数据，但传统的全量备份不可能做到实时，所以在发生宕机的时候，也会损伤一部分数据，如果这个时候开启了binlog日志，那么可以通过binlog来对没有做备份的这一阶段损失的数据进行恢复。如果了解Redis的朋友... 继续阅读 >
2021
03-19

MySQL的binlog日志使用详解

MySQL的binlog日志使用详解 binlog就是binarylog，二进制日志文件，这个文件记录了MySQL所有的DML操作。通过binlog日志我们可以做数据恢复，增量备份，主主复制和主从复制等等。对于开发者可能对binlog并不怎么关注，但是对于运维或者架构人员来讲是非常重要的。MySQL5.7这个版本默认是不开启binlog日志的，具体的开启方式可以查看https://www.jb51.net/article/207953.htmbinlog开启成功之后，binlog文件的位置可以在my.inf配置文件中查看。也可以在MySQL... 继续阅读 >
2021
03-19

开启MySQL的binlog日志的方法步骤

开启MySQL的binlog日志的方法步骤 binlog就是binarylog，二进制日志文件，这个文件记录了mysql所有的dml操作。通过binlog日志我们可以做数据恢复，做主住复制和主从复制等等。对于开发者可能对binlog并不怎么关注，但是对于运维或者架构人员来讲是非常重要的。如何开启mysql的binlog日志呢？在my.inf主配置文件中直接添加三行log_bin=ONlog_bin_basename=/var/lib/mysql/mysql-binlog_bin_index=/var/lib/mysql/mysql-bin.index三个参数来指定，第一个参数是打开b... 继续阅读 >
2021
03-19

MySQL 8.0新特性 — 管理端口的使用简介

前言下面这个报错，相信大多数童鞋都遇见过；那么碰到这个问题，我们应该怎么办呢？在MySQL5.7及之前版本，出现“toomanyconnection”报错，超级用户root也无法登录上去，除了重启实例，没有其他更好的解决办法；不过在MySQL8.0版本中，是对连接管理做了一些优化，下面我们就来看一下。ERROR1040(HY000):Toomanyconnections连接管理在MySQL8.0版本中，对连接管理这一块，是先后做了两个比较大的改变：一个是允许额外连接... 继续阅读 >
2021
03-19

mysql利用mysqlbinlog命令恢复误删除数据的实现

mysql利用mysqlbinlog命令恢复误删除数据的实现 实验环境：MYSQL5.7.22 开启二进志日志日志格式MIXED实验过程：1、执行：FLUSHLOGS;master-bin.000014文件就是新生成的文件刷新日志是为了实验内容更直观，更容易观察到整个实验过程的内容。我看到网上许多文章有在用RESTMASTER;而未说明此命令的严重性这条命令会删除所有日志文件，并将文件名和记录点进行重置归零，99%的情况下是用不到这条命令的删除日志可以用PURGEMASTERLOGS...这样保险一点2、新日志文件已经生成... 继续阅读 >
2021
03-19

MySQL 8.0新特性 — 检查性约束的使用简介

前言在MySQL8.0版本中，引入了一个非常有用的新特性—检查性约束，它可以提高对非法或不合理数据写入的控制能力；接下来我们就来详细了解一下。检查性约束创建、删除与查看（1）可以在建表时，创建检查性约束mysql>CREATETABLEt1->(->CHECK(c1<>c2),->c1INTCHECK(c1>10),->c2INTCONSTRAINTc2_positiveCHECK(c2>0),->c3INTCHECK(c3<100),->CONSTRAINTc1_nonzeroCHECK(c1<>0),->CHECK... 继续阅读 >
2021
03-19

mysql5.7.33误删除ibdata文件找回数据的方法

一、场景说明：很多时候因为MySQL数据库不能启动而造成数据无法访问，但应用的数据通常没有丢失，只是系统表空间等其它文件损坏了，或者遇到MySQL的bug。这个时候如果没有备份，很多人就以为数据丢失了，但实际上大部分时候数据还是有救的。对于MyISAM引擎的表空间，直接把对应的数据文件拷贝到一个新的数据库就行了，数据就可以恢复了。对于InnoDB引擎的数据库表空间可以采用传输表空间的方式把数据救回来.前提是MySQL开... 继续阅读 >
2021
03-19

MySQL 实例无法启动的问题分析及解决

前言前几天，有位朋友微信联系我，告知一个生产数据库，在机器宕机恢复后，实例启动失败，而且该实例没有做任何的高可用、容灾、备份等，对业务影响非常大，希望能够协助排查一下，我也在第一时间就加入到排查中。场景分析（1）首先查看错误日志，报错很清晰"Couldnotopenlogfile"，无法打开日志文件2021-01-0613:23:5120464[ERROR]Failedtoopenlog(file'somethingisdefinitelywrongandthismayfail.',errno2... 继续阅读 >
2021
03-19

MySQL 8.0 redo log的深入解析

前言最开始了解mysql实现的时候，总听到redolog，WAL（write-aheadlogging），undolog这些关键词，了解到redolog主要是用于实现事务的持久化的。为了进一步了解redolog，看了下相关代码（源码版本：mysql8.0.12），这里简单总结下，主要介绍redolog是如何产生，如何落盘，以及最终通知用户的。redo log的产生读写事务在执行的过程中，会不断的产生redolog。申请数据页、修改数据页、记录undolog等，都会产生redol... 继续阅读 >
2021
03-19

MySQL truncate table语句的使用

Truncatetable语句用来删除/截断表里的所有数据和delete删除所有表数据在逻辑上含义相同，但性能更快类似执行了droptable和createtable两个语句mysql>select*fromstudents_bak;+-----+----------+--------+---------+|sid|sname|gender|dept_id|+-----+----------+--------+---------+|101|zhangsan|male|10||1|aa|1|1|+-----+----------+--------+---------+2rowsinset(0.00... 继续阅读 >
2021
03-19

MySQL的加密解密的几种方式(小结)

写在前面之前遇到一个问题，就是MySQL的信息如何加密。其实加密的思路有两种，一种是在数据库外部加密后存入数据库，第二种是在数据库内部对数据进行加密。这两种的区别就是第二种比第一种在使用上要更加方便，因为在外部加密的话每一次的查找如果是按照被加密的项来的话，都需要先算出加密后的数据再放入sql中，同时返回的也是加密的数据，需要在外部进行解密；而第二种的话可以直接在sql中传原值和加密的key即可，解密也可以在sq... 继续阅读 >