分类：数据库

2018
12-03

PHP实现好友生日邮件提醒

我有一个想法是这样的，希望每天知道今天是我哪位好友的生日？当然，我得首先保存我所有好友的生日信息实现：在新浪申请免费服务器，并申请Mysql应用，然后建一张表保存好友的信息我想，我已经完成第一步了，idcard包含着出生日期。第二步，我们发现生日都是农历日期的，而我们常用的是公历日期所以，我们要实现获取今天的农历日期，这个是我从网上找到的一段公历转农历，农历转公历的源代码<?phpclassLunar{private... 继续阅读 >
2018
02-21

MySQL 统计信息以及执行计划预估方式初探

数据库中的统计信息在不同（精确）程度上描述了表中数据的分布情况，执行计划通过统计信息获取符合查询条件的数据大小（行数），来指导执行计划的生成。在以Oracle和SQLServer为代表的商业数据库，和以开源的PostgreSQL为代表的数据库中，直方图是统计信息的一个重要组成部分。在生成执行计划的时候，通过统计信息以及统计信息的直方图来预估符合条件的数据行数，从而影响执行计划的生成。统计信息对执行计划的影响... 继续阅读 >
2017
12-06

项目中常用的19条MySQL优化

声明一下：下面的优化方案都是基于“Mysql-索引-BTree类型”的一、EXPLAIN做MySQL优化，我们要善用EXPLAIN查看SQL执行计划。下面来个简单的示例，标注(1,2,3,4,5)我们要重点关注的数据type列，连接类型。一个好的sql语句至少要达到range级别。杜绝出现all级别key列，使用到的索引名。如果没有选择索引，值是NULL。可以采取强制索引方式key_len列，索引长度rows列，扫描行数。该值是个预估值ex... 继续阅读 >
2017
11-25

MySQL · 最佳实践 · SQL Server三种常见备份 已认证的机构

摘要本期月报是SQLServer数据库备份技术系列文章的开篇，介绍三种常见的SQLServer备份方法的工作方式、使用T-SQL语句和使用SSMSIDE创建备份集三个层面，介绍SQLServer的三种常见备份的工作原理和使用方法。三种常见的备份包括：数据库完全备份（FullBackup）数据库日志备份（TransactionLogBackup）数据库差异备份（DifferentialBackup）备份的重要性在开始分享之前，我们首先来看看数据... 继续阅读 >
2017
08-22

用 Node + MySQL 处理 100G 数据

通过这个Node.js和MySQL示例项目，我们将看看如何有效地处理数十亿行占用数百GB存储空间的数据。本文的第二个目标是帮助你确定Node.js+MySQL是否适合你的需求，并为实现此类解决方案提供帮助。本文章使用的实际代码可以在GitHub上找到。为什么使用Node.js和MySQL？我们使用MySQL来存储我们的Node.js监控和调试工具用户的分布式跟踪数据Trace。我们选择了MySQL，因为在决定的时候... 继续阅读 >
2017
08-01

10个提升MySQL性能的小技巧

从工作量分析到索引的三条规则，这些专家见解肯定会让您的MySQL服务器尖叫。在所有的关系数据库中，MySQL已经被证明了完全是一头野兽，只要通知停止运行就绝对不会让你多等一秒钟，使你的应用置于困境之中，你的工作也承受极大的风险。不过事实是，普通的错误都在MySQL性能错误的射程之内。所以为了使你的MySQL服务器能够高速运转，提供稳定且持续的服务，消除这些错误是非常有必要的，但是这可能常常会被你的繁忙... 继续阅读 >
2017
03-23

MySQL与PostgreSQL相比哪个更好？

网上已经有很多拿PostgreSQL与MySQL比较的文章了，这篇文章只是对一些重要的信息进行下梳理。在开始分析前，先来看下这两张图：MySQLMySQL声称自己是最流行的开源数据库。LAMP中的M指的就是MySQL。构建在LAMP上的应用都会使用MySQL，如WordPress、Drupal等大多数php开源程序。MySQL最初是由MySQLAB开发的，然后在2008年以10亿美金的价格卖给了Sun公司，Sun公司又在2010年被Oracle收购。Oracle支持MySQL的多个... 继续阅读 >
2017
03-08

MySQL 及 SQL 注入与防范方法

所谓SQL注入，就是通过把SQL命令插入到Web表单递交或输入域名或页面请求的查询字符串，最终达到欺骗服务器执行恶意的SQL命令。我们永远不要信任用户的输入，我们必须认定用户输入的数据都是不安全的，我们都需要对用户输入的数据进行过滤处理。1.以下实例中，输入的用户名必须为字母、数字及下划线的组合，且用户名长度为8到20个字符之间：if(preg_match("/^\w{8,20}$/",$_GET['username'],$matche... 继续阅读 >
2017
02-28

踩坑CBO，解决那些坑爹的SQL优化问题

本次分享大纲：CBO优化器存在哪些坑CBO优化器坑的解决之道加强SQL审核，将性能问题扼杀于襁褓之中分享现场FAQCBO(CostBasedOptimizer)优化器是目前Oracle广泛使用的优化器，其使用统计信息、查询转换等计算各种可能的访问路径成本，并生成多种备选执行计划，最终Oracle会选择成本最低的作为最优执行计划。与“远古”时代的RBO(RuleBasedOptimizer)相比，显然更加符合数据库实际情... 继续阅读 >
2016
12-21

全文搜索：分词不在需要，按句子索引即可

摘要：一般来说的全文搜索服务，大体是基于字和关键词的，基于语句的全文搜索服务是一个有意思的课题。以文字为最小节点，以语句为分枝，建立语义树，提供基于语义树的全文检索服务。通过对语句进行语义特征编码，并结合数据库，来实现基于语义树的全文索引和搜索服务。1引言搜索引擎是信息时代的基础服务之一，搜索引擎服务的核心为全文检索。常用的全文检索，一般以关键词的检索为主，对于不同的语言需要不同的... 继续阅读 >
2016
12-15

如何写出高性能SQL语句 HOT

1、首先要搞明白什么叫执行计划？执行计划是数据库根据SQL语句和相关表的统计信息作出的一个查询方案，这个方案是由查询优化器自动分析产生的，比如一条SQL语句如果用来从一个10万条记录的表中查1条记录，那查询优化器会选择“索引查找”方式，如果该表进行了归档，当前只剩下5000条记录了，那查询优化器就会改变方案，采用“全表扫描”方式。可见，执行计划并不是固定的，它是“个性化的”。产生一个正确的“执行计划”有两... 继续阅读 >
2016
11-30

MySQL 的 20+ 条最佳实践

数据库操作是当今Web应用程序中的主要瓶颈。不仅是DBA（数据库管理员）需要为各种性能问题操心，程序员为做出准确的结构化表，优化查询性能和编写更优代码，也要费尽心思。在本文中，我列出了一些针对程序员的MySQL优化技术。在我们开始学习之前，我补充一点：你可以在EnvatoMarket上找到大量的MySQL脚本和实用程序。1.优化查询的查询缓存大部分MySQL服务器都有查询缓存功能。这是提高性能的最有效... 继续阅读 >
2016
11-23

利用SQLite数据库文件实现任意代码执行

前言近期，我们对贝尔金WeMo智能家居设备的安全性进行了分析。在研究过程中，我们开发出了一种新型的SQL注入技术，这项技术针对的是SQLite数据库。实验表明，我们可以利用这项SQLite注入技术在SQLite数据库中实现任意代码执行。这篇文章将会告诉大家如何去创建一个SQLite数据库，并且利用纯粹的SQL查询语句来执行一个ashShell脚本。我们认为，对于渗透测试人员和漏洞研究社区而言，这项技术的适用性是非常广泛的。... 继续阅读 >
2016
11-21

大众点评订单系统分库分表实践

背景原大众点评的订单单表早就已经突破两百G，由于查询维度较多，即使加了两个从库，优化索引，仍然存在很多查询不理想的情况。去年大量抢购活动的开展，使数据库达到瓶颈，应用只能通过限速、异步队列等对其进行保护；业务需求层出不穷，原有的订单模型很难满足业务需求，但是基于原订单表的DDL又非常吃力，无法达到业务要求。随着这些问题越来越突出，订单数据库的切分就愈发急迫了。这次切分，我们的目标是未来十年内不需要... 继续阅读 >
2016
11-08

MySQL简单主从方案暴露问题

1、概述从本篇文章开始我们将向读者介绍mysql的各种服务集群的搭建方式。大致的讨论思路是从最简的MySQL主从方案开始介绍，通过这种方案的不足延伸出更复杂的集群方案，并介绍后者是如何针对这些不足进行改进的。2、MySQL最简单主从方案及工作原理我们讲解的版本还是依据目前在生产环境上使用最多的version5.6进行，其中一些特性在Version5.7和最新的Version8.0中有所改进，但这不影响读者通过文章去理解构建MySQL集群的技... 继续阅读 >
2016
11-03

MySQL性能调优

对于全栈而言，数据库技能不可或缺，关系型数据库或者nosql，内存型数据库或者偏磁盘存储的数据库，对象存储的数据库或者图数据库……林林总总,但是第一必备技能还应该是MySQL。从LAMP的兴起，到Mariadb的出现，甚至PG的到来，熟练的MySQL技能都是大有用武之地的。MySQL数据库技术的方方面面也是很多，这里只涉及必备的性能调优，推崇从下向上的性能调优，主要包括运行环境，配置参数，SQL性能，和系统架构设计调优。运行环境调... 继续阅读 >
2016
11-03

memcached与redis实现的对比

memcached和redis，作为近些年最常用的缓存服务器，相信大家对它们再熟悉不过了。前两年还在学校时，我曾经读过它们的主要源码，如今写篇笔记从个人角度简单对比一下它们的实现方式，权当做复习，有理解错误之处，欢迎指正。文中使用的架构类的图片大多来自于网络，有部分图与最新实现有出入，文中已经指出。一.综述读一个软件的源码，首先要弄懂软件是用作干什么的，那memcached和redis是干啥的？众所周知，数据一般会放在数... 继续阅读 >
2016
10-20

详解MySQL数据库优化 HOT

一个成熟的数据库架构并不是一开始设计就具备高可用、高伸缩等特性的，它是随着用户量的增加，基础架构才逐渐完善。这篇博文主要谈MySQL数据库发展周期中所面临的问题及优化方案，暂且抛开前端应用不说，大致分为以下五个阶段： 1、数据库表设计项目立项后，开发部根据产品部需求开发项目，开发工程师工作其中一部分就是对表结构设计。对于数据库来说，这点很重要，如果设计不当，会直接影响访问速度和用户体验。影响的因... 继续阅读 >
2016
10-18

Swift 3.0 操作 MySQL 数据库详解

如果你阅读过本主其他的Swift文章，你会发现我们是Swift服务器端开发的忠实拥护者。今天我们将继续研究这个主题，使用Vapor封装的MySQLwrapper来操作MySQL数据库。说明：这并不是一篇介绍MySQL或SQL的文章，如果你对数据库还不熟悉，网上有大量的教程可供学习。本篇我们将焦聚在Linux上使用Swift3.0来操作MySQL数据库。开始在这篇教程中，我们采用Ubuntu16.04系统和MySQL5.7。MySQL5.7引入了一... 继续阅读 >
2016
10-08

SQL Server Management Studio 2016 最让人兴奋的10大新功能

介绍这篇文章列出了SQLServerManagementStudio2016已经取得的一些令人兴奋的改进。我相信，大多数新功能可以帮助我们提升工作速度，更方便地使用SSMS。1.颜色主题随着SSMS2016的到来，现在你可以选择自己喜欢的颜色主题，类似于VisualStudio中的相似功能。你可以在两种可用的颜色主题中二选一——Blue或Lignt，Blue是默认的主题。Tools–Options–Environment–Genera... 继续阅读 >
2016
09-29

对mysql语句的性能分析与优化

1.使用explain，查看查询计划2.使用showprocesslist查看查询过程（处于哪个状态），完整命令如下mysql-uroot-p-e‘showprocesslist\G’|grepstate:|sort|uniq-c|sort-rn此种方法和方法3类似，应该说方法3更好用。3.使用showprofile。默认是禁止的，需要使用setprofiling=1开启。执行一些查询后，键入showprofiles可以看到前面执行语句的查询时间以很高的精度显示了出来。然后使用showprofileforqueryn... 继续阅读 >
2016
09-26

MySQL 语句大全：创建、授权、查询、修改

一、用户创建、权限、删除1、连接MySql操作连接：mysql-h主机地址-u用户名－p用户密码（注:u与root可以不用加空格，其它也一样）断开：exit（回车）打开cmd,输入mysql-h127.0.0.1-uroot-p然后输入密码。就可以连接到本地的MySql数据库了。2、创建用户:命令:CREATEUSER'username'@'host'IDENTIFIEDBY'password';说明:username-你将创建的用户名,host-指定该用户在哪个主机上可以登陆,如果是... 继续阅读 >