分类：数据库

2015
01-16

SQL Server调优系列进阶篇（如何索引调优）

前言上一篇我们分析了数据库中的统计信息的作用，我们已经了解了数据库如何通过统计信息来掌控数据库中各个表的内容分布。不清楚的童鞋可以点击参考。作为调优系列的文章，数据库的索引肯定是不能少的了，所以本篇我们就开始分析这块内容，关于索引的基础知识就不打算深入分析了，网上一搜一片片的，本篇更侧重的是一些实战项内容展示，希望通过本篇文章各位看官能在真正的场景中找到合适的解决方法足以。对于索引的使用，我希... 继续阅读 >
2015
01-16

SQL Server调优系列进阶篇（如何维护数据库索引） 推荐

前言上一篇我们研究了如何利用索引在数据库里面调优，简要的介绍了索引的原理，更重要的分析了如何选择索引以及索引的利弊项，有兴趣的可以点击查看。本篇延续上一篇的内容，继续分析索引这块，侧重索引项的日常维护以及一些注意事项等。闲言少叙，进入本篇的主题。技术准备数据库版本为SQLServer2012，前几篇文章用的是SQLServer2008RT，内容区别不大，利用微软的以前的案例库（Northwind）进行分析，部分内容也会应用微... 继续阅读 >
2015
01-15

深入浅出数据仓库中SQL性能优化之Hive篇 HOT

一个Hive查询生成多个MapReduceJob，一个MapReduceJob又有Map，Reduce，Spill，Shuffle，Sort等多个阶段，所以针对Hive查询的优化可以大致分为针对MR中单个步骤的优化（其中又会有细分），针对MR全局的优化，和针对整个查询（多MRJob）的优化，下文会分别阐述。在开始之前，先把MR的流程图帖出来（摘自Hadoop权威指南），方便后面对照。另外要说明的是，这个优化只是针对Hive0.9版本，而不是后来Hortonwork发起Stinger项目... 继续阅读 >
2015
01-15

11个实用经典的SQL小贴士 推荐

写在前面的话：之前做的一个项目，数据库及系统整体构架设计完成之后，和弟兄们经过一段时间的编码，系统如期上线，刚开始运行一切良好，后来随着数据量的急剧膨胀，慢慢出现了很多莫名其妙的问题，经过调试，修改了数据库中几个存储过程的一些问题。有意思的是，有一个存储过程里，为了实现一个小的功能，写了好多好多的代码，又是游标又是循环的，其实用系统的一个默认函数就能解决掉。这里想说的是，学习工作之余，在没有要解... 继续阅读 >
2015
01-13

免安装mysql配置

1、下载压缩包：去官网下载免安装的MySQL的压缩包http://dev.mysql.com/downloads/mysql/根据机器选择64位或者32位： 2、解压到相应目录。我解压到了D:\ProgramFiles(x86)下。3、修改配置文件：将my-default.ini文件内容修改如下，[client]#客户端端口和默认字符集port=3306default-character-set=utf8 [mysqld]#服务器端设置#设置为MYSQL的安装目录basedir=D:\ProgramFiles(x86)\mysql-5.6.22-winx64#设置为MYSQ... 继续阅读 >
2015
01-13

使用mysqlbinlog工具进行基于位置或时间点的数据恢复

MySQL备份一般采取全备份加日志备份的方式，比如每天执行一次全备份，每小时执行一次二进制日志备份。这样在MySQLServer故障后可以使用全备份和日志备份将数据恢复到最后一个二进制日志备份前的任意位置或时间。用来进行全备和日志备的工具各种各样，各有其特色，在这里不做描述。本文主要讲解一下在回复完全备份后，如何应用备份的二进制日志来将数据恢复到指定的位置或时间点。这里有个十分重要的工具——mysqlbinlog,专门用... 继续阅读 >
2015
01-13

mysql数据库备份和还原

备份MySQL数据库的命令mysqldump-hhostname-uusername-ppassworddatabasename>backupfile.sql备份MySQL数据库为带删除表的格式备份MySQL数据库为带删除表的格式，能够让该备份覆盖已有数据库而不需要手动删除原有数据库。mysqldump-–add-drop-table-uusername-ppassworddatabasename>backupfile.sql直接将MySQL数据库压缩备份mysqldump-hhostname-uusername-ppassworddatabasename|gzip>backupfile.sql.g... 继续阅读 >
2015
01-13

postgres数据库中的数据转换

 postgres8.3以后，字段数据之间的默认转换取消了。如果需要进行数据变换的话，在postgres数据库中，我们可以用"::"来进行字段数据的类型转换。实际上"::"是调用CAST函数的。究竟哪些字段之间可以进行数据转换呢？  这个问题只要研究一下cast函数就能够得到答案。cast函数的信息在系统pg_cast表里面管理。通过查询我们可以得到现阶段可以转换的类型对照表如下：源类型    &nb... 继续阅读 >
2015
01-13

sql update 触发器 可获得被update的行的信息

sqlupdate触发器可获得被update的行的信息，需要的朋友可以参考下。复制代码 代码如下:createtriggerTgName ontb forupdate as ifupdate(recommend) begin updatetbsetcommenddate=(getdate())fromtbinnerjoininsertedontb.vlistid=Inserted.vlistid endrecommend表示被更新的字段. 关键在于Inserted表 触发器语句中使用了两种特殊的表：deleted表... 继续阅读 >
2015
01-13

SQLSERVER2015中的新功能

1.内存优化表  内存中OLTP是一种内存优化的数据库引擎，它集成到SQLServer引擎中。  内存中OLTP已针对OLTP进行优化。对于内存中OLTP支持的Transact-SQL外围应用存在很多限制。2.WindowsAzure中的SQLServer数据文件  WindowsAzure中的SQLServer数据文件提供对作为WindowsAzureBlob存储的SQLServer数据库文件的本机支持。   通过此功能，可以... 继续阅读 >
2015
01-12

SQL Server新一轮更新

上个月微软的SQLServer团队发布了大量小型更新。值得关注的内容包括：针对本地服务器的PowerBI、针对SQLServer2014的SystemCenter支持，以及对Java/PHP驱动程序的更新。但首先要关注的是，针对DB2用户的微软迁移工具。针对DB2的SQLServer迁移助手微软针对DB2的SQLServer迁移助手（SQLServerMigrationAssistantforDB2）最近发布了6.0版本。这个工具声称要“自动化迁移工作的各个方面，包括迁移评估分... 继续阅读 >
2015
01-12

数据库版本控制完全指南

.article-entrypre{margin:15pxauto;font:12px/20px'couriernew';border:1pxsolid#ddd;border-left-width:4px;background:#fbfbfb;padding:10px15px;}在这个充斥着大数据与商业智能的新代时，唯一不变的技术就是变化，尤其是在数据库方面。出于数据统计、继续增加的对服务的需求，以及规定制度等方面的原因，几乎每天都有业务方面的变更需求，这些都会对数据库产生变更需求。当数据库变更发生时，能否从自动化中获得更大的... 继续阅读 >
2015
01-11

内存中OLTP常见的实施场景

以下章节讨论了一些常见的经历了瓶颈的应用程序实施和前面所述的场景。所有这些场景都从实施内存中OLTP中受益良多。以下汇总表提供了每个场景的模式特点，挑战和内存中OLTP带来的主要收益。这将帮助你了解符合你的需求的特定的实施。请注意，某些场景下并不互相排斥，并且一些实施的细节可适用于多种场景。 实施方案模式特点和挑战内存中OLTP的主要收益... 继续阅读 >
2015
01-11

SQLServer 2012之AlwaysOn —— 指定数据同步链路，消除网络抖动导致的提交延迟问题

事件起因：近期有研发反应，某数据库从08切换到12环境后，不定期出现写操作提交延迟的问题；事件分析：在排除了系统资源争用等问题后，初步分析可能由于网络抖动导致同步模式alwayson节点经常出现会话超时等待提交的问题导致。经过排查，扩展事件里发现不定期出现35202错误，这是一条副本连接恢复的消息。 由于机房网络环境复杂，数据库服务器和应用服务器混用一个交换机，在业务高峰期时，因上联端口流量打满而导致... 继续阅读 >
2015
01-11

无锁队列的实现-循环数组

通过CAS操作免锁设计：CAS原子操作（Compare&Set）：包含三个操作数，内存值V、旧的预期值oldval、要修改的新值newval，当且仅当内存V中的值和旧值oldval相同时，将内存V修改为newval。数组队列是一个循环数组，队列少用一个元素，当头等于尾标示队空，尾加1等于头标示队满。数组的元素用EMPTY（无数据，标示可以入队）和FULL（有数据，标示可以出队）标记指示，数组一开始全部初始化成EMPTY标示空队列。EnQu... 继续阅读 >
2015
01-09

Eclipse logo集成开发环境 Eclipse

Eclipse是著名的跨平台的自由集成开发环境（IDE）。最初主要用来Java语言开发，但是目前亦有人通过插件使其作为其他计算机语言比如C++和Python的开发工具。Eclipse的本身只是一个框架平台，但是众多插件的支持使得Eclipse拥有其他功能相对固定的IDE软件很难具有的灵活性。许多软件开发商以Eclipse为框架开发自己的IDE。Eclipse最初是由IBM公司开发的替代商业软件VisualAgeforJava的下一代IDE开发环境，2001年11月贡献给开源... 继续阅读 >
2015
01-09

在SQL Server中添加供应用程序使用的帐号

  在之前客户咨询案例中，很多客户应用程序连接SQLServer直接用的就是SA帐号。如果对数据库管理稍微严格一点的话，就不应该给应用程序这种权限，通常应用程序只需要进行增删改查，而很少有DDL操作，因此配置帐号时应该遵循“最小权限分配”的原则仅仅赋予所需的权限。   对于应用程序来说，最小的权限通常就是就是给予读权限，写权限和执行存储过程权限。由于为了防止SQL注入导致的数据库信息泄漏... 继续阅读 >
2015
01-09

浅谈SQL语句优化经验

（1）选择最有效率的表名顺序(只在基于规则的seo/'target='_blank'>优化器中有效)：ORACLE的解析器按照从右到左的顺序处理FROM子句中的表名，FROM子句中写在最后的表(基础表drivingtable)将被最先处理，在FROM子句中包含多个表的情况下,你必须选择记录条数最少的表作为基础表。如果有3个以上的表连接查询,那就需要选择交叉表(intersectiontable)作为基础表,交叉表是指那个被其他表所引用的表.（2）WHERE子句中的连接顺序... 继续阅读 >
2015
01-09

如何高效地将SQL数据映射到NoSQL存储系统中 HOT

通常来说，我们都知道：SQL数据库只限在单机上运行，但它提供了更强的事务管理、schema与查询功能。NoSQL数据库为了伸缩性与容错性的目的，放弃了事务管理与schema。而FoundationDB的SQL层结合了这两个方面：它首先是一个开源的SQL数据库，能够线性地伸缩与提升容错性，并且还具有真正的ACID事务功能。曾经互不相容的两种特性，现在已融合在一个统一的系统中。对于处于以下几种情况的公司来说，这一特... 继续阅读 >
2015
01-08

10款最好用的MySQL数据库客户端图形界面管理工具 推荐

MySQL在过去由于性能高、成本低、可靠性好，已经成为最流行的开源数据库，因此被广泛地应用在Internet上的中小型网站中。随着MySQL的不断成熟，它也逐渐用于更多大规模网站和应用，比如维基百科、Google和Facebook等网站。非常流行的开源软件组合LAMP中的“M”指的就是MySQL。MySQL最初是瑞典的MySQLAB公司开发的一款数据库软件，2008年Sun微系统（SunMicrosystems）将其收购。2009年，甲骨文公司（Oracle）又收购Sun... 继续阅读 >
2015
01-06

MyISAM和InnoDB区别

MySQL有多种存储引擎，MyISAM和InnoDB是其中常用的两种。这里介绍关于这两种引擎的一些基本概念（非深入介绍）。MyISAM是MySQL的默认存储引擎，基于传统的ISAM类型，支持全文搜索，但不是事务安全的，而且不支持外键。每张MyISAM表存放在三个文件中：frm文件存放表格定义；数据文件是MYD(MYData)；索引文件是MYI(MYIndex)。InnoDB是事务型引擎，支持回滚、崩溃恢复能力、多版本并发控制、ACID事务，支持行级锁定（InnoDB表的... 继续阅读 >
2015
01-06

SSRS(rdl报表)分页显示表头和对表头的冻结处理

基础环境    最近在公司做西门子某系统的二次开发，需要用到SQLServerReportingServices(SSRS)。我们用的SQL版本是SQLServer2008R2；在设计报表时，表格用的是矩阵(Tablix)。由于集团用户在西门子系统实施当时，已向西门子开发人员提出过这个问题，西门子当时给出的回答是：“技术原因，不能实现。”。现在回想，一是他们没仔细研究过这个问题，二是关于SSRS的资料实在太少的缘故吧。技术实现首次... 继续阅读 >