分类：数据迁移

2021
06-04

MySQL数据迁移相关总结

前言：在平时工作中，经常会遇到数据迁移的需求，比如要迁移某个表、某个库或某个实例。根据不同的需求可能要采取不同的迁移方案，数据迁移过程中也可能会遇到各种大小问题。本篇文章，我们一起来看下MySQL数据迁移那些事儿，希望能帮助到各位。 1.关于数据迁移首先引用下维基百科中对数据迁移的解释：数据迁移（datamigration）是指选择、准备、提取和转换数据，并将数据从一个计算机存储系统永久地传输到另一个计算机存... 继续阅读 >

2020
10-09

Redis migrate数据迁移工具的使用教程

前言在工作中可能会遇到单点Redis向Redis集群迁移数据的问题，但又不能老麻烦运维来做。为了方便研发自己迁移数据，我这里写了一个简单的Redis迁移工具，希望对有需要的人有用。本工具支持:单点Redis到单点Redis迁移单点Redis到Redis集群迁移Redis集群到Redis集群迁移Redis集群到单点Redis迁移该工具已经编译成了多平台命令，直接从Github下载二进制文件执行就好了。项目地址:https://github.com/icowan/redis-tool把代... 继续阅读 >

2020
10-08

Oracle通过LogMiner实现数据同步迁移

写在前面最近在研究如何实现Oracle数据库之间的数据同步，网上的资料确实比较少。最好用的Oracle数据库同步工具是：GoldenGate，而GoldenGate是要收费的。那么还有什么好的办法来同步Oracle的数据吗？没错，就是使用LogMiner来实现Oracle数据同步迁移。实现过程1.创建目录在服务器上创建/home/oracle/tools/oracle11g/oradata/orcl/LOGMNR目录来存储数据库的字典信息，如下所示。mkdir-p/home/oracle/tools/oracle11g/oradata/o... 继续阅读 >

2015
03-06

关于大型网站技术演进的思考（七）：存储的瓶颈（7）

本文开篇提个问题给大家，关系数据库的瓶颈有哪些？我想有些朋友看到这个问题肯定会说出自己平时开发中碰到了一个跟数据库有关的什么什么问题，然后如何解决的等等，这样的答案没问题，但是却没有代表性，如果出现了一个新的存储瓶颈问题，你在那个场景的处理经验可以套用在这个新问题上吗？这个真的很难说。其实不管什么样的问题场景最后解决它都要落实到数据库的话，那么这个问题场景一定是击中了数据库的某个痛点，那么我前面... 继续阅读 >

2015
03-06

关于大型网站技术演进的思考（五）：存储的瓶颈（5）

上文里我遗留了两个问题，一个问题是数据库做了水平拆分以后，如果我们对主键的设计采取一种均匀分布的策略，那么它对于被水平拆分出的表后续的查询操作将有何种影响，第二个问题就是水平拆分的扩容问题。这两个问题在深入下去，本系列就越来越技术化了，可能最终很多朋友读完后还是没有找到解决实际问题的启迪，而且我觉得这些问题都是像BAT这样巨型互联网公司才会认真思考的，因此本篇我打算换个角度来阐述本文的后续内容。这里... 继续阅读 >