分类：迁移

2021
09-06

MySQL 亿级数据导入导出及迁移笔记

最近MySQL的笔记有点多了，主要是公司Oracle比较稳定维护较少，上周被安排做了一个MySQL亿级数据的迁移，趁此记录下学习笔记；数据迁移，工作原理和技术支持数据导出、BI报表之类的相似，差异较大的地方是导入和导出数据量区别，一般报表数据量不会超过几百万，而做数据迁移，如果是互联网企业经常会涉及到千万级、亿级以上的数据量。导入和导出是两个过程，即使做数据迁移我们也要分开来看，同时，导入/导出方式又分为：1、MySQL... 继续阅读 >

2021
06-04

MySQL数据迁移相关总结

前言：在平时工作中，经常会遇到数据迁移的需求，比如要迁移某个表、某个库或某个实例。根据不同的需求可能要采取不同的迁移方案，数据迁移过程中也可能会遇到各种大小问题。本篇文章，我们一起来看下MySQL数据迁移那些事儿，希望能帮助到各位。 1.关于数据迁移首先引用下维基百科中对数据迁移的解释：数据迁移（datamigration）是指选择、准备、提取和转换数据，并将数据从一个计算机存储系统永久地传输到另一个计算机存... 继续阅读 >

2021
03-30

PyTorch 迁移学习实践(几分钟即可训练好自己的模型)

前言如果你认为深度学习非常的吃GPU，或者说非常的耗时间，训练一个模型要非常久，但是你如果了解了迁移学习那你的模型可能只需要几分钟，而且准确率不比你自己训练的模型准确率低，本节我们将会介绍两种方法来实现迁移学习迁移学习方法介绍微调网络的方法实现迁移学习，更改最后一层全连接，并且微调训练网络将模型看成特征提取器，如果一个模型的预训练模型非常的好，那完全就把前面的层看成特征提取器，冻结所有层并且更改... 继续阅读 >

2020
11-16

如何把本地mysql迁移到服务器数据库

我们可以使用linux的scp命令(scp无法在windows使用),加上mysql自带的mysqldump,能很快的完成数据库的迁移将本地的数据库(music_db)导出为sql文件(music_db.sql)mysqldump-uroot-pmusic_db>music_db.sql用scp命令将sql文件发送到服务器scpmusic_db.sql远程登录账号@服务器ip:服务器目录/music_db.sqlssh登录服务器ssh远程登录账号@远程ip在服务器上登录mysqlmysql-uroot-p在服务器的mysql中新建同名数据库(music_db),然... 继续阅读 >

2020
11-13

Django数据库迁移常见使用方法

1数据导出pythonmanage.pydumpdata不指定appname时默认为导出所有的apppythonmanage.pydumpdata[appname]>appname_data.json指定appnamde导出指定app的数据（比如appname为cmdb）pythonmanage.pydumpdatacmdb>cmdb.json2.数据导入pythonmanage.pyloaddata不需要指定appnamepythonmanage.pyloaddatablog_dump.json优点：可以兼容各种支持的数据库，也就是说，以前用的是SQLite3，可以导出后，用这种方法导... 继续阅读 >

2020
10-10

Mybatis迁移到Mybatis-Plus的实现方法

由于原来项目中已有很多功能和包，想迁移到Mybatis-Plus，旧的还是继续用Mybatis和PageHelper，新的准备全部用Mybatis-Plus。迁移遇到了各种错误，记录一下，特别是这个错误：mybatis-plusorg.apache.ibatis.binding.BindingException:Invalidboundstatement(notfound):，花了差不多一天时间，都差点准备撤子模块了，将旧的一个模块，新的一个模块。一、Mybatis-Plus依赖后面还准备新建对象，把代码生成器也加进来了。<!--... 继续阅读 >

2020
10-10

Jenkins迁移job插件Job Import Plugin流程详解

由于又开了新机器所以又要重新布置Jenkins从老项目拷贝过来，发现JobImportPlugin这个插件更新了，和以前的有些出入所以再记录一下插件管理安装一下JobImportPlugin可以看到已经更新到3.4版本了安装之后可以在首页找到点开之后可以发现和以前不一样了，不能配置了我们可以在系统配置下找到填入需要转入的jenkins项目地址账号等信息我这里用的账号，也可以用ssh秘钥等回到界面点击Query就会出现要转移的项目，勾选确认即可以上... 继续阅读 >

2020
10-08

Python依赖包迁移到断网环境操作

场景：由于自己的电脑A性能不足，需要转移到一台高性能的主机B上运行python程序，但是该主机不能连接互联网。问题：在个人电脑A上建立了一个虚拟环境，安装了依赖包并且调试程序使其能运行。但是将虚拟环境所在文件夹复制粘贴到主机B上时，无法运行。环境：Windows、Python3.6解决办法：1.主机A（虚拟环境激活）pipfreeze>requirements.txt将虚拟环境中安装的Python依赖包记录到文件requirements.txt中。2.主机A（虚拟环境激活... 继续阅读 >

2020
10-08

Android AndroidX的迁移

1.前言AndroidXreplacestheoriginalsupportlibraryAPIswithpackagesintheandroidxnamespace.OnlythepackageandMavenartifactnameschanged;class,method,andfieldnamesdidnotchange.，Google不再对androidsupport库进行维护，androidsupport中的API由命名空间AndroidX下的软件包进行替换，即相应的包名和Maven工件名发生改变。2.迁移AndroidX2.1迁移之前的准备原有项目的support库版本升级至28(An... 继续阅读 >

2020
09-29

如何把外网python虚拟环境迁移到内网

外网python2.7虚拟环境中安装了flask模块，期望在内网使用，如何迁移外网的虚拟环境到内网呢？1进入外网python虚拟环境[root@localhost20200422]#sourcepython27_virtual_env/bin/activate(python27_virtual_env)[root@localhost20200422]#2导入虚拟环境中已安装包的信息到requirements.txt文件中(python27_virtual_env)[root@localhost20200422]#pipfreeze--all>requirements.txt3创建一个临时目录，将安装包下... 继续阅读 >

2014
11-07

Yii框架官方指南系列增补版27——使用数据库：数据库迁移

注意:yii从版本1.1.6以后才开始支持数据库迁移特性。和源码一样，数据库的结构也随着我们开发和维护数据库驱动应用而不断壮大.例如，在开发期间，我们可能想要添加一个新的表;或者在应用投入生产期以后，我们可能会意识到需要在某个列上添加索引.跟踪这些数据库结构的改变（被称作迁移）和操作源代码一样很重要.如果源码和数据库不同步了，可能这个系统都会中断。正是因为这个原因，Yii框架提供了数据库迁移工具，以便跟踪数据... 继续阅读 >