分类：Python

2021
05-02

Python中os模块的简单使用及重命名操作

前言OS模块虽然基础的时候已经学过了，但是谁让本人属于那种不用立马就忘的人呢，所以在在下爬取某个不可名状的男人都喜欢的网站的时候，在遇到爬取下来的数据需要保存的时候，就需要用到OS模块了OS模块基础回顾先回顾一下基础OS模块用于操作文件夹(基于我的理解)importosos.mkdir("path")#创建该路径然后，基础就没了，对的，我学基础OS模块的时候，就学了个这个，在当时来看，还是够用的啦OS模块小应用这下面就是本人在写爬... 继续阅读 >
2021
05-02

Python中os模块的简单使用及重命名操作

前言OS模块虽然基础的时候已经学过了，但是谁让本人属于那种不用立马就忘的人呢，所以在在下爬取某个不可名状的男人都喜欢的网站的时候，在遇到爬取下来的数据需要保存的时候，就需要用到OS模块了OS模块基础回顾先回顾一下基础OS模块用于操作文件夹(基于我的理解)importosos.mkdir("path")#创建该路径然后，基础就没了，对的，我学基础OS模块的时候，就学了个这个，在当时来看，还是够用的啦OS模块小应用这下面就是本人在写爬... 继续阅读 >
2021
05-02

Python OpenCV快速入门教程

OpenCVOpenCV是计算机视觉中最受欢迎的库，最初由intel使用C和C++进行开发的，现在也可以在python中使用。该库是一个跨平台的开源库，是免费使用的。OpenCV库是一个高度优化的库，主要关注实时应用程序。OpenCV库是2500多种优化算法的组合，可用于检测和识别不同的人脸，实时识别图像中的对象，使用视频和网络摄像头对不同的人类动作进行分类，跟踪摄像机的运动，跟踪运动对象（例如汽车，人等），实时计数对象，缝合图像来产生高... 继续阅读 >
2021
05-02

如何用python 操作MongoDB数据库

一、前言MongoDB属于NoSQL（非关系型数据库），是一个基于分布式文件存储的开源数据库系统。二、操作MongoDB1、安装 pymongopython使用第三方库来连接操作MongoDB，所以我们首先安装此库。pip3install pymongodb2、连接MongoDB使用MongoClient类连接，以下两种参数方式都可以：frompymongoimportMongoClient#连接方式一client=MongoClient(host='localhost',port=27017)#连接方式二#client=MongoC... 继续阅读 >
2021
05-02

Python Numpy之linspace用法说明

Python Numpy之linspace用法说明 linspace生成有序列表，重点在数据范围与数据个数上linspace(0,1,11)，即从0到1闭区间，划分为11个数据点>>>importnumpyasnp>>>a=np.linspace(0,1,10)>>>aarray([0.,0.11111111,0.22222222,0.33333333,0.44444444,0.55555556,0.66666667,0.77777778,0.88888889,1.])>>>a=np.linspace(0,1,11)>>>aarray([0.,0.1,0.2,0.3,0.4,0.5,0.6,0.7,0.8,0.9,1.])补充：Pythonnumpy函... 继续阅读 >
2021
05-02

python基于Pandas读写MySQL数据库

要实现pandas对mysql的读写需要三个库pandassqlalchemypymysql可能有的同学会问，单独用pymysql或sqlalchemy来读写数据库不香么，为什么要同时用三个库？主要是使用场景不同，个人觉得就大数据处理而言，用pandas读写数据库更加便捷。 1、read_sql_query读取mysqlread_sql_query或read_sql方法传入参数均为sql语句，读取数据库后，返回内容是dateframe对象。普及一下：dateframe其实也是... 继续阅读 >
2021
05-02

使用python实现三维图可视化

使用python实现三维图可视化 这是学习tensorflow框架中遇到的知识，这里定义函数的时候选用的是将x和y封装起来，方便tensorflow求导。要慢慢习惯这种写法importnumpyasnpimportmatplotlib.pyplotaspltfrommpl_toolkits.mplot3dimportAxes3Ddefhimmelblau(x):return(x[0]**2+x[1]-11)**2+(x[0]+x[1]**2-7)**2x=np.linspace(-6,6,200)y=np.linspace(-6,6,200)X,Y=np.meshgrid(x,y)fig=plt.figure(figsize=(12,10))ax=fig.... 继续阅读 >
2021
05-02

python基于concurrent模块实现多线程

引言      之前也写过多线程的博客，用的是threading，今天来讲下python的另外一个自带库 concurrent。concurrent是在 Python3.2中引入的，只用几行代码就可以编写出线程池/进程池，并且计算型任务效率和mutiprocessing.pool提供的poll和ThreadPoll相比不分伯仲，而且在IO型任务由于引入了Future的概念效率要高数倍。而threading的话还要自己维护相关的队列防止死... 继续阅读 >
2021
05-02

Python requests timeout的设置

背景最近在搞爬虫，很多小组件里面都使用了Python的requests库，很好用，很强大。但最近发现很多任务总是莫名其妙的卡住，不报错，但是就是不继续执行。排查了一圈，最后把问题锁定在requests的timeout机制上。注：本文讨论的是Python的第三方模块requests，并不是Python内建模块urllib中的request模块，请注意区分。如何设置超时时间requests设置超时时间有两种方式。一种是设置单一值作为timeout，如下所示：... 继续阅读 >
2021
05-02

python matplotlib绘图实现删除重复冗余图例的操作

问题：由于自己做项目的时候，需要循环的绘制数据，假设有100个样本,每个样本包含两个坐标点（A,B），我需要对这两个点标上不同的颜色，同时还要画出两点间的连线。显然这个问题中图例我只需要3个（A点，B点，AB的连线），而不是300个，因为每个样本的A点都是同样的颜色，B点也都是一样的颜色，AB的连线也是。但是单纯的在画完图之后用plt.legend(),它会给你画出所有300个图例来，这肯定不是我想要的。探索过程：如何解决呢？当... 继续阅读 >
2021
05-02

Python 作图实现坐标轴截断(打断)的效果

Python 作图实现坐标轴截断(打断)的效果 主题：利用python画图实现坐标轴截断或打断关键词：python,plot,matplotlib,breakaxes方法一：首先介绍一种简单快速的方法——调用包brokenaxes。详细请点击参考importmatplotlib.pyplotaspltfrombrokenaxesimportbrokenaxesimportnumpyasnpfig=plt.figure(figsize=(5,2))bax=brokenaxes(xlims=((0,.1),(.4,.7)),ylims=((-1,.7),(.79,1)),hspace=.05,despine=False)x=np.linspace(0,1,100)bax.plot... 继续阅读 >
2021
05-02

Python 通过分隔符分割文件后按特定次序重新组合的操作

Python 通过分隔符分割文件后按特定次序重新组合的操作 看代码吧~#-*-encoding:utf-8-*-importos,sys,time,datetime,globfo1=open("C:/Users/Administrator/Desktop/areainfo.txt","w")fo2=open("C:/Users/Administrator/Desktop/personinfo.txt","w")forroot,dirs,files,inos.walk("E:/test",topdown=False):fornameinfiles:file_name=os.path.join(root,name)ifos.path.splitext(file_name)[1]=='.txt':print(file_name)... 继续阅读 >
2021
05-02

python 读取以空格分开的文件操作

在查找数据集的时候发现，并不是所有的数据集都是以csv的格式存储，也就是每一列特征数据的分割并不是都以逗号分割，有的数据格式是以空格为分割例如.data格式，接下来就实现对.data格式数据的读取：(数据来源于Boston房价预测数据集，文件名称为“housing.data”)importpandasaspddata=pd.read_csv('./housing.data',delim_whiteshape=True)以上代码就是实现了对空格的分割，但是不知道针对也是以一列存储，并且数据分割也... 继续阅读 >
2021
05-02

Python 如何将字符串每两个用空格隔开

我就废话不多说了，大家还是直接看代码吧~example>>>importre>>>subject='080045000106309140003F2F7D100A0A3C0A0A0A3D0A00000800450000EE000000003F06CCF0C0A8C864C0A8646400000000000000000000000050000000F7410000'>>>result=re.sub(r"(?<=\w)(?=(?:\w\w)+$)","",subject)>>>result'080045000106309140003F2F7D100A0A3C0A0A0A3D0A00000800450000EE000000003F06C... 继续阅读 >
2021
05-02

python使用pytest接口自动化测试的使用

简单的设计思路利用pytest对一个接口进行各种场景测试并且断言验证配置文件独立开来（conf文件），实现不同环境下只需要改环境配置即可测试的场景读取excle的测试用例，可支持全量执行或者自定义哪条用例执行（用例内带加密变量）；接口入参还包含了加密的逻辑，所以需加一层加密处理用例的样例：应用的库包含：importpytestimporttime,jsonimportbase64,hmacimporthashlib,uuid,reimportrequestsimport... 继续阅读 >