分类：PYTHON

2020
10-08

Python如何在单元测试中给对象打补丁

问题你写的单元测试中需要给指定的对象打补丁，用来断言它们在测试中的期望行为（比如，断言被调用时的参数个数，访问指定的属性等）。解决方案unittest.mock.patch()函数可被用来解决这个问题。patch()还可被用作一个装饰器、上下文管理器或单独使用，尽管并不常见。例如，下面是一个将它当做装饰器使用的例子：fromunittest.mockimportpatchimportexample@patch('example.func')deftest1(x,mock_func):example.func... 继续阅读 >

2020
10-08

Python 数据的累加与统计的示例代码

问题你需要处理一个很大的数据集并需要计算数据总和或其他统计量。解决方案对于任何涉及到统计、时间序列以及其他相关技术的数据分析问题，都可以考虑使用Pandas库。为了让你先体验下，下面是一个使用Pandas来分析芝加哥城市的老鼠和啮齿类动物数据库的例子。在我写这篇文章的时候，这个数据库是一个拥有大概74,000行数据的CSV文件。>>>importpandas>>>#ReadaCSVfile,skippinglastline>>>rats=pandas.read_csv('... 继续阅读 >

2020
10-08

Python 爬虫性能相关总结

这里我们通过请求网页例子来一步步理解爬虫性能当我们有一个列表存放了一些url需要我们获取相关数据，我们首先想到的是循环简单的循环串行这一种方法相对来说是最慢的，因为一个一个循环，耗时是最长的，是所有的时间总和代码如下：importrequestsurl_list=['http://www.baidu.com','http://www.pythonsite.com','http://www.cnblogs.com/']forurlinurl_list:result=requests.get(url)print(result.text)通过线... 继续阅读 >

2020
10-08

Java 添加、删除、格式化Word中的图片步骤详解( 基于Spire.Cloud.SDK for Java )

本文介绍使用Spire.Cloud.SDKforJava提供的ImagesApi接口来操作Word中的图片。具体可通过addImage()方法添加图片、deleteImage()方法删除图片、updateImageFormat()格式化Word中的图片以及getImageFormat()获取Word中的图片格式等。操作方法和代码示例可参考下文中的步骤。步骤1：导入jar文件创建Maven项目程序，通过maven仓库下载导入。以IDEA为例，新建Maven项目，在pom.xml文件中配置maven仓库路径，并指定spire.cloud.sdk的... 继续阅读 >

2020
10-08

Python 利用OpenCV给照片换底色的示例代码

OpenCV的全称是：OpenSourceComputerVisionLibrary。OpenCV是一个基于BSD许可（开源）发行的跨平台计算机视觉库，可以运行在Linux、Windows和MacOS操作系统上。它轻量级而且高效——由一系列C函数和少量C++类构成，同时提供了Python、Ruby、MATLAB等语言的接口，实现了图像处理和计算机视觉方面的很多通用算法。相比于PIL库来说OpenCV更加强大，可以做更多更复杂的应用，比如人脸识别等。1.读入并显示图片importcv2#... 继续阅读 >

2020
10-08

详解Python的爬虫框架 Scrapy

网络爬虫，是在网上进行数据抓取的程序，使用它能够抓取特定网页的HTML数据。虽然我们利用一些库开发一个爬虫程序，但是使用框架可以大大提高效率，缩短开发时间。Scrapy是一个使用Python编写的，轻量级的，简单轻巧，并且使用起来非常的方便。一、概述下图显示了Scrapy的大体架构，其中包含了它的主要组件及系统的数据处理流程（绿色箭头所示）。下面就来一个个解释每个组件的作用及数据的处理过程（注：图片来自互联网）。二、组... 继续阅读 >

2020
10-08

Python利用Faiss库实现ANN近邻搜索的方法详解

Embedding的近邻搜索是当前图推荐系统非常重要的一种召回方式，通过item2vec、矩阵分解、双塔DNN等方式都能够产出训练好的userembedding、itemembedding，对于embedding的使用非常的灵活：输入userembedding，近邻搜索itemembedding，可以给user推荐感兴趣的items输入userembedding，近邻搜搜userembedding，可以给user推荐感兴趣的user输入itemembedding，近邻搜索itemembedding，可以给item推荐相关的items然而... 继续阅读 >

2020
10-08

Python pexpect模块及shell脚本except原理解析

expect脚本expect是什么expect是一个免费的编程工具，用来实现自动的交互式任务，而无需人为干预。说白了，expect就是一套用来实现自动交互功能的软件。在实际工作中，我们运行命令、脚本或程序时，这些命令、脚本或程序都需要从终端输入某些继续运行的指令，而这些输入都需要人为的手工进行。而利用expect，则可以根据程序的提示，模拟标准输入提供给程序，从而实现自动化交互执行由于在linux中的一些命令不太适合于脚本的自动化... 继续阅读 >

2020
10-08

python爬虫使用正则爬取网站的实现

本文章的所有代码和相关文章，仅用于经验技术交流分享，禁止将相关技术应用到不正当途径，滥用技术产生的风险与本人无关。本文章是自己学习的一些记录。欢迎各位大佬点评！首先今天是第一天写博客，感受到了博客的魅力，博客不仅能够记录每天的代码学习情况，并且可以当作是自己的学习笔记，以便在后面知识点不清楚的时候前来复习。这是第一次使用爬虫爬取网页，这里展示的是爬取豆瓣电影top250的整个过程，欢迎大家指点。这里我... 继续阅读 >

2020
10-08

python获取整个网页源码的方法

1、Python中获取整个页面的代码：import requestsres = requests.get('https://blog.csdn.net/yirexiao/article/details/79092355')res.encoding = 'utf-8'print(res.text)2、运行结果实例扩展：frombs4importBeautifulSoupimporttime,re,urllib2t=time.time()websiteurls={}defscanpage(url):websiteurl=urlt=time.time()n=0html=urllib2.urlopen(websiteurl).read()soup=BeautifulSoup(html)... 继续阅读 >

2020
10-08

python线程里哪种模块比较适合

在Python中可使用的多线程模块主要有两个，thread和threading模块。thread模块提供了基本的线程和锁的支持，建议新手不要使用。threading模块允许创建和管理线程，提供了更多的同步原语。thread模块函数：start_new_thread(function,args[,kwargs])：启动新的线程以执行function，返回线程标识。allocate_lock()：返回LockType对象。exit()：抛出SystemExit异常，如果没有被捕获，线程静默退出。LockType类型锁对象的方... 继续阅读 >

2020
10-08

python缩进长度是否统一

Python对代码的缩进要求非常严格，同一个级别代码块的缩进量必须一样，否则解释器会报SyntaxError异常错误。在Python中，对于类定义、函数定义、流程控制语句、异常处理语句等，行尾的冒号和下一行的缩进，表示下一个代码块的开始，而缩进的结束则表示此代码块的结束。注意，Python中实现对代码的缩进，可以使用空格或者Tab键实现。但无论是手动敲空格，还是使用Tab键，通常情况下都是采用4个空格长度作为一个缩进量（... 继续阅读 >

2020
10-08

Python接收手机短信的代码整理

python解决接口测试获取手机验证码问题的方法：Android在收到短信后会发送一个Action为android.provider.Telephony.SMS_RECEIVED的广播，所以我们只需要写个类继承BroadcastReceiver就可以很容易地监听到短信。packagecom.example.getsms;importandroid.content.BroadcastReceiver;importandroid.content.ContentResolver;importandroid.content.Context;importandroid.content.Intent;importandroid.os.Bundle;importandr... 继续阅读 >

2020
10-08

Python改变对象的字符串显示的方法

问题你想改变对象实例的打印或显示输出，让它们更具可读性。解决方案要改变一个实例的字符串表示，可重新定义它的__str__()和__repr__()方法。例如：classPair:def__init__(self,x,y):self.x=xself.y=ydef__repr__(self):return'Pair({0.x!r},{0.y!r})'.format(self)def__str__(self):return'({0.x!s},{0.y!s})'.format(self)__repr__()方法返回一个实例的代码表示形式，通常用来重新构... 继续阅读 >

2020
10-08

Python 如何定义匿名或内联函数

问题你想为sort()操作创建一个很短的回调函数，但又不想用def去写一个单行函数，而是希望通过某个快捷方式以内联方式来创建这个函数。解决方案当一些函数很简单，仅仅只是计算一个表达式的值的时候，就可以使用lambda表达式来代替了。比如：>>>add=lambdax,y:x+y>>>add(2,3)5>>>add('hello','world')'helloworld'>>>这里使用的lambda表达式跟下面的效果是一样的：>>>defadd(x,y):...returnx+y...>>>add(... 继续阅读 >

2020
10-08

Python sqlalchemy时间戳及密码管理实现代码详解

一、时间戳实际开发中，我们一般希望create_time和update_time这两个属性能自动设置，所以在建表的时候需要在model上特殊处理一下：fromsqlalchemy.sqlimportfuncclassUser(db.Model):__tablename__='user'id=db.Column(db.Integer,primary_key=True)email=db.Column(db.String(128))password_hash=db.Column(db.String(128))create_time=db.Column(db.DateTime,server_default=func.now())update... 继续阅读 >