分类：Python

2020
10-08

Python 防止死锁的方法

问题你正在写一个多线程程序，其中线程需要一次获取多个锁，此时如何避免死锁问题。解决方案在多线程程序中，死锁问题很大一部分是由于线程同时获取多个锁造成的。举个例子：一个线程获取了第一个锁，然后在获取第二个锁的时候发生阻塞，那么这个线程就可能阻塞其他线程的执行，从而导致整个程序假死。解决死锁问题的一种方案是为程序中的每一个锁分配一个唯一的id，然后只允许按照升序规则来使用多个锁，这个规则使用上下文管理... 继续阅读 >
2020
10-08

Python定义一个Actor任务

问题你想定义跟actor模式中类似“actors”角色的任务解决方案actor模式是一种最古老的也是最简单的并行和分布式计算解决方案。事实上，它天生的简单性是它如此受欢迎的重要原因之一。简单来讲，一个actor就是一个并发执行的任务，只是简单的执行发送给它的消息任务。响应这些消息时，它可能还会给其他actor发送更进一步的消息。actor之间的通信是单向和异步的。因此，消息发送者不知道消息是什么时候被发送，也不会接收到一个... 继续阅读 >
2020
10-08

Python如何重新加载模块

问题你想重新加载已经加载的模块，因为你对其源码进行了修改。解决方案使用imp.reload()来重新加载先前加载的模块。举个例子：>>>importspam>>>importimp>>>imp.reload(spam)<module'spam'from'./spam.py'>>>>讨论重新加载模块在开发和调试过程中常常很有用。但在生产环境中的代码使用会不安全，因为它并不总是像您期望的那样工作。reload()擦除了模块底层字典的内容，并通过重新执行模块的源代码来刷新它。模块对象本身的... 继续阅读 >
2020
10-08

Python加速程序运行的方法

问题你的程序运行太慢，你想在不使用复杂技术比如C扩展或JIT编译器的情况下加快程序运行速度。解决方案关于程序优化的第一个准则是“不要优化”，第二个准则是“不要优化那些无关紧要的部分”。如果你的程序运行缓慢，首先你得使用14.13小节的技术先对它进行性能测试找到问题所在。通常来讲你会发现你得程序在少数几个热点位置花费了大量时间，比如内存的数据处理循环。一旦你定位到这些点，你就可以使用下面这些实用技术来加速... 继续阅读 >
2020
10-08

如何在python中判断变量的类型

python的数据类型有：数字(int)、浮点(float)、字符串(str)，列表(list)、元组(tuple)、字典(dict)、集合(set)一般通过以下方法进行判断：1、isinstance(参数1,参数2)描述：该函数用来判断一个变量（参数1）是否是已知的变量类型(参数2)类似于type()参数1：变量参数2：可以是直接或间接类名、基本类型或者由它们组成的元组。返回值: 如果对象的类型与参数二的类型（classinfo）相同则返回True，否则返回False例子:#判断变... 继续阅读 >
2020
10-08

Python中的With语句的使用及原理

总览在Python中，您需要通过打开文件来访问文件。您可以使用open()函数来实现。Open返回一个文件对象，该文件对象具有用于获取有关已打开文件的信息和对其进行操作的方法和属性。with语句使用“with”语句，使代码简洁，处理异常也更优雅。“with语句通过封装常用的准备工作和清除任务来简化异常处理。”此外，它将自动关闭文件。with语句提供了一种确保始终使用清理的方法。如果没有with语句，我们将编写如下内容：file=... 继续阅读 >
2020
10-08

Python 实现简单的客户端认证

问题你想在分布式系统中实现一个简单的客户端连接认证功能，又不想像SSL那样的复杂。解决方案可以利用hmac模块实现一个连接握手，从而实现一个简单而高效的认证过程。下面是代码示例：importhmacimportosdefclient_authenticate(connection,secret_key):'''Authenticateclienttoaremoteservice.connectionrepresentsanetworkconnection.secret_keyisakeyknownonlytobothclient/server.'''messa... 继续阅读 >
2020
10-08

Python 创建TCP服务器的方法

问题你想实现一个服务器，通过TCP协议和客户端通信。解决方案创建一个TCP服务器的一个简单方法是使用socketserver库。例如，下面是一个简单的应答服务器：fromsocketserverimportBaseRequestHandler,TCPServerclassEchoHandler(BaseRequestHandler):defhandle(self):print('Gotconnectionfrom',self.client_address)whileTrue:msg=self.request.recv(8192)ifnotmsg:breakself... 继续阅读 >
2020
10-08

Python如何定义接口和抽象类

问题你想定义一个接口或抽象类，并且通过执行类型检查来确保子类实现了某些特定的方法解决方案使用abc模块可以很轻松的定义抽象基类：fromabcimportABCMeta,abstractmethodclassIStream(metaclass=ABCMeta):@abstractmethoddefread(self,maxbytes=-1):pass@abstractmethoddefwrite(self,data):pass抽象类的一个特点是它不能直接被实例化，比如你想像下面这样做是不行的：a=IStream()#TypeError:Ca... 继续阅读 >
2020
10-08

Python爬虫之爬取淘女郎照片示例详解

Python爬虫之爬取淘女郎照片示例详解 本篇目标抓取淘宝MM的姓名，头像，年龄抓取每一个MM的资料简介以及写真图片把每一个MM的写真图片按照文件夹保存到本地熟悉文件保存的过程 1.URL的格式在这里我们用到的URL是http://mm.taobao.com/json/request_top_list.htm?page=1，问号前面是基地址，后面的参数page是代表第几页，可以随意更换地址。点击开之后，会发现有一些淘宝MM的简介，并附有超链接链接到个人详情页面。我们需要抓取本页面的头像地址，MM... 继续阅读 >
2020
10-08

Python selenium键盘鼠标事件实现过程详解

引言----在实际的web测试工作中，需要配合键盘按键来操作，webdriver的keys()类提供键盘上所有按键的操作，还可以模拟组合键Ctrl+a，Ctrl+v等。举例：#cording=gbkimportosimporttimefromseleniumimportwebdriverfromselenium.webdriver.common.byimportBy#导入by方法fromselenium.webdriver.common.action_chainsimportActionChains##对鼠标事件操作fromselenium.webdriver.common.keysimportKeys#对键盘事件... 继续阅读 >
2020
10-08

用python写爬虫简单吗

所谓网络爬虫，通俗的讲，就是通过向我们需要的URL发出http请求，获取该URL对应的http报文主体内容，之后提取该报文主体中我们所需要的信息。下面是一个简单的爬虫程序http基本知识当我们通过浏览器访问指定的URL时，需要遵守http协议。本节将介绍一些关于http的基础知识。http基本流程我们打开一个网页的过程，就是一次http请求的过程。这个过程中，我们自己的主机充当着客户机的作用，而充当客户端的是浏览器。我们输入的URL对应... 继续阅读 >
2020
10-08

python如何爬取网页中的文字

用Python进行爬取网页文字的代码：#!/usr/bin/python#-*-coding:UTF-8-*-importrequestsimportre#下载一个网页url='https://www.biquge.tw/75_75273/3900155.html'#模拟浏览器发送http请求response=requests.get(url)#编码方式response.encoding='utf-8'#目标小说主页的网页源码html=response.textprint(html)1、编写爬虫思路：确定下载目标，找到网页，找到网页中需要的内容。对数据进行处理。保存数据。2、知识... 继续阅读 >
2020
10-08

Python同时处理多个异常的方法

问题你有一个代码片段可能会抛出多个不同的异常，怎样才能不创建大量重复代码就能处理所有的可能异常呢？解决方案如果你可以用单个代码块处理不同的异常，可以将它们放入一个元组中，如下所示：try:client_obj.get_url(url)except(URLError,ValueError,SocketTimeout):client_obj.remove_url(url)在这个例子中，元祖中任何一个异常发生时都会执行remove_url()方法。如果你想对其中某个异常进行不同的处理，可以将其放入... 继续阅读 >
2020
10-08

Python远程方法调用实现过程解析

RPCHandler和RPCProxy的基本思路是很比较简单的。如果一个客户端想要调用一个远程函数，比如foo(1,2,z=3),代理类创建一个包含了函数名和参数的元组(‘foo',(1,2),{‘z':3})。这个元组被pickle序列化后通过网络连接发生出去。这一步在RPCProxy的getattr()方法返回的do_rpc()闭包中完成。服务器接收后通过pickle反序列化消息，查找函数名看看是否已经注册过，然后执行相应的函数。执行结果(或异常)被pickle序... 继续阅读 >
2020
10-08

Python 实现一个计时器

问题你想记录程序执行多个任务所花费的时间解决方案time模块包含很多函数来执行跟时间有关的函数。尽管如此，通常我们会在此基础之上构造一个更高级的接口来模拟一个计时器。例如：importtimeclassTimer:def__init__(self,func=time.perf_counter):self.elapsed=0.0self._func=funcself._start=Nonedefstart(self):ifself._startisnotNone:raiseRuntimeError('Alreadystarted')s... 继续阅读 >