分类：gevent

2021
10-15

Python中gevent模块协程使用

目录背景什么是协程？什么是gevent？协程的例子Q&AQ：gevent无法捕获的耗时A：猴子补丁实践异步requests请求gevent的锁Tip背景因为Python线程的性能问题，在Python中使用多线程运行代码经常不能达到预期的效果。而实际开发中我们经常有高并发的需求，这就要求我们的代码在跑的更快的同时需要单位时间内执行更多的有效逻辑、减少无用的等待。什么是协程？我们可以认为线程是轻量级的进程，所以你也可以理解协程是轻量级的... 继续阅读 >
2020
10-10

Python gevent协程切换实现详解

一、背景大家都知道gevent的机制是单线程+协程机制，当遇到可能会阻塞的操作时，就切换到可运行的协程中继续运行，以此来实现提交系统运行效率的目标，但是具体是怎么实现的呢？让我们直接从代码中看一下吧。二、切换机制让我们从socket的send、recv方法入手：defrecv(self,*args):while1:try:returnself._sock.recv(*args)excepterrorasex:ifex.args[0]!=EWOULDBLOCKorself.timeout==0.0:... 继续阅读 >
2020
10-09

Python基于gevent实现文件字符串查找器

1、递归遍历目录下所有文件并通过finder函数定位指定格式字符串2、用来查找字符串的finder函数是自己定义的，这里定义了一个ip_port_finder通过正则表达式查找ip:port格式（粗匹配：数字.数字.数字.数字:数字）的字符串3、用gevent来实现协程并发完成耗时任务代码如下：#-*-coding:utf-8-*-importrefromos.pathimportjoinfromosimportwalkfromgeventimportmonkeyimportgeventmonkey.patch_all()defip_port_finder(... 继续阅读 >
2020
09-29

Python基于gevent实现高并发代码实例

gevent是python的协程模块，协程可以理解成更轻量化的线程。因为性能测试工具的一些限制，就自己萌发了自己写性能测试工具的念想，当然，写的比较简单，比如缺少性能指标的收集，慢慢的优化出来，这个只是为了拿出来练练手importgeventimportrequestsimporttimedefget_res(url):res=requests.get(url)print(res.content.decode('utf-8'))if__name__=='__main__':g_lista=[]start_time=time.time()fori... 继续阅读 >
2020
09-25

Python greenlet和gevent使用代码示例解析

greenlet示例greenlet微线程,允许在线程中手动切换示例1,线程切换fromgreenletimportgreenletdeftest1(x,y):z=gr2.switch(x+y)print(z)deftest2(u):print(u)gr1.switch(42)gr1=greenlet(test1)gr2=greenlet(test2)gr1.switch("hello",'world')gr1和gr2是两个greenlet线程,使用gr1.switch(..)启动gr1,gr1执行test1,切换到gr2,gr2执行test2打印helloworld,然后切换回gr1,z获取到返回值42,并打印.执行顺序为:gr1.s... 继续阅读 >