分类：线程池

2020
10-07

JAVA线程池专题（概念和作用）

线程池的作用我们在用一个东西的时候，首先得搞明白一个问题。这玩意是干嘛的，为啥要用这个，用别的不行吗。那么一个一个解决这些问题我们之前都用过数据库连接池，线程池的作用和连接池有点类似，频繁的创建，销毁线程会造成大量的不必要的性能开销，所以这个时候就出现了一个东西统一的管理线程，去负责线程啥时候销毁，啥时候创建，以及维持线程的状态，当程序需要使用线程的时候，直接从线程池拿，当程序用完了之后，直接把线... 继续阅读 >

2020
09-30

python线程池如何使用

线程池的使用线程池的基类是concurrent.futures模块中的Executor，Executor提供了两个子类，即ThreadPoolExecutor和ProcessPoolExecutor，其中ThreadPoolExecutor用于创建线程池，而ProcessPoolExecutor用于创建进程池。如果使用线程池/进程池来管理并发编程，那么只要将相应的task函数提交给线程池/进程池，剩下的事情就由线程池/进程池来搞定。Exectuor提供了如下常用方法：submit(fn,*args,**kwargs)：将fn... 继续阅读 >

2020
09-29

Java判断线程池线程是否执行完毕

在使用多线程的时候有时候我们会使用java.util.concurrent.Executors的线程池，当多个线程异步执行的时候，我们往往不好判断是否线程池中所有的子线程都已经执行完毕，但有时候这种判断却很有用，例如我有个方法的功能是往一个文件异步地写入内容，我需要在所有的子线程写入完毕后在文件末尾写“---END---”及关闭文件流等，这个时候我就需要某个标志位可以告诉我是否线程池中所有的子线程都已经执行完毕，我使用这种方式来判断。... 继续阅读 >

2020
09-29

Java手动配置线程池过程详解

线程池中，常见有涉及到的：ExecutorServiceexecutorService=Executors.newSingleThreadExecutor();ExecutorServiceexecutorService1=Executors.newCachedThreadPool();ExecutorServiceexecutorService2=Executors.newFixedThreadPool(3);关于Executors和ExecutorService从记忆上类似于Collections和List。但是以上几种其实不建议使用。最好可以通过自己手动配置ThreadPoolExecutor的形式。我先创建一个demo:ThreadPoolEx... 继续阅读 >

2020
09-28

Java线程池ThreadPoolExecutor原理及使用实例

引导要求：线程资源必须通过线程池提供，不允许在应用自行显式创建线程；说明：使用线程池的好处是减少在创建和销毁线程上所花的时间以及系统资源的开销，解决资源不足的问题。如果不使用线程池，有可能造成系统创建大量同类线程而导致消耗内存或者“过度切换”的问题。线程池介绍线程池概述  线程池，顾名思义是一个放着线程的池子，这个池子的线程主要是用来执行任务的。当用户提交任务时，线程池会创建线程去执行... 继续阅读 >

2020
09-27

如何基于线程池提升request模块效率

普通方法：爬取梨视频importreimporttimeimportrandomimportrequestsfromlxmlimportetreestart_time=time.time()url="https://www.pearvideo.com/category_3"headers={"User-Agent":"Mozilla/5.0(WindowsNT10.0;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/79.0.3945.88Safari/537.36"}ex='srcUrl="(.*?)",vdoUrl=srcUrl'defrequest_video(url):"""向视频链接发送请求"""retu... 继续阅读 >

2020
09-27

解决python ThreadPoolExecutor 线程池中的异常捕获问题

问题最近写了涉及线程池及线程的python脚本，运行过程中发现一个有趣的现象，线程池中的工作线程出现问题，引发了异常，但是主线程没有捕获异常，还在发现BUG之前一度以为线程池代码正常返回。先说重点这里主要想介绍pythonconcurrent.futuresthread.ThreadPoolExecutor线程池中的worker引发异常的时候，并不会直接向上抛起异常，而是需要主线程通过调用concurrent.futures.Future.exception(timeout=None)方法主动获取... 继续阅读 >

2020
09-24

SpringBoot2线程池定义使用方法解析

我们都知道spring只是为我们简单的处理线程池，每次用到线程总会new一个新的线程，效率不高，所以我们需要自定义一个线程池。定义线程池@Slf4j@EnableAsync@ConfigurationpublicclassAsyncExecutorConfigimplementsAsyncConfigurer{@BeanpublicThreadPoolTaskExecutorasyncServiceExecutor(){//返回可用处理器的虚拟机的最大数量不小于1intcpu=Runtime.getRuntime().availableProcessors();log.info("... 继续阅读 >

2020
09-23

Python定时器线程池原理详解

这篇文章主要介绍了Python定时器线程池原理详解,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下定时器执行循环任务：知识储备Timer(interval,function,args=None,kwargs=None)interval===》时间间隔单位为sfunction===》定制执行的函数使用threading的Timer类start（）为通用的开始执行方法cancel（）为取消执行的方法普通单次定时执行fromthreadingimportTime... 继续阅读 >

2017
08-12

nginx 中的线程池使得性能提升 9 倍

众所周知，Nginx使用异步,事件驱动来接收连接。这就意味着对于每个请求不会新建一个专用的进程或者线程（就像传统服务端架构一样），它是在一个工作进程中接收多个连接和请求。为了达成这个目标，Nginx用在一个非阻塞模式下的sockets来实现，并使用例如epoll和kqueue这样高效的方法。因为满载的工作进程数量是很少的(通常只有一个CPU内核)而且固定的，更少的内存占用，CPU轮训也不会浪费在任务切换上。这种连... 继续阅读 >