python线程池与进程池基础学习

off999 2025-04-29 03:18 26 浏览 0 评论

一.基础介绍

当我们需要执行的任务较多时，例如爬取多页数据，需要创建多个线程或者进程来提高效率，而一个一个创建线/进程就比较麻烦，这时我们就可以使用线程池/进程池。

线程池的作用就是开辟一些线程，我们直接给线程池提交任务，线程任务的调度交给线程池来完成。

线程池的基类是concurrent.futures模块中的Executor，Executor提供了两个子类，即ThreadPoolExecutor和ProcessPoolExecutor，其中ThreadPoolExecutor用于创建线程池，而ProcessPoolExecutor用于创建进程池。

使用线程池来执行线程任务的步骤如下：

1. 调用 ThreadPoolExecutor 类的构造器创建一个线程池。
2. 定义一个普通函数作为线程任务。
3. 调用 ThreadPoolExecutor 对象的 submit() 方法来提交线程任务。
4. 当不想提交任何任务时，调用 ThreadPoolExecutor 对象的 shutdown() 方法来关闭线程池。

二.python实例学习

from concurrent.futures import ThreadPoolExecutor,ProcessPoolExecutor

def son(para):
    for i in range(500):
        print(para,i)

if __name__ == '__main__':
    with ThreadPoolExecutor(66) as tpool:
        for i in range(100):
            tpool.submit(son,para = f'线程{i}')

    print("线程池任务执行完毕")

with ThreadPoolExecutor(66) as tpool表示创建线程池，然后submit(func, *args)表示将任务函数func（son)交给线程池，*args为任务函数的参数。运行结果（部分截取）如下：

此外，当线程池将任务执行完毕才能进行下一步，即：

#头条创作挑战赛#

python进程池

上一篇：Python高级编程之消息队列(Queue)与进程池(Pool)实例详解
下一篇：Python多进程的实现

python线程池与进程池基础学习

一.基础介绍

二.python实例学习

相关推荐

取消回复欢迎你发表评论:

抖音上好看的小姐姐，Python给你都下载了

全网最简单易懂!495页Python漫画教程，高清PDF版免费下载

Python 3.14 的 UUIDv6/v7/v8 上新，别再用 uuid4 () 啦!

飞牛NAS部署TVGate Docker项目，实现内网一键转发、代理、jx

python入门到脱坑输入与输出—str()函数

宝塔面板如何添加免费waf防火墙?（宝塔面板开启https）

Python三目运算基础与进阶_python三目运算符判断三个变量

(新版)Python 分布式爬虫与 JS 逆向进阶实战吾爱分享

失业程序员复习python笔记——条件与循环

系统u盘安装（win11系统u盘安装）

python线程池与进程池基础学习

一.基础介绍

二.python实例学习

相关推荐

取消回复欢迎 你 发表评论:

抖音上好看的小姐姐，Python给你都下载了

全网最简单易懂!495页Python漫画教程，高清PDF版免费下载

Python 3.14 的 UUIDv6/v7/v8 上新，别再用 uuid4 () 啦!

飞牛NAS部署TVGate Docker项目，实现内网一键转发、代理、jx

python入门到脱坑 输入与输出—str()函数

宝塔面板如何添加免费waf防火墙?（宝塔面板开启https）

Python三目运算基础与进阶_python三目运算符判断三个变量

(新版)Python 分布式爬虫与 JS 逆向进阶实战吾爱分享

失业程序员复习python笔记——条件与循环

系统u盘安装（win11系统u盘安装）

取消回复欢迎你发表评论:

python入门到脱坑输入与输出—str()函数