一文看懂Python中异步、进程、线程、队列
off999 2025-04-29 03:19 25 浏览 0 评论
Python异步（资源调度者）
异步是一种计算机多任务的处理方法，与同步相反，异步在多任务处理上，不阻塞当前任务执行，允许后续操作，常用于I/O操作（文件读写、网络请求、上传下载），更像一个高效的资源调度者。
简单理解，产生多种任务时，简单的任务执行时间短，复杂的任务执行时间较长，异步就是去协调线程，简单的任务执行完成以后继续执行其他任务，不用等待复杂任务的完成。
Python异步编程的优势：
- 能够处理更多任务
- 提高用户体验
- 提高程序的性能
什么是进程（部门）
进程是一个具有一定独立功能的程序关于某个数据集合的一次运行活动。它是操作系统动态执行的基本单元，在传统的操作系统中，进程既是基本的分配单元，也是基本的执行单元。进程是线程的容器，就像部门一样，具有独立性（分配资源和调度的独立单位）和动态性（进程是一次执行过程，动态产生，动态消亡），表示当前的活动，并不执行具体的内容。
什么是线程（小组）
线程是操作系统能够进行运算调度的最小单位。线程是进程中实际运行线，一个进程可以并发多个进程，每条线程都允许执行不同的任务流。
什么是队列
队列是一种特殊的线性表，允许队列前端删除，末尾添加（先进先出）。队列是单独申请的连续的存储空间，设置头尾两个指针。
Python异步实现
Python异步的实现通过asynico库来实现异步，下面是简单的异步执行操作：
以上只是一个简单的异步操作函数，I/O阻塞用时间限制了，实际过程中是有其他操作。
假如我们现在要将一个拥有5个元素的列表里面的所有元素*2，每次*2需要耗时1s，同步操作我们需要多长时间呢？
我这边test()执行的时间是1.0011s左右，sync_test执行时间是5.0016s。如果采用异步的方式执行时间会是多长呢？
异步操作只用1.0114s，耗时明显减少。
如果是等待某个I/O操作完成，可以将await asynico.sleep(1)改为asynico.wait(func)。
Python进程实现
Python进程实现主要使用的是multiprocessing包。下面是代码的演示。
调用进程的时候可以看到4个子进程，这个就是我们设置的进程池。
但是你会发现，好像每次执行结果都是不同的，这是为什么呢？下篇文章详细解析。
Python线程实现
Python线程实现主要使用的是threading包。下面是代码的演示。
可以发现线程和进程一样，都是导入包，创建进程/线程对象，执行进程/线程，等待进程/线程的结束。
通过打印线程执行列表可以发现每个线程对象的stopped <数字> 都不一样，表示我们用不同的线程去执行了。
Python队列
Python队列实现主要使用的是queque包。下面是代码的演示。
队列遵循先进先出的规则，q.put()添加队列元素的顺序就是q.get()获取元素的顺序，如果获取完，队列就是空的了（empty）
相关推荐
- 阿里云国际站ECS:阿里云ECS如何提高网站的访问速度?
-
TG：@yunlaoda360引言：速度即体验，速度即业务在当今数字化的世界中，网站的访问速度已成为决定用户体验、用户留存乃至业务转化率的关键因素。页面加载每延迟一秒，都可能导致用户流失和收入损失。对...
- 高流量大并发Linux TCP性能调优_linux 高并发网络编程
-
其实主要是手里面的跑openvpn服务器。因为并没有明文禁p2p（哎……想想那么多流量好像不跑点p2p也跑不完），所以造成有的时候如果有比较多人跑BT的话，会造成VPN速度急剧下降。本文所面对的情况为...
- 性能测试100集(12)性能指标资源使用率
-
在性能测试中，资源使用率是评估系统硬件效率的关键指标，主要包括以下四类：#性能测试##性能压测策略##软件测试#1.CPU使用率定义：CPU处理任务的时间占比，计算公式为1-空闲时间/总...
- Linux 服务器常见的性能调优_linux高性能服务端编程
-
一、Linux服务器性能调优第一步——先搞懂“看什么”很多人刚接触Linux性能调优时，总想着直接改配置，其实第一步该是“看清楚问题”。就像医生看病要先听诊，调优前得先知道服务器“哪里...
- Nginx性能优化实战:手把手教你提升10倍性能!
-
关注△mikechen△，十余年BAT架构经验倾囊相授！Nginx是大型架构而核心，下面我重点详解Nginx性能@mikechen文章来源：mikechen.cc1.worker_processe...
- 高并发场景下，Spring Cloud Gateway如何抗住百万QPS?
-
关注△mikechen△，十余年BAT架构经验倾囊相授！大家好，我是mikechen。高并发场景下网关作为流量的入口非常重要，下面我重点详解SpringCloudGateway如何抗住百万性能@m...
- Kubernetes 高并发处理实战(可落地案例 + 源码)
-
目标场景：对外提供HTTPAPI的微服务在短时间内收到大量请求（例如每秒数千至数万RPS），要求系统可弹性扩容、限流降级、缓存减压、稳定运行并能自动恢复。总体思路（多层防护）：边缘层：云LB...
- 高并发场景下，Nginx如何扛住千万级请求?
-
Nginx是大型架构的必备中间件，下面我重点详解Nginx如何实现高并发@mikechen文章来源：mikechen.cc事件驱动模型Nginx采用事件驱动模型，这是Nginx高并发性能的基石。传统...
- Spring Boot+Vue全栈开发实战，中文版高清PDF资源
-
SpringBoot+Vue全栈开发实战，中文高清PDF资源，需要的可以私我：）SpringBoot致力于简化开发配置并为企业级开发提供一系列非业务性功能，而Vue则采用数据驱动视图的方式将程序...
- Docker-基础操作_docker基础实战教程二
-
一、镜像1、从仓库获取镜像搜索镜像：dockersearchimage_name搜索结果过滤：是否官方:dockersearch--filter="is-offical=true...
- 你有空吗?跟我一起搭个服务器好不好?
-
来人人都是产品经理【起点学院】，BAT实战派产品总监手把手系统带你学产品、学运营。昨天闲的没事的时候，随手翻了翻写过的文章，发现一个很严重的问题。就是大多数时间我都在滔滔不绝的讲理论，却很少有涉及动手...
- 部署你自己的 SaaS_saas如何部署
-
部署你自己的VPNOpenVPN——功能齐全的开源VPN解决方案。（DigitalOcean教程）dockovpn.io—无状态OpenVPNdockerized服务器，不需要持久存储。...
- Docker Compose_dockercompose安装
-
DockerCompose概述DockerCompose是一个用来定义和管理多容器应用的工具，通过一个docker-compose.yml文件，用YAML格式描述服务、网络、卷等内容，...
- 京东T7架构师推出的电子版SpringBoot，从构建小系统到架构大系统
-
前言：Java的各种开发框架发展了很多年，影响了一代又一代的程序员，现在无论是程序员，还是架构师，使用这些开发框架都面临着两方面的挑战。一方面是要快速开发出系统，这就要求使用的开发框架尽量简单，无论...
- Kubernetes (k8s) 入门学习指南_k8s kubeproxy
-
Kubernetes(k8s)入门学习指南一、什么是Kubernetes？为什么需要它？Kubernetes(k8s)是一个开源的容器编排系统，用于自动化部署、扩展和管理容器化应用程序。它...
欢迎 你 发表评论:
- 一周热门
-
-
抖音上好看的小姐姐，Python给你都下载了
-
全网最简单易懂!495页Python漫画教程，高清PDF版免费下载
-
Python 3.14 的 UUIDv6/v7/v8 上新，别再用 uuid4 () 啦!
-
python入门到脱坑 输入与输出—str()函数
-
宝塔面板如何添加免费waf防火墙?（宝塔面板开启https）
-
Python三目运算基础与进阶_python三目运算符判断三个变量
-
(新版)Python 分布式爬虫与 JS 逆向进阶实战吾爱分享
-
慕ke 前端工程师2024「完整」
-
失业程序员复习python笔记——条件与循环
-
飞牛NAS部署TVGate Docker项目，实现内网一键转发、代理、jx
-
- 最近发表
- 标签列表
-
- python计时 (73)
- python安装路径 (56)
- python类型转换 (93)
- python进度条 (67)
- python吧 (67)
- python的for循环 (65)
- python格式化字符串 (61)
- python静态方法 (57)
- python列表切片 (59)
- python面向对象编程 (60)
- python 代码加密 (65)
- python串口编程 (77)
- python封装 (57)
- python写入txt (66)
- python读取文件夹下所有文件 (59)
- python操作mysql数据库 (66)
- python获取列表的长度 (64)
- python接口 (63)
- python调用函数 (57)
- python多态 (60)
- python匿名函数 (59)
- python打印九九乘法表 (65)
- python赋值 (62)
- python异常 (69)
- python元祖 (57)