百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术资源 > 正文

Python学习笔记之五:subprocess子进程模块

off999 2024-10-11 14:04 25 浏览 0 评论

如我之前发的文章《项目中根据相对路径和绝对路径获取文件/资源的方法》,这篇文章介绍了Java中可以通过Runtime和ProcessBuilder来执行子进程或外部程序,比如在Java程序中调用Python脚本运行并获取结果、调用cmd执行命令获取结果等等。

在Python中,同样可以实现该功能,用subprocess模块即可。subprocess模块的作用和Java中的ProcessBuilder作用类型,都是启动一个子进程,然后发送命令给子进程执行,当前进程可以选择等待或者不等待子进程执行完毕。

创建子进程

创建子进程执行命令最典型的用法是使用Popen函数:

subprocess.Popen(self, args, bufsize=0, executable=None, stdin=None, stdout=None, stderr=None, preexec_fn=None, close_fds=False, shell=False, cwd=None, env=None, universal_newlines=False, startupinfo=None, creationflags=0)

该函数的参数说明如下:

  1. args:字符串或者列表,代表要执行的程序、命令和参数。如果是字符串,那么要执行的程序(命令)和参数都在该字符串中;如果是列表,那么列表的第一个元素是可执行文件的路 径,后面的元素都是给该可执行文件传递的参数。另外,第一个元素也可以不给出可执行程序的完整路径,只给出需要执行的程序名称即可,然后通过下面的executeable参数来指定可执行文件路径。

  2. bufsize:整数,缓冲区的大小。子进程的输入流、输出流、错误流都会有缓冲区,该参数指定缓冲区的大小。

  3. executable:字符串,可执行程序的完整路径。如果args参数没有给出可执行程序的完整路径,那么就通过executable给出可执行程序的完整路径。

  4. stdin, stdout, stderr:子进程的标准输入、输出、错误。可以指定为管道(PIPE)、文件描述符(fd)或文件对象,也可以设为None,表示这些参数从父进程继承。

  5. preexec_fn:指定一个可执行对象,在子进程运行之前被调用。

  6. close_fds:在windows平台下,如果close_fds被设置为True,则新创建的子进程将不会继承父进程的输入、输出、错误管 道。我们不能将close_fds设置为True同时重定向子进程的标准输入、输出与错误(stdin, stdout, stderr)。

  7. shell:布尔值,如果该值为true,表示通过shell来执行子进程中的命令。

  8. cwd:字符串,设置要执行的子进程的工作目录。

  9. env:dict,指定子进程的环境变量。如果设置为None,则子进程的环境变量从父进程中继承。

  10. universal_newlines:布尔值,指定子进程的换行符。例如:Windows环境下,换行符为'/r/n',而Unix环境下为'/n'。如果该参数设置为True,则子进程中的换行符都当作'/n'来处理。

示例:

Popen

这样,我们就创建了一个子进程,args参数设置为列表,列表的第一个元素表示可执行程序。该子进程在目录"/Users/racing/Downloads"下执行了"ls -la"的命令(说明:ls在Unix系统中是一个可执行程序,并且其路径已经加入了系统环境变量path中)。

又例如:

Popen

该子进程的args传的是字符串,该字符串中包含了可执行程序和参数,并且指定使用shell来执行。该子进程在目录"/Users/racing/Downloads"下使用shell执行了"cat PR_curve.py"的命令。

再例如:

Popen

该子进程的args传的是列表,列表的第一个元素包含了可执行程序bash的完整路径。该子进程在目录"/Users/racing/Downloads"下使用bash执行"cat PR_curve.py"的命令。

其实使用subprocess,可以直接传入外部程序的完整路径然后执行,比如QQ啊什么的都可以。

注意:Popen()创建子进程并执行,该子进程执行并不会阻塞父进程,该子进程和当前父进程是异步执行的。

获取子进程输入输出

如果需要与子进程交互,需要设置子进程的标准输入输出。最常见的就是使用communicate函数。

p.communicate(input=None)

在使用p=subprocess.Popen()创建一个子进程之后,然后就可以使用outdata, errdata = p.communicate(input=None)来获取子进程的输出和错误信息。

communicate会阻塞当前父进程,直到子进程执行完成,父进程才会往下继续执行。如果父进程想向子进程stdin发送数据或读取子进程的标准输出和标准错误输出,必须把stdin或stdout或stderr设置为PIPE。此处输入的input是通过stdin输入给Popen中命令的参数,并不是把input内容当作Popen中命令的命令行参数。commicate()函数返回一个元组,第一个元素时子进程的输出信息,第二个元素时子进程的错误信息。

例如:

communicate

该子进程在Windows下执行了dir命令,并且获取了子进程的输出信息和错误信息。

再次提醒,如果需要通过communicate获取子进程的输出信息,在Popen创建子进程时,一定要把stdout设置为subprocess.PIPE。

检查子进程是否结束

p.poll()

poll函数用来检查子进程是否结束,会返回一个数字,0表示子进程已经执行结束。

阻塞父进程,等待子进程执行结束

p.wait()

wait函数会阻塞当前父进程,等待子进程运行结束,子进程结束之后返回子进程的退出值,0表示正常执行完成。

注意:如果子进程输出了大量数据到stdout或者stderr的管道,并达到了系统pipe的缓存大小的话,子进程会等待父进程读取管道,而父进程此时正wait着的话,将会产生传说中的死锁,后果非常严重。建议使用communicate()来避免这种情况的发生。

获取子进程属性

p.returncode

returncode是子进程的返回值。如果该值为0,表示子进程是正常执行完毕的,如果为其他值,表示子进程执行出错了。

p.pid

pid是子进程的进程号。注意:如果在创建子进程时,Popen函数的shell参数设置为True,那么这里的pid就是指子进程shell的进程号。

终止子进程

p.terminate()

terminate函数用来终止子进程。在Unix系统下,该函数是发送一个SIGTERM信号;而Windows下是调用TerminateProcess()来终止子进程。

kill函数是强制杀死子进程。在Unix系统下,该函数是发送一个SIGKILL信号,就像命令行执行kill一样;而Windows下的效果和terminate函数是一样的。

创建子进程并等待子进程执行完毕(推荐)

p=subprocess.call(args)

如上所述,使用Popen函数会使得子进程异步执行,如果需要等待子进程执行完毕,需要手动调用wait函数或者communicate函数。而更好的方法就是使用call函数来创建子进程。

call函数的参数和Popen函数一样,但是call函数也是创建一个子进程,并且创建之后立即执行,并且当前进程等待该子进程执行完毕才会往下继续执行。

如果我们的父进程不需要与子进程进行交互,并且需要等待子进程执行完毕的话,建议使用该函数执行子进程。

喜欢的戳一下赞或关注哦!

更多文章

  1. Python学习笔记之四:os和os.path文件路径模块

  2. 分布式必备:MongoDB分片、部署MongoDB分布式集群

  3. Spring开发必备:事务管理、Hibernate集成

  4. Python网络爬虫:空姐网、糗百、xxx结果图与源码

相关推荐

面试官:来,讲一下枚举类型在开发时中实际应用场景!

一.基本介绍枚举是JDK1.5新增的数据类型,使用枚举我们可以很好的描述一些特定的业务场景,比如一年中的春、夏、秋、冬,还有每周的周一到周天,还有各种颜色,以及可以用它来描述一些状态信息,比如错...

一日一技:11个基本Python技巧和窍门

1.两个数字的交换.x,y=10,20print(x,y)x,y=y,xprint(x,y)输出:102020102.Python字符串取反a="Ge...

Python Enum 技巧,让代码更简洁、更安全、更易维护

如果你是一名Python开发人员,你很可能使用过enum.Enum来创建可读性和可维护性代码。今天发现一个强大的技巧,可以让Enum的境界更进一层,这个技巧不仅能提高可读性,还能以最小的代价增...

Python元组编程指导教程(python元组的概念)

1.元组基础概念1.1什么是元组元组(Tuple)是Python中一种不可变的序列类型,用于存储多个有序的元素。元组与列表(list)类似,但元组一旦创建就不能修改(不可变),这使得元组在某些场景...

你可能不知道的实用 Python 功能(python有哪些用)

1.超越文件处理的内容管理器大多数开发人员都熟悉使用with语句进行文件操作:withopen('file.txt','r')asfile:co...

Python 2至3.13新特性总结(python 3.10新特性)

以下是Python2到Python3.13的主要新特性总结,按版本分类整理:Python2到Python3的重大变化Python3是一个不向后兼容的版本,主要改进包括:pri...

Python中for循环访问索引值的方法

技术背景在Python编程中,我们经常需要在循环中访问元素的索引值。例如,在处理列表、元组等可迭代对象时,除了要获取元素本身,还需要知道元素的位置。Python提供了多种方式来实现这一需求,下面将详细...

Python enumerate核心应用解析:索引遍历的高效实践方案

喜欢的条友记得关注、点赞、转发、收藏,你们的支持就是我最大的动力源泉。根据GitHub代码分析统计,使用enumerate替代range(len())写法可减少38%的索引错误概率。本文通过12个生产...

Python入门到脱坑经典案例—列表去重

列表去重是Python编程中常见的操作,下面我将介绍多种实现列表去重的方法,从基础到进阶,帮助初学者全面掌握这一技能。方法一:使用集合(set)去重(最简单)pythondefremove_dupl...

Python枚举类工程实践:常量管理的标准化解决方案

本文通过7个生产案例,系统解析枚举类在工程实践中的应用,覆盖状态管理、配置选项、错误代码等场景,适用于Web服务开发、自动化测试及系统集成领域。一、基础概念与语法演进1.1传统常量与枚举类对比#传...

让Python枚举更强大!教你玩转Enum扩展

为什么你需要关注Enum?在日常开发中,你是否经常遇到这样的代码?ifstatus==1:print("开始处理")elifstatus==2:pri...

Python枚举(Enum)技巧,你值得了解

枚举(Enum)提供了更清晰、结构化的方式来定义常量。通过为枚举添加行为、自动分配值和存储额外数据,可以提升代码的可读性、可维护性,并与数据库结合使用时,使用字符串代替数字能简化调试和查询。Pytho...

78行Python代码帮你复现微信撤回消息!

来源:悟空智能科技本文约700字,建议阅读5分钟。本文基于python的微信开源库itchat,教你如何收集私聊撤回的信息。[导读]Python曾经对我说:"时日不多,赶紧用Python"。于是看...

登录人人都是产品经理即可获得以下权益

文章介绍如何利用Cursor自动开发Playwright网页自动化脚本,实现从选题、写文、生图的全流程自动化,并将其打包成API供工作流调用,提高工作效率。虽然我前面文章介绍了很多AI工作流,但它们...

Python常用小知识-第二弹(python常用方法总结)

一、Python中使用JsonPath提取字典中的值JsonPath是解析Json字符串用的,如果有一个多层嵌套的复杂字典,想要根据key和下标来批量提取value,这是比较困难的,使用jsonpat...

取消回复欢迎 发表评论: