百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术资源 > 正文

通过Python运行原理了解 .pyc(python的运行过程)

off999 2024-10-19 07:20 16 浏览 0 评论

由于最近一位同学在做分布式计算时,部分模块只把pyc文件拷贝部署至远程计算节点,导致主节点程序更新后,计算节点出现错误异常,于是有了这篇文章...

小栗子

有两个py模块,test.py与import_test.py模块。

mport_test.py模块中导入了test模块,如下图

我们先执行test.py,看下目录,无变化。

然后再执行import_test.py。

可以发现,在执行import_test.py之后,目录中多了一个test.pyc文件,这是为神马呢。

Python运行原理

每一个 .py 文件都会作为Python中的一个模块,如上例子中,包含了test、import_test两个模块,其中import_test作为程序运行的入口(导入了test模块)。

运行import_test.py后,会激活 Python 的解释器,将test模块编译成一个字节码对象 (PyCodeObject)并保存在内存当中(方便CPU读取,提高程序运行效率),接下来由 Python 虚拟机来执行字节码指令。当Python程序运行结束时,Python解释器则将字节码对象持久化至pyc文件中(.pyc 文件是字节码对象在硬盘上的表现形式)。

当此模块程序再次运行时,首先程序会在硬盘中寻找pyc文件,如果找到,则直接将字节码对象加载到内存中,否则就重复上面的过程。

也就是说,我们之所以要把py文件编译成pyc文件,其最大的好处在于我们在重复运行程序时,不需要重新对该模块进行重复的编译。

那么这个字节码对象(PyCodeObject) 有包含什么?

一个字节码对象文件(.pyc)包含了三部分信息:Python 的 magic number、创建时间以及 PyCodeObject 对象。

magic number 是 Python 定义的一个整数值。一般来说,不同版本的 Python 实现都会定义不同的 magic number,这个值是用来保证 Python 兼容性的。不同版本的 Python 定义的字节码指令可能会不同,如果不做检查,执行的时候就可能出错。比如要限制由低版本编译的 pyc 文件不能让高版本的 Python 程序来执行,只需要检查 magic number 不同就可以了。

创建时间是用来判断pyc文件是否有效,每次在载入之前都会先校验py文件和pyc文件的最后修改日期,如果不一致则重新生成一份pyc文件(详见import.py),避免了修改源代码后与本地字节码文件产生冲突。

那么为什么执行test.py模块时,没有生成.pyc文件呢?

首先,既然pyc存在意义是重复运行的时候免去编译操作,那么需要编译成pyc文件的应该是那些可以重用的模块。所以Python的解释器认为:只有import进来的模块,才是需要被重用的模块。这也是为什么执行import_test.py模块时,只生成了被导入的test.py模块的pyc文件的原因。

日常程序设计时,公共通用的方法封装成单独的模块,通过导入模块被使用,有利于提高代码运行效率,当然这一般也不会是什么瓶颈。。。

转载请说明出处,若对你有帮助,点赞支持哦。

相关推荐

python入门到脱坑经典案例—清空列表

在Python中,清空列表是一个基础但重要的操作。clear()方法是最直接的方式,但还有其他方法也可以实现相同效果。以下是详细说明:1.使用clear()方法(Python3.3+推荐)...

python中元组,列表,字典,集合删除项目方式的归纳

九三,君子终日乾乾,夕惕若,厉无咎。在使用python过程中会经常遇到这四种集合数据类型,今天就对这四种集合数据类型中删除项目的操作做个总结性的归纳。列表(List)是一种有序和可更改的集合。允许重复...

Linux 下海量文件删除方法效率对比,最慢的竟然是 rm

Linux下海量文件删除方法效率对比,本次参赛选手一共6位,分别是:rm、find、findwithdelete、rsync、Python、Perl.首先建立50万个文件$testfor...

数据结构与算法——链式存储(链表)的插入及删除,

持续分享嵌入式技术,操作系统,算法,c语言/python等,欢迎小友关注支持上篇文章我们讲述了链表的基本概念及一些查找遍历的方法,本篇我们主要将一下链表的插入删除操作,以及采用堆栈方式如何创建链表。链...

Python自动化:openpyxl写入数据,插入删除行列等基础操作

importopenpyxlwb=openpyxl.load_workbook("example1.xlsx")sh=wb['Sheet1']写入数据#...

在Linux下软件的安装与卸载(linux里的程序的安装与卸载命令)

通过apt安装/协助软件apt是AdvancedPackagingTool,是Linux下的一款安装包管理工具可以在终端中方便的安装/卸载/更新软件包命令使用格式:安装软件:sudoapt...

Python 批量卸载关联包 pip-autoremove

pip工具在安装扩展包的时候会自动安装依赖的关联包,但是卸载时只删除单个包,无法卸载关联的包。pip-autoremove就是为了解决卸载关联包的问题。安装方法通过下面的命令安装:pipinsta...

用Python在Word文档中插入和删除文本框

在当今自动化办公需求日益增长的背景下,通过编程手段动态管理Word文档中的文本框元素已成为提升工作效率的关键技术路径。文本框作为文档排版中灵活的内容容器,既能承载多模态信息(如文字、图像),又可实现独...

Python 从列表中删除值的多种实用方法详解

#Python从列表中删除值的多种实用方法详解在Python编程中,列表(List)是一种常用的数据结构,具有动态可变的特性。当我们需要从列表中删除元素时,根据不同的场景(如按值删除、按索引删除、...

Python 中的前缀删除操作全指南(python删除前导0)

1.字符串前缀删除1.1使用内置方法Python提供了几种内置方法来处理字符串前缀的删除:#1.使用removeprefix()方法(Python3.9+)text="...

每天学点Python知识:如何删除空白

在Python中,删除空白可以分为几种不同的情况,常见的是针对字符串或列表中空白字符的处理。一、删除字符串中的空白1.删除字符串两端的空白(空格、\t、\n等)使用.strip()方法:s...

Linux系统自带Python2&yum的卸载及重装

写在前面事情的起因是我昨天在测试Linux安装Python3的shell脚本时,需要卸载Python3重新安装一遍。但是通过如下命令卸载python3时,少写了个3,不小心将系统自带的python2也...

如何使用Python将多个excel文件数据快速汇总?

在数据分析和处理的过程中,Excel文件是我们经常会遇到的数据格式之一。本文将通过一个具体的示例,展示如何使用Python和Pandas库来读取、合并和处理多个Excel文件的数据,并最终生成一个包含...

【第三弹】用Python实现Excel的vlookup功能

今天继续用pandas实现Excel的vlookup功能,假设我们的2个表长成这样:我们希望把Sheet2的部门匹在Sheet1的最后一列。话不多说,先上代码:importpandasaspd...

python中pandas读取excel单列及连续多列数据

案例:想获取test.xls中C列、H列以后(当H列后列数未知时)的所有数据。importpandasaspdfile_name=r'D:\test.xls'#表格绝对...

取消回复欢迎 发表评论: