百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术资源 > 正文

Python进阶:你定义的变量到底保存在哪里

off999 2024-11-22 19:03 15 浏览 0 评论

前言

之所以写这篇文章,源自于我遇到的一个问题:

Python 中我们可以通过 exec 执行一段字符串构成的代码:

  • 可以看到 exec 是可以影响当前代码的变量,为了在一个干净环境下执行,我一开始是这样写:

但是,最近我写一个小工具,需要使用 exec 执行一段比较完整的代码,却出了问题,下面用一个简单例子表示:

为什么会报错呢?

问题的原因一点都不简单,涉及的知识点:

  1. Python 是如何保存运行时的数据(各种变量的赋值与获取)
  2. 运行帧栈(frame)概念

本文对 frame 不作深入介绍


全局与本地储存区

先看一段非常简单的代码:

  • 上图是代码开始执行,但还没有执行第一句的情况
  • 从左上方区域可以看到2个变量,locals 和 globals , 左下方看到调用堆栈列表(每一项我称为"frame")
  • locals 和 globals 都以字典的形式保存数据,而字典的 key 就是一些变量名字
  • 调用堆栈列表中,第一行就是当前执行作用域, 是模块的意思
  • 其实 locals 和 globals 字典都来自于 frame
  • 在执行模块代码之前,Python 会做一些准备,比如一些内置函数,这些会保存在 frame 中的 builtins 字典中

接下来执行第一句代码后:

  • 当我们定义一个变量,那么就会把变量信息设置到当前 frame 的 locals 字典里面
  • **而 python 在初始化模块 frame时,会把 locals 与 globals 设置成同一个字典,此时 locals 和 globals 都可以看到 a 变量的信息 **

继续执行:

  • 定义函数,本质上就是定义了变量,所以上面的结果在意料之内

接下来,将要调用刚刚定义的函数:

  • 此时,Python 要找到名字叫 changeA 的变量,然后调用他。但是,怎么找?
  • 规则很简单, 从当前 frame 的 locals 找,如果找不到则从 globals 找,如果找不到,最后到 buildins 找
  • 显然,这里从 locals 里面就可以找到

现在代码执行进入到函数里面:

  • 从左下方调用堆栈列表可以看到,Python 创建了一个新的 frame
  • 既然是新的 frame,locals 字典就是空的,因为还没有创建变量。但是为什么 globals 有东西?
  • 这是因为每当从一个 模块 frame 中进入一个新的 非模块 frame ,则会把 模块 frame 的 globals 设置到新的 frame 的 globals
  • 所以,函数 frame 的 globals 与 上一层的 frame 的 globals 是同一个字典

现在执行函数的第一句代码:

  • 首先要执行 a+10 ,a 变量怎么来?还是之前的规则, 先 locals 后 globals 进行查找 ,显然这次从 globals 找到,因此 a 的值是 1
  • 于是 x 变量创建完毕,locals 里面保存了 x 相关数据

接下来执行函数中的最后一句代码:

  • 显然, print 无法在 locals 和 globals 中找到,但是在 builtins 中找到,所以仍然调用成功

通过 inspect.currentframe().f_builtins 可以获得内置函数变量字典,这里不展示

最后,函数 changeA 调用完毕:

  • frame 列表上最顶层的 frame 将销毁
  • 此时代码执行回到一开始的 module 的 frame 里面

当进入一个新的 frame, frame 会记录进入新 frame 前的代码行(实际上是字节码行),所以 python 可以在调用完一个函数后,在上次跳转的地方继续执行代码

总结一下上面的规则:

  1. 每当进入一个代码块,python 会创建一个 frame,frame 中的 locals、globals、builtins 属性可以查阅变量信息
  2. 查找一个变量的先后顺序是:locals > globals > builtins
  3. 如果是一个模块的 frame,其 locals 和 globals 是同一个字典
  4. 如果是非模块 frame,其 globals 与其上一层 frame 的 globals 是同一个字典,locals 是一个新字典
  5. 通过函数 globals 和 locals 可以获得的确 frame 的相关字典

举一反三

了解这些简单机制后,我们已经足以解释各种各样关于 python 变量的规则。

覆盖内置函数的本质:

  • 行4-6:定义了函数 sum ,名字与内置函数一样了
  • 行10:使用的时候真的变成我们自己的函数
  • 行19:从 builtins 删除 sum

global 关键字的使用:

  • global 关键字可以让我们在函数里面修改全局变量

其实约等价于:

  • 行5:直接修改 globals 字典,同时避免在 locals 里面创建了变量

exec 的问题

回到 exec 的问题上,exec 是把参数1的代码作为一个模块 frame 执行:

参数2与参数3可以设置模块 frame 的 globals 与 locals 的字典:

  • 默认值是用当前 frame 的 globals 与 locals
  • 如果只设置了 globals 而没有设置 locals,则 locals 使用 globals 的字典

现在来看看为什么这段代码报错:

  • 由于我们设置了模块 frame 的 globals 与 locals 为2个独立的字典
  • 执行里面代码 a=100 ,只在 locals 字典里面保存了变量 a
  • 执行函数里面的代码, 此时函数 globals 就是模块 frame 的 globals,但是上一步没有把 a 存放到这个字典中 。因此,获取变量 a 的时候报错了

那么,怎么使得代码正确执行:

  • 很简单,只需要让 exec 按照模块 frame 正确初始化 globals 与 locals 即可( 就是让其是同一个字典 )

到此为止我们了解 exec 甚至是 Python 运行的一些机制,那么这到底能用在哪些应用上?后面我会分享一系列小工具的制作过程,里面就会用到这些属于 python 的"黑魔法"

记得点赞、转发、收藏,一键三连~~~

相关推荐

Python开发管理神器--UV 使用教程:从安装到项目管理

UV是一个用Rust编写的高效Python包和项目管理工具,提供了比传统工具更快的速度和更强的功能。本文将指导你如何使用UV从安装到运行一个Python项目。重点:它可以独立安装,可...

python入门-Day 26: 优化与调试(python优化方法)

优化与调试,内容包括处理模型运行中的常见问题(内存、依赖)、调整参数(如最大生成长度),以及练习改进Day25的文本生成结果。我会设计一个结构化的任务,帮助你掌握优化和调试技巧,同时提升模型性能...

Python安装(python安装发生严重错误)

Windows系统1.安装python1.1下载Python安装包打开官方网站:https://www.python.org/downloads/点击"DownloadPython3.1...

UV 上手指南:Python 项目环境/包管理新选择

如果你是一位Python开发者,曾因pipinstall的安装速度而感到沮丧,或者希望Python的依赖管理能够像Node.js那样高效顺滑,那么UV可能正是你所需要的工具。UV...

uv——Python开发栈中的高效全能小工具

每天写Python代码的同学,肯定都离不开pip、virtualenv、Poetry等基础工具,但是对这些工具可能是又恨又离不开。那么有什么好的替代呢,虫虫今天就给大家介绍一个替代他们的小工具uv,一...

使用Refurb让你的Python代码更加优秀

还在担心你写的Python代码是否专业,是否符合规范吗?这里介绍一个Python代码优化库Refurb,使用它可以给你的代码提出更加专业的建议,让你的代码更加的可读,规范和专业。下面简单介绍这个库的使...

【ai】dify+python开发AI八字排盘插件

Dify插件是什么?你可以将Dify插件想象成赋予AI应用增强感知和执行能力的模块化组件。它们使得将外部服务、自定义功能以及专用工具以”即插即用”的简洁方式集成到基于Dify构建的AI...

零基础AI开发系列教程:Dify升级指南

Dify近期发布很是频繁,基本两三天一个版本。值得肯定的是优化和改进了很多问题,但是官方的升级文档有点分散,也有点乱。我这里整理了一个升级文档供大家参考,如果还没有升级到新版本的小伙伴,可以按照我的文...

升级到PyTorch 2.0的技巧总结(如何更新pytorch版本)

来源:DeepHubIMBA本文约6400字,建议阅读12分钟在本文将演示PyTorch2.0新功能的使用,以及介绍在使用它时可能遇到的一些问题。PyTorch2.0发布也有一段时间了,大家...

dify 1.6.0版本发布解读:引入MCP支持与多项核心优化升级指南详解

2025年7月10日,dify发布了1.6.0版本。这是一次功能深度升级与性能优化的综合性更新,标志着dify在技术规范支持、操作体验以及系统稳定性方面迈出了重要的一步。本文将从核心新特性、功能增强、...

Python教程(十四):列表(List)(python列表方法总结)

昨天,我们学习了变量作用域,理解了局部和全局变量的概念。今天,我们将开始探索Python的数据结构,从最常用的**列表(List)**开始。列表是Python中最灵活、最常用的数据结构,它可以存储不同...

Python列表操作(python列表有哪些基本操作)

Python添加列表4分钟阅读在Python操作列表有各种方法。例如–简单地将一个列表的元素附加到for循环中另一个列表的尾部,或使用+/*运算符、列表推导、extend()和i...

Python字符串变形术:replace替换+join连接,10分钟掌握核心操作

字符串替换魔法:replace()实战手册核心价值:一键更新文本内容,精准控制替换范围#基础替换:Python变Javas="hellopython"print(s.re...

python集合set() 数据增册改查统计序循常用方法和数学计算

概念特点定义和创建常用操作集合间的关系集合数学操作集合生成式遍历概念:可变、无序、不重复的序列数据容器特点:无序,不支持下标唯一性,可以删除重复数据可修改定义和创建赋值法:语法:s={x,....

Python列表方法append和extend的区别

在Python编程中,列表是一种非常常用的数据结构。而列表有两个方法append()和extend(),它们看起来有点相似,但实际上有着明显的区别。今天咱们就来好好唠唠这俩方法到底有啥不同。基本区别a...

取消回复欢迎 发表评论: