解密 python list 深/浅拷贝 原理
off999 2024-10-05 19:44 23 浏览 0 评论
1. python list的深/浅拷贝
python 有一种常用数据类型:list,使用list时经常需要考虑一件事件,那就是:浅拷贝与深拷贝。
至于什么是深浅拷贝,先从一个示例代码来分析一下:
import copy
# list 测试使用的源数据
lists = [[1, 2, 3], 4, 5, 6]
def low_copy():
# list 浅拷贝
low_list = copy.copy(lists)
return list(low_list)
def deep_copy():
# list 深拷贝
deep_list = copy.deepcopy(lists)
return list(deep_list)
if __name__ == "__main__":
print("源 list:", lists)
# 分别获取 浅拷贝、深拷贝 list对象
lists_c = low_copy()
lists_d = deep_copy()
print("浅拷贝 list:", lists_c)
print("深拷贝 list:", lists_c)
print("========================")
# 对源数据的 第0下数据追加数值7
print("对源list的第0下数据追加数值7,start")
lists[0].append(7)
print("对源list的第0下数据追加数值7,end")
print("========================")
# 源数据的 第0下数据追加数值7 之后验证,深浅拷贝数据的变化
print("源 list:", lists)
print("浅拷贝 list:", lists_c)
print("深拷贝 list:", lists_d)
# 执行结果
#
# 源 list: [[1, 2, 3], 4, 5, 6]
# 浅拷贝 list: [[1, 2, 3], 4, 5, 6]
# 深拷贝 list: [[1, 2, 3], 4, 5, 6]
# ========================
# 对源list的第0下数据追加数值7,start
# 对源list的第0下数据追加数值7,end
# ========================
# 源 list: [[1, 2, 3, 7], 4, 5, 6]
# 浅拷贝 list: [[1, 2, 3, 7], 4, 5, 6]
# 深拷贝 list: [[1, 2, 3], 4, 5, 6]
通过示例代码可以看出:在对list进行浅拷贝、深拷贝之后,对源数据进行修改,则会直接影响浅拷贝的数据,深拷贝的数据则无影响。
这说明了什么,具体又是怎么实现的呢?
2. pyhton list 的实现
首先,要说明几点:
- python 底层源码使用C语言实现
- 在 python 中一切皆对象(整数、字符串,甚至类型、函数等都是对象)
python的对象,大概分为以下几种:
参考 https://flaggo.github.io/python3-source-code-analysis/objects/object/
- Fundamental 对象: 类型对象
- Numeric 对象: 数值对象
- Sequence 对象: 容纳其他对象的序列集合对象
- Mapping 对象: 类似 C++中的 map 的关联对象
- Internal 对象: Python 虚拟机在运行时内部使用的对象
3. list 对象
在python的源码实现中,list的结构体如下:
// 源文件:Include/listobject.h
// listobject.h
typedefstruct {
// 对象的公共头部
PyObject_VAR_HEAD
// 指向 list 元素的指针向量,list[0] 就是 ob_item[0]
// 可以看到 ob_item 是个二级指针
// 也就是说 **ob_item 表示它是指向 PyObject类型指针数组 指针
// *ob_item 表示它是 PyObject类型指针数组
/* Vector of pointers to list elements. list[0] is ob_item[0], etc. */
PyObject **ob_item;
/* ob_item contains space for 'allocated' elements. The number
* currently in use is ob_size.
* Invariants:
* 0 <= ob_size <= allocated
* len(list) == ob_size
* ob_item == NULL implies ob_size == allocated == 0
* list.sort() temporarily sets allocated to -1 to detect mutations.
*
* Items must normally not be NULL, except during construction when
* the list is not yet visible outside the function that builds it.
*/
// list 容纳元素的总数
Py_ssize_t allocated;
} PyListObject;
从 list 的结构体可以看出,真正存储对象的是 ob_item 字段,该字段是一个指向 指针数组 的指针,从而得知 PyListObject 结构体是一个多级结构体。
创建list的过程主要分为两个步骤:
- 创建 PyListObject 结构体
- 对 ob_item 指向的指针数组进行初始化操作
// 源文件位置:Objects/listobject.c
// 创建一个新的 list
PyObject *
PyList_New(Py_ssize_t size) {
// 判断创建 list 时的 size 是否合法
if (size < 0) {
PyErr_BadInternalCall();
returnNULL;
}
struct _Py_list_state *state = get_list_state();
// 最终创建的 list 对象指针
PyListObject *op;
#ifdef Py_DEBUG
// PyList_New() must not be called after _PyList_Fini()
assert(state->numfree != -1);
#endif
if (state->numfree) {
state->numfree--;
op = state->free_list[state->numfree];
_Py_NewReference((PyObject *) op);
} else {
// 创建一个新的 list
op = PyObject_GC_New(PyListObject, &PyList_Type);
if (op == NULL) {
returnNULL;
}
}
if (size <= 0) {
op->ob_item = NULL;
} else {
op->ob_item = (PyObject **) PyMem_Calloc(size, sizeof(PyObject *));
if (op->ob_item == NULL) {
Py_DECREF(op);
return PyErr_NoMemory();
}
}
Py_SET_SIZE(op, size);
op->allocated = size;
_PyObject_GC_TRACK(op);
return (PyObject *) op;
}
4. list 浅拷贝
// 源文件位置:Objects/listobject.c
/*[clinic input]
list.copy
Return a shallow copy of the list.
[clinic start generated code]*/
// list 的 浅拷贝
static PyObject *
list_copy_impl(PyListObject *self)
/*[clinic end generated code: output=ec6b72d6209d418e input=6453ab159e84771f]*/
{
return list_slice(self, 0, Py_SIZE(self));
}
// ilow、ihigh 的类型 Py_ssize_t 为当前系统一个指针的大小
static PyObject *
list_slice(PyListObject *a, Py_ssize_t ilow, Py_ssize_t ihigh) {
PyListObject *np;
PyObject **src, **dest;
Py_ssize_t i, len;
len = ihigh - ilow;
if (len <= 0) {
return PyList_New(0);
}
// 生成新的 list
np = (PyListObject *) list_new_prealloc(len);
if (np == NULL)
returnNULL;
// 从 list 的第一个位置开始 a->ob_item 偏移 ilow,即:移动到 第 ilow 个数值元素的指针位置
src = a->ob_item + ilow;
// 新的 list 的 数值列表第一个位置
dest = np->ob_item;
// 进行复制,注意:只是复制了 对象的指针
for (i = 0; i < len; i++) {
// src[i] 存储着 指向具体的对象的指针
PyObject *v = src[i];
// v 的引用计数 +1
Py_INCREF(v);
// 复制到新的list中
// 此时 新老list底层数据对象指向相同
dest[i] = v;
}
// 设置新list的size
// ob->ob_size = size
Py_SET_SIZE(np, len);
return (PyObject *) np;
}
进行浅拷贝之后,从内存布局发生的变化,可以看出:新、老list共享底层数据对象,这也是导致一个list进行修改之后,影响其他list的原因。
5. list 深拷贝
进行深拷贝之后,从内存布局发生的变化,可以看出:新、老list分别使用不同的底层数据对象,这就不会导致一个list进行修改之后,影响其他list。
总结
通过分析python底层源码了解到list的底层结构以及深、浅拷贝原理,开发过程中使用深拷贝还是浅拷贝,则需要根据实际情况来处理。
- 浅拷贝在拷贝时,只拷贝第一层中的引用,如果元素是可变对象,并且被修改,那么拷贝的对象也会发生变化。
- 深拷贝在拷贝时,会逐层进行拷贝,直到所有的引用都是不可变对象为止。
- Python 有多种方式实现浅拷贝,copy 模块的 copy 函数 ,对象的 copy 函数 ,工厂方法,切片等。
- 大多数情况下,编写程序时,都是使用浅拷贝,除非有特定的需求。
- 浅拷贝的优点:拷贝速度快,占用空间少,拷贝效率高。
扩展阅读
[1] https://blog.csdn.net/mall_lucy/article/details/104531218 图解深浅拷贝
[2] https://flaggo.github.io/python3-source-code-analysis/objects/list-object/ python list 对象
相关推荐
- Python设计模式 第 13 章 中介者模式(Mediator Pattern)
-
在行为型模式中,中介者模式是解决“多对象间网状耦合”问题的核心模式。它就像“机场调度中心”——多个航班(对象)无需直接沟通起飞、降落时间,只需通过调度中心(中介者)协调,避免航班间的冲突与混乱...
- 1.3.1 python交互式模式的特点和用法
-
什么是Python交互模式Python交互模式,也叫Python交互式编程,是一种在Python解释器中运行的模式,它允许用户在解释器窗口中输入单个Python语句,并立即查看结果,而不需要编写整个程...
- Python设计模式 第 8 章 装饰器模式(Decorator Pattern)
-
在结构型模式中,装饰器模式是实现“动态功能扩展”的核心模式。它就像“手机壳与手机的关系”——手机(原始对象)具备通话、上网等基础功能,手机壳(装饰器)可在不改变手机本身的前提下,为其新增保护、...
- python设计模式 综合应用与实战指南
-
经过前面16章的学习,我们已系统掌握创建型模式(单例、工厂、建造者、原型)、结构型模式(适配器、桥接、组合、装饰器、外观、享元、代理)、行为型模式(责任链、命令、迭代器、中介者、观察者、状态、策略...
- Python入门学习教程:第 16 章 图形用户界面(GUI)编程
-
16.1什么是GUI编程?图形用户界面(GraphicalUserInterface,简称GUI)是指通过窗口、按钮、菜单、文本框等可视化元素与用户交互的界面。与命令行界面(CLI)相比,...
- Python 中 必须掌握的 20 个核心:str()
-
str()是Python中用于将对象转换为字符串表示的核心函数,它在字符串处理、输出格式化和对象序列化中扮演着关键角色。本文将全面解析str()函数的用法和特性。1.str()函数的基本用法1.1...
- Python偏函数实战:用functools.partial减少50%重复代码的技巧
-
你是不是经常遇到这样的场景:写代码时同一个函数调用了几十次,每次都要重复传递相同的参数?比如处理文件时总要用encoding='utf-8',调用API时固定传Content-Type...
- 第2节.变量和数据类型【第29课-输出总结】
-
同学们,关于输出的知识点讲解完成之后,把重点性的知识点做一个总结回顾。·首先对于输出这一章节讲解的比如有格式化符号,格式化符号这里需要同学们额外去多留意的是不是百分号s格式化输出字符串。当然课上也说百...
- AI最火语言python之json操作_python json.loads()
-
JSON(JavaScriptObjectNotation,JavaScript对象表示法)是一种开放标准的文件格式和数据交换格式,它易于人阅读和编写。JSON是一种常用的数据格式,比如对接各种第...
- python中必须掌握的20个核心函数—split()详解
-
split()是Python字符串对象的方法,用于将字符串按照指定的分隔符拆分成列表。它是文本处理中最常用的函数之一。一、split()的基本用法1.1基本语法str.split(sep=None,...
- 实用方法分享:pdf文件分割方法 横向A3分割成纵向A4
-
今天在街上打印店给儿子打印试卷时,我在想:能不能,把它分割成A4在家中打印,这样就不需要跑到街上的打印店打印卷子了。原来,老师发的作业,是电子稿,pdf文件,A3格式的试卷。可是家中的打印机只能打印A...
- 20道常考Python面试题大总结_20道常考python面试题大总结免费
-
20道常考Python面试题大总结关于Python的面试经验一般来说,面试官会根据求职者在简历中填写的技术及相关细节来出面试题。一位拿了大厂技术岗SpecialOffer的网友分享了他总结的面试经...
- Kotlin Data Classes 快速上手_kotlin快速入门
-
引言在日常开发中,我们常常需要创建一些只用来保存数据的类。问题是,这样的类往往需要写一堆模板化的方法:equals()、hashCode()、toString()……每次都重复,既枯燥又容易出错。//...
- python自动化RobotFramework中Collections字典关键字使用(五)
-
前言介绍安装好robotframework库后,跟之前文章介绍的BuiltIn库一样BuiltIn库使用介绍,在“python安装目录\Lib\site-packages\robot\librarie...
- Python中numpy数据分析库知识点总结
-
Python中numpy数据分析库知识点总结二、对已读取数据的处理②指定一个值,并对该值双边进行修改③指定两个值,并对第一个值的左侧和第二个值的右侧进行修改2.4数组的拼接和行列交换①竖直拼接(np...
你 发表评论:
欢迎- 一周热门
- 最近发表
-
- Python设计模式 第 13 章 中介者模式(Mediator Pattern)
- 1.3.1 python交互式模式的特点和用法
- Python设计模式 第 8 章 装饰器模式(Decorator Pattern)
- python设计模式 综合应用与实战指南
- Python入门学习教程:第 16 章 图形用户界面(GUI)编程
- Python 中 必须掌握的 20 个核心:str()
- Python偏函数实战:用functools.partial减少50%重复代码的技巧
- 第2节.变量和数据类型【第29课-输出总结】
- AI最火语言python之json操作_python json.loads()
- python中必须掌握的20个核心函数—split()详解
- 标签列表
-
- python计时 (73)
- python安装路径 (56)
- python类型转换 (93)
- python进度条 (67)
- python吧 (67)
- python的for循环 (65)
- python格式化字符串 (61)
- python静态方法 (57)
- python列表切片 (59)
- python面向对象编程 (60)
- python 代码加密 (65)
- python串口编程 (77)
- python封装 (57)
- python写入txt (66)
- python读取文件夹下所有文件 (59)
- python操作mysql数据库 (66)
- python获取列表的长度 (64)
- python接口 (63)
- python调用函数 (57)
- python多态 (60)
- python匿名函数 (59)
- python打印九九乘法表 (65)
- python赋值 (62)
- python异常 (69)
- python元祖 (57)