python读excel文件最佳实践?直接请教pandas比gpt还好用
off999 2024-10-07 12:09 36 浏览 0 评论
前言
说到 python 读取 excel 文件，网上使用 openpyxl 的文章一大堆。我自己很少直接使用 openpyxl，一般使用 pandas 间接使用。
但如果你不希望引入 pandas，该如何轻松使用 openpyxl？到底有没有最佳实践写法？
这好办，今天就带大家看看 pandas 里面，是如何使用 openpyxl 读取 excel 文件。
不要忘记一键三连。你的点赞、收藏、关注，是我创作的动力。
本文查看的是 pandas 2.1.4 版本的代码。
使用任何能导航代码的 ide，我使用的是 vscode ，输入 pandas 的 read_excel 方法，按住 ctrl 键，鼠标点击方法，即可进入源码文件。
通过查找，你会找到一个很重要的类定义 ExcelFile :
众所周知，pandas 能指定不同的第三方库读写 excel 文件。今天我们只看 openpyxl 。进去查看，基本上所有的读取逻辑都在这个类里面。
很明显，这是读取文件的代码。由于只需要读取，设置 read only 和 data only ，能以最优性能执行。
接着是工作表相关:
有了具体的某个工作表对象，下一步就是最重要的加载数据，现在才是我们最关注的地方。到底 pandas 是如何组织代码？代码中一些奇怪的操作，是为什么？我们一一拆解。
行 612 是什么鬼？通过查 openpyxl 的文档，可以知道，原来有些程序(wps？)或库，在保存文件的时候，会写入关于工作表数据的范围最大行和列的信息。但是他们有可能会写错，通过 reset_dimensions 可以重置
接着就开始遍历读取:
同时我们注意到，行 614 和 623，这就是读取出来的所有数据，是一个 嵌套 list 结构。
但是，里面竟然有一个 while 循环？
原来，如果用户设置了一个单元格的格式，即使没有内容，也算一个有效的单元格。
此时如果只是正常遍历读取，得到的结果是
所以 while 循环就是移除这些多余的空单元格
如果这种"假单元格"出现在数据行下方:
此时就多了许多空行
所以，pandas 在遍历过程中，记录了最后有记录的行索引，遍历后截取一下就可以搞定：
看起来好像结束了？对于 pandas 来说，还没完
对于 pandas 来说，最终它会把得到的嵌套 list 数据传给 pd.DataFrame 。这里有一个前提，嵌套的每一行的列表长度必需一致才行。
但是行的长度有可能不一致。所以你会看到 pandas 的处理中，最后有一段逻辑用于补齐这些"短列表"
可以注意到，其中有3处地方在遍历 data 数据。所以，如果记录越多，这里就比较耗时。你能想到优化的方法吗?
我已经把本期涉及的代码整理好。转发、关注我，私信"python"，获得本期源码和数据。
相关推荐
-
- qq恢复删除好友官网（qq恢复已删好友）
-
qq恢复官方网站，http://huifu.qq.com/1、什么是QQ恢复系统？QQ恢复系统是腾讯公司提供的一项找回QQ联系人、QQ群的服务，向所有QQ用户免费开放。2、QQ恢复系统能恢复多长时间内删除的好友？普通用户可以申请恢复3个月内...
-
2025-12-28 16:03 off999
- 优启通u盘重装win7系统教程（优启通u盘装win7系统教程图解）
-
系统显示未找到万能驱动的解决方法是：1、重插下usb口1、造成“找不到驱动器设备驱动程序”的原因,可能是usb口出现问题。2、换个usb口可能是单独这个usb口出现问题,可以选择另外的usb口重试wi...
- wifi加密方式怎么设置（wifi网络加密怎么设置）
-
若你想将自己的无线网改成加密的，可以按照以下步骤操作：1.打开你的路由器管理界面。一般来说，在浏览器地址栏输入“192.168.1.1”或“192.168.0.1”，然后输入用户名和密码登录就可以打...
- sql数据库自学（数据库入门必看——《sql基础教程》）
-
SQLServer数据库基础知识：1.数据库是由数据组成的，这些数据可以被组织成有序的数据结构，以支持特定的应用程序。2.数据库管理系统（DBMS）是一种软件工具，用于创建、管理和操作数据库。...
- 无线网连接不可上网怎么回事
-
可能有几下几方面原因：1、无线路由器网络参数设置错误，无法拨通ISP运营商的局端设备，无法接入互联网；2、宽带线路出现故障，路由器无法拨通ISP运营商的局端设备，无法连通；3、宽带DNS服务器由于某种...
- 恢复大师app下载（恢复大师app下载软件）
-
是真的。开心手机恢复大师是一款苹果手机数据恢复软件，可以恢复删除的微信聊天记录、短信、通讯录、备忘录、qq聊天记录等17种数据。我测试了一下，确实是可以恢复的。而且开心手机恢复大师是可以免费试用的，是...
- windowsxp下载网站（windows xp download）
-
目前无法下载因为红色警戒XP电脑版是一款已经停止开发的游戏，官方已经停止了对其的支持和更新。虽然网上有一些模拟器可以运行该游戏，但是安装和使用相对困难，而且可能存在版权问题。建议玩家选择其他同类型的游...
- 没人用过的激活码没过期（没人用过的激活码没过期可以用吗）
-
迷你世界并不存在什么激活码的。《迷你世界》是一款高度自由的休闲类3D沙盒游戏，有着非常方便快捷的多人联机模式，只要有网络就能和各个地方的小伙伴们一起玩。这里没有等级和规则限制，没有规定的玩法，只有随心...
- 2017年联想笔记本电脑有几款
-
17年的笔记本电脑可以勉强安装一下win10系统试试。关键看你的内存有多少，内存大于4个G的话可以安装win10速度不会太慢。最好是安装win7系统，这样能发挥你这台电脑的所有的性能，你用起来也会感觉...
- 当前显卡排名（当下显卡排行）
-
101、Irispro5802、Iris62002、Iris52004、UHD630/6205、HD6306、HD5307、HD46008、HD44009、HD420010、HD40...
- win10专业版激活变成企业版（win10专业版激活变成企业版怎么办）
-
win10永久激活密钥很少，一旦网上有分享，等你拿到时就超过期限了，一般是要购买。激活win10系统可以使用激活工具：win10激活工具下载一、win10专业版产品密钥NXRQM-CXV6P-PBGV...
- ghostwinxp下载纯净版（ghost win7纯净版下载）
-
可以下载的，现在官网和其他网站上都可以下载xp原版的。可以通过以下步骤下载我的世界游戏到xp系统中：1.首先打开你的浏览器软件，搜索关键字“我的世界xp版下载”，找到可靠下载地址；2.从下载页面下...
- 惠普完整版驱动（惠普最新驱动）
-
惠普官方的标准操作：HP1050安装驱动步骤:一：准备：拿出驱动光盘放入光驱或到HP官网下载完整版驱动。二：不要插USB数据线或插上线打印机电源不要开，安装完整版驱动，当程序提示插入USB数据线时，插...
欢迎 你 发表评论:
- 一周热门
-
-
抖音上好看的小姐姐，Python给你都下载了
-
全网最简单易懂!495页Python漫画教程，高清PDF版免费下载
-
Python 3.14 的 UUIDv6/v7/v8 上新，别再用 uuid4 () 啦!
-
飞牛NAS部署TVGate Docker项目，实现内网一键转发、代理、jx
-
python入门到脱坑 输入与输出—str()函数
-
宝塔面板如何添加免费waf防火墙?（宝塔面板开启https）
-
Python三目运算基础与进阶_python三目运算符判断三个变量
-
(新版)Python 分布式爬虫与 JS 逆向进阶实战吾爱分享
-
失业程序员复习python笔记——条件与循环
-
系统u盘安装（win11系统u盘安装）
-
- 最近发表
- 标签列表
-
- python计时 (73)
- python安装路径 (56)
- python类型转换 (93)
- python进度条 (67)
- python吧 (67)
- python的for循环 (65)
- python格式化字符串 (61)
- python静态方法 (57)
- python列表切片 (59)
- python面向对象编程 (60)
- python 代码加密 (65)
- python串口编程 (77)
- python封装 (57)
- python写入txt (66)
- python读取文件夹下所有文件 (59)
- python操作mysql数据库 (66)
- python获取列表的长度 (64)
- python接口 (63)
- python调用函数 (57)
- python多态 (60)
- python匿名函数 (59)
- python打印九九乘法表 (65)
- python赋值 (62)
- python异常 (69)
- python元祖 (57)