如何使用Python将多个excel文件数据快速汇总?
off999 2025-06-18 23:33 4 浏览 0 评论
在数据分析和处理的过程中,Excel文件是我们经常会遇到的数据格式之一。本文将通过一个具体的示例,展示如何使用Python和Pandas库来读取、合并和处理多个Excel文件的数据,并最终生成一个包含总得分和总积分的排名表。
导入必要的库
首先,我们需要导入必要的库。Pandas是一个强大的数据处理库,而glob库则用于文件路径匹配。
import pandas as pd
import glob
获取所有Excel文件的路径
接下来,我们使用glob库获取指定目录下所有Excel文件的路径。
excel_files = glob.glob("./样例数据/*.xlsx")
6月积分统计 | |||
姓名 | 月度得分 | 排名 | 积分 |
张三 | 143 | 1 | 50 |
李四 | 135 | 2 | 48 |
王二 | 124 | 3 | 46 |
黄五 | 119 | 4 | 44 |
郑六 | 100 | 5 | 36 |
7月积分统计 | |||
姓名 | 月度得分 | 排名 | 积分 |
王二 | 143 | 1 | 50 |
黄五 | 135 | 2 | 48 |
张三 | 135 | 2 | 48 |
李四 | 119 | 4 | 44 |
郑六 | 110 | 5 | 40 |
8月积分统计 | |||
姓名 | 月度得分 | 排名 | 积分 |
王二 | 143 | 1 | 50 |
黄五 | 135 | 2 | 48 |
张三 | 135 | 2 | 48 |
李四 | 119 | 4 | 44 |
郑六 | 100 | 5 | 36 |
读取并合并所有Excel文件的数据
我们使用Pandas的read_excel函数读取每个Excel文件的数据,并将它们合并成一个DataFrame。
merged_df = pd.concat([pd.read_excel(file, header=1) for file in excel_files], ignore_index=True)
按姓名分组并计算总得分和总积分
使用groupby和agg函数按姓名分组,并计算每个人的月度得分总和和积分总和。
grouped_df = merged_df.groupby('姓名').agg({'月度得分': 'sum', '积分': 'sum'}).reset_index()
重命名列名
为了更好地理解数据,我们将列名进行重命名。
grouped_df.rename(columns={'月度得分': '总得分', '积分': '总积分'}, inplace=True)
计算总排名
根据总积分计算每个人的排名。
grouped_df['总排名'] = grouped_df['总积分'].rank(ascending=False, method='min')
根据总积分和总得分进行排序,并重置索引
我们根据总积分和总得分进行降序排序,并重置索引。
grouped_df = grouped_df.sort_values(by=['总积分', '总得分'], ascending=[False, False]).reset_index(drop=True)
将结果保存到一个新的Excel文件中
最后,我们将最终的结果保存到一个名为总积分及排名.xlsx的Excel文件中。
grouped_df.to_excel("总积分及排名.xlsx", index=False)
结论
通过上述步骤,我们成功地读取并合并了多个Excel文件的数据,按姓名计算了每个人的总得分和总积分,并生成了一个包含总排名的Excel文件。
完整代码如下:
# 导入必要的库
import pandas as pd
import glob
# 获取所有Excel文件的路径
excel_files = glob.glob("./样例数据/*.xlsx")
# 读取并合并所有Excel文件的数据
merged_df = pd.concat([pd.read_excel(file, header=1) for file in excel_files], ignore_index=True)
# 按姓名分组并计算总得分和总积分,使用groupby和agg函数按姓名分组,并计算每个人的月度得分总和和积分总和
grouped_df = merged_df.groupby('姓名').agg({'月度得分': 'sum', '积分': 'sum'}).reset_index()
# 重命名列名
grouped_df.rename(columns={'月度得分': '总得分', '积分': '总积分'}, inplace=True)
# 计算总排名
grouped_df['总排名'] = grouped_df['总积分'].rank(ascending=False, method='min')
# 根据总积分和总得分进行排序,并重置索引
grouped_df = grouped_df.sort_values(by=['总积分', '总得分'], ascending=[False, False]).reset_index(drop=True)
# 将结果保存到一个新的Excel文件中
grouped_df.to_excel("总积分及排名.xlsx", index=False)
相关推荐
- python入门到脱坑经典案例—清空列表
-
在Python中,清空列表是一个基础但重要的操作。clear()方法是最直接的方式,但还有其他方法也可以实现相同效果。以下是详细说明:1.使用clear()方法(Python3.3+推荐)...
- python中元组,列表,字典,集合删除项目方式的归纳
-
九三,君子终日乾乾,夕惕若,厉无咎。在使用python过程中会经常遇到这四种集合数据类型,今天就对这四种集合数据类型中删除项目的操作做个总结性的归纳。列表(List)是一种有序和可更改的集合。允许重复...
- Linux 下海量文件删除方法效率对比,最慢的竟然是 rm
-
Linux下海量文件删除方法效率对比,本次参赛选手一共6位,分别是:rm、find、findwithdelete、rsync、Python、Perl.首先建立50万个文件$testfor...
- 数据结构与算法——链式存储(链表)的插入及删除,
-
持续分享嵌入式技术,操作系统,算法,c语言/python等,欢迎小友关注支持上篇文章我们讲述了链表的基本概念及一些查找遍历的方法,本篇我们主要将一下链表的插入删除操作,以及采用堆栈方式如何创建链表。链...
- Python自动化:openpyxl写入数据,插入删除行列等基础操作
-
importopenpyxlwb=openpyxl.load_workbook("example1.xlsx")sh=wb['Sheet1']写入数据#...
- 在Linux下软件的安装与卸载(linux里的程序的安装与卸载命令)
-
通过apt安装/协助软件apt是AdvancedPackagingTool,是Linux下的一款安装包管理工具可以在终端中方便的安装/卸载/更新软件包命令使用格式:安装软件:sudoapt...
- Python 批量卸载关联包 pip-autoremove
-
pip工具在安装扩展包的时候会自动安装依赖的关联包,但是卸载时只删除单个包,无法卸载关联的包。pip-autoremove就是为了解决卸载关联包的问题。安装方法通过下面的命令安装:pipinsta...
- 用Python在Word文档中插入和删除文本框
-
在当今自动化办公需求日益增长的背景下,通过编程手段动态管理Word文档中的文本框元素已成为提升工作效率的关键技术路径。文本框作为文档排版中灵活的内容容器,既能承载多模态信息(如文字、图像),又可实现独...
- Python 从列表中删除值的多种实用方法详解
-
#Python从列表中删除值的多种实用方法详解在Python编程中,列表(List)是一种常用的数据结构,具有动态可变的特性。当我们需要从列表中删除元素时,根据不同的场景(如按值删除、按索引删除、...
- Python 中的前缀删除操作全指南(python删除前导0)
-
1.字符串前缀删除1.1使用内置方法Python提供了几种内置方法来处理字符串前缀的删除:#1.使用removeprefix()方法(Python3.9+)text="...
- 每天学点Python知识:如何删除空白
-
在Python中,删除空白可以分为几种不同的情况,常见的是针对字符串或列表中空白字符的处理。一、删除字符串中的空白1.删除字符串两端的空白(空格、\t、\n等)使用.strip()方法:s...
- Linux系统自带Python2&yum的卸载及重装
-
写在前面事情的起因是我昨天在测试Linux安装Python3的shell脚本时,需要卸载Python3重新安装一遍。但是通过如下命令卸载python3时,少写了个3,不小心将系统自带的python2也...
- 如何使用Python将多个excel文件数据快速汇总?
-
在数据分析和处理的过程中,Excel文件是我们经常会遇到的数据格式之一。本文将通过一个具体的示例,展示如何使用Python和Pandas库来读取、合并和处理多个Excel文件的数据,并最终生成一个包含...
- 【第三弹】用Python实现Excel的vlookup功能
-
今天继续用pandas实现Excel的vlookup功能,假设我们的2个表长成这样:我们希望把Sheet2的部门匹在Sheet1的最后一列。话不多说,先上代码:importpandasaspd...
- python中pandas读取excel单列及连续多列数据
-
案例:想获取test.xls中C列、H列以后(当H列后列数未知时)的所有数据。importpandasaspdfile_name=r'D:\test.xls'#表格绝对...
你 发表评论:
欢迎- 一周热门
- 最近发表
- 标签列表
-
- python计时 (73)
- python安装路径 (56)
- python类型转换 (93)
- python自定义函数 (53)
- python进度条 (67)
- python吧 (67)
- python字典遍历 (54)
- python的for循环 (65)
- python格式化字符串 (61)
- python串口编程 (60)
- python读取文件夹下所有文件 (59)
- java调用python脚本 (56)
- python操作mysql数据库 (66)
- python字典增加键值对 (53)
- python获取列表的长度 (64)
- python接口 (63)
- python调用函数 (57)
- python人脸识别 (54)
- python多态 (60)
- python命令行参数 (53)
- python匿名函数 (59)
- python打印九九乘法表 (65)
- python赋值 (62)
- python异常 (69)
- python元祖 (57)