百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术资源 > 正文

Github 1.2k star,一个好用的 Python 库-pyexcel!

off999 2025-07-23 17:38 24 浏览 0 评论

大家好,今天为大家分享一个好用的 Python 库 - pyexcel。

Github地址:https://github.com/pyexcel/pyexcel


pyexcel是一个功能强大的Python第三方库,专门用于处理各种格式的电子表格文件。核心价值在于提供了统一的接口来读取、写入和操作Excel、CSV、ODS等多种电子表格格式,极大简化了数据处理工作流程。与传统的单一格式处理库不同,pyexcel采用了插件化架构,使开发者能够通过一套API处理所有主流的电子表格格式。不仅支持基础的数据读写操作,还提供了数据转换、格式化、筛选和聚合等高级功能。

安装

1、基础安装

pyexcel的安装过程需要考虑不同文件格式的支持需求。核心库提供基础功能,而特定格式的支持需要安装相应的插件。

# 安装核心库
pip install pyexcel

# 安装Excel格式支持
pip install pyexcel-xls pyexcel-xlsx

# 安装其他格式支持
pip install pyexcel-ods3 pyexcel-odsr

# 一次性安装所有格式支持
pip install pyexcel[all]

2、安装验证

完成安装后需要验证pyexcel的功能完整性和格式支持情况。验证过程包括检查核心功能、测试文件格式支持和确认插件加载状态。

import pyexcel
from pyexcel_io import plugins

# 检查支持的文件格式
# 检查支持的文件格式
print("支持的输入格式:")
for plugin in plugins.READERS.get_all_formats():
    print(f"  {plugin}")

print("\n支持的输出格式:")
for plugin in plugins.WRITERS.get_all_formats():
    print(f"  {plugin}")

# 创建简单测试数据
test_data = [["Name", "Age"], ["Alice", 25], ["Bob", 30]]
pyexcel.save_as(array=test_data, dest_file_name="test.xlsx")

# 验证读取功能
data = pyexcel.get_array(file_name="test.xlsx")
print("读取测试:", data)

运行结果:

支持的输入格式:
  xlsb
  csvz
  xlsx
  xlsm
  queryset
  xls
  tsvz
  fods
  ods
  html
  pdf
  tsv
  csv

支持的输出格式:
  xlsx
  csvz
  xlsm
  xls
  tsvz
  ods
  tsv
  csv
读取测试: [['Name', 'Age'], ['Alice', 25], ['Bob', 30]]

主要特性

  • 多格式支持:统一处理Excel、CSV、ODS、TSV等多种电子表格格式
  • 数据结构灵活:支持数组、字典、记录集等多种数据结构的转换
  • 内存优化:提供流式处理能力,高效处理大型数据文件
  • 数据变换:内置丰富的数据过滤、转换和格式化功能
  • 插件架构:模块化设计支持功能扩展和自定义处理器
  • 简洁API:统一的接口设计简化了不同格式间的数据转换

基本功能

1、文件读取操作

pyexcel的文件读取功能是其最基础也是最重要的特性之一。提供了多种数据读取方式,包括以数组形式读取整个工作表、以字典形式读取带标题的数据以及以记录集形式读取结构化数据。

import pyexcel

# 创建示例数据文件
sample_data = [
    ["产品名称", "单价", "库存", "类别"],
    ["笔记本电脑", 5999, 50, "电子产品"],
    ["办公椅", 899, 120, "办公用品"],
    ["咖啡机", 1299, 30, "家电"],
    ["书架", 599, 80, "家具"]
]
pyexcel.save_as(array=sample_data, dest_file_name="products.xlsx")

# 以数组形式读取数据
data_array = pyexcel.get_array(file_name="products.xlsx")
print("数组格式数据:")
for row in data_array:
    print(row)

# 以记录形式读取数据(第一行作为标题)
records = pyexcel.get_records(file_name="products.xlsx")
print("\n记录格式数据:")
for record in records:
    print(f"产品: {record['产品名称']}, 价格: {record['单价']}")

# 以字典形式读取数据
data_dict = pyexcel.get_dict(file_name="products.xlsx")
print("\n字典格式数据:")
print(data_dict)

运行结果:

数组格式数据:
['产品名称', '单价', '库存', '类别']
['笔记本电脑', 5999, 50, '电子产品']
['办公椅', 899, 120, '办公用品']
['咖啡机', 1299, 30, '家电']
['书架', 599, 80, '家具']

记录格式数据:
产品: 笔记本电脑, 价格: 5999
产品: 办公椅, 价格: 899
产品: 咖啡机, 价格: 1299
产品: 书架, 价格: 599

字典格式数据:
OrderedDict([('产品名称', ['笔记本电脑', '办公椅', '咖啡机', '书架']), ('单价', [5999, 899, 1299, 599]), ('库存', [50, 120, 30, 80]), ('类别', ['电子产品', '办公用品', '家电', '家具'])])

2、数据写入操作

pyexcel的数据写入功能同样灵活强大,支持将不同数据结构写入到各种格式的文件中。开发者可以将Python的列表、字典、记录集等数据结构直接保存为电子表格文件,无需进行复杂的格式转换。

import pyexcel
from datetime import datetime

# 准备不同结构的数据
array_data = [
    ["日期", "销售额", "订单数"],
    ["2025-07-01", 15600, 28],
    ["2025-07-02", 18900, 34],
    ["2025-07-03", 12400, 22]
]

dict_data = {
    "员工姓名": ["张三", "李四", "王五"],
    "部门": ["销售部", "技术部", "人事部"],
    "工资": [8000, 12000, 6500]
}

records_data = [
    {"客户名称": "ABC公司", "联系人": "张经理", "电话": "13800138000"},
    {"客户名称": "XYZ集团", "联系人": "李总监", "电话": "13900139000"},
    {"客户名称": "DEF企业", "联系人": "王主任", "电话": "13700137000"}
]

# 保存为不同格式
pyexcel.save_as(array=array_data, dest_file_name="sales_report.xlsx")
pyexcel.save_as(adict=dict_data, dest_file_name="employee_info.csv")
pyexcel.save_as(records=records_data, dest_file_name="customer_contacts.ods")

print("数据已成功保存到不同格式的文件中")

# 验证保存结果
sales_data = pyexcel.get_records(file_name="sales_report.xlsx")
print("销售报表数据验证:")
for record in sales_data:
    print(f"{record['日期']}: 销售额{record['销售额']}元")

运行结果:

数据已成功保存到不同格式的文件中
销售报表数据验证:
2025-07-01: 销售额15600元
2025-07-02: 销售额18900元
2025-07-03: 销售额12400元

3、格式转换操作

pyexcel的格式转换功能是其最具价值的特性之一,能够实现不同电子表格格式之间的无缝转换。通过简单的API调用,开发者可以将Excel文件转换为CSV格式,或者将多个CSV文件合并为一个Excel工作簿。

import pyexcel
import os

# 创建多个不同格式的示例文件
excel_data = [
    ["项目名称", "负责人", "状态", "预算"],
    ["网站重构", "张三", "进行中", 50000],
    ["移动应用", "李四", "已完成", 80000],
    ["数据分析", "王五", "计划中", 30000]
]

csv_data = [
    ["供应商", "产品", "价格"],
    ["供应商A", "原材料1", 1200],
    ["供应商B", "原材料2", 1500],
    ["供应商C", "原材料3", 900]
]

# 保存初始文件
pyexcel.save_as(array=excel_data, dest_file_name="projects.xlsx")
pyexcel.save_as(array=csv_data, dest_file_name="suppliers.csv")

# Excel转CSV
pyexcel.save_as(file_name="projects.xlsx", dest_file_name="projects_converted.csv")

# CSV转Excel
pyexcel.save_as(file_name="suppliers.csv", dest_file_name="suppliers_converted.xlsx")

# 批量转换多个文件
source_files = ["projects.xlsx", "suppliers.csv"]
for file_name in source_files:
    base_name = os.path.splitext(file_name)[0]
    if file_name.endswith('.xlsx'):
        pyexcel.save_as(file_name=file_name, dest_file_name=f"{base_name}_to_csv.csv")
    elif file_name.endswith('.csv'):
        pyexcel.save_as(file_name=file_name, dest_file_name=f"{base_name}_to_excel.xlsx")

print("格式转换完成,生成了以下文件:")
for file in os.listdir('.'):
    if file.endswith(('.xlsx', '.csv')) and ('converted'in file or'to_'in file):
        print(f"- {file}")

运行结果:

格式转换完成,生成了以下文件:
- projects_converted.csv
- suppliers_converted.xlsx
- suppliers_to_excel.xlsx
- projects_to_csv.csv

高级功能

1、数据过滤和变换

pyexcel提供了强大的数据过滤和变换功能,允许开发者在读取数据的同时进行预处理操作。包括行列过滤、数据类型转换、条件筛选和自定义变换函数等。

import pyexcel

# 创建包含多种数据类型的示例文件
mixed_data = [
    ["员工ID", "姓名", "年龄", "工资", "入职日期", "部门"],
    ["E001", "张三", "28", "8500.50", "2022-03-15", "销售部"],
    ["E002", "李四", "32", "12000.00", "2021-08-20", "技术部"],
    ["E003", "王五", "26", "6800.75", "2023-01-10", "人事部"],
    ["E004", "赵六", "35", "15000.00", "2020-05-30", "技术部"],
    ["E005", "钱七", "29", "9200.25", "2022-11-05", "销售部"]
]

pyexcel.save_as(array=mixed_data, dest_file_name="employees.xlsx")

# 定义数据转换函数
def convert_salary(value):
    try:
        return float(value)
    except ValueError:
        return 0.0

def convert_age(value):
    try:
        return int(value)
    except ValueError:
        return 0

# 读取数据
sheet = pyexcel.get_sheet(file_name="employees.xlsx", name_columns_by_row=0)

# 获取列名和对应的索引
header = sheet.colnames
try:
    dept_index = header.index("部门")
    name_index = header.index("姓名")
    age_index = header.index("年龄")
    salary_index = header.index("工资")
except ValueError as e:
    print(f"错误: 缺少必要的列 - {e}")
    print("可用列:", header)
    exit()

# 转换数据
for row in sheet:
    row[age_index] = convert_age(row[age_index])
    row[salary_index] = convert_salary(row[salary_index])

# 过滤技术部员工
tech_employees = [row for row in sheet if row[dept_index] == "技术部"]

print("\n技术部员工信息:")
for emp in tech_employees:
    print(f"姓名: {emp[name_index]}, 年龄: {emp[age_index]}, 工资: {emp[salary_index]:.2f}")

# 计算平均工资 (跳过标题行)
salaries = [row[salary_index] for row in sheet]
average_salary = sum(salaries) / len(salaries) if salaries else 0
print(f"\n平均工资: {average_salary:.2f}")

运行结果:

技术部员工信息:
姓名: 李四, 年龄: 32, 工资: 12000.00
姓名: 赵六, 年龄: 35, 工资: 15000.00

平均工资: 10300.30

2、多工作表处理

对于包含多个工作表的Excel文件,pyexcel提供了专门的处理接口。开发者可以访问、修改和管理工作簿中的所有工作表,实现复杂的多表数据操作。

import pyexcel

# 创建多工作表数据
sales_q1 = [
    ["月份", "销售额", "利润"],
    ["1月", 150000, 25000],
    ["2月", 180000, 32000],
    ["3月", 200000, 38000]
]

sales_q2 = [
    ["月份", "销售额", "利润"],
    ["4月", 220000, 42000],
    ["5月", 190000, 35000],
    ["6月", 250000, 48000]
]

inventory_data = [
    ["产品", "库存", "成本"],
    ["产品A", 500, 25],
    ["产品B", 300, 40],
    ["产品C", 800, 15]
]

# 创建多工作表工作簿
book_dict = {
    "第一季度销售": sales_q1,
    "第二季度销售": sales_q2,
    "库存信息": inventory_data
}

pyexcel.save_book_as(bookdict=book_dict, dest_file_name="business_report.xlsx")

# 读取多工作表数据
book = pyexcel.get_book(file_name="business_report.xlsx")

print("工作簿包含的工作表:")
for sheet_name in book.sheet_names():
    print(f"- {sheet_name}")

# 访问特定工作表
q1_sheet = book["第一季度销售"]
print(f"\n第一季度销售数据:")
for row in q1_sheet.rows():
    print(row)

# 合并季度数据
combined_sales = [["月份", "销售额", "利润"]]
for sheet_name in ["第一季度销售", "第二季度销售"]:
    sheet_data = book[sheet_name].rows()
    next(sheet_data)  # 跳过标题行
    combined_sales.extend(list(sheet_data))

# 保存合并后的数据
pyexcel.save_as(array=combined_sales, dest_file_name="annual_sales.xlsx")

# 计算全年总计
total_sales = sum(row[1] for row in combined_sales[1:])
total_profit = sum(row[2] for row in combined_sales[1:])
print(f"\n全年销售总额: {total_sales}")
print(f"全年利润总额: {total_profit}")

运行结果:

工作簿包含的工作表:
- 库存信息
- 第一季度销售
- 第二季度销售

第一季度销售数据:
['月份', '销售额', '利润']
['1月', 150000, 25000]
['2月', 180000, 32000]
['3月', 200000, 38000]

全年销售总额: 1190000
全年利润总额: 220000

总结

pyexcel作为Python电子表格处理的专业工具,通过统一的API接口和插件化架构,有效解决了多格式文件处理的复杂性问题。该库的核心价值在于简化数据操作流程,使开发者能够专注于业务逻辑实现。其丰富的功能特性涵盖了从基础读写到高级数据处理的全方位需求,在财务自动化、数据迁移和业务分析等领域表现出色。pyexcel的设计理念强调易用性与功能性的平衡,为Python开发者提供了可靠的电子表格数据处理解决方案。

相关推荐

apisix动态修改路由的原理_动态路由协议rip的配置

ApacheAPISIX能够实现动态修改路由(DynamicRouting)的核心原理,是它将传统的静态Nginx配置彻底解耦,通过中心化配置存储(如etcd)+OpenRest...

使用 Docker 部署 OpenResty Manager 搭建可视化反向代理系统

在之前的文章中,xiaoz推荐过可视化Nginx反向代理工具NginxProxyManager,最近xiaoz还发现一款功能更加强大,界面更加漂亮的OpenRestyManager,完全可以替代...

OpenResty 入门指南:从基础到动态路由实战

一、引言1.1OpenResty简介OpenResty是一款基于Nginx的高性能Web平台,通过集成Lua脚本和丰富的模块,将Nginx从静态反向代理转变为可动态编程的应用平台...

OpenResty 的 Lua 动态能力_openresty 动态upstream

OpenResty的Lua动态能力是其最核心的优势,它将LuaJIT嵌入到Nginx的每一个请求处理阶段,使得开发者可以用Lua脚本动态控制请求的生命周期,而无需重新编译或rel...

LVS和Nginx_lvs和nginx的区别

LVS(LinuxVirtualServer)和Nginx都是常用的负载均衡解决方案,广泛应用于大型网站和分布式系统中,以提高系统的性能、可用性和可扩展性。一、基本概念1.LVS(Linux...

外网连接到内网服务器需要端口映射吗,如何操作?

外网访问内网服务器通常需要端口映射(或内网穿透),这是跨越公网与私网边界的关键技术。操作方式取决于网络环境,以下分场景详解。一、端口映射的核心原理内网服务器位于私有IP地址段(如192.168.x.x...

Nginx如何解决C10K问题(1万个并发连接)?

关注△mikechen△,十余年BAT架构经验倾囊相授!大家好,我是mikechen。Nginx是大型架构的必备中间件,下面我就全面来详解NginxC10k问题@mikechen文章来源:mikec...

炸场!Spring Boot 9 大内置过滤器实战手册:从坑到神

炸场!SpringBoot9大内置过滤器实战手册:从坑到神在Java开发圈摸爬滚打十年,见过太多团队重复造轮子——明明SpringBoot自带的过滤器就能解决的问题,偏偏要手写几十...

WordPress和Typecho xmlrpc漏洞_wordpress主题漏洞

一般大家都关注WordPress,毕竟用户量巨大,而国内的Typecho作为轻量级的博客系统就关注的人并不多。Typecho有很多借鉴WordPress的,包括兼容的xmlrpc接口,而WordPre...

Linux Shell 入门教程(六):重定向、管道与命令替换

在前几篇中,我们学习了函数、流程控制等Shell编程的基础内容。现在我们来探索更高级的功能:如何控制数据流向、将命令链接在一起、让命令间通信变得可能。一、输入输出重定向(>、>>...

Nginx的location匹配规则,90%的人都没完全搞懂,一张图让你秒懂

刚配完nginx网站就崩了?运维和开发都头疼的location匹配规则优先级,弄错顺序直接导致500错误。核心在于nginx处理location时顺序严格:先精确匹配=,然后前缀匹配^~,接着按顺序正...

liunx服务器查看故障命令有那些?_linux查看服务器性能命令

在Linux服务器上排查故障时,需要使用一系列命令来检查系统状态、日志文件、资源利用情况以及网络状况。以下是常用的故障排查命令,按照不同场景分类说明。1.系统资源相关命令1.1查看CPU使...

服务器被入侵的常见迹象有哪些?_服务器入侵可以被完全操纵吗

服务器被入侵可能会导致数据泄露、服务异常或完全失控。及时发现入侵迹象能够帮助你尽早采取措施,减少损失。以下是服务器被入侵的常见迹象以及相关的分析与处理建议。1.服务器被入侵的常见迹象1.1系统性能...

前端错误可观测最佳实践_前端错误提示

场景解析对于前端项目,生产环境的代码通常经过压缩、混淆和打包处理,当代码在运行过程中产生错误时,通常难以还原原始代码从而定位问题,对于深度混淆尤其如此,因此Mozilla自2011年开始发起并...

8个能让你的Kubernetes集群“瞬间崩溃”的配置错误

错误一:livenessProbe探针“自杀式”配置——30秒内让Pod重启20次现象:Pod状态在Running→Terminating→CrashLoopBackOff之间循环,重启间隔仅...

取消回复欢迎 发表评论: