0

0

Python中如何操作Excel文件?如何处理大型Excel文件?

尼克

尼克

发布时间:2025-06-29 21:39:07

|

352人浏览过

|

来源于php中文网

原创

处理python操作excel的核心是使用第三方库,如openpyxl、pandas等。1. openpyxl适合创建和修改.xlsx文件,支持流式读取以降低内存占用;2. pandas适合数据分析,通过chunksize分块读取大型文件提升效率;3. 优化读取速度可指定列、优化数据类型并使用ssd硬件;4. 中文乱码问题可通过读写时指定编码(如utf-8或gbk)解决。对于不同需求应选择合适的库:注重格式控制用openpyxl,侧重数据分析则选pandas。

Python中如何操作Excel文件?如何处理大型Excel文件?

Python操作Excel,核心在于借助第三方库,比如openpyxlxlrd/xlwt(老版本,只支持.xls)以及pandas。处理大型Excel文件,就得考虑内存占用和效率,通常会采用流式读取或者分块处理。

Python中如何操作Excel文件?如何处理大型Excel文件?

解决方案

操作Excel,首推openpyxl,它支持.xlsx格式,功能也比较全面。

Python中如何操作Excel文件?如何处理大型Excel文件?
from openpyxl import load_workbook, Workbook

# 读取Excel文件
workbook = load_workbook(filename="example.xlsx")
sheet = workbook.active  # 获取当前活跃的sheet

# 访问单元格
cell_value = sheet["A1"].value
print(cell_value)

# 遍历行
for row in sheet.iter_rows(min_row=2, max_row=5, min_col=1, max_col=3, values_only=True):
    print(row) # 输出每一行的数据,以元组形式

# 写入Excel文件
workbook = Workbook()
sheet = workbook.active
sheet["A1"] = "Hello"
sheet.append(["World", 123]) # 追加一行数据
workbook.save(filename="output.xlsx")

pandas库更适合数据分析,读取速度快,操作灵活。

立即学习Python免费学习笔记(深入)”;

Python中如何操作Excel文件?如何处理大型Excel文件?
import pandas as pd

# 读取Excel文件
df = pd.read_excel("example.xlsx", sheet_name="Sheet1") # 指定sheet名称

# 打印前5行
print(df.head())

# 写入Excel文件
df.to_excel("output.xlsx", sheet_name="Sheet1", index=False) # 不写入索引

对于大型Excel文件,直接加载到内存可能会爆掉。可以采用以下策略:

  1. 分块读取(pandas: pandas可以分块读取,通过chunksize参数指定每次读取的行数。

    import pandas as pd
    
    chunk_size = 10000
    for chunk in pd.read_excel("large_file.xlsx", chunksize=chunk_size):
        # 处理每个chunk
        print(f"Processing chunk with {len(chunk)} rows")
        # 例如,将chunk写入新的文件
        chunk.to_csv("output.csv", mode='a', header=False, index=False)
  2. 流式读取(openpyxl: openpyxl提供了read_only模式,可以逐行读取,减少内存占用。

    赣极购物商城网店建站软件系统
    赣极购物商城网店建站软件系统

    大小仅1兆左右 ,足够轻便的商城系统; 易部署,上传空间即可用,安全,稳定; 容易操作,登陆后台就可设置装饰网站; 并且使用异步技术处理网站数据,表现更具美感。 前台呈现页面,兼容主流浏览器,DIV+CSS页面设计; 如果您有一定的网页设计基础,还可以进行简易的样式修改,二次开发, 发布新样式,调整网站结构,只需修改css目录中的css.css文件即可。 商城网站完全独立,网站源码随时可供您下载

    下载
    from openpyxl import load_workbook
    
    workbook = load_workbook(filename="large_file.xlsx", read_only=True)
    sheet = workbook.active
    
    for row in sheet.rows:
        row_values = [cell.value for cell in row]
        print(row_values)
        # 处理每一行的数据

如何选择合适的Python Excel库?

选择哪个库取决于你的需求:

  • openpyxl: 适合创建、修改Excel文件,功能全面,但处理大型文件效率稍逊。
  • xlrd/xlwt: 只支持.xls格式,功能较老,不推荐新项目使用。
  • pandas: 适合数据分析,读取速度快,操作灵活,但对格式的控制不如openpyxl。如果你的主要任务是处理数据,而不是美化Excel,pandas是首选。

如何优化大型Excel文件的读取速度?

除了使用流式读取和分块读取,还可以考虑以下优化措施:

  • 指定需要读取的列: 如果只需要Excel文件中的部分列,可以在读取时指定,减少不必要的数据加载。pandas可以通过usecols参数指定列。
  • 优化数据类型: pandas可以自动推断数据类型,但有时会出错。手动指定数据类型可以提高读取速度和减少内存占用。
  • 使用更高效的硬件: SSD比HDD读取速度更快,更大的内存可以减少磁盘IO。

如何解决Excel文件中的中文乱码问题?

Excel文件中的中文乱码通常是编码问题导致的。

  • 读取时指定编码: pandas读取Excel文件时,可以通过encoding参数指定编码,常用的编码有utf-8gbkgb2312等。

    import pandas as pd
    
    df = pd.read_excel("example.xlsx", encoding="gbk")
  • 写入时指定编码: 写入CSV文件时,也需要指定编码。

    df.to_csv("output.csv", encoding="utf-8")
  • 检查Excel文件本身的编码: 有时Excel文件本身的编码就存在问题,需要用Excel软件打开,另存为UTF-8编码的CSV文件,再用Python读取。

相关专题

更多
python开发工具
python开发工具

php中文网为大家提供各种python开发工具,好的开发工具,可帮助开发者攻克编程学习中的基础障碍,理解每一行源代码在程序执行时在计算机中的过程。php中文网还为大家带来python相关课程以及相关文章等内容,供大家免费下载使用。

717

2023.06.15

python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

627

2023.07.20

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

743

2023.07.25

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

617

2023.07.31

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

1236

2023.08.03

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

547

2023.08.04

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

575

2023.08.04

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

700

2023.08.11

php源码安装教程大全
php源码安装教程大全

本专题整合了php源码安装教程,阅读专题下面的文章了解更多详细内容。

74

2025.12.31

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 0.6万人学习

Django 教程
Django 教程

共28课时 | 2.6万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.0万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号