脚本之家 服务器常用软件
快捷导航
您的位置：首页 → 脚本专栏 → python → Python批量循环读取Excel

利用Python批量循环读取Excel的技巧分享

 更新时间：2023年07月18日 11:22:06   作者：程序猿QAQ  
这篇文章主要为大家详细介绍了何用Python批量循环读取Excel，文中的示例代码讲解详细，对我们的学习或工作有一定的帮助，感兴趣的可以了解一下

在使用 Python 批量处理 Excel 时经常需要批量读取数据，常见的方式是结合glob模块，可以实现将当前文件夹下的所有csv批量读取，并且合并到一个大的DataFrame中

df_list = []
for file in glob.glob("*.csv"):
    df_list.append(pd.read_excel(file))
df = pd.concat(df_list)

但是这样要求读取的每一个csv文件格式、列名都是一样的。

如果想要将每一个csv独立的进行读取，可以使用 os 模块来循环遍历当前文件夹中的 CSV 文件，然后使用 Pandas 的 read_csv 函数来读取每个文件

import os
import pandas as pd
df_list = []
for file in os.listdir():
    if file.endswith(".csv"):
        df_list.append(pd.read_csv(file))

现在，df_list 中的每个元素都是一个 DataFrame，但是这样依旧不够完美，调用的时候依旧需要手动从列表中提取。

那如何自动读取当前文件夹下全部CSV数据，并将每个CSV赋给不同的变量

可以使用Python中的globals() 函数，它返回一个字典，其中包含当前程序的所有全局变量，例如我们可以使用如下语法来为字典中的某个键赋值：

globals()[key] = value

所以，使用下面的代码可以实现自动读取当前文件夹下全部CSV数据，并将每个CSV赋给不同的变量

df_list = []
for i, file in enumerate(os.listdir()):
    if file.endswith(".csv"):
        df_list.append(pd.read_csv(file))
for i, df in enumerate(df_list):
    globals()[f'df{i+1}'] = df

当然，类似的方法还可以应用于读取Excel的不同sheet，例如假设data.xlsx有10个sheet

df_list = [pd.read_excel("data.xlsx", sheet_name=i) for i in range(10)]
for i, df in enumerate(df_list):
    globals()[f"df{i+1}"] = df

如果你不清楚数据有多少Sheet，也可以使用 sheet_name=None，然后根据返回的字典自动读取

df_list = pd.read_excel("data.xlsx", sheet_name=None)
for i, (name, df) in enumerate(df_list.items()):
    globals()[f"df_{name}"] = df

以上就是利用 Python 读取多份 Excel 的小技巧

到此这篇关于利用Python批量循环读取Excel的技巧分享的文章就介绍到这了,更多相关Python批量循环读取Excel内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！

您可能感兴趣的文章:

相关文章

  • python装饰器相当于函数的调用方式

    python装饰器相当于函数的调用方式

    今天小编就为大家分享一篇python装饰器相当于函数的调用方式，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
    2019-12-12
  • Python爬虫之超级鹰验证码应用

    Python爬虫之超级鹰验证码应用

    众所周知python是一个很强大的语言,它拥有众多的库,今天我尝试了使用超级鹰第三方平台进行验证码的开发,需要的朋友可以参考下
    2022-08-08
  • python实现弹窗祝福效果

    python实现弹窗祝福效果

    这篇文章主要为大家详细介绍了python实现弹窗祝福效果，具有一定的参考价值，感兴趣的小伙伴们可以参考一下
    2019-04-04
  • Python的爬虫框架scrapy用21行代码写一个爬虫

    Python的爬虫框架scrapy用21行代码写一个爬虫

    最近在学习Python的爬虫框架scrapy，通过爬取线报网站后发现整个过程还是挺值得学习的，所以下面这篇文章主要就给大家介绍了Python的爬虫框架scrapy利用21行代码写一个爬虫的相关资料，需要的朋友可以参考借鉴，下面来一起看看吧。
    2017-04-04
  • 原生python实现knn分类算法

    原生python实现knn分类算法

    这篇文章主要介绍了原生python实现knn分类算法，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
    2019-10-10
  • Python中的标签编码和独热编码示例详解

    Python中的标签编码和独热编码示例详解

    标签编码是一种用于将分类列转换为数值列的技术，以便它们可以通过仅采用数值数据的机器学习模型进行拟合，这篇文章主要介绍了Python中的标签编码和独热编码,需要的朋友可以参考下
    2023-07-07
  • Python实现列表转Excel表格的第一列

    Python实现列表转Excel表格的第一列

    这篇文章主要为大家详细介绍了如何将Python中的列表转换为Excel表格的第一列,并通过案例和代码展示具体的操作步骤,希望可以帮助大家快速掌握这一技能
    2024-04-04
  • selenium+python自动化测试之使用webdriver操作浏览器的方法

    selenium+python自动化测试之使用webdriver操作浏览器的方法

    这篇文章主要介绍了selenium+python自动化测试之使用webdriver操作浏览器的方法，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
    2019-01-01
  • python config文件的读写操作示例

    python config文件的读写操作示例

    这篇文章主要介绍了python config文件的读写操作,结合简单示例形式分析了Python针对config文件的设置、读取、写入相关操作技巧,需要的朋友可以参考下
    2019-09-09
  • Python 删除整个文本中的空格,并实现按行显示

    Python 删除整个文本中的空格,并实现按行显示

    今天小编就为大家分享一篇Python 删除整个文本中的空格,并实现按行显示，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
    2018-07-07

最新评论