解决pandas无法读取csv文件数据的问题
更新时间：2025年07月30日 14:34:31 作者：shengjk1
本文讲述作者用Pandas读取CSV文件时因参数设置不当导致数据错位,通过调整delimiter和on_bad_lines参数最终解决问题,并强调正确参数配置对数据处理的重要性
一、前言
我有一个 csv 文件，要做数据分析，可是用 pandas 死活读不出来，差点搞崩溃了。
但打开 csv 文件，发现里面的内容啥的还是蛮正常的
并且以 逗号 分割
二、问题复现
1. 问题
import pandas as pd
df=pd.read_csv('./data/test.csv')
df
2. 通过 on_bad_lines=‘warn’ 跳过异常数据
不报错了，但发现数据错位了。
3. 没办法了 delimiter=‘\t’
数据总算对了，看着是没有错位
4. 添加 delimiter后，按列无法取值
仔细想想也应该这样，因为本来分割符就是 ‘,’
5. 没有办法回归最原始的方式
with open(f'{file_path}', newline='',encoding='utf-8') as csvfile:
reader = csv.DictReader(csvfile)
三、总结
通过本文可见，正确的参数设置对于使用Pandas读取CSV文件至关重要。在处理异常数据时，合适的参数选择和方法应用能有效解决数据错位和取值异常等问题，确保数据的准确性和完整性。
以上为个人经验，希望能给大家一个参考，也希望大家多多支持脚本之家。
相关文章
本文主要介绍了python 字符串模糊匹配Fuzzywuzzy的实现，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2022-07-07
这篇文章主要介绍了Python pip配置国内源的方法，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧2020-02-02
日常工作中我们经常会用到pdf格式的文件,大多数情况下是浏览或者编辑pdf信息,但有时候需要提取pdf中的文本,这篇文章主要给大家总结介绍了关于Python从PDF中提取文本的方法效率,需要的朋友可以参考下2023-09-09
这篇文章主要为大家详细介绍了如何利用Python制作一个加强版烟花景，文中的示例代码讲解详细，对我们学习Python有一定帮助，需要的可以参考一下2022-02-02
在本篇文章里小编给各位整理了关于python设置环境变量的作用和实例内容知识点，需要的朋友们学习参考下。2019-07-07
这篇文章主要介绍了简单了解python协程的相关知识,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2019-08-08
浅谈Python 字符串格式化输出(format/printf)
下面小编就为大家带来一篇浅谈Python 字符串格式化输出(format/printf)。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧2016-07-07
这篇文章主要介绍了python多线程并发测试过程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教2025-05-05
这篇文章主要介绍了python 通⽤爬⾍和聚焦爬⾍的相关资料，帮助大家更好的了解和使用python 爬虫，感兴趣的朋友可以了解下2020-09-09
下面小编就为大家带来一篇python 采集中文乱码问题的完美解决方法。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧2016-09-09
最新评论