pandas读取excel统计空值数量错误的解决方法
更新时间：2024年04月02日 11:07:21 作者：想当运维的程序猿
pd.read_excel()读取excel数据后,用pd.isnull().sum()统计空值数量不对,本文主要介绍了pandas读取excel统计空值数量错误的解决方法,感兴趣的可以了解一下
问题： pd.read_excel()读取excel数据后，用pd.isnull().sum()统计空值数量不对，代码如下
import pandas as pd
df = pd.read_excel('test.xlsx',dtype=str)
# 剔除空格
df = df.applymap(lambda x : str(x).strip())
print("b列为空的个数为"+ str(pd.isnull(df['b']).sum())) # 打印出来b列中为空的是0个
excel数据长这样，B2是一个空格，希望得到空值为2的结果
问题分析：
读取excel后的df是这样
使用applymap剔除空格后的df是这样
读取excel后的df的值（df.values）
使用applymap剔除空格后的df的值（df.values）
可以看到，在applymap方法处理后
值values的变化：一个空格变成了’’，之前的nan变成了’nan’（这里是字符串nan，当然不为空）
pd.isnull()只会统计NaN的数量，一个是字符串’‘，一个是字符串’nan’，因此都统计不到
解决： 将’'和’nan’全部替换为np.nan，isnull就可以统计到
import numpy as np
import pandas as pd
df = pd.read_excel('test.xlsx',dtype=str)
# 剔除空格
df = df.applymap(lambda x : str(x).strip())
df[df == ''] = np.nan
df[df == 'nan'] = np.nan
print("b列为空的个数为"+ str(pd.isnull(df['b']).sum())) # 打印出来b列中为空的是2个到此这篇关于pandas读取excel统计空值数量错误的解决方法的文章就介绍到这了,更多相关pandas读取excel空值内容请搜索脚本之家以前的文章或继续浏览下面的相关文章希望大家以后多多支持脚本之家！
相关文章
这篇文章主要介绍了Python统计文件中去重后uuid个数的方法,实例分析了Python正则匹配及字符串操作的相关技巧,需要的朋友可以参考下2015-07-07
python读取word文档,插入mysql数据库的示例代码
今天小编就为大家分享一篇python读取word文档,插入mysql数据库的示例代码，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2018-11-11
这篇文章主要介绍了解决安装Python的第三方库pandas报错问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教2023-08-08
下面小编就为大家带来一篇Python获取文件所在目录和文件名的方法。小编觉得挺不错的，现在就分享给大家，也给大家做个参考。一起跟随小编过来看看吧2017-01-01
这篇文章主要介绍了python 错误处理 assert详解，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2020-04-04
Python3爬虫爬取百姓网列表并保存为json功能示例【基于request、lxml和json模块】
这篇文章主要介绍了Python3爬虫爬取百姓网列表并保存为json功能,涉及Python基于request、lxml和json模块的Request请求与响应数据处理相关操作技巧,需要的朋友可以参考下2018-12-12
这篇文章主要介绍了Pyecharts地图显示不完成问题解决方案,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下2020-05-05
这篇文章主要介绍了python实现简单石头剪刀布游戏，相信大家在童年或者生活中都玩过石头剪刀布这个游戏，这个游戏需要两个及以上的人。而今天，网上也实现了石头剪刀布的游戏。通过初步学习python，也学会了如何编写这个游戏。下面一起来看看详细内容吧2021-10-10
Python 实现OpenCV格式和PIL.Image格式互转
今天小编就为大家分享一篇Python 实现OpenCV格式和PIL.Image格式互转，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧2020-01-01
本文主要介绍了opencv 傅里叶变换，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧<BR>2022-06-06
最新评论