微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

python – pandas dataframe fillna()不工作?

我有一个数据集,我正在执行主成分分析(PCA).我尝试转换数据时收到ValueError消息.以下是一些代码

import pandas as pd
import numpy as np
import matplotlib as mpl
from sklearn.preprocessing import StandardScaler
from sklearn.decomposition import PCA as sklearnPCA

data = pd.read_csv('test.csv',header=0)
X = data.ix[:,0:1000].values   # values of 1000 predictor variables
Y = data.ix[:,1000].values     # values of binary outcome variable
sklearn_pca = sklearnPCA(n_components=2)
X_std = StandardScaler().fit_transform(X)

在这里,我收到以下错误消息:

ValueError: Input contains NaN, infinity or a value too large for dtype('float64').

然后我检查原始数据集是否有任何NaN值:

print(data.isnull().values.any())   # prints True
data.fillna(0)                      # replace NaN values with 0
print(data.isnull().values.any())   # prints True

我不明白为什么data.isnull().values.any()仍然打印True,即使我用Na替换NaN值.

解决方法:

有两种方法可以实现,尝试替换到位:

data.fillna(0, inplace=True)

或者,使用返回的对象:

data1 = data.fillna(0)

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 [email protected] 举报,一经查实,本站将立刻删除。

相关推荐