python出現(xiàn)nan的解決方法

小編給大家分享一下python出現(xiàn)nan的解決方法，希望大家閱讀完這篇文章后大所收獲，下面讓我們一起去探討方法吧！

很多數(shù)據(jù)不可避免的會遺失掉，或者采集的時候采集對象不愿意透露，這就造成了很多NaN（Not a Number）的出現(xiàn)。這些NaN會造成大部分模型運行出錯，所以對NaN的處理很有必要。

解決方法：

1、簡單粗暴地去掉

1）有如下dataframe，先用df.isnull().sum()檢查下哪一列有多少NaN:

import pandas as pd
df = pd.DataFrame({'a':[None,1,2,3],'b':[4,None,None,6],'c':[1,2,1,2],'d':[7,7,9,2]})
print (df)
print (df.isnull().sum())

輸出：

2）將含有NaN的列(columns)去掉:

data_without_NaN =df.dropna(axis=1)
print (data_without_NaN)

輸出：

2、遺失值插補法

很多時候直接刪掉列會損失很多有價值的數(shù)據(jù)，不利于模型的訓(xùn)練。

所以可以考慮將NaN替換成某些數(shù)，顯然不能隨隨便便替換，有人喜歡替換成0，往往會畫蛇添足。

譬如調(diào)查工資收入與學(xué)歷高低的關(guān)系，有的人不想透露工資水平，但如果給這些NaN設(shè)置為0很顯然會失真。所以Python有個Imputation（插補）的方法。代碼如下：

from sklearn.preprocessing import Imputer
my_imputer = Imputer()
data_imputed = my_imputer.fit_transform(df)
print (type(data_imputed))
# array轉(zhuǎn)換成df
df_data_imputed = pd.DataFrame(data_imputed,columns=df.columns)
print (df_data_imputed)

輸出：

可以看出，這里大概是用平均值進行了替換。

看完了這篇文章，相信你對python出現(xiàn)nan的解決方法有了一定的了解，想了解更多相關(guān)知識，歡迎關(guān)注億速云行業(yè)資訊頻道，感謝各位的閱讀！