sklearn-LinearRegression:无法将字符串转换为浮点数:' - '

时间:2017-09-07 09:36:01

标签: python pandas scikit-learn valueerror

我正在尝试使用sklearn中的LinearRegression,我得到了一个'无法将字符串转换为浮动'。数据框的所有列都是浮点数,输出y也是浮点数。我查看了其他帖子,建议转换为我已经完成的浮动。

<class 'pandas.core.frame.DataFrame'>
Int64Index: 789 entries, 158 to 684
Data columns (total 8 columns):
f1     789 non-null float64
f2     789 non-null float64
f3     789 non-null float64
f4     789 non-null float64
f5     789 non-null float64
f6     789 non-null float64
OFF    789 non-null uint8
ON     789 non-null uint8
dtypes: float64(6), uint8(2)
memory usage: 44.7 KB

type(y_train)
pandas.core.series.Series
type(y_train[0])
float

from sklearn.model_selection import train_test_split
X_train,X_test,y_train,y_test=train_test_split(X,Y,random_state=0)
X_train.head()
from sklearn.linear_model import LinearRegression
linreg = LinearRegression().fit(X_train, y_train)

我得到的错误是

ValueError                                Traceback (most recent call last)
<ipython-input-282-c019320f8214> in <module>()
      6 X_train.head()
      7 from sklearn.linear_model import LinearRegression
----> 8 linreg = LinearRegression().fit(X_train, y_train)
510         n_jobs_ = self.n_jobs
    511         X, y = check_X_y(X, y, accept_sparse=['csr', 'csc', 'coo'],
--> 512                          y_numeric=True, multi_output=True)
    513 
    514         if sample_weight is not None and np.atleast_1d(sample_weight).ndim > 1:

 527         _assert_all_finite(y)
    528     if y_numeric and y.dtype.kind == 'O':
--> 529         y = y.astype(np.float64)
    530 
    531     check_consistent_length(X, y)

ValueError: could not convert string to float: '--'

请帮忙。

2 个答案:

答案 0 :(得分:5)

快速解决方案将涉及使用pd.to_numeric将数据可能包含的任何字符串转换为数值。如果它们与转换不兼容,它们将减少到NaN s。

from sklearn.linear_model import LinearRegression

X = X.apply(pd.to_numeric, errors='coerce')
Y = Y.apply(pd.to_numeric, errors='coerce')

此外,您可以选择使用默认值填充这些值:

X.fillna(0, inplace=True)
Y.fillna(0, inplace=True)

将填充值替换为与您的问题相关的任何内容。我不建议删除这些行,因为您可能最终会从XY中删除不同的行,从而导致数据标签不匹配。

最后,拆分并调用您的分类器:

X_train, X_test, y_train, y_test = train_test_split(X, Y, random_state=0)
clf = LinearRegression().fit(X_train, y_train)

答案 1 :(得分:0)

我认为,在使用线性编码或线性编码后,使用标签编码或所有热编码将所有字符串列转换为binary(0,1)效果要好于线性回归。!