求handle missing data的好方法 - 未名空间MITBBS历史存档

国际科技财经博客移民网络热点娱乐民生时事公众号

Redian新闻

>未名空间

>DataSciences - 数据科学

求handle missing data的好方法

求handle missing data的好方法# DataSciences - 数据科学

m*y2014-11-26 08:11

1 楼

初学ML，感觉很多data set处理起来的时候都要考虑如何handle missing attribute，
想问问版上大牛一般是怎么处理的，有没有好的paper或文档推荐？我查到的方法：1
）fill with mean/median 2) build model to predict missing value, like KNN or
any predictive modeling method, 3) 想不出来了。。希望版上牛牛多多回复。

D*n2014-11-26 08:11

2 楼

no good methods.

1
or

【在 m*****y 的大作中提到】

: 初学ML，感觉很多data set处理起来的时候都要考虑如何handle missing attribute，
: 想问问版上大牛一般是怎么处理的，有没有好的paper或文档推荐？我查到的方法：1
: ）fill with mean/median 2) build model to predict missing value, like KNN or
: any predictive modeling method, 3) 想不出来了。。希望版上牛牛多多回复。

d*e2014-11-26 08:11

3 楼

嗯，都是具体问题具体分析。

【在 D******n 的大作中提到】

: no good methods.
:
: 1
: or

T*u2014-11-26 08:11

4 楼

missing data的原因是什么，有什么Impact

G*n2014-11-26 08:11

5 楼

这个问题很难，没什么好的办法吧，如果miss太多直接把1行扔掉

r*t2014-11-26 08:11

6 楼

missing rate太大基本没有好方法，很少的话可以直接listwise deletion，有一些而
且考虑estimation的话，可以考虑multiple imputation和full information maximum
likelihood estimation。当然这都是统计模型下的。