全部版块 我的主页
论坛 数据科学与人工智能 数据分析与数据科学 SAS专版
3095 1
2013-08-12
我的数据有一些异常值,就是明显高于或者低于正常值。我想删去这些异常值,并用最近的上下2个正常值的均值插值填补。

附件列表
异常值1.jpg

原图尺寸 169.14 KB

异常值

异常值

二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

全部回复
2015-2-13 15:50:02
下面几种方法可以进行标记异常值
1)使用data 步

proc means data=train nopoint;

var variable;

output out=outlier p25=p25 p75=p75;  /*p25,p75分别是上四分位数,下四分位数*,outlier为离群值即异常值/

run;


data a;

set outlier;

IQR3=3*(p75-p25);/*四分位数差的三倍,即离群值的范围*/

call symputx('IQR3',IQR3);  /*将变量变成宏*/

call symputx('p75',p75);

call symputx('p25',p25);

run;


data outlier1;

set train;

if(&p25-&IQR3)<=&var<=(&p75+&IQR3) then outlier=0;

else outlier=1;    /*观测值在外界之内,将outlier标识为0,在之外,则标识为1*/

run;

2)当变量符合正态分布,可以使用Z记分法来标识

3)Z记分法的改进
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

相关推荐
栏目导航
热门文章
推荐文章

说点什么

分享

扫码加好友,拉您进群
各岗位、行业、专业交流群