全部版块 我的主页
论坛 数据科学与人工智能 数据分析与数据科学 SAS专版
1521 3
2014-01-24
悬赏 200 个论坛币 已解决
图片截下来了,就最后判断准确率,他是按0.5上下判断的吗?还是按里面的Tau-a这个值为分割点判断的?最好能把这张表的参数都能解释下。。谢谢
QQ截图20140124193711.png

原图尺寸 2.6 KB

QQ截图20140124193711.png

最佳答案

gaotao0727 查看完整内容

这使用“观测配对”来评估模型。 观测配对是从数据集所有的目标事件中取一个观测数据、从所有的非目标事件中取一个观测数据,构成一对观测。 n个目标事件 N-n个非目标事件(N为总观测数) 存在n*(N-n)=P种观测配对组合,即pairs 如下几个定义: 协调配对:从目标事件中抽取的观测的模型预测值 > 从非目标事件中抽取的观测的模型预测值 不协调配对:从目标事件中抽取的观测的模型预测值 < 从非目标事件中抽取的观测的模型预测 ...
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

全部回复
2014-1-24 19:40:13
这使用“观测配对”来评估模型。
观测配对是从数据集所有的目标事件中取一个观测数据、从所有的非目标事件中取一个观测数据,构成一对观测。
n个目标事件
N-n个非目标事件(N为总观测数)
存在n*(N-n)=P种观测配对组合,即pairs
如下几个定义:
协调配对:从目标事件中抽取的观测的模型预测值 > 从非目标事件中抽取的观测的模型预测值
不协调配对:从目标事件中抽取的观测的模型预测值 < 从非目标事件中抽取的观测的模型预测值
平分配对:从目标事件中抽取的观测的模型预测值 = 从非目标事件中抽取的观测的模型预测值
协调配对组数/P=Concordant;不协调配对组数/P=Discordant;平分配对组数/P=Tied
Somers'D=Concordant-Discordant
Gamma=(Concordant-Discordant)/(Concordant+Discordant)
Tau-a=(Concordant-Discordant)*P/(0.5*N*(N-1))
C=0.5+(Concordant-Discordant)/2

总之,模型越好,协调配对的占比就越大,不协调配对的占比就越小,上述四种统计量也就越大。
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2014-1-25 20:00:36
顶顶。。大神呢。
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

2014-1-26 10:49:27
这个cutoff值的设置不是绝对的,因为要结合你预测的响应概率的分布。而且这模型预测出来的响应概率并不是真实的发生概率,只是在比较时它的响应概率越大越容易响应,这更有实际意义。
判断准确率最好还要结合ROC曲线与十等分位法评估。
二维码

扫码加我 拉你入群

请注明:姓名-公司-职位

以便审核进群资格,未注明则拒绝

相关推荐
栏目导航
热门文章
推荐文章

说点什么

分享

扫码加好友,拉您进群
各岗位、行业、专业交流群