求最早的非参数ROC曲线方法的文献：
DeLong, E. R., DeLong, D. M., and Clarke-Pearson, D. L. (1988), “Comparing the Areas under Two or More Correlated Receiver Operating Characteristic Curves: A Nonparametric Approach,” Biometrics, 44, 837–845.

Dong D. Zhang1, Xia-Hua Zhou2, Daniel H. Freeman Jr.1, Jean L. Freeman3. （2002）,A non-parametric method for the comparison of partial areas under ROC curves and its application to large health care data sets. Stat Med. 2002 Mar 15;21(5):701-15.

对于如何在软件中实现ROC曲线是重要的，但我认为理解和认识ROC曲线的真正统计思路更重要。因为ROC曲线才刚刚接触，大概的思路已经了解，其中一个很迷惑的问题就是曲线下的面积的积分的计算（这个可以编程计算）、积分值的标准误（非参数法和Bi-negative exponential法）、两个或多个曲线的比较时，对应的统计检验统计量的构建及统计原理，及其对应的分布形式、两组ROC曲线比较时的曲线面积之差的标准误又是如何计算的、对于单个ROC曲线的最佳临界值点的确定有不下5种确定方法，各有什么优劣。

可能问题比较罗嗦，请见谅！