这几天看论文,看到了一个评价指标:AUC。之前面对的都是mAP,或者TP/FP这种,对AUC没有太深的了解,就趁这个机会巩固一下关于AUC的相关内容。首先来看一张图:

这个就是大名鼎鼎的ROC曲线,而AUC就是这个曲线与X轴的面积。首先结论就是:AUC值越大越好,曲线越靠近左上角越好。然后来具体说一下这个曲线代表的含义。
首先说一下横纵坐标。横坐标是FPR,就是预测为正样本实际为负样本的个数占所有负样本的比例。而TPR为:预测为正样本实际也为正样本的个数占所有正样本的比例。这里有个判定,就是怎样才算正样本,怎样才算负样本。这个判定值就是阈值。大于这个阈值的,我们无脑认为它就是正样本,小于这个值的,我们认为它是负样本。给定这样一个阈值,我们就可以得到一对点(FPR, TPR),当我们给定不同的阈值时,由于判定条件改变,相应预测的正负样本的数量就会改变,(FPR, TPR)也会跟着改变,就这样,我们将阈值从最小到最大进行调节,就会得到所有的(FPR, TPR)点对。根据这些点对,我们就可以画出这个ROC曲线了。
为什么说这个ROC曲线越靠近左上角越好呢,因为纵坐标是TPR,我们总是希望结果中正确的样本个数所占的比例尽可能的高,横坐标是FPR,即预测结果中,负样本的个数尽可能的低。
再来看一下图中的这几条线,现在我们知道了,红色线的表现要好于蓝色线,而那条黑色线代表的是随机猜测的基准。如果我们得到的ROC曲线低于图中的黑色部分,那就代表我们这个模型的预测准确率还不如随机猜测的准确率高,那也就没什么意义了。




最新评论
博主好,路过留言交流一下~我在做源头中转 Twinkle Model(利益相关):GPT 1折、国模 1折(GLM/DeepSeek/Kimi)、满血 Claude,低价稳定。价格全在模型广场 https://big-model.smart-agi.com/model-plaza ,有兴趣可以看看。
博主分享的 Surge 增强模式接管应用分流思路很赞!确实,系统大版本升级后,老牌 Proxifier 由于底层驱动兼容性问题经常莫名崩溃。在 Mac 上有 Surge 这种神器接管,但是在 Windows 平台上,很多人又很难找到兼顾‘轻量分流+稳定不崩溃’的工具:ProxiFyre 依赖 WireSock 内核驱动容易蓝屏且纯命令行,开 TUN 虚拟网卡又会把开发网段和公司 VPN 改乱。 如果是 Windows 用户寻找 Proxifier 替代品,非常推荐关注 Ghost Proxifier Pro: - 纯用户态 Winsock API Hook:完全免安装内核驱动和虚拟网卡,零蓝屏隐患,不改动系统默认网关与路由表; - 智能递归子进程树:很多现代客户端(如播放器、流媒体套件、IDE)会派生子进程,它能自动递归识别并接管流量,杜绝漏代理; - 现代 Fluent 图形界面:直接拖入目标 exe 即可一键绑定 SOCKS5/HTTP 节点,比老版配置规则直观很多。 注:该工具为非开源的独立客户端软件。 - 官网主页:https://ghostproxifier.com - 项目发布:https://github.com/liliBestCoder/ghost-proxifier-pro
曾经最爱之一,还有emlog,zblog
感谢分享经验,谢谢站长!!已收藏
牛牛牛
同样
站长您好,亚马逊云咨询推广资源,望建立联系,可邮件,谢谢。
换友情链接吗?