https://index.zshipu.com/geek/tags/AUC/ Recent content in AUC on 知识铺的博客 Hugo -- gohugo.io zh-CN Tue, 15 Mar 2022 09:30:26 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E7%BA%BF%E4%B8%8B%E6%B6%A8%E7%BA%BF%E4%B8%8A%E8%B7%8C%E7%9A%84%E5%8E%9F%E5%9B%A0%E5%92%8C%E8%A7%A3%E5%86%B3%E5%8A%9E%E6%B3%95/ Tue, 15 Mar 2022 09:30:26 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E7%BA%BF%E4%B8%8B%E6%B6%A8%E7%BA%BF%E4%B8%8A%E8%B7%8C%E7%9A%84%E5%8E%9F%E5%9B%A0%E5%92%8C%E8%A7%A3%E5%86%B3%E5%8A%9E%E6%B3%95/ “ 这两年深度模型大火之后，各个团队都卯足了劲把网络规模做大做深，花了很大力气好不容易离线 auc 涨了不少，上线一看效果 ctr 和 cpm 反而下降。本文例举几种可能的原因和解决办法。 ” 作者：辛俊波 腾讯高级研究员 专注推荐/广告/深度学习原文链接： https://www.zhihu.com/question/32218407/answer/1172781649 1. 特征/数据出现穿越 一般就是使用了和 label 强相关的特征导致 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E4%B8%80%E6%96%87%E8%AE%A9%E4%BD%A0%E5%BD%BB%E5%BA%95%E7%90%86%E8%A7%A3%E5%87%86%E7%A1%AE%E7%8E%87%E7%B2%BE%E5%87%86%E7%8E%87%E5%8F%AC%E5%9B%9E%E7%8E%87%E7%9C%9F%E6%AD%A3%E7%8E%87%E5%81%87%E6%AD%A3%E7%8E%87/ Tue, 15 Mar 2022 09:08:39 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E4%B8%80%E6%96%87%E8%AE%A9%E4%BD%A0%E5%BD%BB%E5%BA%95%E7%90%86%E8%A7%A3%E5%87%86%E7%A1%AE%E7%8E%87%E7%B2%BE%E5%87%86%E7%8E%87%E5%8F%AC%E5%9B%9E%E7%8E%87%E7%9C%9F%E6%AD%A3%E7%8E%87%E5%81%87%E6%AD%A3%E7%8E%87/ ROC/AUC作为机器学习的评估指标非常重要，也是面试中经常出现的问题（80%都会问到）。其实，理解它并不是非常难，但是好多朋友都遇到了一个相同的问题，那就是： 每次看书的时候都很明白，但回过头就忘了，经常容易将概念弄混。 还有的朋友面试之前背下来了，但是一紧张大脑一片空白全忘了，导 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E6%A8%A1%E5%9E%8B%E8%AF%84%E4%BC%B0%E6%8C%87%E6%A0%87%E5%92%8C%E8%BF%99%E6%98%AF%E6%88%91%E7%9C%8B%E5%88%B0%E7%9A%84%E6%9C%80%E9%80%8F%E5%BD%BB%E7%9A%84%E8%AE%B2%E8%A7%A3/ Tue, 15 Mar 2022 09:05:40 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E6%A8%A1%E5%9E%8B%E8%AF%84%E4%BC%B0%E6%8C%87%E6%A0%87%E5%92%8C%E8%BF%99%E6%98%AF%E6%88%91%E7%9C%8B%E5%88%B0%E7%9A%84%E6%9C%80%E9%80%8F%E5%BD%BB%E7%9A%84%E8%AE%B2%E8%A7%A3/ AUC在机器学习领域中是一种模型评估指标。根据维基百科的定义，AUC(area under the curve)是ROC曲线下的面积。所以，在理解AUC之前，要先了解ROC是什么。而ROC的计算又需要借助混淆矩阵，因此，我们先从混淆矩阵开始谈起。 混淆矩阵 假设，我们有一个任务：给定一些患者的样本，构 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E6%8E%A8%E8%8D%90%E7%B3%BB%E7%BB%9F%E9%81%87%E4%B8%8A%E6%B7%B1%E5%BA%A6%E5%AD%A6%E4%B9%A0%E4%B9%9D%E8%AF%84%E4%BB%B7%E6%8C%87%E6%A0%87%E5%8E%9F%E7%90%86%E5%8F%8A%E5%AE%9E%E8%B7%B5/ Tue, 15 Mar 2022 08:56:37 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E6%8E%A8%E8%8D%90%E7%B3%BB%E7%BB%9F%E9%81%87%E4%B8%8A%E6%B7%B1%E5%BA%A6%E5%AD%A6%E4%B9%A0%E4%B9%9D%E8%AF%84%E4%BB%B7%E6%8C%87%E6%A0%87%E5%8E%9F%E7%90%86%E5%8F%8A%E5%AE%9E%E8%B7%B5/ 作者：石晓文 ，中国人民大学信息学院在读研究生， 个人公众号：小小挖掘机（ID:wAIsjwj） 引言 CTR问题我们有两种角度去理解，一种是分类的角度，即将点击和未点击作为两种类别。另一种是回归的角度，将点击和未点击作为回归的值。不管是分类问题还是回归问题，一般在预估的时候都是得到一个 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%B9%B2%E8%B4%A7%E6%A8%A1%E5%9E%8B%E9%AA%8C%E8%AF%81%E7%9A%84%E5%B8%B8%E7%94%A8%E6%AD%A6%E5%99%A8%E5%92%8C/ Tue, 15 Mar 2022 07:35:53 +0800 https://index.zshipu.com/geek/post/%E4%BA%92%E8%81%94%E7%BD%91/%E5%B9%B2%E8%B4%A7%E6%A8%A1%E5%9E%8B%E9%AA%8C%E8%AF%81%E7%9A%84%E5%B8%B8%E7%94%A8%E6%AD%A6%E5%99%A8%E5%92%8C/ 每次做完二值分类模型（eg： Logistic Regression, Decision Tree, Neural Network etc.），我们经常会面对一连串的模型验证指标，最常用的有ROC&AUC、Gini、PS、K-S等等。那我们不禁会问： 1. 这个指标怎么定义？ 2. 怎么实现指标计算？ 3. 为什么用这个指标？ 4. 怎么用它评价模型？ 事实上，如果不明白这些评估指标的背