图像由 Midjourney 生成
·发布于 Towards Data Science ·7 分钟阅读·2024 年 8 月 31 日
--
如果我问你如何评估回归问题,你可能会列举出很多评估指标,比如 MSE、MAE、RMSE、MAPE 等。这些指标的共同点是它们都关注点预测。
当我们想要训练模型关注预测分布而不是单一的点时,情况会有所不同。在这种情况下,我们需要使用不同的指标,而这些指标在数据科学博客文章中不常见。
上次,我研究了分位数损失(即弹球损失)。这次,我将带你了解另一种用于评估概率预测的指标——连续排名概率分数(CRPS)。
第一个概念很简单,但我们仍然需要确保我们在同一页面上。概率预测提供了可能结果的分布。例如,点预测可能会预测明天的温度准确为 23°C,而概率模型可能会预测明天温度有 70% 的概率会在 20°C 到 25°C 之间。