tongchenkeji 发表于:2023-12-20 8:27:010次点击 已关注取消关注 关注 私信 机器学习PAIauc的计算这个样本空间是不是就不生效了啊?[阿里云] 暂停朗读为您朗读 机器学习PAI设置了task_space_indicator_label,但是在eval的时候,auc的计算这个样本空间是不是就不生效了啊?我看这个好像只用在loss处? 「点点赞赏,手留余香」 赞赏 还没有人赞赏,快来当第一个赞赏的人吧! 海报 阿里云# 人工智能平台 PAI1410# 机器学习深度学习1219
小周sirAM 2023-12-21 7:03:56 1 是的,task_space_indicator_label只在训练时用于区分不同的样本空间,而在评估时不起作用。在评估时,模型会使用测试集的真实标签进行计算,而不考虑样本空间的标签。因此,auc的计算仍然会基于测试集的真实标签和预测概率进行计算,与样本空间的标签无关。
xin在这AM 2023-12-21 7:03:56 2 你说得没错啊,这个 task_space_indicator_label 只在计算loss的时候生效,计算metric时不生效 ,此回答整理自钉群“【EasyRec】推荐算法交流群”
是的,task_space_indicator_label只在训练时用于区分不同的样本空间,而在评估时不起作用。在评估时,模型会使用测试集的真实标签进行计算,而不考虑样本空间的标签。因此,auc的计算仍然会基于测试集的真实标签和预测概率进行计算,与样本空间的标签无关。
你说得没错啊,这个 task_space_indicator_label 只在计算loss的时候生效,计算metric时不生效 ,此回答整理自钉群“【EasyRec】推荐算法交流群”