关于match的offline评测的问题
来源：6-1 个性化召回算法总结与评估方法的介绍。
慕虎5084663
2019-03-15
老师您的意思是，是将新版的召回item和在行版的召回item做一个交集作为分母，计算ctr。但这种方式，不就是两个规则/模型的融合吗，找到更容易被点击的item？这样的话，就只是在召回量级减少的情况下，很大可能ctr会提升。但如果还是原有量级不变的情况下，就没有办法判断新版召回对应的ctr会如何变化了吧。
写回答
1回答
-
对 你说的没错 ，因为因为新增召回如果在减少推荐item的量级情况下依然不能表现的更好 就说明肯定不行。如果表现的好，就可以达到online小流量abtest 来看真实线上收益。如果您觉着课程有帮助 请给课程一个评价 谢谢。
012019-03-15
相似问题