第九章计算余弦相似度时报索引出界了

来源：9-4 离线推荐：基于物品角度召回策略筛选候选集（上）

谢亮3663956

2020-09-23

图片描述
计算物品相似度时报索引出界，没改这一部分代码，想问问老师一下怎么解决

写回答

1回答

谢亮3663956

提问者

2020-09-24

这个问题我把mapPartitions中的数值设小后就没有报错了（原先是4096，我改成20就没有报错了），我想问一下这个数值有什么设定规律吗？

val itemFactors = _itemFactors.as[(Int,Array[Float])]
.mapPartitions(_.grouped(20)) //优化减少内存的使用

Spark2.x+协同过滤算法，开发企业级个性化推荐系统

一门既讲算法原理又有完整的推荐系统架构的全能课

330 学习 · 91 问题

相似问题

回答 1

回答 1

回答 3

回答 1