首页 > 其他 > 详细

elasticsearch 实现N抽二

时间:2017-08-12 09:50:34      阅读:224      评论:0      收藏:0      [点我收藏+]

在实际搜索中,如果商家信用良好,那有可能搜索的结果前几条都是该商家的,这样会引起其他商家的不满,因此需要干预一下排序,使每页一个商家最多显示两条商品。俗称N抽二,这在淘宝,天猫也是有此规则的。

在elasticseasrch中,对外暴露的接口不多,想了几天,最终采用elasticsearch 自带的聚合功能来实现,具体参见

https://www.elastic.co/guide/en/elasticsearch/reference/current/search-aggregations-metrics-scripted-metric-aggregation.html。


具体:

InitScriptFactory 初始化一个队列

MapScriptFactory 将商品ID, 商家ID, 分数放入队列

CombineFactory  对每个商家取top100,合并所有商家,再排序,并返回top1000

ReduceScriptFactory 对所有分片的数据进行排序,然后N抽二,默认20个桶,将所有数据往这个20个桶里放,如果发现这个桶已经满了,找下一个桶,否则,如果发现该桶内已有该商家的两个商品,也找下一个桶,否则可以放到这个桶内。对于那些没有放到任何桶内的商品,放到一个备用桶内,为后续的补位预留(有可能到最后有的桶没有满)。

这样就实现了N抽二的简单逻辑。当然这可能不是最优的方案,但是勉强能实现功能。


elasticsearch 实现N抽二

原文:http://12597095.blog.51cto.com/12587095/1955537

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!