首页 > 其他 > 详细

【推荐系统篇】--推荐系统介绍和基本架构流程

时间:2018-03-26 11:48:44      阅读:334      评论:0      收藏:0      [点我收藏+]

一、前述

推荐系统是企业中常用的技术,所以系统的掌握推荐系统的知识是很有必要的。本专栏主要讲述手机APP下载的项目。

常用的推荐方法有两个,分别是基于物品的推荐和基于用户的推荐。

基于用户的推荐原理是:跟你喜好相似的人喜欢的东西你也很有可能喜欢(userBaseCF)。
基于物品的推荐原理是:跟你喜欢的东西类似的东西你也可能喜欢(itemBaseCF)。

我们这里用到的是itembaseCF,本质是依据特征找用户喜好规律。

二、协同过滤算法详述

技术分享图片

 

 结论:对于用户A,根据用户的历史偏好,这里只计算得出一个邻居用户C,然后将用户C喜欢的物品D推荐给用户A
技术分享图片

结论:基于用户的推荐(长虚线)---1和5比较相似,5买了104商品,所以把104推荐给用户1。
          基于物品的推荐(短虚线)---101物品和104物品比较相似,所以当用户买了101,把104也推荐给他。

三、lambda架构(所有推荐系统的父架构)

技术分享图片

 四、本文系统架构

lmbda架构(手机APP下载)

技术分享图片

解释:1.选用逻辑回归算法原因是用户要么下载,要么不下载。

          2.生成特征索引(实际上是一个文本文件)的原因是格式化测试数据,也是相当于降维,当一个userId进来时找到推荐服务,然后通过服务路由去查找HBase中的数据,并根据特征索引来取对应的特征,所以这一步相当于一个降维。

线上架构(测试集架构):

技术分享图片

关联特征:保存的是同现矩阵。

流程:核心思想(计算用户对所有APP(除去历史下载部分)的评分,按分值排序,然后取topn)

技术分享图片

问题:

技术分享图片

 

 五、需求分析(架构推荐方案)


         1、数据清洗(得到训练数据)

         2、算法建模(得到模型结果)
         3、模型使用(得到推荐结果)

         4、结果评估(推荐结果评估)

【推荐系统篇】--推荐系统介绍和基本架构流程

原文:https://www.cnblogs.com/LHWorldBlog/p/8642182.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!