个性化推荐系统实践应用

个性化推荐已经成为现代人们生活的一部分， “猜你喜欢”、“相关阅读”你一定并不陌生。计算机如何做到对用户投其所好？ 企业在做个性化推荐时要如何精准把握用户兴趣？如何解决冷启动问题？如何避免推荐结果的单调与重复？ 近日，达观数据联合创始人于敬进行了《个性化推荐系统实践》的主题分享，深入浅出的讲解了个性化推荐的过程、难点及解决方法。

本文五大内容：

一、推荐系统概述

常见的推荐系统主要有以下三种场景：

1.个性化推荐 例如打开今日头条时最先看到一个推荐页面，这是一个FEED流，还有像电商网站有猜你喜欢的推荐位置。

2.相关推荐  通常文章或视频的下方会出现一个相关推荐，有的也叫“看了还看”、“买了还买”等。

3.热门推荐 很多会出现在首页的热点位置。

推荐系统其实对于用户来说有其核心的价值。比如：

• 帮用户便捷的筛选出感兴趣的内容

• 在用户面对陌生领域时提供参考意见

• 当用户需求不明确时，作用户的“贴心助手”

• 满足用户的好奇心，比如很多短视频的APP

当用户有这么多诉求时候，推荐系统做的事情是什么？

• 首先它基于用户的兴趣，根据用户的历史行为做兴趣的挖掘，把物品和用户的个性化偏好进行匹配。

• 然后通过推荐算法或者技术把信息进行过滤，解决用户的过载问题。

• 当用户有新的行为发生时，比如点击或者搜索之后，能及时进一步捕捉用户的兴趣。

• 选择合适的场景，个性化或者相关，或者热门，来给用户进行推荐。

对于企业来说，个性化带来的效果也非常显著。电商巨头亚马逊每年30%的收入来自个性化推荐；自2008 年起，推荐算法为 YouTube 每天增加了数十万小时的观看时长，每年视频点击量增幅都达到50% ；Linkedin通过propensitymodel提供机器学习，最终为公司带来了数十倍的持续稳定的增长；我们进入京东、淘宝app或者网页端，每个用户的首页展示都是依据行为偏好进行精准推荐。

什么是个性化推荐系统？

个性化推荐系统解决的是用户和内容中间的关联关系，它是二者之间的桥梁。 基于用户的兴趣偏好，把用户感兴趣的物品或者视频、资讯等推荐给用户，给用户带来沉浸式的体验，让用户感到一定的满足感，优化用户的体验。

推荐系统从它的初始来说主要是解决两大问题：信息过载和长尾问题。

信息过载是当用户面对大量信息时并不明确自己喜欢什么，但又确实有需求想看到喜欢的东西。从纷繁复杂的商品和内容中如何发现自己感兴趣的东西？对于用户来说是一种选择的困难。

另一方面来说，企业有新物品上线时，如何展示给喜欢它的用户？

根据达观数据服务的客户经验，我们发现物品没有曝光并不代表没有人喜欢它，而是没有在合适的时机曝光给对物品感兴趣的用户，推荐系统刚好能解决这方面的问题。

一方面系统基于大量的用户行为数据来分析挖掘用户的偏好；另外一方面，基于物品数据及物品自身的特点，把商品和用户的兴趣进行匹配，从而达到个性化推荐。用户可以找到自己感兴趣的东西，商家的一些商品或内容也能有更多曝光的机会。

推荐系统设计的目标主要有下面三个部分：

首先，功能要尽可能全面，刚才提到推荐个性化推荐、相关推荐和热门推荐，有些商家也包括一些混合推荐，一般在详情页里面下叫关联推荐，但有的产品会在关联推荐中放一个无限下拉的功能，这时候就要夹杂一部分个性化推荐在其中。  

其次是效果要精准，即推荐的东西一定是用户感兴趣的。另外推荐的结果要尽可能丰富，内容或物品有更多的曝光机会。 

第三是性能，当刷新一个页面的推荐结果，如果没有很快返回会带来很差的用户体验。从另一方面来说，我们的结果不一定是非常好的，但它绝对不能留白，就是无论怎么样推荐结果一定有返回，这是最基础的要求。 

在实际的推荐场景里，功能、效果、性能三者相辅相成、也彼此互相影响，很多时候要进行折中的考虑。

 二、搭建推荐系统的关键算法

1.达观数据推荐系统架构

上图是达观推荐的是总体架构。

达观数据有自己的运算平台、存储平台和传输平台。在此之上是组件层，很多推荐依赖于NLP做了进一步的分析挖掘。在此之上是模型层，模型有很多，比如用户画像就是对一个用户有全方位的刻画，同时也有物品画像，包括收益、点击、收藏，预估的收益，增长趋势等。 

模型之上是算法层，包括矩阵分解、协同过滤，深度学习算法也是达观的一部分，同时还有基于统计的模型，包括点击反馈、关联规则挖掘等，还有比较重要的是基于内容的推荐。 

算法层上面是组合层，单一的推荐算法有二三十种，基于单一的推荐算法会有机器学习的融合排序，基于不同业务场景会自适应选择一部分模型进行效果优化。 

组合层上面是应用层，主要提供四种服务：

1.   个性化推荐，这是千人千面的推荐结果；

2.   相关推荐是以物推物，当看到商品、视频或文章会有一个关联的推荐；

3.   热门推荐，其实是热点分析；

4.   推荐理由，是推荐结果的解释。对于推荐理由的使用在PC中用得比较多。

离线一般说召回，要从很多推荐的物品里进行召回。大的推荐客户每天会新增物品可能几十万，在推荐候选集中有几千万时并不是所有的每次都要重新计算一遍。 离线模块的处理就是先做一个推荐结果的召回，这种召回一般叫重量级的算法，比如说做协同过滤、决策分解、深度学习等，这些会依赖于大数据的集群。 由于数据量比较大，一般我们使用最近半年或者几个月的数据，跑一次的时间一般在几个小时，快的话是半小时。从几十万、几百万、几千万的候选集里面得到的候选集在几千这个维度。

经过离线模块的召回之后是近线的处理，也叫粗排，粗排是一些轻量级算法，比如刚刚提到在组合层达观有各种各样组合的模型，基于单一的推荐算法进行融合，一般使用的方式是内存+RDB。这部分处理时间非常快，一般在秒级，就是说当一个用户的行为发生改变后，他的推荐结果会做到实时更新。 经过粗排之后，这个推荐结果一般是在百的量级。

最后一步在线主要做精排。当新的请求过来，通过这个用户的ID，根据离线找到近线模块处理的结果。拿到基于粗排之后的结果后做一些业务规则的处理，比如在一次推荐里要求多样性和时效性等。这里很多处理方式是基于加载内存的方式， 处理时间是在毫秒级，返回的结果一般在10这个量级。

热门推荐的结果通常有一定理论依据，比如按购买、销量排序其实也是很多人容易接受的方式，在这部分也可以夹杂人工编辑的分析。所以首先基于用户行为（包括物品数据，用户本身的数据）生成不同维度的排行榜，在不同的时机推荐给用户。

类别扩展：比如男生关注的是科技，是否可以推荐一下体育或军事等相关内容？类别扩展也是避免内容推荐过于单一的方式。

语义扩展：当你关注一个标签时，我们会把它相应的标签也拿到，基于你相关的标签也可以做其他方面的召回。比如当看欧冠时，是不是可以推荐西甲相关的新闻？一个用户关注梅西，但梅西的新闻有时比较有限，是不是可以给他推荐C罗的内容？语义扩展也可以解决推荐内容太过单一的问题。

基于这个向量得到关于主题的分布，计算它的相似度，基于这个相似度我们取topN可以得到一个推荐结果。

这种推荐结果比单纯基于文本和字面匹配的效果更好。

一个热门的商品会很容易影响到用户或者物品之间的相似度。比如今天有一社会热点事件，很多媒体跟踪除了爆款新闻，即使我平时是一个关注体育或科技领域的读者，也会点击看一下。这种情景下如果基于物品的相似度来处理得到的结果往往不好。 所以在计算相似度时要做很多变形，比如对热门进行特别处理，对冷门的物品也需要做特殊处理和过滤等。

也要考虑用户有一些作弊行为，比如用户刷了某一领域很多东西，其他用户只是刷了部分，很多的用户和其他用户计算相似度时，可能都会在其他用户计算的候选集中，这也不符合实际场景。所以在实际处理时要对这部分做一些特殊的控制。

7.  潜在因子模型

基于潜在因子分析是完全由数学的方式、更好的模型来处理。他的输入是一个用户的行为矩阵，通过矩阵分解得到两个矩阵，基于这两个矩阵进一步复原，通过矩阵相乘的方式，就可以把原来用户没有操作过的物品的得分给预测出来。

单纯依赖用户行为数据进行预测有很多不足，给物品的打分和用户本身的打分差异可能很大。在上面的实验模型中可以充分考虑用户的bias信息。比如在电影场景中，由一个大牌明星主演，因为它的市场预期好所以容易得到好评。但当是小众电影或者很多新人主演，大家接受度不高，得分可能会相对低。也许它得到了3分，可能已经相当于大牌明星主演电影的5分。 这就会导致物品和用户之间有各种bias信息。在做潜在因子模型时，可以把用户的bias信息和物品的bias信息加进来。

同时还要考虑很多特征要进行组合，男生加上体育和女生加上娱乐，往往是一个更好的特征。对这块来说，通过潜在因子模型可以把这些信息充分考虑进来。

这个分析牵涉到各种技术，比如基于概率统计可以得到一部分数据，另一部分，很多用户之间的兴趣有一定的关联性，可以做用户群体的聚类。预测用户对价值的喜好可借助一些常见的分类模型来处理。 对于用户模型构建，我们一方面给推荐系统来使用，另外一部分也提供用户画像这种服务，当企业拿到用户画像后，可以做老用户的关怀、流失用户的召回等。

推荐的整体流程有以上这几点，首先是各种单一算法召回，召回完进行融合，单一算法里又分了不同维度，比如协同过滤、矩阵分解，包括用户画像等。

1.如何精准把握用户兴趣？

用户兴趣不仅存在多样性，而且会随着时间的变化而变化；其次对用户兴趣的挖掘需要海量数据，如何合理建模？以及不同算法模型对用户兴趣的刻画结果不同，如何优化模型？

2.如何解决冷启动问题？

冷启动包括新用户的冷启动和物品的冷启动。新用户是当一个用户没有任何行为数据和辅助信息的情况下，如何给他做好推荐？物品的冷启动即长尾问题——如何将新的物品快速推荐给可能对它感兴趣的用户？

3.如何解决实际应用中的性能问题？

这包括数据量膨胀快，且冷热不均；如果用户兴趣变化快，我们的深度学习、矩阵分解模型如何跟得上用户兴趣的变化也是一个考验；算法调优时效果越调越差如何处理？以及在机器资源有限、存储有限常出现性能瓶颈。

4.如何解决推荐结果单调性和重复性？

推荐里面有个叫回声室效应，为了满足用户的兴趣，推荐的内容越来越窄如何处理？第二部分是重复，如果依赖于内容标签或者内容分类，对于标签或者类目来不断地召回新的推荐结果，这会导致推荐结果没有新鲜感。

基于这四点，和大家分享一下达观推荐系统对上述问题的解决方案（重点来了）

1.长短期兴趣画像让模型效果稳定提升

通过引入时间因子，基于不同的时间周期做用户画像。比如基于最近半年的或更久的数据做长期用户画像，基于近一个月或三个月做短期用户画像，同时还会有实时用户画像，基于这三种类型用户画像之间的差异化，能够感知用户的兴趣变更。

基于用户画像后做一个过滤机制，把推荐过或者质量不佳先过滤。这样做排序时会引入一个时间因子做一个衰减，另外也会做机器学习的预测，可以方便地调整推荐顺序。

接下来做优化，随着时间的推移，对于用户的刻画会更清晰准确。

2.快速建模技术解决冷启动问题

对于物品的冷启动，达观数据使用CLUB算法。 先给它合适的探索机会，初期时让物品有一定的曝光，曝光后我们会有一个更快的预期收益机制，加快模型的迭代。当在一段时间内观察预期的收益没有达到要求时，会把这部分的曝光逐渐降低。如果预期收益比较好，会增大一部分曝光。通过这种自学的机制来调整物品之间的曝光问题，新的物品便总是有曝光的机会。

对于用户的冷启动，即使用户没有任何数字信息，用户手机登陆APP时是否有其他可以采集的信息？比如地域，手机型号，基于这些东西可以做一些离线的挖掘。比如一线城市或四线城市，很大程度上会有一个偏好的差异。用Iphone手机和用其他品牌手机，基于历史的数据也会分析出差异点，然后进行针对性的调整。

有一种极端情况，拿不到上述数据时如何做推荐？当拿到用户的ID，基于一些历史行为经验挖掘一些高质量的物品，同时在生成推荐结果时尽量考虑到多样性。相当于当一个用户进入一个饭馆，虽然不知道他喜欢什么，但我们提供了种类丰富的菜单让用户选择。当用户选择自己感兴趣的内容，和推荐系统有交互时，无论是点击、收藏、点赞，借助我们的秒级反馈机制，推荐的结果就可以实时更新，我们会对实时的画像把握得越来越准。

此外达观数据借助自然语言处理技术，当新的物品进来，基于它的标题、类别等语义信息可以做预估，通过深度挖掘构建新物品的画像，辅助接下来是增加推荐还是减少曝光。

3.三级火箭”架构保障系统稳定和毫秒级反馈

达观系统架构分为三级火箭：由Offline-Nearline-Online三级依次衔接构成，融合了各类推荐算法和数据。

离线使用的是大量的集群方式，比如说Spark、Kafka跑一些重量级的算法，矩阵分解、协同过滤，包括深度学习等都属于离线模块来做的，这部分运算时间比较久。

在最上面叫在线模块，当用户有一次推荐请求他希望反馈推荐结果时，要保证快速毫秒级地返回推荐结果，不能做更多重量级算法。这部分往往是一些业务规则处理，可以基于内存或内存的数据库Redis的方式，实时返回给用户推荐结果。

在离线和在线模块之间，它们从小时级到毫秒级中间有很大的gap，用户行为发生变化后如何感知？接下来交给近线模块处理。 近线模块可以做到当用户每一次行为变化后，系统都可以感知这种变化，然后把用户的推荐结果重新计算一遍，这时候结果往往是一些融合算法。 融合排序输入的就是离线的各种挖掘，包括用户画像信息、他的场景画像和实质画像等。基于近线来说，它对各种单一推荐算法进行融合排序，最终存到内存数据库中。当在线模块接到新请求时，可以从这里面读取对用户近线计算好的结果，然后做业务规则返回给用户。

这就是“三层火箭”架构，它主要借鉴了搜索引擎的部分机制，包括队列、实时计算等。我们可以满足用户的兴趣和变化，同时也在高并发的情况下毫秒级返回给用户推荐结果， 目前达观服务了上百家客户，三层火箭架构是一个有效的方式。

4.NLP 技术解决推荐难题

解决推荐结果的单调性问题，达观做了很多自然语言处理（NLP）相关的东西，包括语义理解、词性标注等。例如做直播推荐时，基于评论信息可以分析情感是正面的还是反面的，判断用户对当前主播是否感兴趣。

另外一个是重要性排序，可以基于物品本身的标题、标签、描述等信息做语义方面重要性的排序。 基于文本处理可以有效解决推荐系统的冷启动问题。 

四、深度学习在推荐系统中的应用

1.Embedding 处理

Embedding主要有两种方式。 首先会做词Embedding，来完善内容多样性。 当拿到item标签时，业界一般使用Word2vec方式进行专项的扩展。比如当用户关注欧冠这个标签时，是否可以找到西甲、意甲进行词粒度的扩展。这样在实际推荐中可以避免推荐结果太过单一。

另一个itemEmbedding主要应用于召回阶段。对于item Embedding，相当于我们把一个用户行为数据作为一个词粒度，然后输入到Word2vec得到itemEmbedding，基于item Embedding进行相似度计算方式可以得到相似的物品。然后作为一个结果的召回进入融合排序。

在第三种是做Embedding中做特征工程，得到一个物品或者一个用户的Embedding后，做featurevector的方式来使用，基于feature vector做machine learning。

2.基于DNN的推荐

2017年谷歌发布了一篇论文《Deep Neural Networks for YouTube Recommendations》主要做YouTube的视频推荐，这个场景达观也在使用。

在YouTube发布这篇论文的时候分了两个阶段来实现推荐结果，第一层是上面图片列的候选集生成的阶段。这个阶段DNN的处理方式它可以从百万量级直接降到百的量级。第二层是Ranking阶段，做一些重排序的方式。DNN把我们的推荐问题转化成分类问题，相当于对每一个观看的视频做一个分类。

另外一方面，论文中也提到DNN模型并没有用到原始的用户日志，而是对每个用户提取了等量的训练样本， 这种方式主要有好处是可以减少高度活跃用户对loss函数的影响。

2.基于DKN的推荐

DKN主要是基于知识图谱，应用在Feed流推荐中。 DKN是基于内容的深度推荐的框架下进行点击率的预测。 比如每条新闻通过KCNN对标题进行处理，最终产生一个向量。同时我们引用注意力机制机做用户的Embedding，最终再结合深度神经网络做点击的预估。 

3.Wide&Deep

2016年谷歌在一篇论文提出了Wide&Deep模型，这个模型里主要同时学习低阶和高阶的特征。

Wide模型是线性模型+特征组合，记忆性好、可解释性强。Deep是Deeplearning，这块特征工程较少，往往可以学习到更高层次的隐藏特征。但它需要较专业的领域知识来做特征工程，所以进一步产生了Deep FM。

4.Deep FM

Deep FM的主要优点是不需要预训练，也不需要人工的特征工程，同时可以学习一些低阶和高阶的特征，并且进行组合的共享。这样可以更快的训练，同时得到更精确的训练学习。下图为一个DeepFM论文里提到的各种参数设置。

5.模型-排序

对于达观来说，模型排序有下述这些方式。

（1）线性模型，依赖于人工特征工程，

（2）FM/GBDT+LR或Xgboost+LR，它主要是非线性的，达观做了特征融合。在很多场景下推荐效果会更好。

（3）模型的进一步演进，使用到DeepFM和Wide&Deep借助于深度学习，减少很多人工的特征工程。这部分的工作主要在调参上。

在达观服务的众多行业里，从线性、非线性，包括深度学习模型都在使用。每个行业自己的特点，不同的客户有自己的数据量和用户群体，达观会基于客户的推荐效果来选择对应比较好的模型。

7.  XDeepFM

2018年微软发布了一个模型XDeepFM，它其实是对DCN的改进，主要由linear、DNN、CIN组成。引入的CIN机制可以自动学习显式的高阶特征交互，该模型在几个数据集上都取得了超过DeepFM模型的效果。这部分达观推荐也正在探索和尝试中。