31

推荐系统的价值观

 4 years ago
source link: http://mp.weixin.qq.com/s?__biz=MjM5ODkzMzMwMQ%3D%3D&%3Bmid=2650412817&%3Bidx=3&%3Bsn=46c8d7bf8c3a15c538fd34366a6bfc1c
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.

fieYjqq.jpg!web

作者丨gongyouliu

编辑丨gongyouliu

这是作者的第33 篇文章, 约1.1w 字,阅读需60 分钟

推荐系统作为满足人类不确定性需求的一种有效工具,是具有极大价值的,这种价值既体现在提升用户体验上,又体现在获取商业利润上。对绝大多数公司来说,提升用户体验的最终目标也是为了获取商业价值。读者可以从《 推荐系统的商业价值 》这篇文章中了解更多关于推荐系统用户价值和商业价值的介绍。

公司作为社会经济发展到一定阶段的产物,获取商业利润是公司的本质特征,也是公司赖以生存的基础,这是合乎情理的事情。获取商业利润的方式有很多,其中推荐系统就是一种非常成熟的、具备极大商业价值的工具。鉴于推荐系统巨大的商业价值,几乎绝大多数公司将衡量推荐系统价值的标准定义为获得更多的商业利润,将推荐系统的短期商业价值作为最重要的目标。这样真的对吗?对公司的长期健康发展真的有帮助吗?推荐系统应当发挥怎样的价值需要我们深入思考。

对待推荐系统的态度直接来自于企业高层(创始人)的判断和思考。在当前技术条件下,推荐系统还属于弱人工智能,很多方面还需要借助人的力量才能做得更好,推荐系统是由人构建的,推荐系统应该具备什么样的价值也是人类赋予的,企业高层的价值观决定了推荐系统的价值观。

本篇文章我们就来谈谈推荐系统的价值观,即我们构建推荐系统希望达到什么目标,希望推荐系统可以做到什么。具体来说,我们会从当前推荐系统存在的问题、推荐系统应当具有的价值观、在正向价值观指导下构建推荐系统的思路和方法等3个角度来讲解推荐系统价值观相关的背景、具体体现形式及方法论。期望读者读完本文可以从更加全面、更具人文关怀的角度来思考推荐系统对用户、对企业、对合作伙伴、对社会的影响,而不仅仅将推荐系统看成一种快速变现的方法和手段。

一、当前推荐系统存在的问题

在今日头条的示范和带动下,国内绝大多数toC互联网产品都具备了个性化推荐能力,个性化推荐系统在帮助公司获取商业价值上立下了汗马功劳。推荐系统经过这几年的发展,也逐渐暴露了很多问题。这些问题如果不能很好地预防和解决,从小里说,会影响用户体验,从大里说,会影响公司的业务发展,甚至对社会价值观的塑造都有极大的副作用。

在这一节我们就来梳理一下推荐系统存在的问题,只有清楚地了解推荐系统存在的问题,我们才可以进行针对性地优化,让推荐系统真正发挥应有的用户价值、商业价值和社会价值。

1. 过度商业化

推荐系统的危害首先来自于过度的商业化,很多企业漠视法律法规、走红线,毫无道德底线,将推荐系统作为敛财获益的好工具。前几年出现的魏则西事件,就是一个很好的案例(这个案例虽然属于搜索问题,但搜索跟推荐本质是类似的,在更大的框架下,搜索问题等价于推荐问题,这种思路作者在《 推荐算法工程师的成长之道 》中已经做过说明),当时在全社会引起了强烈的反响和声讨,百度也迫于舆论压力下线了所有莆田系医院的广告。

在很多APP的信息流推荐中,多少都存在一些尺度比较大的文章和图片,在文章的评论区更是不堪入目,这种通过激发人的生物学本能来获得流量和粘性的方法是不齿的。这里要提一下,之所以出现这样的结果,有两个原因。一是企业的价值观就是这样,是有意为之的。另外一个原因是算法自身原因导致的,有些人主动搜索点击这方面的内容,导致一直给他推荐相关的内容。

合理的商业化可以让平台和标的物生产方更好地生存下去,是对平台、标的物生产方、用户都有正向作用的,有利于整个生态健康发展。过度的商业化可能引发极大的道德风险,对用户也是非常不友好的。

作为一个有良知的企业,一定要谨慎考虑商业化,什么样的事情可以做,什么事情不能做,心里要有一杆秤,需要平衡好各方的利益,同时关注社会影响,努力让整个生态持续、稳健、健康发展下去。

2. 算法本身的缺陷和不足

推荐算法本身的缺陷也会带来风险,别有用心的标的物提供方会利用算法的特性和漏洞,攻击推荐系统,对自己提供的标的物进行“刷榜”,恶意提升自己标的物的权重,获得更多的流量。比如在标题中嵌入各种不实的关键词、恶意刷好评、通过不正当手段删掉差评、给竞争对手刷差评等等都属于利用推荐算法的缺陷或特性来提升自己提供的标的物流量而打击竞争对手。

作为提供推荐算法的平台方,需要一直不断的研究对策和调整算法,通过修正数据、优化推荐算法来评估标的物的真实价值和真正的受欢迎程度,这是一个长期的技术对抗过程。对这些恶意竞争的标的物提供方一定要有比较严厉的惩罚措施(限流、封号等),规范整个标的物生产与消费链条。

好的推荐算法需要满足多个目标,除了商业价值、还有用户体验、生态繁荣等多类指标,往往很多目标之间是有冲突的,怎么权衡多个目标之间的关系,是非常复杂的,连人类都觉得非常棘手,何况处在弱人工智能阶段的推荐算法呢。目前多目标优化问题从算法实现上是比较困难的,有待算法理论的突破。

目前推荐算法的可解释性是比较棘手的问题,特别是像深度学习这种复杂的机器学习算法模型,基本都是黑盒模型,可解释非常差。人类本身是非常关注因果关系的,因果关系比较明确的的概念人是更容易接受的。推荐系统没有很好的可解释性,用户也很难信任推荐产生的结果。

了解GAN(生成对抗网络)的读者一定知道,在某些情况下对算法输入参数做很小的修改,就会产生非常不一样的输出结果,让人不可思议。这导致利用有这类问题的算法构建的推荐系统,可能在某些情况下会给人推荐出极端不靠谱的结果,引起用户的不适。目前推荐算法寻求的是一种全局最解,而无法做到每个人都最优,这类问题也需要借助算法理论的突破和实践经验的积累而逐步完善和提升。

所有上面提到的算法本身的不足和缺陷都可能影响到推荐算法目标的达成。即使你的出发点再好,价值观再正,由于算法自身“力不从心”,可能导致达不到预期的目标,甚至出现不希望看到的结果。

3. 标的物质量问题

这里提前对质量做一个解释,如果标的物是实物,那么质量就是我们通常意义的质量,比如这件衣服质量好不好,是不是仿冒品。如果标的物是虚拟物品,如视频、文本等,质量是指内容的精良程度。

导致推荐平台上标的物质量的问题主要有三个方面的原因,一是过度获取商业利益导致质量下降,二是标的物创作/制造者自身专业素养和技术能力的原因,三是平台的规则也间接导致了标的物质量下降。

(1) 利益驱动导致的质量问题

人都是逐利的,为了快速地获利,标的物粗制滥造。对于文本内容的推荐,平台方给内容制作者的收益是根据点击量来计算的,因此导致很多内容标题党盛行,内容创作者通过夸张的用词、过度渲染来骗取用户点击。在电商推荐上,盗版、假货横行也是利益导致的后果。

人的本性是对惊奇、情色、赌博等满足人动物属性的内容是天然喜欢的,很多内容创造者深谙此道,打擦边球,制作出相关的内容,以迎合受众的口味,从而获得流量变现。

(2) 标的物创作/生产能力不足导致的质量问题

不是每个标的物生产者都是专业的,由于自己能力及技术的限制,很多创作者/生产者不具备创作优质标的物的能力,这时要么创作质量比较差的标的物,要么进行剽窃/仿冒,这都会导致质量下降。

平台方必须制定一定的规则,鼓励标的物生产者花更多的时间,通过提升技能来生产优质标的物,对优质标的物进行适当的流量奖励,劣质标的物进行惩罚和打压。

(3) 平台规则导致的质量问题

在(1)中我们就提到,现在很多平台根据点击量等指标来对标的物提供方进行奖励(流量、好位置等),这些规则比较简单粗暴,容易滋生出质量差的标的物。

标的物是整个推荐系统生态中最重要的一环,也是最基础的一环,标的物质量的好坏直接关系到各方的利益和生态的平衡,因此平台方必须重视标的物质量,需要通过技术手段及人工规则来保证标的物质量,吸引更多的优质标的物提供方进驻平台。

4. 数据质量的问题

推荐算法模型是基于数据来构建的,数据是算法的原料,当然对算法有非常大、甚至是决定性的影响。构建推荐系统的数据主要有用户行为数据、标的物metadata数据等。

用户行为数据在日志上报时可能存在字段错误(比如错误地将时间戳赋值给了播放时长字段,导致播放时长很大,不符合逻辑),用户由于没有关电视而去干别的事情忘记了,导致一直连续播放十几个小时,还有测试等脏数据的混入,黑客或者竞争对手的攻击产生的垃圾数据,程序bug引起的错误数据等等。

如果是UGC平台,由于不同标的物提供方填写的标签等信息格式及定义不一样,导致数据质量低。重复数据也是一个比较大的问题,新闻中不同渠道来源的内容有可能是对同一事件的报道(因此内容是重复的),淘宝中不同商家生产一样的物品,这些都可以产生重复。

这些低质量数据,如果不加以处理,就会影响算法的效果,对最终的总体目标是有极大副作用的。

5. 过滤气泡问题

个性化推荐存在被人所诟病的“过滤气泡”(Filter Bubble)问题。Filter Bubble 的概念由 Eli Pariser 提出,他认为个性化推荐算法会基于用户的各种信息向其推荐可能感兴趣的内容,长此以往用户会因接收不到与自己相左的观点,停留在自己的文化和认知泡泡中。另外一个类似的概念是信息茧房,读者可以学习参考文献3,进行更深入的了解。

相信刷过今日头条推荐的人有这个感受,当你点某个感兴趣的内容时,系统一直会给你推送相关的内容,让你一直停留在该内容相关的内容中出不来,就像滑进了一个漩涡。前几年的今日头条这个问题更加严重,这即是形成了过滤气泡。

一味推荐你喜欢的标的物,你没有接触过的、不熟悉的优质标的物可能被排斥而逐渐边缘化,导致最终只推荐你所熟知的标的物。

推荐系统这种给用户“灌输”标的物的方式,导致用户被动接受,减少了用户的决策成本,最终用户不愿意决策,导致过滤气泡的存在。

6. 用户隐私

推荐系统通过收集用户行为,并基于用户行为给用户推荐感兴趣的标的物。如果用户看的是一些比较隐私或者不希望别人知道的内容,那么推荐系统也获得了用户的这些特殊嗜好,因此也会给他推荐这类内容,这对用户来说就是隐私的泄露。举个例子,比如用户一直用今日头条看比较暴露的美女短视频,那么当他在跟朋友吃饭刷今日头条时,容易让别人看到他的这种他不希望别人知道的喜好。

用户的偏好就是用户的隐私,推荐系统知道了用户的偏好,有些企业就可能利用这些偏好进行不道德的商业化(不如我们知道的大数据杀熟),从而伤害用户。

7. 难以量化的目标

推荐系统的价值除了用CTR等比较容易量化的指标来衡量外,还有很多比较难量化的指标,比如多样性、惊喜度、社会价值等,而当前的机器学习算法还只能处理容易量化的目标函数,对这些比较难量化的目标无能为力。

上面提到的这些问题都是在推荐系统发展过程中出现并逐步凸显出来的,只有对这些问题及背后的原因有一个比较清晰的认知,我们才有机会构建更加优质的推荐系统(读者可以查看参考文献1、2进一步了解推荐系统存在的问题),那么什么是优质的推荐系统?推荐系统应该具备什么样的价值呢?这就是我们下节要讨论的主题。

二、推荐系统应当具有的价值观

在上面一节我们提到了推荐系统存在的问题,这些问题有些是技术工程问题,有些是人的决策导致的问题(如过度商业化就是公司管理层的决策导致的),这些问题对发挥推荐系统的价值是有极大影响的。

其实学术界关于AI的伦理讨论已经非常多了(见参考文献7、8),推荐算法作为AI的一个应用领域,也一直存在这类问题,只不过在工业界大家的关注点都在算法创造商业价值上,而忽视了很多道德风险和人文关怀。

除了商业化指标外,推荐系统应该还需要发挥哪些价值呢?下面作者结合自己的理解和感悟,从如下4个方面来说明。

1. 追求正当的商业价值

获取商业利益是公司生存之本,对公司来说商业化确实是非常重要的,也是管理层需要持续关注和努力的方向。但不能通过利用技术手段来恶意伤害用户、造成社会负面影响来获得商业利润。

大家都知道的大数据杀熟(基于用户的行为和购买力,故意给用户推荐比较贵的东西,或者单独给该用户定一个高价)就是一种不正当的获取商业利益的方式,这里面还有故意欺骗用户的成分。

另外,追求商业价值也不应该违背国家法律、法规、公序良俗。比如通过盗链或者破解正版视频网站的播放器或者链接,聚合到自己的视频平台并通过付费的方式获取商业利益,这就是违反法律的,侵犯了视频网站的版权。生产假冒伪劣产品在电商平台上售卖也是非法的。故意推荐一些恶俗的内容给用户,通过增大流量来获得更多的广告收益这也是不道德的。

这些通过不正当的手段来进行商业化的行为,最终会让企业站在舆论的风口浪尖上,搞不好会葬送企业的前程。

2. 关注用户体验与成长

推荐系统不但要从技术角度去思考,还要从人文社科方向寻找灵感。推荐系统的神经元里要植入人文关怀,推荐系统要以人为本,回归人性,建立与人的信任关系。因此推荐系统需要关注用户体验和用户成长。

首先,推荐系统需要给用户足够好的体验,界面美观简洁、操作方便,能够给用户提供优质的推荐结果,让用户在交互的时候是放松的,同时推荐系统需要一定的机制避免用户沉浸其中。国内目前有一些餐厅对顾客点菜是有要求的,会根据就餐人数来了解你点菜的情况,不让你多点菜,避免浪费,我觉得这就是一个非常好的控制手段。现在很多游戏需要身份信息登录,并且对使用时长有控制,快手也有青少年模式,这些都是人文关怀的举措。推荐系统也需要在这些方面有所作为。

推荐系统不光要有CTR等与商业化相关的指标,更应该包含多样性、惊喜度、新颖性等与用户体验相关的指标,用户如果能够获得超出预期的体验,一定会更加信任你的产品,信任你的推荐系统。

给用户推荐多样性的内容,而不是一味满足用户的兴趣,可以让推荐系统突破过滤气泡的魔咒。通过用户在新内容形式(用户过去没有探索过的)的反馈来拓展用户新的兴趣点,这对用户是一个学习成长的过程,让用户可以获得新的知识、新的体验,是对未知领域的一种探索。

除了用户体验外,推荐系统要对用户进行引导而非灌输,给用户足够多的操作方式让用户进行自主探索,激发用户的探索欲,而不是被动”享受“,这也是培养用户好奇心的过程。这里面可能会涉及到跟用户的多伦交互过程,这是目前的工业级推荐系统不具备的能力,也是未来可行的发展方向。

3. 考虑整个生态系统的繁荣与长期发展

推荐系统涉及到平台方、用户、标的物提供方三方,缺一不可,这三方组成一个小的生态系统,互相之间合作与依赖。标的物提供方是内容创作方,是整个生态系统的核心,是系统赖以生存的基础。用户是该生态系统的消费者,跟平台是一种价值交换的关系,用户通过在平台上消费标的物来养活整个平台(包括平台方和标的物提供方),而平台方提供高效、便捷、精准匹配的信息分发渠道/通道来连接用户和标的物提供方。

上面是生态系统三方之间的价值关系网的梳理,好的推荐系统一定要考虑整个生态系统的平衡与稳健发展,缺少任何一方,整个系统都将无法运转。

我们不光需要这个生态系统短期繁荣,我们更应该努力促进系统长期稳定发展。这就要求平台方有延迟满足感,管理层不能只做一些只考虑短期利益的事情,而要关注长期利益,考虑多方共赢,构建正和博弈系统,只有这样平台方才能基业长青。

4. 弘扬正向的价值观

推荐产品一般是面向C端用户的,在移动互联网红利逐渐消失的当下,每个人都可以通过智能手机连接到网络。网络对人的工作生活的影响是全方位的,像淘宝、头条、百度等APP日活(DAU)都超过几亿,对社会生活及信息舆论有极大的影响。这些产品都将推荐作为核心功能点,放到最核心的位置,毫不夸张地说,推荐做得好不好,直接关系到产品的生死存亡,也直接影响者整个社会舆论和社会价值观。像这类影响巨大的产品,一定要有足够的社会责任感,在商业利益之外,必须弘扬正向的社会价值观。

像百度搜素提供的竞价排名,我个人觉得就是一种非常不好的价值观。这让出钱多的人获得了好的流量,如果这个出钱多的人投的广告关联的产品或者服务是不好的,会对个人和社会造成极大的危害,魏则西事件就是这种有害性的一次集中爆发。

作为一个有良知、正义感的企业,在打造推荐系统时一定要心正,弘扬正向的价值观,起到价值宣导的作用,在某种程度上要做到政治正确、道义正确,而不能完全被商业化的思维控制。

下面图1中今日头条在推荐中置顶了两条与疫情相关的信息,这天刚刚是武汉解封之时,在这个关键的利好时间点将这一重要信息告知大众是非常有价值的。而作为反面的案例,前两天(2020年4月8日)手机百度APP的推荐模块被迫下架整改,我前几天还用过百度的推荐模块,确实看到很多推荐下面的评论都是“很黄很暴力的”,并且有几个评论的账号直接与色情相关,大面积出现这种情况不被约谈整改才怪呢。

beA7FfZ.png!web图1:头条推荐中置顶与疫情相关的信息、百度APP由于推荐的信息不合规被迫整改

这一节我们从推荐系统应该具备的价值观的角度来讲解构建推荐系统应该思考的方向。当然,不同行业由于数据来源、服务的对象、提供服务的类别不一样,在具体怎么体现推荐产品的价值观时是需要谨慎思考的。

有了牢固可靠的价值观,我们就要利用价值观来判断一切行动是否值得做、能够做。怎样基于上述价值观来构建推荐系统,我们需要从哪些维度来努力和思考,这就是我们下一节要讲的内容。

三、在正向价值观指导下构建推荐系统的思路和方法

有了正确的价值观,这些价值观就是指导我们构建推荐系统的指导原则,我们在遇到任何困难时,就有章法可循,不会乱了方寸。基于第二节提到的价值观来构建推荐系统时,我们可以从如下几个角度来努力,最终减轻、避免、甚至解决第一节提到的推荐系统存在的问题。

1. 努力提供高质量的标的物,标的物是整个平台的核心

通过前面的分析,我们知道标的物才是平台方(提供推荐系统服务的)的核心竞争力。好标的物是获得用户喜爱的前提,只有标的物质量好,用户才愿意留下来,才愿意在平台上付费,整个生态系统才能有效运转。标的物就像生态位中的草,只有水草丰茂,才能供养牛羊。

平台方一定要有正义感,要制定一系列规则和策略对优质标的物进行鼓励和奖赏,对劣质标的物进行打压和惩罚。在这里就可以充分发挥机器学习算法和人工审核干预的作用,提升标的物监控和审核的效率。可以先用机器学习算法召回质量可能有问题的标的物,再借助人工二次审核,既减轻了工作量,标的物质量又有保证。

通过不断的优化完善,当产品具备了一套比较完善的标的物质量标准和引导规则时,这套规则会引导着标的物生产链路朝着更好更健康的方向发展,这时系统是具备一定的自愈能力的,最终会进化出一个更加健康的生态。

作为推荐系统推荐给用户的标的物,好的标的物对用户体验、对用户信息获取等各个方面都是有好处的。有了好的标的物及标的物metadata数据,推荐系统也可以更好地获得构建模型的原材料(基于内容的推荐算法需要标的物的metadata信息),最终构建出更加可靠的推荐系统。

2. 注入人的因素,让推荐系统更有温度、更有情感

机器学习算法是对现实的一种抽象和简化,虽然可以解决很多问题,在很多方面甚至超越了人类,但算法还是有短板的,在复杂情况下的决策,在涉及到艺术与情感方面的问题时是根本无法跟人相提并论的。

推荐系统需要朝着更有人情味、更有温度的方向发展。这一方面需要算法能力的提升(比如微软的小冰试图打造一个更加智能化、人性化的助手),需要获取更多的数据和信息(特别是场景化信息、上下文信息),以期更好地理解用户当前的意图,这是非常难的,也是一个需要长期努力的方向。

另外一种更加实用化、更加可落地的策略是通过在推荐算法中整合人工策略和逻辑,让推荐系统具备一定的人文关怀(读者可以参考《推荐系统的人工调控》这篇文章了解具体怎么进行人工调控)。通过不断尝试,调和AI算法与人的智慧,相互约束和补位,将"人"的价值发挥到最大,让推荐引擎不只是迎合用户,而是尝试引领用户、感动用户,从而做到真正的以人为本。

像图1中置顶疫情信息,当你看了很长时间,系统给你提醒让你休息一会儿,给你推荐你期望学习的新知识点等等,这些都以人为本的做法。什么叫做以人为本,这本身就是一个比较难以界定的概念,更难以量化,需要算法工程师和产品经理多琢磨,更好地了解人的社会化需求,而不仅仅是生物本能需求。

3. 关注数据质量、关注用户隐私

我们在第一节4中提到了数据质量问题,数据作为推荐算法的原材料,质量的好坏直接决定了算法的效果,不好的数据会让推荐模型偏离原来既定的价值取向,走向“邪路”,比如一个提供假冒伪劣产品的淘宝店主,如果通过不正当手段来刷好评、刷流量,让自己的店铺和商品排名靠前,获得更多收益,这就损害了消费者的利益,对平台的健康发展也极为不利。因此,数据质量在推荐系统中起着至关重要的作用。

在数据处理上,需要通过有效的手段过滤掉不合理、不合法的数据,识别潜在的针对产品的恶意攻击,不让外部干扰污染整个数据源。

另外一个比较重要的问题是关于用户隐私的,这类问题屡屡发生(最近万豪酒店出现了泄露520万住客信息的极大安全事件),随着人们安全意识的觉醒,大家对隐私问题会越来越重视。推荐系统需要搜集用户各方面的信息(用户自身的信息以及用户的行为偏好信息)来获得精准的推荐,推荐系统利用的信息是非常有隐私性的。

处理好隐私问题,除了需要企业加强数据安全外,另外一种可行的方法是给用户一定的控制权,让用户自由选择是否可以让企业收集行为数据、利用行为信息进行推荐。即使用户同意了企业可以使用自己的行为数据,用户在以后的任何一个时间点有权要求企业删除对用户兴趣的建模,回归到信息为零的状态。企业获得了用户的这些偏隐私的信息也需要用在正道上,不能利用这些信息获取一些非法的收益,比如将用户的兴趣偏好售卖给其他第三方或者利用这些偏好进行不正当的、有倾向性的营销。

目前中国在用户隐私上的法律制度还不够健全,随着这方面问题的暴露及处理这类事件经验的积累,未来一定会有比较规范的关于互联网隐私方面的法律出台的。企业应该提前做好预防和规划,重视用户的信息安全,采取合适的保护用户敏感信息的方法。

作为用户,也需要特别关注自己的信息安全。在注册一个新APP时,谨慎选择授权,比如授权访问位置、通信录、摄像头、麦克风等。

目前很多APP虽然说有用户隐私协议,但是基本都是霸王协议,用户没有选择权,用户只有放弃自己的隐私才能使用该APP,这不是真正的将隐私权交给用户。主动让用户自己选择是否可以利用用户数据,看似对收集数据不利,其实这是一种非常好的人文关怀举措,会极大地提升用户的好感,增加用户对产品的信任度。同时这也倒逼企业通过其他的技术手段来保护用户隐私,比如下面要提到的联邦机器学习。

Google在2016年提出的联邦学习(参见参考文献4)就是一种很好的尝试,联邦机器学习是一个机器学习框架,能有效帮助多个机构在满足用户隐私保护、数据安全和政府法规的要求下,进行数据使用和机器学习建模。联邦机器学习在推荐系统上的应用也是一个非常值得探索的方向,在这方面已经有在企业中的应用了,其中参考文献5中有关于联邦推荐算法在微众银行中的应用,同时微众银行还开源了全球首个企业级的联邦学习框架FATE(见参考文献6),并且内置了联邦推荐学习算法,有兴趣的读者可以作为很好的学习材料。

4. 帮助用户获取更多的差异化信息,让用户更好地学习成长

推荐系统是一种被动获取信息的技术手段,如果一直推荐用户感兴趣的标的物,会存在过滤气泡的问题,这不利于用户获取新的信息和知识。推荐系统一定要打破这种固有思维逻辑,给用户提供多样化的推荐,虽然这样可能短期对商业化有负向影响,但是这是让推荐系统具备人文关怀的必要,我相信这种做法长久来看是有利的。

其实,每个人由于出生、见识、阅历、地理位置、社交固化等各种原因,接触到的知识是有限的,每个人都生活在一个自己亲手打造的井中,我们只能观察到一片有限的天空。推荐系统提供的信息如果只满足了人的生物本能需求,是远远不够的。算法要让个人获得突破,就一定要给用户推荐用户不知道的东西,引发用户的好奇心和求知欲,激发用户对未知领域的兴趣。通过让用户获取差异化信息,让用户对世界有更多维度的了解,这有利于用户的认知升级和学习成长。作为一个有社会责任感的企业,需要对用户成长负责,必要的时候需要引领用户,而不是一味迎合用户。

给用户提供多样化的推荐,可以在算法中增加随机策略,给用户一些探索性的推荐结果,如强化学习中的EE(Exploration and Exploitation,探索-利用)策略就是一种非常好的方法。另外,利用知识图谱来拓展用户的兴趣空间也是一个比较有前景的研究方向。

5. 给用户更多的控制权,让用户能够自主抉择

我们在前面也提到了用户可以选择系统是否可以收集用户的行为信息,用户可以决定是否清空当前兴趣重新给用户推荐,这些都是用户的选择权。

在与推荐系统进行交互的过程中也需要给用户更多的选择权,比如是否可以主动选择过滤掉某类内容,甚至未来推荐系统可以让用户自己制定给自己的推荐规则,基于该规则来为用户生成个性化推荐。

在推荐的交互方式及展示方式等方面也需要给用户提供足够的控制空间,这样才能真正做到以人为本,以用户为中心。

推荐系统只是一种获取信息的方式,产品需要提供像搜索、筛选、导航等其他让用户主动获取信息的方式,并鼓励用户从多个渠道来获取信息,这样可以从另外的角度来影响推荐系统的行为,有效避免过滤气泡带来的问题。提供更多的用户主动探索的可能,也有利于用户自我学习成长。

6. 更加多元化的目标,在用户、标的物提供方、平台之间达到利益平衡

我们在第一节中就已经讲到,目前很多公司做推荐系统最核心的目标是商业化,通过推荐获得商业利益,算法优化的是CTR点击率。过度的商业化,导致推荐系统目标单一,唯利是图。短期来看对企业是很有利的,但是这种策略是损害公司长期利益的。

就像第二节中提到的,推荐系统需要追求在多目标下的均衡发展。推荐系统涉及到的参与方有三个:用户、标的物提供方、提供产品与推荐服务的平台方,这三方都有各自的利益诉求,推荐系统一定要照顾到三者的利益。

对于用户来说,除了给用户提供精准的推荐外,还需要考虑到用户多种类的知识获取,拓展用户的认知空间,给用户更多的自主控制权。

对于标的物提供方,推荐系统在算法机制上就要鼓励优质标的物提供方创造更好的内容,给优质标的物更多的流量支持,适当的时候还需要增加人工的策略和规则,弥补算法做的不够好的点。另外,还需要在平台中制定适当的规范来对标的物提供方进行约束,让标的物提供方知道平台是鼓励生产/制造优质标的物而打击粗制滥造的。

对于平台方,商业利益需要考虑,但是不能操之过急,要细水长流。平台方为了生存,需要很早就考虑商业变现,但是一定要给自己制定一些规则和发展规划,对自己加以限制和控制,什么事情可以做,什么事情不能做,要有自己的原则和道德底线(比如不做医疗、保险等的广告)。当你在推荐系统迭代过程中始终考虑到了用户利益和标的物提供方利益,你的推荐产品才是健康发展的。

上面提到的6个思路及其中的一些方法更多的是指导性的,具体怎么实施还需要根据自己产品和行业特性进行有针对性的选择和细化,并有所侧重。

总结

推荐系统由于具备巨大的商业价值而得到企业界的追捧,但商业价值只是推荐系统价值的一部分,推荐系统有非常多的目标值得去思考和优化。我们希望推荐系统的从业人员学会更多的人文关怀。

推荐系统本身是没有价值观的,是我们人类赋予了它鲜活的生命,让它具备了某种价值取向。推荐系统需要克服非常多的问题,弘扬更多的社会价值,这就要求人类将自身的价值观通过规则、算法甚至人工介入的方式更好地整合到推荐系统中。

本篇文章我们基于目前推荐系统存在的问题,结合作者自己的理解和感悟,比较主观地引出推荐系统应该具有的价值观,并基于该价值观来说明从哪些维度来构建推荐系统,可以让价值观得到最好的体现。这里面很多价值观是比较抽象,不易于用算法来解决的,因此人的作用就凸显出来,人与算法的有机结合才是推荐系统的未来迭代范式。

抽象的价值观怎么通过推荐系统表达出来,这是一个非常值得思考的问题,也是当前推荐行业非常缺失的,大家更多地关注了推荐系统的商业价值而忽略了其他价值。

这篇文章通过我自己的思考,对推荐系统应当具备的价值进行了全方位的梳理,希望给推荐算法从业者、算法产品、运营人员、企业管理者提供不一样的思考视角。

参考文献

  1. [推荐系统有哪些坑?] https://www.zhihu.com/question/28247353

  2. [推荐系统有什么危害?] https://www.zhihu.com/question/385821370/answer/1135280697

  3. [如何理解“信息茧房” ?] https://www.zhihu.com/question/58195189/answer/684118964

  4. [联邦机器学习] https://baike.baidu.com/item/%E8%81%94%E9%82%A6%E6%9C%BA%E5%99%A8%E5%AD%A6%E4%B9%A0/23618046?fr=aladdin

  5. [联邦学习用于推荐场景] https://zhuanlan.zhihu.com/p/97826564

  6. [工业级联邦学习开源框架FATE] https://github.com/FederatedAI/FATE

  7. [算法伦理:现状与困境] https://zhuanlan.zhihu.com/p/108567166

  8. [人工智能的六大伦理原则] https://zhuanlan.zhihu.com/p/72952747

推荐阅读

AINLP年度阅读收藏清单

当当的羊毛,快薅,这一次要拼手速!

数学之美中盛赞的 Michael Collins 教授,他的NLP课程要不要收藏?

自动作诗机&藏头诗生成器:五言、七言、绝句、律诗全了

From Word Embeddings To Document Distances 阅读笔记

模型压缩实践系列之——bert-of-theseus,一个非常亲民的bert压缩方法

这门斯坦福大学自然语言处理经典入门课,我放到B站了

可解释性论文阅读笔记1-Tree Regularization

征稿启示 | 稿费+GPU算力+星球嘉宾一个都不少

关于AINLP

AINLP 是一个有趣有AI的自然语言处理社区,专注于 AI、NLP、机器学习、深度学习、推荐算法等相关技术的分享,主题包括文本摘要、智能问答、聊天机器人、机器翻译、自动生成、知识图谱、预训练模型、推荐系统、计算广告、招聘信息、求职经验分享等,欢迎关注!加技术交流群请添加AINLPer(id:ainlper),备注工作/研究方向+加群目的。

qIR3Abr.jpg!web


About Joyk


Aggregate valuable and interesting links.
Joyk means Joy of geeK