63

赛尔推荐 | 第24期

 5 years ago
source link: http://www.10tiao.com/html/617/201806/2650792969/1.html
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.

本栏目每周将推荐若干篇由师生精心挑选的前沿论文,分周三、周五两次推送。


本次推荐了三篇关于序列化建模、注意力机制、自然语言推理、文本蕴含识别、事件检测和多语言机制的论文。



1


推荐组:CR

推荐人:刘元兴(研究方向:推荐)

论文题目:Neural Aentive Session-based Recommendation

作者:Jing Li, Pengjie Ren, Zhumin Chen, Zhaochun Ren, Jun Ma

出处:CIKM 2017

论文主要相关: 序列化建模、注意力机制

简评:

基于会话过程(session)的推荐指的是,在给定用户当前会话过程中的商品点击序列数据的前提下,预测下一次用户点击。传统基于会话过程的推荐工作仅仅使用了一次会话过程中用户的点击行为序列。作者在这篇论文中引入了注意力机制来获取用户点击的主要目标。具体而言作者使用GRU模型的最后一个隐层状态输出作为全局编码表示,使用GRU每个时刻的隐层状态输出结合注意力权重的结果作为局部编码表示。全局编码表示代表了用户在当前会话过程中点击的全局目标,局部编码表示代表了用户在当前会话过程中点击的主要目标。最后将两个表示拼接,通过双线性解码输出每个商品的排名得分,根据得分输出预测结果。


论文链接:

https://arxiv.org/pdf/1711.04725.pdf

源代码链接:

https://github.com/lijingsdu/sessionRec_NARM



2


推荐组:QA

推荐人:郭茂盛(研究方向:文本蕴含、自然语言推理)

论文题目:Neural Natural Language Inference Models Enhanced with External Knowledge.

作者:Qian Chen, Xiaodan Zhu, Zhen-Hua Ling, Diana Inkpen and Si Wei.

出处:ACL 2018

论文主要相关:自然语言推理、文本蕴含识别

简评:

人类在自然语言文本上进行推理(或识别文本蕴含)需要借助自身积累的背景知识,而近期的基于神经网络的自然语言推理(Natural Language Inference)的方法却只能从训练集中获得相关知识。这篇文章的贡献在于向神经网络模型中融入了WordNet这样的人工构建的知识,并借助这些知识,在SNLI语料上取得了0.6%的提升(Accuracy)。该文在一个现有的识别蕴含的模型ESIM中的各个步骤中尝试添加知识(基于WordNet词对的同义词、反义词以及上下位词),并对外部知识的添加方法与比重进行了测试。这种添加知识的方法对与其他任务也有所启发。


论文链接:

https://arxiv.org/abs/1711.04289



3


推荐组:RC

推荐人:冯夏冲(研究方向:信息抽取)

论文题目:Event Detection via Gated Multilingual Attention Mechanism

作者:Jian Liu,Yubo Chen,Kang Liu,Jun Zhao

出处:AAAI 2018

论文主要相关:事件检测、多语言机制、注意力机制

简评:

这篇论文针对Event Detection任务中数据稀疏和单语歧义的问题,提出一种Gated MultiLingual Attention (GMLATT)  框架,利用多语言信息,并结合注意力机制来完成Event Detection任务。GMLATT方法一共分为四步,第一步为多语言映射,首先使用翻译工具得到源语言到目标语言的翻译,接着使用工具完成多语言对齐;第二步为句子表示,使用Bi-GRU学习句子表示;第三步为多语言信息融合,该部分是GMLATT的核心部分,分别为:使用单语文本注意力机制学习一种语言的表示和使用跨语言门控注意力机制来控制目标语言流向源语言的信息;第四步为事件类型预测。该方法在ACE2005数据集上取得了SOTA结果。论文中使用了一种语言作为目标语言,但是可以将目标语言扩展到多种,并且可以将该方法运用在其他任务之上。


论文链接:

http://www.nlpr.ia.ac.cn/cip/~liukang/liukangPageFile/Liu_aaai2018.pdf



往期链接: 

点击文末“阅读原文”即可查看完整赛尔推荐目录

塞尔推荐 | 第23期

(对象级情感分析、隐式元素预测、摘要、统一模型、不一致损失)

赛尔推荐 | 第22期

(深度强化学习、对话状态跟踪、任务型对话、机器阅读理解、问答系统)

赛尔推荐 | 第21期

(文本摘要、情感分类、图结构数据、自然语言处理、bAbI任务、机器翻译)

赛尔推荐 | 第20期

(自动文摘、问题生成、文本简化、实体关系抽取)

本期责任编辑:  赵森栋

本期编辑:  赖勇魁



“哈工大SCIR”公众号

主编:车万翔

副主编: 张伟男,丁效

责任编辑: 张伟男,丁效,赵森栋,刘一佳

编辑: 李家琦,赵得志,赵怀鹏,吴洋,刘元兴,蔡碧波,孙卓,赖勇魁


长按下图并点击 “识别图中二维码”,即可关注哈尔滨工业大学社会计算与信息检索研究中心微信公共号:”哈工大SCIR” 。


About Joyk


Aggregate valuable and interesting links.
Joyk means Joy of geeK