Is It Enough Just Looking at the Title?: Leveraging Body Text To Enrich Title Words Towards Accurate News Recommendation论文阅读笔记

Abstract

​ 在新闻推荐系统中，如果用户通过查看新闻标题对文章主题感兴趣，就会倾向于点击该文章。这种行为是可能的，因为在查看标题时，人类会利用自身的背景知识，自然而然地想到每个标题单词的上下文含义。

​ 受此启发，我们提出了一种新颖的个性化新闻推荐框架 CAST（带有标题词表示选择模块的上下文感知注意力网络），它能够利用正文作为上下文来丰富标题词，而正文则完全提供了给定文章的全部内容。通过大量实验，我们证明了（1）CAST 核心模块的有效性；（2）CAST 优于 9 种最先进的新闻推荐方法；以及（3）CAST 的可解释性。

Introduction

​ 用户倾向于阅读推荐给他们的新闻文章的标题，然后根据标题了解到的主题做出是否感兴趣的点击决定。因此，现有研究大多侧重于分析新闻文章的标题文本，以预测用户对新闻文章的偏好。用户很容易利用自身的背景知识掌握标题中每个词的上下文含义；然而，新闻推荐系统仅凭标题文本很难全面理解标题词的上下文含义，因为标题文本只是由几个词组成的短句。从这个意义上说，我们认为生成新闻表示的新闻编码器应该正确捕捉标题中没有明确显示的标题词的上下文。

​ 我们的工作是基于这样一个事实，即在只查看标题时，人类会凭借其背景知识自然而然地捕捉到每个标题词的上下文含义。为了更准确地把握标题词的上下文意义，我们的目标是利用正文文本作为上下文来丰富新闻推荐中的每个标题词。

​ 在本文中，我们提出了一个用于个性化新闻推荐的新型框架 CAST（带有标题词表示选择模块的语境感知注意力网络）。为此，作为 CAST 的关键组成部分，我们设计了一个复杂的新闻编码器，利用正文作为上下文的来源。具体来说，CAST 首先只选择与目标标题词相关的一些正文词作为上下文，这与选择模块相对应；然后，CAST 计算上下文中词语的关注权重，这与上下文感知关注网络相对应。通过根据每个标题词的上下文学习正文词的不同重要程度，CAST 能够更有效地理解每个标题词的上下文含义。我们的实证研究结果表明，CAST（1）通过利用正文有效地捕捉了与标题词相关的上下文；（2）提高了新闻表征的质量，从而比 9 个最先进的新闻推荐系统提高了推荐准确率；（3）通过可视化为标题词的上下文提供了解释。

​ （上面描述的可能单看文字不好理解，后面看图就很清楚了）

Method

​ CAST的框架如下：

新闻编码器

​ 如图 2-(a) 所示，我们的新闻编码器由五个模块组成：单词表示、正文单词选择、上下文感知注意力、标题表示和新闻表示。

单词表示

​ 将标题文本和正文文本转化为表示矩阵。为此，我们使用一个可学习的表示矩阵 W