论文阅读与评价技巧笔记

How to Read a Paper - S. Keshav

3-pass阅读法

1st pass:
- 认真阅读title, abstract, introduction, conclusion；浏览section & subsection的标题、数学内容；reference；其他部分一概忽略
- 需要能够回答 5Cs
  - Category
  - Context
  - Correctness
  - Contributions
  - Clarity
- 看完第一遍后可以决定需不需要继续看下去
2nd pass
- 比第一遍看得更认真，但依然忽略诸如证明过程之类的细节。可以记一些笔记，例如针对key points和没有理解的地方
- 认真看所有的图表信息
- 如果想对background有更多了解，这一步可以标记下所有没读过的相关的reference
- 这一步可能会非常懵逼，有3种选择：
  - a) 老子不看了
  - b) 冷静一会儿再来看
  - c) 头铁继续看
3rd pass
- virtually re-implement
  - 思考paper中每一个assumption，想一下自己会怎么想，努力去证实或推翻
  - jyy所谓最高境界
- 看完之后要能够从记忆中重构出整篇paper

参考资料：

Stephen Mann- Reviewing a CS conference paper
Neurips-Review Guidelines
理解作者为什么要做、为什么有趣、为什么重要
- 对于author来说，一定要反复重申自己的contribution，abstract, introduction和conclusion里都要提，甚至带着link可以直接跳到body里去
paper review中需要include的内容
- Outline the paper
- 强调paper的contribution，无论是作者提出的还是你自己认为的
（学姐推荐的）NeurIPS的paper review建议
- summary & contributions
- strengths：可以写的包括：结论的soundness，contribution的重要性和创新性，和community的相关性。衡量重要性的一个重要指标是：这份工作被他人引用的可能性有多大。
- weaknesses: detailed, specific, polite
- correctness
- clarity: Is the paper well-written?
- Relation to prior work: 有没有清楚地解释和之前工作的不同