On Extractive and Abstractive Neural Document Summarization with Transformer Language Models

[raxman0721]

論文

On Extractive and Abstractive Neural Document Summarization with Transformer Language Models

著者/所属機関

Sandeep Subramanian, Raymond Li, Jonathan Pilault, Christopher Pal

投稿日付(yyyy/MM/dd)

2019/09/07

1. どんなもの？

トランスフォーマーを使った要約モデル。
要約を生成する前に抽出的要約を行い、その情報を用いてトランスフォーマーを条件づけする。
この論文のAbstractもモデルを使って書かれた

2. 先行研究と比べてどこがすごい？

長い文書でも要約することが出来る様になった。
ルージュスコアが上がった

3. 技術や手法のキモはどこ？

双方向LSTMを使用して抽出要約をした後に、その情報をトランスフォーマーに入れる。

4. どうやって有効だと検証した？

5. 議論はある？

6. 次に読むべき論文は？

7. 実装コード