一篇关于PLM和NLG领域的综述


PLM:Pretrained Language Model 

NLG:Natural Language Generation

这篇文章从把文本生成的方法分成了三类:输入编码、模型设计、优化方法。

同时还从数据、模型、优化三个层面列出了文本生成的一些其他挑战。

  1. N-Gram Overlap:BLEU、ROUGE、METEOR、ChrF++
  2. Divesity:Distinct
  3. Semantic Similarity:BERTScore

参考地址:https://mp.weixin.qq.com/s/Yp6a8I8Q2AiVV1DIQFO5BQ

NLP