预训练语言模型:context2vec Rogerspy 2021-09-09 语言模型 字数统计: 1.4k字 | 阅读时长≈ 5分 上下文的向量表示在许多 NLP 任务中都有至关重要的作用,比如词义消歧、命名实体识别、指代消解等等。以前的方法多是直接用离散上下文词向量组合,缺乏对上下文整体的优化表示方法。本文提出一种双向 LSTM 模型,有效学习句子上下文表征。 阅读全文 context2vec