预训练语言模型-神经网络语言模型：FFNNLM Rogerspy 2021-03-21 语言模型 字数统计: 2.6k字 | 阅读时长≈ 9分 1. 简介统计语言模型中，无论是 n-gram 还是对数线性语言模型都面临一个非常严重的问题——维度爆炸。为了解决维度爆炸问题，Bengio & Bengio 2000 年提出了一种使用分布式词特征表示的方法，也就是后来所说的词向量。 阅读全文 NLP Language Model FFNNLM