大型预训练语言模型无疑是自然语言处理（NLP）最新研究进展的主要趋势。
XLNet
谷歌更强NLP模型XLNet开源：20项任务全面碾压BERT！
CMU 与谷歌大脑提出的全新XLNet 在 20 个任务上超过了 BERT 的表现，并在 18 个任务上取得了当前最佳效果！而更令人激动的是，目前 XLNet 已经开放了训练代码和大型预训练模型。
大型预训练语言模型无疑是自然语言处理（NLP）最新研究进展的主要趋势。
CMU 与谷歌大脑提出的全新XLNet 在 20 个任务上超过了 BERT 的表现，并在 18 个任务上取得了当前最佳效果！而更令人激动的是，目前 XLNet 已经开放了训练代码和大型预训练模型。