大型預訓練語言模型無疑是自然語言處理（NLP）最新研究進展的主要趨勢。
XLNet
谷歌更強NLP模型XLNet開源：20項任務全面碾壓BERT！
CMU 與谷歌大腦提出的全新XLNet 在 20 個任務上超過了 BERT 的表現，並在 18 個任務上取得了當前最佳效果！而更令人激動的是，目前 XLNet 已經開放了訓練代碼和大型預訓練模型。
大型預訓練語言模型無疑是自然語言處理（NLP）最新研究進展的主要趨勢。
CMU 與谷歌大腦提出的全新XLNet 在 20 個任務上超過了 BERT 的表現，並在 18 個任務上取得了當前最佳效果！而更令人激動的是，目前 XLNet 已經開放了訓練代碼和大型預訓練模型。