課程筆記1 ： (2019)斯坦福CS224n深度學習自然語言處理課程 by Chris Manning

來源：機器之心文章

2019 年，自然語言處理公開課開始學了～

簡介

你知道入門自然語言處理（NLP）的「標配」公開課 CS224n 麼，它和計算機視覺方面的課程 CS231n 堪稱絕配，它們都是斯坦福的公開課。

但是自 2017 年以來，NLP 有了很多重大的變化，包括 Transformer 和預訓練語言模型等。以前開放的是 17 年年初的課程，很多激動人心的前沿模型都沒有介紹，而最近 CS224n 終於開始更新 19 年課程的視頻。

課程鏈接

課程主頁
B站視頻（帶字幕哦）
YouTube

---

筆記（NMT雖然很吊，但還存在的問題）

• Out-of-vocabulary words
• Domain mismatch between train and test data
• Maintaining context over longer text
• Low-resource language pairs

來幾張圖：