原创 [NLP筆記] 分詞

文章目錄分詞規則分詞統計分詞混合分詞(規則+統計)分詞標註方案分詞工具常見模型 分詞 規則分詞 維護詞典 =》用語句中字符串與詞典進行比較,找到則切分,否則不切分。 正向最大匹配法(Maximum Match Method,MM

原创 [NLP筆記] 總目錄

文章目錄語法理論通用技術領域分詞(word segmentation)詞性標註(Part-of-speech tagging)句法分析(Parsing)關鍵詞提取詞幹提取詞向量與詞嵌入文本檢索文本朗讀(Text to speech

原创 [NLP筆記] 語言模型

語言模型 XLNet Bert 谷歌的Transformer-XL(一種基於Transformer的模型,在語言建模方面勝過BERT) OpenAI的GPT-2模型(以其生成非常像人類的語言文字而聞名)GPT-2模型地址 CMU

原创 [NLP筆記] 評價指標

評價指標: GLUE SuperGLUE(DeepMind、紐約大學、華盛頓大學聯合Facebook提出了新的測試標準SuperGLUE,加入了更難的因果推理任務) SQuAD RACE 參考 一文看盡2019全年AI技術突

原创 [NLP筆記] 工具及工具代碼

PaddleNLP:中文NLP開源工具集 | code,工業級NLP工具與預訓練模型集 Synonyms 一個獲取中文同義詞的python庫 哈工大ltp4j: Language Technology Platform For

原创 [nlp筆記] 綜述

NLP筆記 總目錄 入門小教程 自然語言處理算法與實戰 概述 A Review of the Neural History of Natural Language Processing tips 初入NLP領域的一些小建

原创 機器學習網址彙總

paper 論文集 dblp 編程 力扣 說明文檔 機器學習術語表 TensorFlow 2.0 python pandas NumPy 其他 在線latex編輯網站overleaf 插件 谷歌語法檢查插件gra

原创 標題自然語言處理綜合大筆記

文章目錄還需要查的關鍵詞語法理論語法分析關鍵詞提取分類算法基於統計學基於詞圖模型基於主題模型聚類模型參考文獻文本生成-文本摘要分類算法評價方法文本摘要參考文獻閱讀理解文本分類模型工具問答系統方法語義解析(Semantic Pars

原创 韋達定理,卡特蘭數

韋達定理: 設一元二次方程 中,兩根x₁、x₂有如下關係:   中,兩根x₁、x₂有如下關係:   卡特蘭數 卡特蘭數又稱卡塔蘭數,英文名Catalan number,卡特蘭數是組合數學中一個常出現在各種計數問題中的數列。 卡特

原创 c語言 緩衝區開頭空白字符%c讀取出錯的問題

scanf輸入時%s的方式,會忽略緩衝區開頭的空白字符。所以有些%c讀取會出錯的地方用%s不會出錯,因爲%c會讀取那個開頭的空白字符。 //舉個例子 #include<cstdio> #include<cstring> int main

原创 [NLP筆記] 問答系統

問答系統產品: ELIZA SHRDLU Casper Siri Alexa 小冰 Alexa Prize Lovot Facade 分類: 簡單多輪對話 單輪對話 問答系統的實際應用需要具備的條件 優質的對話系統應具備

原创 加載模型報錯 The name '' looks like an (invalid) Operation name, not a Tensor.

使用estimator.export_saved_model('saved_model', serving_input_receiver_fn)導出模型之後,再使用tf.contrib.predictor.from_saved_m

原创 正則表達式[+-=]匹配出錯的問題

有一些坑要注意,比如: s="()*+,-./0123456789:;<=>" print(re.findall("[+-=]",s)) print(re.findall("[+\-=]",s)) 輸出: ['+', ',', '-'

原创 pymysql導入數據報錯

pymysql導入數據報錯: pymysql.err.DataError: (1406, "Data too long for column 'view_number' at row 1") 或者報錯: <class 'pymysql

原创 Core Concepts in TensorFlow.js

參考資料:https://js.tensorflow.org/tutorials/core-concepts.htmlCore Concepts in TensorFlow.jsTensorFlow.js is an open sourc