原创 python ftplib模塊實現文件上傳下載

當前需求:從FTP服務器上下載文件到本機,處理完成後,再把結果上傳至FTP服務器指定路徑下。 一、ftplib模塊–FTP協議客戶端 Python中默認安裝的ftplib模塊定義了FTP類,可以用來實現簡單的ftp客戶端,實現

原创 BERT之提取特徵向量 及 bert-as-server的使用

本文內容列表一、 提取句向量1、句向量簡介1-1傳統句向量1-2 BERT句向量2、 extract_features.py源碼分析2-1 參數2-2 main()函數3、如何得到句向量呢?二、Bert-as-server1、 安

原创 【Python】—日誌模塊logging詳解 多進程日誌記錄

文章目錄1、 問題描述2、 分析2.1 `logging`模塊實現日誌回滾2.2 多進程日誌安全輸出到同一文件方案3、解決方案3.1 使用`ConcurrentRotatingFileHandler`包3.2 concurrent

原创 機器學習:Python實現聚類算法(一)之K-Means

轉自 機器學習:Python實現聚類算法(一)之K-Means - lc19861217 - 博客園 1. 簡介 K-means算法是最爲經典的基於劃分的聚類方法,是十大經典數據挖掘算法之一。K-means算法的基本思想是:以空間

原创 NLP工具——Gensim 模型及詞向量文件的保存與加載

文章目錄1、Gensim2、保存與加載2.1 模型的保存與加載保存模型加載模型2.2 詞向量文件的加載與保存保存加載 1、Gensim 官網: gensim: Topic modelling for humans Gensim是一

原创 kmcuda: GPU加速 Kmeans

文章目錄1、kmcuda簡介2、安裝1. 查詢gcc版本2. 查詢GPU算力3. 配置GPU路徑3、完整安裝命令4、安裝遇到的問題1. 使用pip安裝2. 未指定GPU算力或使用默認值5、Python測試用例1. K-means,

原创 Python 字符串前加r,b,u

目錄問題描述1、字符串前加字母`u`2、字符串前加字母`r`3、字符串前加字母`b` 問題描述 在處理python代碼的時候,經常可以看到字符串的前面有u, b, 或r字母,如下圖所示: b'2019:12:26 07:52:16

原创 圖像元數據(Metadata) ——Exif信息分析

文章目錄1、元數據1. 圖片元數據2. 如何查看元數據2、圖像Exif信息2.1 簡介2.1 JPG文件結構2.2 Exif與TIFF的關係2.3 Exif元數據2.4 總結3、Exif工具3.1 Pillow庫3.2 exiv2

原创 圖像語義分割:TensorFlow Deeplabv3+ 訓練自己數據集

本文主要介紹如何使用自己的數據集訓練DeepLabv3+分割算法,代碼使用的是官方源碼。 1、代碼簡介 當前使用TensorFlow版本的官方源碼,選擇它的原因是因爲代碼中的內容比較全面,除了代碼實現以外,還提供了許多文檔幫

原创 【Python】—日誌模塊logging使用詳解1

文章目錄1、日誌級別2、logging流程3、幾個重要的類3.1 Logger類1) 最常用的配置方法2) 創建`Logger`對象`logging.getLogger([name])`3.2 `Handler`類3.3 `Fil

原创 【Python】日誌模塊logging使用詳解2

文章目錄一、小總結二、Logger對象的日誌等級三、使用多個處理器和多種格式化四、日誌回滾1. RotatingFileHandler2. TimedRotatingFileHandler五、RotatingHandler存在的問

原创 Keras 圖像預處理 ImageDataGenerator

本文目錄1. 簡介2. ImageDataGenerator類介紹使用示例3. ImageDataGenerator類方法3.1 fit()3.2 flow()3.3 flow_from_directory()3.4 flow_f

原创 Rasa開發使用 Rasa_NLU及Rasa_Core模型訓練與測試

文章目錄Rasa術語Rasa_NLU1. Pipeline2. 準備工作:訓練MITIE模型文件3. rasa_nlu 語料4. 訓練模型5. 測試驗證Rasa Core1. Stories可視化stories2. Domain3

原创 Python -m 參數

文章目錄查看解釋模塊和腳本使用 查看解釋 -m mod: run library modules as a script 將模塊當做腳本運行。 模塊和腳本 在python中,模塊,就是一個由代碼組成的普通腳本文件。通常會提供一些

原创 NLP工具——Gensim的model.keyedvectors模塊

文章目錄1、簡介2、如何獲取詞向量3、使用這些詞向量可以做什麼? 1、簡介 models.keyedVectors模塊實現了詞向量及其相似性查找。訓練好的此線路與訓練方式無關,因此他們可以由獨立結構表示。 該結構稱爲KeyedVe