原创 Win10 設置Python定時任務

文章目錄Win10 設置Python定時任務Win10 中設置定時任務使用特定 Python 環境指定定時任務 Win10 設置Python定時任務 Win10 中設置定時任務 在 Windows 系統下可以通過【任務計劃程序】設

原创 Django + uWSGI + nginx 部署 Python Web 應用

Django + uWSGI + nginx 部署 Python Web 應用 在實現一些算法模式後,考慮的就是模型的部署了。對於一些相對獨立的模型應用,如 OCR 識別引擎等,部署爲獨立的 Web 應用,以提供 API 的供其他

原创 Python 圖像處理的庫 Pillow,opencv 和 scikit-image 的基本用法

Python 圖像處理的庫 Pillow,opencv 和 scikit-image 的基本用法Pillow 包的使用Pillow 基本用法生成文字圖片Image 圖像與 base64 字符串互相轉換Image 圖像與 Numpy

原创 Numpy 拼接數組的各種方式

Numpy 拼接數組的各種方式拼接方法介紹numpy.append(arr, values, axis=None)numpy.concatenate((a1, a2, ...), axis=0, out=None)stack(),

原创 spark-submit 命令使用詳解

spark-submit 命令使用詳解 spark-submit 用戶打包 Spark 應用程序並部署到 Spark 支持的集羣管理氣上,命令語法如下: spark-submit [options] <python file> [

原创 批量修改圖片像素大小:Python GUI 交互界面實現

批量修改圖片像素大小:Python GUI 交互界面實現 1、Python 修改圖片像素大小 Python 的 PIL 包可以實現圖片的讀寫、像素大小的設置。 安裝 pillow 第三方模塊: pip install pillow

原创 PySaprk 將 DataFrame 數據保存爲 Hive 分區表

PySaprk 將 DataFrame 數據保存爲 Hive 分區表 創建 SparkSession from pyspark.sql import SparkSession spark = SparkSession.build

原创 數據預處理:PySpark 的實現線性插值填充缺失值

數據預處理:PySpark 的實現線性插值填充缺失值 1. Python 實現線性插值填充缺失值 實現函數爲: def linear_insert(x1, y1, x2, y2, insert_x): if type(in

原创 pyspark 實現對列累積求和

pyspark 實現對列累積求和 pandas 的 cumsum() 函數可以實現對列的累積求和。使用示例如下: import pandas as pd data = [1, 0, 0, 0, 1, 0, 0, 1, 0, 0,

原创 基於圖像識別和文字識別用 Python 提取視頻字幕

基於圖像識別和文字識別用 Python 提取視頻字幕 本文介紹使用 Python 基於圖像識別提取視頻中的字幕,並使用文字識別將字幕轉爲純文本。本文以權力的遊戲第一季第一集作爲示例。 本文主要使用 OpenCV 讀取視頻並進行圖像處理

原创 Python 爬蟲:requests 和 selenium 僞裝 headers 和代理應對反爬機制

Python 爬蟲:requests 和 selenium 僞裝 headers 和代理應對反爬機制 目錄 1、requests 僞裝 headers 發送請求 2、selenium 模擬使用瀏覽器僞裝 headers 3、req

原创 python 的 logging 模塊日誌功能使用詳解

python 的 logging 模塊日誌功能使用詳解 目錄 一、logging 基本用法 1、添加日誌記錄 2、日誌調用函數的使用 3、日誌輸出級別 4、設置日誌輸出格式 二、創建 logger 對象 三、給庫或者模塊添加日

原创 keras 入門:卷積神經網絡實現 MNIST 手寫數字識別

keras 入門:卷積神經網絡實現 MNIST 手寫數字識別 手寫數字識別問題作爲機器學習領域中的一個經典問題,本文介紹如何使用 keras 構建卷積神經網絡模型實現 MNIST 手寫數字識別。文本代碼只需更換訓練集目錄,修改圖片輸入

原创 python 讀取 MNIST 數據集,並解析爲圖片文件

python 讀取 MNIST 數據集,並解析爲圖片文件 MNIST 是 Yann LeCun 收集創建的手寫數字識別數據集,訓練集有 60,000 張圖片,測試集有 10,000 張圖片。數據集鏈接爲:http://yann.lec

原创 預測迴歸二:局部加權迴歸和懲罰線性迴歸

預測迴歸二:局部加權迴歸和懲罰線性迴歸 預測迴歸二:局部加權迴歸和懲罰線性迴歸 一、局部加權迴歸 原理 python 代碼實現 二、懲罰線性迴歸 2.1 嶺迴歸 2.2 lasso 縮減法 2.3 ElasticNet 形