原创 深度學習框架：動態圖 vs 靜態圖
根據MxNet深度學習框架官方文檔 （https://mxnet.incubator.apache.org/versions/master/architecture/program_model.html#symbolic-vs-imp
2019-04-05 05:52:26
49
原创 安裝好2013版的office，右鍵新建是Microsoft Office 2007的解決辦法
原因 都是萬惡的WPS惹的禍，卸載wps沒有卸載乾淨。 解決辦法 一、按下組合鍵Win+R調出系統運行對話框，並在對話框中輸入：regedit 二、針對word：刪除HKEY_CLASSES_ROOT以下幾個文件夾： ① Word.D
2019-03-03 18:49:15
原创 CIFAR-10和CIFAR-100數據集說明
翻譯自： http://www.cs.toronto.edu/~kriz/cifar.html CIFAR-10和CIFAR-100是帶有標籤的數據集，它們是8000萬個微小圖像數據集的子集，他們由Alex Krizhevsky，Vi
2019-02-22 01:52:40
87
原创 scikit-learn的基本用法——模型保存與加載
import pickle from sklearn.svm import SVC from sklearn import datasets # 定義分類器 svm = SVC() # 加載iris數據集 iris = datas
2019-02-14 18:31:43
原创 深度學習中parameters個數和FLOPS計算（以CNN中經典的AlexNet網絡結構爲例）
面試時遇到過計算神經網路的參數個數以及FLOPS計算，當時對FLOPS計算比較蒙圈，這兩天又看到了美團發佈的技術博客對深度學習計算量的解決方案中又出現了FLOPS相關概念，所以通過查閱好多大佬的博客把FLOPS的計算問題理解清楚。 前
2019-02-01 14:16:10
575
原创 詳解scikit-learn計算ROC/AUC曲線
ROC和AUC定義 ROC全稱是“受試者工作特徵”（Receiver Operating Characteristic）。ROC曲線的面積就是AUC（Area Under the Curve）。AUC用於衡量“二分類問題”機器學習算法
2019-02-01 14:16:10
21
原创 Linux如何查看進程、殺死進程
1.查進程 ps命令查找與進程相關的PID號： ps a 顯示現行終端機下的所有程序，包括其他用戶的程序。 ps -A 顯示所有程序。 ps c 列出程序時，顯示每個程序真正的指令名稱，而不包含路徑，參數或常駐服務的標示。 ps -e
2019-02-01 14:16:09
原创 Spark作業提交的方式
在Spark中，支持4種運行模式： 1）Local：開發時使用 2）Standalone： 是Spark自帶的，如果一個集羣是Standalone的話，那麼就需要在多臺機器上同時部署Spark環境 3）YARN：建議大家在生產上使用
2019-02-01 14:16:09
1
原创 PySpark計算均值、方差、偏度和峯度
python實現 import math import numpy as np def calc(data): n=len(data) # 10000個數 niu=0.0 # niu表示平均值,即期望. niu
2019-01-25 18:38:16
38
原创 Python中sys.stdin和fileinput讀取標準輸入
源自《Python Linux系統管理與自動化運維》第3章打造命令行工具。 1. 使用sys.stdin和fileinput讀取標準輸入 衆所周知，Shell腳本具有一個其他腳本語言都沒有的優點，那就是管道。管道可以銜接不同的Linu
2019-01-25 18:38:16
13
原创 特徵處理之使數據分佈逼近正態分佈
前言 在機器學習和深度學習中，我們經常要對輸入的數據做歸一化或者在隱藏層使用Batch-Normlization（BN）操作，將數據範圍縮放到[0,1]或者[-1, 1]之間，主要作用：可以加快神經網絡訓練速度，防止過擬合。然而無論做
2019-01-25 18:38:16
原创 查看pb模型文件中的ops和tensor並使用Tensorbord可視化模型
加載pb模型文件，並輸出定義 model = 'model.pb' with tf.Session() as sess: with open(model, 'rb') as model_file: graph_
2019-01-17 18:10:02
原创 TensorFlow模型載入方法彙總
一、TensorFlow常規模型加載方法 保存模型 加載模型 不加載圖結構，只加載參數 加載圖結構和參數 簡化版本 二、TensorFlow二進制模型加載方法 三、二進制模型製作 四、從圖上讀取張量 從二進制模型加載張量
2019-01-17 18:10:02
原创 Linux用ls和grep統計文件個數
Linux ls命令 Linux ls命令用於顯示指定工作目錄下之內容（列出目前工作目錄所含之文件及子目錄)。 語法 ls [-alrtAFR] [name...] 參數 : -a 顯示所有文件及目錄 (ls內定將文件名或目錄名稱
2019-01-16 18:15:55
2