原创 遠程訪問CentOS的jupyter,相關配置

1. 生成jupyter notebook的配置文件,命令: jupyter notebook --generate-config 會生成文件~~./jupyter/jupyter_notebook_config.py 2. 生成sha

原创 Centos無法ping通百度,不能上網的解決辦法

1. 首先查看Linux服務器的ip地址,命令ifconfig, 或者ifconfig 網卡。主要是查看是否配置DNS,如果沒有配置DNS就無法上網。情況如下: 2. 配置DNS相關信息,編輯 /etc/resolv.conf,添加如

原创 最簡單的梯度下降法

梯度下降法,主要通過梯度方向與學習率兩個值,一步一步迭代求出最優值的過程。 1. 隨機產生開始迭代的初始值,包括x值,學習率; 2. 計算函數的導數,通過學習率與導數的乘積更新x,即 其中是學習率,是函數的導數。 3. 用更新的x,更新

原创 CNN激活函數與選擇經驗,CNN層級結構與典型CNN

1. 激活函數 2.激勵層選擇函數的經驗: (1) 儘量不要使用Sigmoid; (2) 首先試用ReLU,原因是快,但需要小心; (3) 如果(2)失效,使用Leaky ReLU或Maxout; (4) 某些情況下,tanh到有不錯的

原创 過擬合原因與解決思路

過擬合的原因: 1. 數據有噪聲 問題解決思路:去燥方法 2. 訓練數據不足,有限的訓練數據 問題解決思路:數據增強,增加訓練數據樣本。 3. 訓練模型過度導致模型非常複雜 問題解決思路:正則化(限制權值),通過給損失函數引入額外信息給模

原创 深度學習圖繪製工具彙總

1. NN-SVG 麻省理工學院弗蘭克爾生物工程實驗室, 該實驗室開發可視化和機器學習工具用於分析生物數據。 GitHub地址:https://github.com/zfrenchee 畫圖工具體驗地址:http://alexlenai

原创 CIFAR10中的KNN分類

1. KNN思路        相對於NN算法而言,KNN的關鍵在於,通過歐式距離計算待分類圖像與訓練集圖像之間的距離,做距離之間從小到大的排序,找出前K個從小到大出現次數最多的標籤作爲預測分類標籤。具體的示意圖如圖1所示。      

原创 PCA(主成分分析方法)

  目錄 1. 降維問題 2. 向量與基變換 2.1 內積與投影 2.2 基 2.3 基變換的矩陣 3. 協方差矩陣及優化目標 3.1 方差 3.2 協方差 3.3 協方差矩陣 3.4 協方差矩陣對角化 4. 算法與實例 4.1 PCA算

原创 CIFAR10圖像生成與NN分類

1. CIFAR10的數據集描述        整個CIFAR10數據集包括5個batch,一個test,整個數據集文件如圖1所示。其中數據集以字典形式存放,包括數據集的名稱、標籤、數據矩陣、圖片文件名稱四個數據。標籤範圍從0到9變化,數

原创 git使用篇

                                                    GIT篇 1. 分佈式與集中式管理 (1) 集中式管理控制:版本庫是集中存放在中央服務器,做代碼處理的時候都是在自己的個人電腦上,處理

原创 數據挖掘、機器學習、人工智能、數據科學解釋

數據挖掘(Data Mining) 有目的的從現有大數據中提取數據的模式(Pattern)和模型(Model),精選出最重要的信息,爲機器學習與AI做準備。核心目的是找到數據之間的關係。 關鍵詞:模式提取,大數據   機器學習(Machi

原创 DataFrame中resample函數時間戳篩選

例如 dataframe.resample('M',how=np.mean) # 按照每個月求平均值 dataframe.resample('M',how=np.median) # 按照月求中位數 其中第一個參數的解釋 B

原创 UCI庫的下載地址

http://archive.ics.uci.edu/ml/datasets.html  

原创 python程序轉可執行文件

windows版本 1、需要安裝pyinstaller,通過以下命令:      通過pip install pyinstaller 其中pyinstaller對python3.6不兼容問題,但是在打包時會出現問題。解決辦法是升級pyth

原创 Linux相關命令集

1、查看Linux相關進程命令      查看所有進程:ps -aux      查看指定進程:ps -aux | grep 指定名稱 2、查看當前目錄文件個數      ls -l | grep -c '^-' 3、查詢日誌文件