原创 簡單PageRank的理解
最近由於要考試涉及PageRank算法在Hadoop上的實現，因此學習了一下PageRank的簡單模型。主要學習資料爲網易公開課上的一個大約半小時的視頻，：http://open.163.com/movie/2015/4/E/5/
2020-07-05 03:01:01
原创 bias and variance 的簡單理解
假設有下列模型，我們需要選擇其中一個較爲合適的模型作爲最終的預測模型。 我們知道隨着維度的增加其曲線也更加複雜，能夠更好地擬合訓練集上的數據，此時bias（偏差）很小，但是很可能在預測時表現卻不盡如人意（過度擬合）。 比較左圖
2020-07-05 03:01:01
原创 安裝Ubuntu 16.04時卡住的那些坑
Ubuntu對NVIDIA的顯卡支持也真是醉了。安裝和啓動各種卡在啓動界面，強制重啓數次。。。其實解決辦法都差不多，修改顯示方式 安裝時 在這裏按“e”建進入編輯，修改倒數第二行： 將 quite splash --- 改
2020-07-05 03:01:01
原创 安裝Python庫出錯，如numpy scipy scipy的解決辦法， 切換版本
python 版本切換： # 查看所有python版本及安裝位置 ls /usr/bin/python* # 查看當前版本 python --version 1、使用virtualenv建立獨立的python環境： 參考：廖雪
2020-07-05 03:01:01
原创 Ubuntu 16.04 + cuda8.0 + opencv3 + caffe的安裝，tensorflow-gpu的安裝
折騰了一天總算把caffe裝好了，其實主要是編譯庫的問題，記錄一些坑，跳過就好了。 另外吧，tensorflow-gpu的安裝前面安裝cuda和cudnn的幾步一樣，就不另開了吧。 cuda8.0 和 cudnn6.0的安裝
2020-07-05 03:01:01
原创 和服務器進行數據傳輸的相關問題
1. 亂碼的問題 關於亂碼的問題可以在服務器端設置接收和返回的數據編碼格式，參考另一篇文章http://blog.csdn.net/dod_jdi/article/details/68938615 2. 如何傳遞對象 Javb可以
2020-02-20 14:22:22
原创 import cv2 not module，win10 python3的問題
到 https://pypi.python.org/pypi/opencv-python 下載對應的opencv版本，注意cp後面的數字纔是對應的Python版本。 下載完成後使用命令安裝: pip install --user
2020-02-20 14:22:22
原创 如何使用TensorFlow進行深度學習
看了挺久的例子始終對TensorFlow的深度學習機制不甚明瞭，因此特地寫一下其使用流程吧，如有不對請糾正。 1、準備數據 深度學習當中一般有train，validation，test三種數據集，前面兩種可以將數據全部加載到程
2020-02-20 14:22:22
原创 建立可使用與遠程調試的僞分佈式Hadoop集羣
爲了進行遠程調試，在基本的Hadoop配置上修改幾個點： 首先修改主機名映射，修改/etc/hostname中的主機名，例如hadoop，然後在/etc/hosts文件中定定義ip地址 和主機名映射，例如 114.
2020-02-20 14:22:22
原创 CNN卷積神經網絡中的AlexNet、VGG、GoogLeNet、ResNet對比
文章轉載自：我愛機器學習的博客園 http://www.cnblogs.com/52machinelearning/p/5821591.html CNN的發展史 上一篇回顧講的是2006年Hinton他們的Sci
2020-02-20 14:22:21
原创 CNN卷積神經網絡的理解
斯坦福大學CS231N這門課真的不錯，網易雲公開課上有，視頻筆記集合： http://baijiahao.baidu.com/sid=1570790793398706&wfr=spider&for=pc 一般神經網絡結構和CN
2020-02-20 14:22:21
原创 運行hadoop運行示例的幾種方法
1、wordcount 建立input和output文件夾，在input下建立word子文件夾，並在其中添加兩個文本文件。 掛載到Hadoop上，查看上傳的文件。 命令格式： hadoop fs -命令 [參數] 執行示例。
2020-02-20 14:22:21
原创 eclipse使用插件遠程調試Hadoop
一、僞分佈式環境下 僞分佈式的配置參考http://blog.csdn.net/dod_jdi/article/details/78024664 1、在服務器上修改 /etc/hostname，設置新的主機名，如hadoop。
2020-02-20 14:22:21
原创 樸素貝葉斯算法的簡單理解
貝葉斯算法常用於分類 已知類別集合y：（y1,y2,y3…yn）和（特徵）項集和x（x1,x2,x3…xm)，確定映射規則y =f(x)使xi都可以唯一映射到Y中。 其中Y叫做類別集合，其中每一個元素是一個類別，而X叫做項集合，其
2020-02-20 14:22:21
原创 Linux修改主機名，添加用戶等事項
添加用戶 # 添加name並建立對應家目錄 sudo adduser name #添加到管理員組 sudo adduser name root # 添加到sudo組，以便可以使用sudo sudo adduser name s
2020-02-20 14:22:21