原创 intelliJ IDEA進行spark配置和開發

前言:一直在使用python做數據處理,閱讀spark官方文檔時到後半部分的MLlib機器學習部分有些機器學習方法竟然沒有python,很是遺憾,遂着手準備學學scale,畢竟原生語言,開發起來應該是絲絲入扣,順滑平坦。 1.下載int

原创 E: Some index files failed to download. They have been ignored, or old ones used instead.解決方案

1.刪除 /var/lib/apt/lists/所有文件 $ sudo rm /var/lib/apt/lists/* -vf 有文件夾不能刪除的話使用 $ sudo rm -rf /var/lib/apt/lists/* $ su

原创 Shell腳本加密

用shell腳本對系統進行自動化維護,簡單,便捷而且可移植性好. 但shell腳本是可讀寫的,很有可能會泄露敏感信息,如用戶名,密碼,路徑,IP等. 同樣,在shell腳本運行時會也泄露敏感信息. shc是一個加密shell腳本的工具.它

原创 Spark_Mllib系列之二———提取,轉化和特徵選擇

Extracting, transforming and selecting features 這部分將會講到特徵的算法,粗略的分爲一下幾個部分: 特徵的提取 TF-IDF 詞條頻率-逆向文件頻率是一種被廣泛使用在文本提取的向量化特

原创 Django 靜態文件訪問問題

教程

原创 Echart

echart排錯

原创 C語言算法

算法概覽: 插入排序 #include<stdio.h> #include<stdlib.h> int main(void) { int a[7]={12,5,2,6,4,8,7};     //定義一個需要排列的數組

原创 Ubuntu下一些小軟件的安裝

python 1.安裝pip $ sudo apt-get install python-pip $ pip install –upgrade pip 2.安裝pyhon科學包 安裝numpy $ sudo pip install

原创 linux點滴

1.對於 python setup.py 安裝的包,卸載的方法是到python2.7/dist-package根目錄進行文件刪除,使用pip uninstall 並不能刪除,儘量不要使用 python setup.py 安裝方法,很多是時

原创 Ubutun16.04好用的亮度調節工具

筆記本安裝ubuntu沒有獨立的亮度調節工具,很是苦惱,默認亮度能把眼睛給亮瞎了,下面介紹一款好用的ubuntu桌面亮度調節工具。 先來看一下安裝完成的效果圖: 圖上還有個ubuntu QQ ,有興趣安裝QQ點擊這個鏈接 安裝ub

原创 Scale

Scala 簡介 Scala 是 Scalable Language 的簡寫,是一門多範式的編程語言 聯邦理工學院洛桑(EPFL)的Martin Odersky於2001年基於Funnel的工作開始設計Scala。 Funnel是把函數式

原创 Ubuntu上安裝搜狗中文輸入法

1.先下載搜狗輸入法 搜狗輸入法for linux下載地址 下載好是個deb安裝包,直接雙擊安裝; 2.安裝fcitx輸入法替換iBus輸入法 $ sudo apt-get install fcitx-table-wbpy 3.添加s