原创 樹莓派實戰4:配置一小時發送一次郵件

接上 5、 配置crontab ,這是Linux 自帶的定時執行任務 。 輸入 crontab -e 開始配置 打開後你會看到很多# 在最後一行 輸入 */60 * * * * sh /home/pi/Desktop/check.sh

原创 樹莓派實戰3:配置開機自啓動

接上 4、 配置開機自啓動,修改rc.local 或者配置init.d ,這裏修改rc.local sudo nano /etc/rc.local 如果你的mail.py在Desktop 則在exit 0上面一行添加 cd /home/

原创 樹莓派實戰2:發送ip地址到自己郵箱

接上: 2、 發送郵件的程序: 網上有很多做法,通過web.py自帶的庫來發送郵件最爲方便 先配置python +web.py shell中輸入 p

原创 給臺式機補內存條

今天去給實驗室的電腦補了幾根內存條,結果有一根內存條插到主板上後,主板始終在滴 找到這個鏈接: http://www.pc841.com/article/20100615-178.html 看來一定是內存條衝突的原因了,但現在還有主板不兼

原创 spark使用過程中的問題

我的環境: scala2.10.6 Hadoop 2.6.2 jdk-8u66-linux-x64 spark1.5.2 一臺master,兩臺slave  問題1、 scala> val textFile =sc.textF

原创 算法導論第一章,第二章筆記

第一章,第二章 算法導論讀書筆記1、算法是什麼2、要知道幾種數據結構的優勢和侷限比如排序算法NP問題是什麼循環不變性,算法正確性的證明布爾運算符  

原创 對spark中RDD的理解

update at 2016.1.25 RDD作者的論文鏈接 https://www.cs.berkeley.edu/~matei/papers/2012/nsdi_spark.pdf 論文的理解: spark要解決的問題: 1、有些數

原创 對hosts文件的理解

hosts文件的一些知識 1、 如何修改hosts並讓它生效 位置:/etc/hosts hosts的作用:類似於dns服務器,提供IP地址到hos

原创 ubuntu terminal 配色問題

這兩天在看spark的日誌,實在受不了terminal的配色,顧找到這個帖子 http://www.cnblogs.com/ayseeing/p/3620540.html 解決辦法是: 修改~/.bashrc 在最後一行加上 PS1=

原创 樹莓派實戰1:查詢自己內網,外網ip

這4個實戰合起來的完成效果就是:讓樹莓派每小時把自己ip地址通過郵件自動地發送到自己郵箱 實戰2 :http://blog.csdn.net/make_app/article/details/47305179 實戰3 :http://b

原创 對spark中RDD的API的理解

鏈接:https://www.zybuluo.com/jewes/note/35032 對RDD,和RDD中map,reduce等API的理解 我的理解如下: RDD: Resilient Distributed Datasets(彈性

原创 ubuntu下opencv的配置

安裝OPENCV過程 參考網頁: http://blog.csdn.net/a1429331875/article/details/31539129 http://docs.opencv.org/doc/tutorials/introd

原创 編寫第一個用scala寫的spark任務,用sbt打包成jar,並單機模式下運行

一、編寫第一個用scala寫的spark應用: 仿照spark的 quick-start的Self-Contained Applications寫出第一個scala完整程序 鏈接如下:http://spark.apache.org/doc

原创 在使用sudo命令時如何不用輸入密碼或減少輸入的次數?

在使用sudo命令時如何不用輸入密碼或減少輸入的次數? 方法1、sudo ./script.sh 但要輸入第一次的密碼 方法2、 echo password|sudo -S apt-get update-S的意思是,講密碼從standar

原创 spark on yarn 的安裝

spark有兩種集羣模式 分別是spark on yarn和standalone spark on yarn: 運行在 yarn(Yet Another Resource Negotiator) 資源管理器框架之上,由 yarn 負責資源