原创 Learning Spark筆記2-RDD介紹

RDDs編程 一個RDD是一個簡單分佈式元素集合。在Spark中所有的工作都表達爲要麼創建新的RDDs,轉變已存在RDDs,要麼在RDDs中執行計算

原创 交換機斷電後hdfs不可用

交換機斷電後hdfs不可用 org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.ipc.

原创 mysql修改權限

mysql權限 顯示用戶權限 mysql> show grants for jeffrey@localhost; 通常,數據庫管理員首先創建用戶,定

原创 yii2使用隨記

1.時間範圍判斷 $machines = Machine::find() ->select('id,name') ->andFilterWhere(

原创 python抓頁面基礎知識

python抓頁面基礎知識 1.定義函數根據url獲得頁面  def getPageContent(self,url):         reque

原创 oracle使用listagg查詢電影數據

需求 電影名、類別、播放次數、評分 已知的表結構 MOVIE表 MOVIE_ID TITLE YEAR BUDGET GROSS PLOT_SUMM

原创 centos一句話將數據導入遠程mysql的表中

/home/hdfs/platform/mysql/mysql/bin/mysql -h192.168.x.x -uroot -proot -e "

原创 PaddlePaddle一步一步預測波士頓房價

PaddlePaddle一步一步預測波士頓房價 如何開始 針對PaddlePaddle新手入門的閱讀順序,本人建議先閱讀Fluid編程指南,然後再看快速入門,在針對上一篇搭建簡單網絡之後,本次爲大家解讀一下快速入門-線性迴歸,個人

原创 phpstorm調試環境

phpstorm debug 網站相當於服務端,打開監聽。 1.配置php.ini zend_extension = "C:\xampp\php\e

原创 服務器重啓後,hostname改變,hdfs不能上傳文件

服務器重啓後,hostname改變,hdfs不能上傳文件 1.修改hostname #hostname newname java.net.NoRou

原创 yii1.1隨記

yii1.1隨記 1.view視圖中顯示多表關聯的數據(無需外鍵) 生成model,生成CRUD,登錄後臺進入,進入Manage XXX,出現列表選

原创 centos vnc 使用

1.查看vnc服務 #vncserver -list 2.關閉指定的vnc服務#vncserver -kill :1 3.啓動vnc #vncse

原创 微信公衆平臺開發

微信公衆開發 準備wechat開發準備lanewechat框架 1.微信公衆號彈出自己的頁面 (1)接口權限,點擊修改,添加域名 網頁賬號 網頁授權

原创 shell編程基礎

shell多行註釋 :<<! ... ! 1.去掉文件中的雙引號並保存爲一個新的文件 cat xx.xx | sed 's/\"//g' > xx.xx 2.查看自己的shell echo $SHELL 3.grep查找字符串 g

原创 Learning Spark筆記3-傳遞函數給Spark

傳遞函數給Spark 大多數的Spark轉換和一些動作都依賴傳遞函數計算數據。 1.Python  在Python中我們使用3種形式傳遞函數到Spa