原创 後臺管理界面佈局

     本文主要介紹基於前端模板hadmin實現左上右佈局。左側是導航欄,右側顯示主題內容。       代碼下載地址: 鏈接: https://pan.baidu.com/s/1YLw_ozSxXQ-VKni27u-c5Q

原创 Apache Storm簡介及安裝

一、環境準備 3臺虛擬機 ○ 主機名分別是:L0, L2, L3 ○ 操作系統:CentOS 6.7 ○ 已經裝有JDK 7 ○ 已經裝有 zookeeper-3.4.10 apache-storm-0.9.6.tar.gz

原创 Initialization failed for Block pool (Datanode Uuid unassigned)

文章目錄一、原因二、解決:2.1思路:2.2步驟: 一、原因 是namenode和datanode的clusterID不一致導致datanode無法啓動. 二、解決: 2.1思路: 刪除data、tmp、namenode 數據後,重新

原创 CentOS 安裝redis

     Redis是一種內存數據結構存儲,用作數據庫服務器,緩存和消息代理。 Redis是用C編程語言編寫的。      本教程將幫助您在CentOS 7/6服務器上安裝Redis服務器。 步驟1 準備      Redis軟件包

原创 NoSuchMethodException ArrayWritable.() 解決

     在進行hadoop 的map reduce時,有時候會用ArrayWriteable作爲KeyIN,KeyOut,ValueIn,ValueOut。編譯時候可以通過,但是執行的時候會拋出異常NoSuchMethodExcep

原创 同一表單上傳頭像並提交文本值

文章目錄一、開發環境二、界面截圖三、關鍵代碼      傳統的表單中要上傳圖片的時候,需要在form標籤中追加enctype=“multipart/form-data” 參數。但是增加該屬性後,同一個表單中 【input type=“

原创 通過java代碼動態生成jar文件

     當java工程代碼編寫結束準備生成jar文件時,常見的方法是通過工程構建工具(如:maven、Ant)自動創建或者通過IDE導出jar包。其實還可以自己編寫java代碼動態生成jar文件。 工程截圖 HelloWorld

原创 Hadoop3與Hadoop2及Spark比較

     2017年12月發佈的Hadoop 3標誌着數據科學新時代的開始。Hadoop框架是整個Hadoop生態系統的核心,其他各種庫都依賴它。      在本文中,我們將討論Hadoop 3與Hadoop 2相比的主要變化。我們還

原创 ExitCodeException exitCode=-1073741701

     在博客windows系統通過eclipse遠程MapReduce服務器中部署環境後,有個別機器會出現ExitCodeException exitCode=-1073741701 異常,主要原因是windows操作系統缺少文件

原创 解決 MySQL is running but PID file could not be found

   通過【centOS中安裝MySql及Hive】方式安裝MySQL後,少數情況下啓動服務提示錯誤 ERROR! The server quit without updating PID file (/usr/local/mysql

原创 Python3 常見安裝錯誤及解決方法

文章目錄錯誤一 缺少api-ms-win-crt-runtime-1-1-0.dll原因:解決:錯誤二 錯誤0x80070422原因:解決: 錯誤一 缺少api-ms-win-crt-runtime-1-1-0.dll 原因: 系統缺

原创 通過CMD結束端口被佔用的進程

文章目錄一、代碼二、運行       開發程序過程中,經常會遇到【xx端口被佔用】的情況,一種解決方法就是通過任務管理器結束對應的進程,如果任務管理器被禁用,往往只能重啓機器。以下是我寫的一段cmd批處理,用於結束被佔用的進程。 一、

原创 shell 基礎練習

文章目錄1. 列車指定目錄中文件的個數和目錄的個數(不包括子目錄)2.通過shell完成以下功能,在家目錄下,創建一個子目錄apples,在apples目錄中創建10個文件, 1. 列車指定目錄中文件的個數和目錄的個數(不包括子目錄)

原创 Spark-Shell運行任務

文章目錄1.Spark-Shell 交互式編程1.1 啓動命令1.2 Spark-Shell中運行wordcount2. spark-submit提交Job    開始本篇博客之前,請先準備好環境,參見【上一篇 Spark集羣部署】

原创 Spark集羣部署

文章目錄1.集羣角色2.安裝部署2.1 部署前環境準備2.2 部署spark 1.集羣角色    從物理部署層面上來看,Spark主要分爲兩種類型的節點,Master節點和Worker節點,Master節點主要運行集羣管理器的中心化部