原创 Ganglia監控Apache Haoop集羣部署文檔&參數表一覽(最全面)

雖然工作幾年了,卻是第一篇技術博客。不爲別的,用多了前輩們的分享,不出點力也說不過去不是! 廢話不多說,如題。這是一篇非常詳盡的Ganglia監控Apache Hadoop集羣的部署實施文檔並附有全面的監控參數和解析。能共享的部分都貼出來

原创 基於opencv python貓臉識別(一)

安裝opencv-python pip install opencv-python python-3.6 ,opencv-3.4 下載貓臉分類器 opencv分類器下載地址 haarcascade_frontalcatface

原创 安裝Idea(集成scala)以及在windows上配置spark(hadoop依賴)本地開發環境

這兩天花了點時間重裝了win 10,必要的開發常用工具如IDE Idea以及運行spark等任務需要的hadoop本地依賴環境重新配起來,記錄下簡要步驟和幾個小問題希望能給正在學習的小夥伴一點幫助。 解決idea環境中spark

原创 Apache Beam WordCount編程實戰及源碼解讀

概述:Apache Beam WordCount編程實戰及源碼解讀,並通過intellij IDEA和terminal兩種方式調試運行WordCount程序,Apache Beam對大數據的批處理和流處理,提供一套先進的統一的編程模型,