原创 Spark案例練習-打包提交

關注公衆號:分享電腦學習 回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新) 雲盤目錄說明: tools目錄是安裝包 res 目錄是每一個課件對應的代碼和資源等 doc 目錄是一些第三方的文檔工具 承接上一篇文檔《Spark案

原创 圖表顯示日誌離線信息

關注公衆號:分享電腦學習 回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新) 雲盤目錄說明: tools目錄是安裝包 res 目錄是每一個課件對應的代碼和資源等 doc 目錄是一些第三方的文檔工具 承接上一篇文檔《Hive分析

原创 Hive分析統計離線日誌信息

關注公衆號:分享電腦學習 回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新) 雲盤目錄說明: tools目錄是安裝包 res 目錄是每一個課件對應的代碼和資源等 doc 目錄是一些第三方的文檔工具   承接上一篇文檔《新增訪客

原创 新增訪客數量MR統計之數據庫準備

關注公衆號:分享電腦學習 回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新) 雲盤目錄說明: tools目錄是安裝包 res 目錄是每一個課件對應的代碼和資源等 doc 目錄是一些第三方的文檔工具   承接上一篇文檔《新增訪客

原创 新增訪客數量MR統計之NewInstallUserMapper相關準備

關注公衆號:分享電腦學習 回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新) 雲盤目錄說明: tools目錄是安裝包 res 目錄是每一個課件對應的代碼和資源等 doc 目錄是一些第三方的文檔工具   承接上一篇文檔《新增訪客

原创 新增訪客數量MR統計之NewInstallUserMapper中維度信息準備

關注公衆號:分享電腦學習 回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新) 雲盤目錄說明: tools目錄是安裝包 res 目錄是每一個課件對應的代碼和資源等 doc 目錄是一些第三方的文檔工具   承接上一篇文檔《向HBa

原创 新增訪客數量MR統計之MR數據輸出到MySQL

關注公衆號:分享電腦學習 回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新) 雲盤目錄說明: tools目錄是安裝包 res 目錄是每一個課件對應的代碼和資源等 doc 目錄是一些第三方的文檔工具   承接上一個文檔《新增訪客

原创 新增訪客數量MR統計之Reduce和Runner相關準備

關注公衆號:分享電腦學習 回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新) 雲盤目錄說明: tools目錄是安裝包 res 目錄是每一個課件對應的代碼和資源等 doc 目錄是一些第三方的文檔工具   承接上一篇文檔《新增訪客

原创 Spark案例練習-UV的統計

關注公衆號:分享電腦學習 回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新) 雲盤目錄說明: tools目錄是安裝包 res 目錄是每一個課件對應的代碼和資源等 doc 目錄是一些第三方的文檔工具   承接上一篇文檔《Spar

原创 Spark案例練習-PV的統計

關注公衆號:分享電腦學習 回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新) 雲盤目錄說明: tools目錄是安裝包 res   目錄是每一個課件對應的代碼和資源等 doc  目錄是一些第三方的文檔工具 承接上一篇文檔《Spa

原创 Spark應用的結構的學習

關注公衆號:分享電腦學習 回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新) 承接上一篇文檔《Standalone集羣搭建和Spark應用監控》 需要了解的概念 一、Spark應用的結構(Driver + Executors)

原创 編寫程序向HBase添加日誌信息

關注公衆號:分享電腦學習 回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新) 承接上一篇文檔《日誌信息和瀏覽器信息獲取及數據過濾》 上一個文檔最好做個本地測試 將map方法改爲public,做一個測試看是否有錯誤代碼,代碼和

原创 Nginx日誌通過Flume導入到HDFS中

關注公衆號:分享電腦學習 回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新) flume上傳到hdfs: 當我們的數據量比較大時,比如每天的日誌文件達到5G以上 使用hadoop的put命令不穩定 後期考慮引入新的日誌上傳框架

原创 日誌通過腳本導入到HDFS當中

關注公衆號:分享電腦學習 回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新) 利用shell腳本定時備份日誌數據到HDFS上(適合日誌數據比較少的時候) 時間命令 date +"%Y%m%d" 今天的日期 date -d "1

原创 Java實現163郵箱發送郵件到QQ郵箱

注:圖片如果損壞,點擊文章鏈接:https://www.toutiao.com/i6812973124141711876/ 先創建一個maven的普通項目   添加依賴,附在文檔末尾 其中幾個注意的地方 主方法入口   有一個包下載不