原创 Spark案例練習-打包提交

關注公衆號:分享電腦學習回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新)雲盤目錄說明:tools目錄是安裝包res 目錄是每一個課件對應的代碼和資源等doc 目錄是一些第三方的文檔工具承接上一篇文檔《Spark案例練習-PV的

原创 圖表顯示日誌離線信息

關注公衆號:分享電腦學習回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新)雲盤目錄說明:tools目錄是安裝包res 目錄是每一個課件對應的代碼和資源等doc 目錄是一些第三方的文檔工具承接上一篇文檔《Hive分析統計hour信

原创 Hive分析統計離線日誌信息

關注公衆號:分享電腦學習回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新)雲盤目錄說明:tools目錄是安裝包res 目錄是每一個課件對應的代碼和資源等doc 目錄是一些第三方的文檔工具承接上一篇文檔《新增訪客數量MR統計之MR

原创 新增訪客數量MR統計之數據庫準備

關注公衆號:分享電腦學習回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新)雲盤目錄說明:tools目錄是安裝包res 目錄是每一個課件對應的代碼和資源等doc 目錄是一些第三方的文檔工具承接上一篇文檔《新增訪客數量MR統計之Re

原创 新增訪客數量MR統計之NewInstallUserMapper相關準備

關注公衆號:分享電腦學習回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新)雲盤目錄說明:tools目錄是安裝包res 目錄是每一個課件對應的代碼和資源等doc 目錄是一些第三方的文檔工具承接上一篇文檔《新增訪客數量MR統計之Ne

原创 新增訪客數量MR統計之NewInstallUserMapper中維度信息準備

關注公衆號:分享電腦學習回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新)雲盤目錄說明:tools目錄是安裝包res 目錄是每一個課件對應的代碼和資源等doc 目錄是一些第三方的文檔工具承接上一篇文檔《向HBase添加日誌信息》

原创 新增訪客數量MR統計之MR數據輸出到MySQL

關注公衆號:分享電腦學習回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新)雲盤目錄說明:tools目錄是安裝包res 目錄是每一個課件對應的代碼和資源等doc 目錄是一些第三方的文檔工具承接上一個文檔《新增訪客數量MR統計之數據

原创 新增訪客數量MR統計之Reduce和Runner相關準備

關注公衆號:分享電腦學習回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新)雲盤目錄說明:tools目錄是安裝包res 目錄是每一個課件對應的代碼和資源等doc 目錄是一些第三方的文檔工具承接上一篇文檔《新增訪客數量MR統計之Ne

原创 Spark案例練習-UV的統計

關注公衆號:分享電腦學習回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新)雲盤目錄說明:tools目錄是安裝包res 目錄是每一個課件對應的代碼和資源等doc 目錄是一些第三方的文檔工具承接上一篇文檔《Spark案例練習-PV的

原创 Spark案例練習-PV的統計

關注公衆號:分享電腦學習回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新)雲盤目錄說明:tools目錄是安裝包res   目錄是每一個課件對應的代碼和資源等doc  目錄是一些第三方的文檔工具承接上一篇文檔《Spark應用的結構

原创 Spark應用的結構的學習

關注公衆號:分享電腦學習回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新)承接上一篇文檔《Standalone集羣搭建和Spark應用監控》需要了解的概念一、Spark應用的結構(Driver + Executors)(一)、D

原创 編寫程序向HBase添加日誌信息

關注公衆號:分享電腦學習回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新)承接上一篇文檔《日誌信息和瀏覽器信息獲取及數據過濾》上一個文檔最好做個本地測試將map方法改爲public,做一個測試看是否有錯誤代碼,代碼和之前的Mai

原创 Nginx日誌通過Flume導入到HDFS中

關注公衆號:分享電腦學習回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新)flume上傳到hdfs:當我們的數據量比較大時,比如每天的日誌文件達到5G以上使用hadoop的put命令不穩定後期考慮引入新的日誌上傳框架flumes

原创 日誌通過腳本導入到HDFS當中

關注公衆號:分享電腦學習回覆"百度雲盤" 可以免費獲取所有學習文檔的代碼(不定期更新)利用shell腳本定時備份日誌數據到HDFS上(適合日誌數據比較少的時候)時間命令date +"%Y%m%d" 今天的日期date -d "1 day a

原创 Java實現163郵箱發送郵件到QQ郵箱

注:圖片如果損壞,點擊文章鏈接:https://www.toutiao.com/i6812973124141711876/先創建一個maven的普通項目添加依賴,附在文檔末尾其中幾個注意的地方主方法入口有一個包下載不下來,手動導入下準備一個