原创 windows10下spark2.3.0本地開發環境搭建-親測

 1  windows10下spark2.3.0本地開發環境搭建文檔下載地址:https://download.csdn.net/download/hambition/10492232由於博文上傳圖片比較麻煩,圖片又非常之多,沒分的同學可

原创 [Java集合] 徹底搞懂HashMap,HashTable,ConcurrentHashMap之關聯

注: 今天看到的一篇講hashMap,hashTable,concurrentHashMap很透徹的一篇文章, 感謝原作者的分享. 原文地址: http://blog.csdn.net/zhangerqing/article/detail

原创 Spark性能優化指南——基礎篇

前言在大數據計算領域,Spark已經成爲了越來越流行、越來越受歡迎的計算平臺之一。Spark的功能涵蓋了大數據領域的離線批處理、SQL類處理、流式/實時計算、機器學習、圖計算等各種不同類型的計算操作,應用範圍與前景非常廣泛。在美團•大衆點

原创 Spring Boot乾貨系列:(二)配置文件解析

Spring Boot乾貨系列:(二)配置文件解析 2017-02-28 嘟嘟MD 嘟爺java超神學堂   前言 上一篇介紹了Spring Boot的入門,知道了Spring Boot使用“習慣優於配置”(項目中存在大量的配置,此外還

原创 給你一份Spring Boot核心知識清單

轉自:https://cloud.tencent.com/info/88a5aa7509b29778add29dc279a3734b.html預警:本文非常長,建議先 mark 後看,也許是最後一次寫這麼長的文章說明:前面有 4 個小節關

原创 多圖技術貼:深入淺出解析大數據平臺架構

目錄: 什麼是大數據Hadoop介紹-HDFS、MR、Hbase大數據平臺應用舉例-騰訊公司的大數據平臺架構 “就像望遠鏡讓我們能夠感受宇宙,顯微鏡讓我們能夠觀測微生物一樣,大數據正在改變我們的生活以及理解世界的方式……”。 大數據的

原创 管理到底是管人,還是管事?

如果說管理難,它真的很難;如果說管理簡單,它又真的很簡單。   什麼叫管理?學過相關管理課程的人,都知道管理的定義是什麼。管理就是機構內人與資源的結合,去實現目標、共同工作的過程。   但我不認爲大家真正理解它。   1 什麼是最重要的

原创 Java併發編程:volatile關鍵字解析

volatile這個關鍵字可能很多朋友都聽說過,或許也都用過。在Java 5之前,它是一個備受爭議的關鍵字,因爲在程序中使用它往往會導致出人意料的結果。在Java 5之後,volatile關鍵字才得以重獲生機。volatile關鍵字雖然從

原创 史上最全的Maven Pom文件標籤詳解

轉自:https://www.cnblogs.com/sharpest/p/7738444.html<span style="padding:0px; margin:0px"><project xmlns="http://maven.ap

原创 maven(一) maven到底是個啥玩意

轉自:https://www.cnblogs.com/whgk/p/7112560.html該篇文章篇幅很長,大概的思路如下          maven的介紹,初步認識,獲取jar包的三個關鍵屬性 --> 介紹倉庫(獲取的jar包從何而

原创 Spark性能優化指南——高級篇

前言繼基礎篇講解了每個Spark開發人員都必須熟知的開發調優與資源調優之後,本文作爲《Spark性能優化指南》的高級篇,將深入分析數據傾斜調優與shuffle調優,以解決更加棘手的性能問題。數據傾斜調優調優概述有的時候,我們可能會遇到大數

原创 各種分類算法比較

各種分類算法比較最近在學習分類算法,順便整理了各種分類算法的優缺點。1決策樹(Decision Trees)的優缺點 決策樹的優點: 一、           決策樹易於理解和解釋.人們在通過解釋後都有能力去理解決策樹所表達的意義。

原创 HMM模型和Viterbi算法

https://www.cnblogs.com/Denise-hzf/p/6612212.html一、隱含馬爾可夫模型(Hidden Markov Model)1、簡介  隱含馬爾可夫模型並不是俄羅斯數學家馬爾可夫發明的,而是美國數學家鮑

原创 Spark 以及 spark streaming 核心原理及實踐

轉自:https://www.cnblogs.com/liuliliuli2017/p/6809094.html導語spark 已經成爲廣告、報表以及推薦系統等大數據計算場景中首選系統,因效率高,易用以及通用性越來越得到大家的青睞,我自己

原创 從決策樹學習談到貝葉斯分類算法、EM、HMM

從決策樹學習談到貝葉斯分類算法、EM、HMM 引言     最近在面試中,除了基礎 &  算法 & 項目之外,經常被問到或被要求介紹和描述下自己所知道的幾種分類或聚類算法(當然,這完全不代表你將來的面試中會遇到此類問題,只是因爲我的