原创 我的友情鏈接

51CTO博客開發

原创 我的友情鏈接

51CTO博客開發

原创 菜鳥寫了一段代碼,求人debug!

#include<iostream>#include<string>using namespace std;class xuexiao                                        //定義一個學校的基類;{

原创 java記錄-集合

一、集合與數組數組(可以存儲基本數據類型)是用來存儲對象的一種容器,數組的長度是固定的,不適合在對象長度未知的情況下使用。集合(只能存儲對象,對象的類型可以不一樣)他的長度是可變的,可在多數的情況下使用。二、層次關係Collection├

原创 java記錄-String的基礎知識

1.String 類是不可改變的,所以你一旦創建了 String 對象,那它的值就無法改變了,因爲String使用private final char value[]來實現字符串的存儲。2.String是一個對象,不是基本的數據類型,ch

原创 java記錄-JDBC連接池的設計

設計一個數據庫連接池的幾個步驟和要點一:步驟首先要創建一個工具類,然後在類中創建靜態代碼塊中加載驅動。// 靜態代碼塊中直接加載數據庫驅動 static { try { String driver = Config

原创 spark性能調優-配置調優

1.在spark-submit shell中主要參數爲:--num-executors  3 \ 配置executor的數量--driver-memory  100m \ 配置driver的內存容量--executor-memory  1

原创 spark調優-並行度調優

一個spark任務爲一個application一個job的劃分爲一個action操作觸發一個job可以被分爲多個stage,在一個lineage中,發生shuffle操作時會拆分一個stage,shuffle操作一般發生在以下的幾個算子中

原创 java記錄-單例模式的原理

1.單例模式是什麼意思:我們自己定義的類,默認情況下是可以被外界的代碼隨意創建任意多個實例的,但是有時候我們不希望外界去隨意的創建實例,而是在整個程序運行期間,只有一個實例類。2.實現單例模式有幾個要點:(1).不想讓外界隨意創建實例,那

原创 java記錄-幾種常用的工廠模式

簡單(靜態)工廠:一個栗子: 我喜歡吃麪條,抽象一個麪條基類,(接口也可以),這是產品的抽象類。public abstract class INoodles { /** * 描述每種麪條啥樣的 */ p

原创 spark 學習記錄 二次Key排序的使用方法

目的是爲了當key相同的時候,對value進行自定義排序//二次排序,具體實現步驟//第一步:按照Ordered和Serrializable接口實現自定義排序的Key按照需要排序的字段重寫ordered的方法//第二步:將要進行二次排序的

原创 spark 學習記錄 rdd 轉 dataframe 寫入mysql的示例

spark在離線批處理或者實時計算中都可以將rdd轉成dataframe進而通過簡單的sql命令對數據進行操作,對於熟悉sql的人來說在轉換和過濾過程很方便,甚至可以有更高層次的應用,比如在實時這一塊,傳入kafka的topic名稱和sq

原创 java記錄-關於內部類的使用

1.何爲內部類:顧名思義就是包含在類中的類,就叫做內部類,內部類就兩種:靜態內部類和非靜態內部類;2.靜態內部類:public class School{    private static School school = null; 

原创 spark 學習記錄 -- Spark中foreachPartition和partitions.foreach的區別

foreachPartition 屬於action運算操作,而mapPartitions是在Transformation中,所以是轉化操作,此外在應用場景上區別是mapPartitions可以獲取返回值,繼續在返回RDD上做其他的操作,而

原创 簡單小球彈磚塊遊戲

前段時間,在學習了Java編程以後,爲深化面相對象的理解,編寫了一個簡單的小球彈磚塊遊戲!希望可以給同爲初學者的你一些借鑑!  以下爲實現以後的截圖,分享給大家! 開始界面 設置界面 遊戲界面