原创 hadoop - errors

hadoop errorserror1 error1 [hadoop@master sbin]$ pwd /home/hadoop/soft/hadoop/sbin [hadoop@master sbin]$ ./stop-dfs

原创 boost 1.59安裝

boost 1.59下載文件解壓安裝 下載文件 http://sourceforge.net/projects/boost/files/boost/1.59.0/ 解壓 tar -zxvf boost_1_59_0.tar.gz

原创 十進制轉換成二進制(左邊補零)

decimal to binary public class ToBinary { public static void main(String[] args){ System.out.println(t

原创 WPS - 顯示分頁符

原创 Spark - 結構化流

Spark結構化流概述編程模型基本概念標題 概述 Spark結構化流是一個構建在Spark SQL引擎之上的可伸縮和容錯的流處理引擎 編程模型 結構化流的核心思想是將實時數據流視爲一個不斷追加的表。 基本概念 標題

原创 mysql - 刪表方法比較

mysql刪除表方法比較delete from 表名 where someColumn = someValue;drop table 表名truncate table 表名 查看錶結構:describe t_name; dele

原创 java - 類加載順序

類加載順序 1、父類靜態代碼塊 2、子類靜態代碼塊 3、父類非靜態代碼塊 4、父類構造方法 5、子類非靜態代碼塊 6、子類構造方法 public class HelloA { static { System

原创 hive - 分區

hive 分區單分區創建分區表裝載數據查看數據與分區插入另一個分區觀察hdfs上的文件查看相應分區的數據添加分區重命名分區刪除分區多分區創建分區表裝載數據查看數據與分區觀察hdfs上的數據外部表分區操作創建分區外部表一次操作添加一

原创 Linux - 權限管理

Linux權限管理umask - 設置默認權限 umask - 設置默認權限 當創建一個文件時,umask 命令控制着文件的默認權限。 查看umask [hadoop@slave107 ~]$ umask 0022 [hadoop

原创 mysql - erros

errors安裝mysql啓動服務時候報錯IDEA通過JDBC連接mysql寫入數據中午亂碼 安裝mysql啓動服務時候報錯 /etc/init.d/mysqld start Starting MySQL... ERROR! Th

原创 Java - 二進制與十進制轉換

進制互轉二進制轉十進制十進制轉二進制應用場景 二進制轉十進制 int x = Integer.parseInt("10101", 2); 十進制轉二進制 Integer.toBinaryString(12); 應用場景 二進制

原创 大數據排錯

errorsSparkSpark版本由2.4.2 -> 2.2.0,依賴多個版本衝突Spark集羣啓動時候,JAVA_HOME is not sethadoop集羣,某臺服務器jps無任何輸出IDEAinternal java c

原创 Spark - RDD分區數

rdd分區數默認最小分區數<=2,具體取值依賴於默認並行度默認並行度設置並行度sc.textFile("hdfs文件"),分區數 默認最小分區數<=2,具體取值依賴於默認並行度 熟悉Spark的分區對於Spark性能調優很重要,如

原创 java - JVM

JVMJVM內存結構方法區堆區虛擬機棧本地方法棧程序計數器 SUN官方站點介紹JVM Options http://www.oracle.com/technetwork/java/javase/tech/vmoptions-jsp

原创 ISCXFlowMeter

ISCXFlowMeter https://github.com/cometa/CICFlowMeter