原创 使用Spark sql的shell轉換Oracle sql的例子
使用Sparksql的shell轉換Oracle的例子 //1.創建表 create table AUTO_PAID_CASE_TMP_01 ( branch_company_code VARCHAR(25),
2018-08-21 01:11:42
原创 記錄使用sparksql 寫txt，csv等問題
由於是在內網工作無法截圖，只是文字記錄，見諒！ 1.生成csv的方法 由於sparksql 1.5的版本導致很多函數是有bug的，經過多次嘗試以下是生成csv的正確方法。 mave加入一個特殊的jar包 <groupId>com.d
2018-08-21 01:11:42
原创 記錄oracle轉sparksql的問題
oracle轉sparksql中遇到某些函數轉換問題 1.listagg 行轉列函數 LISTAGG(Item_Category_Name ‘,’) WITHIN GROUP(ORDER BY Item_Category_Name
2018-08-21 01:11:42
2
原创 Springmvc的攔截器配置過程小例子
由於之前碰到需要攔截器的部分，我加以總結，以下就是在實戰項目中的springmvc攔截器配置，做一個小例子，以便大家方便使用。 Spring 攔截器配置Sprigmvc部分進行配置 <!-- 配置資源文件,防止被攔截 -->
2018-08-21 01:11:41
2
原创 解決sqoop中出現的某些問題
安裝sqoop出現的問題 我本人用導sqoop去導入mysql數據並存到hdfs上，安裝過程中： 使用這篇博客來進行安裝， http://www.linuxidc.com/Linux/2016-09/135129.htm
2018-08-21 01:11:41
2
原创 二維碼打印機的例子
二維碼打印機。jsp中的部分。//採用別人給的接口 <script type="text/javascript" src="${pageContext.request.contextPath}/js/su
2018-08-21 01:11:41
原创 記錄一些spark緩存中的方法
此爲使用者自己選擇釋放需要的已經緩存的rdd。 def unpersistUnuse(rddString: Set[String], sc: SparkContext) = { var persistRdds = sc.getPers
2018-08-21 01:11:41
4
原创 有關於centos下ganglia的安裝部署心得
1 Ganglia安裝1.1 中心節點的安裝epel包的安裝：yum install -y epel-release(解決不能yum安裝某些安裝包的問題)gmetad的安裝：yum install -y
2018-08-21 01:11:41
10
原创 短信貓實現短信驗證小例子
其實很多人都在用短信平臺做這個註冊的短信驗證這塊，以下是一個短信貓做短信驗證的例子。 有具體的註解，可以嘗試用用。 /** * 獲取驗證碼 */ public void sendCode()
2018-08-21 01:10:13
2