原创 搭建scala 開發spark程序環境及實例演示
上一篇博文已經介紹了搭建scala的開發環境，現在進入正題。如何開發我們的第一個spark程序。下載spark安裝包，下載地址http://spark.apache.org/downloads.html（因爲開發環境需要引用spark的ja
2019-02-22 21:01:48
原创 python開發sparkSQL應用
準備條件：部署hadoop集羣部署spark集羣安裝python（本人安裝的是anaconda3,python是3.6）配置環境環境變量：vi .bashrc #添加如下內容 export SPARK_HOME=/opt/spark/cu
2019-02-22 21:01:48
原创 批量數據文件用sqlldr導數據到oracle中
使用sqlload導文本數據到oracle中想必很多人多使用過，但是倘若有幾百或者幾千個數據文本，或者實時有文本數據產生。這種場景如何批量導入oracle呢，下面就來講解下我處理的方式。 1.shell腳本LoadData.s
2019-02-22 21:01:48
原创 linux安裝Oracle中文亂碼問題彙總
解決oracle中文顯示亂碼有三層地方需要調整或者修改第一層：操作系統層1.首先查看linux是否有安裝中文字符集，locale -a2.設置用戶的中文字符集 查看到linux安裝了中文字符集，那麼oracle用戶下面要設置中文字符集vi
2019-02-22 21:01:48
原创 maven構建spring+cxf的webservice工程
一.環境準備 安裝eclipse 安裝jdk1.8 3.配置maven 4.安裝tomcat二、構建webservice工程1.創建maven webapp工程2.build path 爲jdk1.83.配置maven 工程依賴
2018-09-11 03:50:56
原创 部署eclipse + sacala的開發環境
一、下載安裝scalaIDE 1.下載地址http://scala-ide.org/download/sdk.html 因爲我本地是開發環境是windows 64位，所以下載windows64的版本，請根據自己環境下載 2
2018-09-11 03:50:56