原创 idea集成git合併分支到主幹

idea集成git合併分支到主幹新建分支在新分支修改功能idea切換到master分支在RemoteBranches選擇修改的分支合併完成後即可push到遠程 新建分支 在當前版本使用New Branch創建新 在新分支修改功能

原创 12個你值得擁有的虛擬科學實驗APP、工具和資源

Home12個你值得擁有的虛擬科學實驗APP、工具和資源 2018 年 3 月 9 日 焦建利 在絕大多數學校,科學實驗室的課程普遍地缺乏爲每個學生提供材料所需的空間和資金。即使是到了大學階段的課程,絕大多數學生體驗的實驗室,其實

原创 Hyper-v虛擬機的網絡配置(CentOS7)

關於Hyper-v虛擬機的網絡配置(CentOS7)——宿主機,虛擬機互通,虛擬機通外網 上面的文章提到: External(外部虛擬網絡): 虛擬機和物理網絡、本地主機都能通信 在希望允許子分區(虛擬機或guest)與外部服務器

原创 win10搭建spark本地開發環境

下載spark-2.2.2-bin-hadoop2.7,解壓到目錄 下載hadoop-2.7.7 scala-2.11.8.msi下載安裝,儘量自定義路徑,避免類似於C:\Program Files存在路徑包含空格的情況 下載j

原创 maven jar包找不到

maven工程依賴的jar包,在本地倉庫有,但是pom.xml文件卻報錯找不到jar包, 一、也就是package是pom的那個工程先install一下 二、 在找到錯誤中的jar包所在本地路徑,找到與jar包同文件夾下的_rem

原创 idea熱更新配置

1.File —> setting —>Build,Exception… —> Compiler —> Build project automatically 2.ctrl+shift+alt+/ 選擇regist

原创 hdfs文件目錄監控的思路

監控hdfs的一個目錄,若有新文件,spark就開始處理這個文件,可以使用spark streaming textfilestream來監控該目錄 這個是文件實時傳輸過程的監控還是文件上傳完成之後的監控,需要自己試一下看看。

原创 3d tiles point cloud

https://cesium.com/3d-tiling-pipeline/ Massive LiDAR Point Clouds with 3D Tiles and Entwine Organize and index poin

原创 progam books

Code Complete (2nd edition) by Steve McConnell The Pragmatic Programmer Structure and Interpretation of Computer Pr

原创 java文件夾目錄監控的方法

1、自己寫代碼,遞歸遍歷 2、使用common-io(內部實現遞歸遍歷) 3、使用WatchService(jdk提供的) 4、jnotify(直接調用window、Linux的api,需要拷貝dll或者so文件到對應目錄下,效率

原创 How to know that a new data is been added to HDFS?

原文鏈接:https://stackoverflow.com/questions/14934079/how-to-know-that-a-new-data-is-been-added-to-hdfs

原创 MobaXterm遠程桌面連接centos

1 . 打開 文件新建連接 2. 填入ip,用戶名和密碼即可連接

原创 本機idea遠程調試flume

修改flume的啓動腳本flume-ng ,找到這段代碼 # set default params FLUME_CLASSPATH="" FLUME_JAVA_LIBRARY_PATH="" JAVA_OPTS="-Xmx20

原创 java 5 level lambd can not use

settings ![(https://img-blog.csdnimg.cn/20190801205217132.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVp

原创 spark寫入到es集羣

spark2.x寫入數據到ElasticSearch5.X集羣,首先說明,到目前爲止,我使用過spark1.6寫入數據到ES2.4中,使用很簡單。 當我使用spark1.6寫入到ES5.5的時候,一直不成功。 官網首先就講了 th