原创 spark異常彙總(持續更新中~~)

目錄 1 idea運行spark javaApi 異常 問題點: 問題再現: 解決方案: 1 idea運行spark javaApi 異常 問題點: idea不識別spark泛型,報異常但是能正常運行(maven clean) 問題再現:

原创 Linux CPU佔用率99%很高被kdevtmpfsi 和kinsing 挖礦病毒入侵

目錄 一:警告 二:查看cup佔用 三:解決問題 1.首先停掉kdevtmpfsi的程序 2.刪除Linux下的異常定時任務 3.結束kdevtmpfsi進程及端口占用 4:刪除掉kdevtmpfsi的相關文件 四.怎麼預防處理這個病毒

原创 Spark SQL 入門應用 DataFrames

目錄 一sparkSQL簡介 二DSL風格應用 三SQL風格語法 一sparkSQL簡介 什麼是Spark SQL Spark SQL是Spark用來處理結構化數據的一個模塊,它提供了一個編程抽象叫做DataFrame並且作爲分佈式SQ

原创 idea UML類圖工具大全

一、檢查UML類圖插件是否開啓 idea默認已經集成了該功能,只是默認沒打開,我們要手動打開它,參考下圖: File——Settings——Plugins——UML Support 確認UML 這個勾已經勾上了,然後點擊Apply,重啓

原创 hadoop集羣windows linux安裝部署

1. JDK1.8安裝(不做解釋)  2. 下載hadoop2.7.5.tar.gz,或者自行去百度下載。  3. 下載hadooponwindows-master.zip(後面有用) 安裝Hadoop: 下載好Hadoop2.7.5

原创 springboot整合 redisTemplate工具類 (含完整的單元測試+簡單集成)

目錄 sprongboot集成redisTemplate 1.增加maven依賴 2.增加redis配置 3.寫一個redis配置類 4.redis工具類大全(最全的工具類,沒有之一) 5.單元測試 sprongboot集成redisTe

原创 commons guava springframework常用工具包的使用

集思廣益的結果  持續更新中............ package com.sdrfengmi.study._002_guava_lang3; import java.text.ParseException; import jav

原创 hadoop 啓動報錯 Please update D:\hadoop\conf\hadoop-env.cmd

環境報錯問題彙總(持續更新中........)  1 hadoop配置完成以後,啓動JAVA_HOME報錯 報錯提示 Error: JAVA_HOME is incorrectly set.        Please update D:

原创 hive 問題點總結(持續更新~~)

  問題1 hive庫編碼問題 hive加載數據報錯日誌爲 hive> load data local inpath '/export/servers/hivedatas/score.csv' into table score2 part

原创 linux大數據集羣搭建--雲服務器 zookeeper集羣搭建

目錄 第一步:下載zookeeeper的壓縮包,下載網址如下 第二步:解壓 解壓zookeeper的壓縮包到/export/servers路徑下去,然後準備進行安裝 第三步:修改配置文件 第四步:添加myid配置 第五步:安裝包分發並修改

原创 Gradle安裝和在Eclipse中的使用

目錄 1、官網下載 2、壓縮包解壓後,根據實際路徑配置環境變量 3、驗證安裝結果 ​4、Eclipse安裝gradle插件 5、Eclipse創建gradle項目 6、Eclipse導入gradle項目 7、gradle項目配置文件說明:

原创 Spring Security認證與鑑權 開啓(一)

目錄 1 簡要 2 加入pom 3 加入配置 4 WebSecurityConfigurerAdapter 配置 4.1 基本原理 1 簡要 Spring Security是一款基於Spring的安全框架,主要包含認證和授權兩大安全模塊,

原创 第1章 --- netty的nio概念-線程模型

目錄 Netty網絡I/O 1 Linux IO 阻塞IO的通信方式(BIO) I/O 複用模型 非阻塞IO多路複用(NIO)​ 2 線程模型 事件驅動模型 Reactor 線程模型 Netty 線程模型 3 異步處理 4 傳統IO/Ne

原创 BeyondCompare 破解版

話不多說先上破解版(如果幫到了你,請評論,超讚) 鏈接:https://pan.baidu.com/s/1CTrjuYUWwMiyhXRw2S4TOg   提取碼:2up2    Beyond Compare 4是一款不可多得的專業級的文

原创 nginx知識大全 所有功能

目錄 nginx大全 1 反向代理 1 單端口監聽反向代理 2 多端口監聽反向代理 2 負載均衡 1、RR(默認) 2、權重 3、ip_hash 4、fair(第三方) 5、url_hash(第三方) 3 HTTP服務器 1 動靜分離 4