原创 Linux安裝ELK、kibana部署安裝(四)

本篇文章主要介紹在Linux(Centons7)下安裝ELK的elasticsearch部署安裝,筆者選擇了6.1版本,現在已經有6.5的新增了一些功能,推薦安裝6.5,使用yum方式安裝。 注意,logstash至少要有1G內存才能執行

原创 Spring Boot項目整合Apollo配置中心(三)

筆者在工作中遇到如下問題,隨着程序功能越多,配置文件不斷增加,一些功能的開關、服務器地址、接口地址、不同環境的一些配置文件不同,這些在每次發佈不同環境、更新項目時都比較繁瑣,後來學習微服務時接觸到了Spring Cloud Config配

原创 Spring boot項目整合apollo錯誤:for env UNKNOWN from com.ctrip.framework.apollo.internals.DefaultMetaServer

筆者在工作中遇到如下問題,隨着程序功能越多,配置文件不斷增加,一些功能的開關、服務器地址、接口地址、不同環境的一些配置文件不同,這些在每次發佈不同環境、更新項目時都比較繁瑣,後來學習微服務時接觸到了Spring Cloud Config配

原创 Apollo架構體系、Apollo運行原理、Apollo配置中心簡單介紹(一)

筆者在工作中遇到如下問題,隨着程序功能越多,配置文件不斷增加,一些功能的開關、服務器地址、接口地址、不同環境的一些配置文件不同,這些在每次發佈不同環境、更新項目時都比較繁瑣,後來學習微服務時接觸到了Spring Cloud Config配

原创 Linux下配置安裝Apollo、Centons下配置安裝Apollo(二)

筆者在工作中遇到如下問題,隨着程序功能越多,配置文件不斷增加,一些功能的開關、服務器地址、接口地址、不同環境的一些配置文件不同,這些在每次發佈不同環境、更新項目時都比較繁瑣,後來學習微服務時接觸到了Spring Cloud Config配

原创 linux(Centons7)安裝vim編輯器、linux安裝wget、linux安裝yum

一、安裝vim編輯器 1、查看原安裝包   rpm -qa | grep vim 2、刪除已安裝的vim以及其相關組件   yum remove vim vim-enhanced vim-common vim-minimal 3、

原创 linux下配置maven後使用命令mvn報錯NB: JAVA_HOME should point to a JDK not a JRE解決方案

筆者在之前的linux環境配置中,安裝jdk使用都都是rpm和壓縮包都方式安裝,這次使用yum安裝了一個openjdk後,再配置完maven後發現,不能使用mvn -v命令,提示JAVA_HOME should point to a JD

原创 Sqoop簡介及工作機制、Sqoop1和Sqoop2區別

什麼是Sqoop? Sqoop 是 apache 旗下一款“Hadoop 和關係數據庫服務器之間傳送數據”的工具。 核心的功能有兩個: 1、導入、遷入 2、導出、遷出 導入數據:MySQL,Oracle 導入數據到 Hadoop 的 HD

原创 使用Sqoop1將MySQL 導入數據到 HDFS

本篇文章主要介紹使用Sqoop1將MySQL 導入數據到 HDFS。 說明: 1、Sqoop 與數據庫進行通信,獲取數據庫表的元數據信息  2、Sqoop啓動一個Map-Only的MapReduce作業,利用元數據信息並行將數據寫入Had

原创 Sqoop: java.lang.RuntimeException: Could not load db driver class: com.mysql.jdbc.Driver

錯誤一、 Got exception running Sqoop: java.lang.RuntimeException: Could not load db driver class: com.mysql.jdbc.Driver 解

原创 什麼是分佈式?什麼是微服務?微服務和分佈式的區別?分佈式的常見問題?單體應用轉微服務架構會遇到的問題?

以下問題是筆者在實際開發中遇到的問題,這些問題也都是單體應用時不會考慮到,但是分佈式應用的時候就必須要考慮這些問題,解決方案和原理後續會整理更新,也希望大家積極回覆討論問題,一起學習。 1、多節點部署問題、服務器監控、容災處理 2、爲什麼

原创 Sqoop 導入數據報錯:No columns to generate for ClassWriter

使用Sqoop 導入數據報錯信息如下: java.sql.SQLException: Streaming result set com.mysql.jdbc 18/09/07 10:09:20 INFO manager.MySQLMan

原创 Spring Boot2.0系列教程合集、Spring Cloud系列教程合集、Spring Boot常見錯誤合集、Spring Cloud常見錯誤合集

以下內容結合實際項目和工作經驗整理的Spring Boot和Spring Cloud學習教程和一些常見錯誤,希望能幫助到剛學習到童鞋,學習過程遇到問題評論回覆,第一時間會回覆!   Spring Boot2.0系列教程合集 1、Sprin

原创 大數據入門環境搭建整理、大數據入門系列教程合集、大數據生態圈技術整理彙總、大數據常見錯誤合集、大數據的離線和實時數據處理流程分析

本篇文章主要整理了筆者學習大數據時整理的一些文章,文章是從環境搭建到整個大數據生態圈的常用技術整理,環境希望可以幫助到剛學習大數據到童鞋,大家在學習過程中有問題可以隨時評論回覆! 大數據生態圈涉及技術: Hadoop、MapReduce、

原创 什麼是Spring IOC、用通俗易懂的舉例講講Spring IOC、面試被問爛的 Spring IOC

在平時面試過程中,大家被問到Spring框架時,都會被問到Spring IOC 和 AOP,讓你說說他們的原理、流程、舉例說明等,今天就用通俗易懂的方式給大家講講Spring IOC。   資料來源: 作者:莫那·魯道 鏈接:http:/