原创 centos7下安裝CDH5.12集羣
一、環境準備： 需要的小夥伴聯繫博主，私信郵箱[email protected] 1.本人集羣搭建的ip地址三臺分別爲192.168.1.171~173(三臺機器都要執行) 分別修改主機名爲cdh1、cdh2、cdh3(如vim
2020-07-08 08:45:23
2
原创 Centos7安裝ElasticSearch5.6集羣
一.環境準備 jdk1.8（自己找教程安裝這邊就不贅述了） elasticsearch-5.6.6.tar（https://artifacts.elastic.co/downloads/elasticsearch/elasticsearc
2020-07-08 08:45:23
2
原创 Flask+echarts可視化未來一周天氣變化情況
Flask是一個基於Python開發並且依賴jinja2模板和Werkzeug WSGI服務的一個微型框架，對於Werkzeug本質是Socket服務端，其用於接收http請求並對請求進行預處理，然後觸發Flask框架，開發人員基於Fla
2020-06-22 14:15:26
1
原创 2020年新冠疫情對IT行業的影響
好幾個月都沒有寫博客了，一方面是因爲去年下半年開始工作和學業較忙，沒有足夠的時間學習新的技術，我覺得最主要的是自己的惰性太大，導致我無心學習新的技術，和朋友們交流最近的心得，我對此表示很遺憾。 新的一年剛開始，發生的事情實在是太多了，20
2020-06-22 14:15:26
原创 大學這三年的收穫及總結
2017年我邁入了大學，起初的大學的生活確實是讓人有點失落，剛進大學的我對未來一片迷茫，不知道幹啥，更是對這個專業以後能幹啥真的是一點方向感都沒有，軟件這東西，在我們生活中那麼普及，但是我作爲開發人員能幹啥呢，這些枯燥無味的代碼真的能改變
2020-06-22 14:15:26
原创 物聯網協議MQTT(JAVA實現)
概述 MQTT是IBM開發的一個即時通訊協議，有可能成爲物聯網的重要組成部分。該協議支持所有平臺，幾乎可以把所有聯網物品和外部連接起來，被用來當做傳感器和制動器之間通信的橋樑。 MQTT協議是爲大量計算能力有限，且工作在低帶寬、不可靠的網
2020-06-22 12:50:42
1
原创 使用centos7安裝Ambari
Ambari簡介 Apache Ambari是一種基於Web的工具，支持Apache Hadoop集羣的供應、管理和監控。Ambari已支持大多數Hadoop組件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zook
2020-06-22 12:50:42
原创 回收往昔，展望未來,2019你好！
現在是農曆的除夕夜是2018年的最後一天了，回顧這一年，有收穫，也有遺憾，但我都是無悔的，感覺這一年是我對自己職業規劃有清晰認知的一年，一個省賽三等獎是我這一年對自己實力的認可，但我覺得我的收穫遠不及此哦！以前在學校總覺得自己很牛逼，但出
2020-06-22 11:41:32
原创 JAVA springboot框架與activeMq的簡單應用
ActiveMq的簡介 ActiveMQ 是Apache出品，最流行的，能力強勁的開源消息總線。ActiveMQ 是一個完全支持JMS1.1和J2EE 1.4規範的 JMS Provider實現,儘管JMS規範出臺已經是很久的事情了,但是
2020-06-22 11:41:32
原创 websocket的簡單應用
WebSocket協議 Websocket協議具有生命週期，在生命週期由Websocket協議進行支撐。例如，在Servlet技術中，底層協議僅僅定義了簡單的請求/響應交互，此交互完全獨立於下一次交互。事實上，在大部分情況下攜帶交互數據的
2020-05-19 01:49:58
原创 運用springboot實現文件上傳和下載的功能
文件上傳和讀取是項目開發中必備的功能，前幾天開發項目的時候自己研究出來的，總結一下爲以後項目開發積累經驗，方法很簡單，配置文件存放路徑，然後加一個虛擬路徑映射使得用戶能從瀏覽器訪問文件。 文件處理類 package com.scs.ut
2020-04-26 00:33:35
原创 springboot+shiro實現權限管理
springboot框架簡介 Spring的誕生是 Java 企業版（Java Enterprise Edition，JEE，也稱 J2EE）的 輕量級代替品。無需開發重量級的 Enterprise JavaBean（EJB），Sprin
2020-04-07 03:05:16
原创 mysql主從複製，雙擊熱備
1.主從複製: mysql數據庫提供了一種主從備份的機制，其實就是把主數據庫的所有的數據同時寫到備份的數據庫中。實現mysql數據庫的熱備份。 要想實現雙機的熱備，首先要了解主從數據庫服務器的版本的需求。要實現熱備mysql的版本都高於3
2019-10-25 23:53:19
原创 使用flume實時監控hive文件到HDFS
Flume最主要的作用就是，實時讀取服務器本地磁盤的數據，將數據寫入HDFS。 Flume組成架構如下所示: Flume Agent內部原理如圖所示： 1.配置hive日誌文件存放位置： 2.修改配置項： 在hive的根目錄下創
2019-09-26 22:31:24
原创 Kafka架構深入解析（一）
消息系統通常由生產者（Producer)、消費者(consumer)和消息代理(broker)三大部分組成，生產者會將消息寫入消息代理、消費者會從消息代理中讀取消息。對於消息代理而言，生產者和消費者都屬於客戶端：生產者和消費者會發送客戶端
2019-09-26 22:31:24