原创 消息隊列的應用場景

消息隊列的應用場景 什麼是消息隊列? 所謂消息隊列,就是一個以隊列數據結構爲基礎的一個實體,這個實體是真實存在的,比如程序中的數組,數據庫中的表,或者redis等等,都可以。 首先我們說說爲什麼要使用隊列,什麼情況下才會使用隊列?

原创 zk是如何實現hadoop集羣的HA (高可用)

zk是如何實現hadoop集羣的HA (高可用) 在典型的HA集羣中,一般有倆臺不同的機器充當nn,(note1 主機 nn ,note2 備用主機nn )。在任何時間,有且只有一臺機器處於active狀態;另一臺機器處於stan

原创 ntpd 和ntpdate的區別 以及系統時間 硬件時間 及時間同步 crontab –e

ntpd 和ntpdate的區別 以及系統時間 硬件時間 及時間同步 crontab –e 一 crontab 週期性任務被執行指令 1.首先crontab 命令 介紹 安裝鏈接:https://blog.csdn.net

原创 linux 命令 (總結的很好)

linux 命令 (總結的很好) 今天 突然看見這樣一篇文章,感覺總結的很好,推薦給大家: 學習網址:https://blog.csdn.net/qq_23329167/article/details/83856430

原创 執行 source /etc/profile 報:-bash: expor: command not found

執行 source /etc/profile 報:-bash: expor: command not found 自己原因: 少寫了一個t 【od 解決 一般問題都在export path這】 網上還有個說 是這樣解決的

原创 idea中安裝 翻譯插件

idea中安裝 翻譯插件 網上說 plugin 搜索translation 安裝 但是安裝後 不好使【安裝後 無法選中翻譯】 這裏安裝 ectranslation 【挺好用】 安裝完成之後重啓idea 然後更改 原來的

原创 Tcp/ip概念 及TCP和UDP詳解

Tcp/ip概念 及TCP和UDP詳解 1.TCP/ip: TCP 首先咱們弄清楚,TCP協議和UCP協議與TCP/IP協議的聯繫,很多人犯糊塗了,一直都是說TCP/IP協議與UDP協議的區別,我覺得這是沒有從本質上弄清

原创 spark隊列 實現分配資源(實時流)

spark隊列 實現分配資源(實時流) 學習地址:https://www.cnblogs.com/xiaodf/p/6266201.html 前言 :爲什麼要 使用隊列 來分配資源? 首先你要了解 yarn的三種調度器。我的一篇博

原创 linux 中的查看文件 命令 cat more less的區別

linux 中的查看文件 命令 cat more less的區別 一 cat 查看 文本文件內容。 1、cat f1.txt,查看f1.txt文件的內容。 2、cat -n f1.txt,查看f1.txt文件的內容,並且由

原创 linux 系統中 vi編輯文件時 如何讓光標快速聚焦/定位到 某個字段 及scp-r 分發

linux 系統中 vi編輯文件時 如何讓光標快速聚焦/定位到 某個字段 vi 文件 然手 /+要查找的字段 即可 二 scp 分發 如: scp -r hbase note2:PWD 【注意 pwd 大寫】 s

原创 mapreduce 和hive 的區別

mapreduce 和hive 的區別 首先: 1.hive本身只是在hadoop map reduce 或者spark 計算引擎上的封裝,應用場景自然更侷限,不可能滿足所有需求。有些場景是不能用hive來實現,就需要map r

原创 phoenix的批處理操作 命令行操作 GUI操作 及jdbc調試操作

phoenix的批處理操作 命令行操作 GUI操作 及jdbc調試操作 1.phoenix 批處理操作 phoenix 在執行:./psql.py note1:2181 user_phoenix.sql user_phoeni

原创 spark(二) rdd具體介紹

spark(二) rdd具體介紹 看完這篇 你可以學到一下內容 1:掌握RDD的原理 2:熟練使用RDD的算子完成計算任務 3:掌握RDD的寬窄依賴 4:掌握RDD的緩存機制 5:掌握劃分stage 6:掌握spark的任務調度流

原创 多線程

多線程 多線程的目的 提到多線程就只有一個目錄,更好的利用CPU資源,我們讓CPU同時處理多個任務,縮短計算和處理時間。 在實現多線程之前,首先了解一個下多線程的一些概念: 多線程:在一個進程中,運行不止一個線程 並行:多個CPU

原创 什麼索引?索引的作用是什麼?索引運用實例

什麼索引?索引的作用是什麼?索引實例 索引:索引就是對數據庫中的一列或者多列的值排序( 進行標記)的一種結構。 索引的作用:可以快速的查詢數據庫中的特定信息(加速檢索數據庫中表的數據)。 https://www.cnblogs.c