原创 2_MapReduce原理

文章目錄前言PropertiesMR流程解析 前言 context 緩存 constants intermediate sort Properties Properties 使用JAVA讀寫Properties屬性文件 比較少的

原创 1_HDFS編程

文章目錄前言xxxMavenGAV座標Junit模板模式log4jMaven配置添加Hadoop的依賴到pom添加阿里雲&CDH鏡像Hadoop-clientJunit模板模式HDFS API在HDFS創建文件(夾)copyFro

原创 Hadoop Hive Sqoop安裝教程

文章目錄前提條件1 關閉防火牆&清空規則安裝包說明3 JDK安裝3.1 指定安裝目錄爲/usr/java3.2配置環境變量4 安裝配置個人環境變量5 部署5.1 添加本地信任5.2 配置文件5.2.1 core-site5.2.2

原创 Java實現劍指offer

文章目錄03_01_DuplicationInArray找出數組中重複的數字題目描述解法解法一解法二解法三測試用例03_02_DuplicationInArrayNoEdit不修改數組找出重複的數字題目描述解法解法一解法二測試用例

原创 Windows server 2016 the task you are trying to do can't be completed because Remote Desktop Service

文章目錄背景官方解釋第三方分析博客借鑑query session調整Task ManagerEnd TaskAdmin賬戶參考文檔:移除RDP service打開Server ManagerServer RolesRemove R

原创 CDH6.3.1部署文檔——離線部署

文章目錄1 離線部署規劃2 服務器規劃3 離線部署安裝包說明MySql離線部署CMParcel文件JDK & jar4 節點初始化4.1 host文件的修改4.2 關閉防火牆和清空規則4.3 關閉seLinux4.4 統一時區4.

原创 CHD6.3.1部署文檔

文章目錄MySQL離線部署CHD分爲兩塊機器準備安裝包準備MySql離線部署CMParcel文件JDK集羣節點初始化1 修改hosts文件2 關閉防火牆&清空規則3 關閉所有節點的selinux4 統一時間4-1 主從4-2 主主

原创 sql server新建mysql鏈接服務器

文章目錄安裝MYSQL ODBC驅動創建ODBC源打開ODBC Data Sources(64-bit)選擇系統DSN添加DSNSSMS新建連接服務器常規安全性 安裝MYSQL ODBC驅動 mysql odbc驅動下載 安裝過程

原创 Qlik數據可視化字體過小解決方案

文章目錄舉個栗子老闆的解決方案1 Vizlib Library找到相應圖例替換現有圖例直接拖過來轉換爲第三方Chart2 調整邏輯看上去和以前的不太對調整爲雙軸並行檢查邏輯Qlik官方第三方3 調整字體大小老闆說顏色不好看 舉個栗

原创 JVM開荒-2

上回說到 .java —> .class 接着講解.class字節碼文件是如何在JVM中存放的 JVM在爲類實例或成員變量分配內存是如何分配的 先來了解一下JVM內存結構 JVM的內存結構 Java虛擬機的內存結構並不是官方說法

原创 雲計算論文開題報告

文章目錄一、本課題的研究目的和意義二、研究方案和主要內容三、文獻綜述(國內外研究情況及其發展)四、擬解決的關鍵問題五、研究技術途徑和方法六、本課題的進度安排七、參考文獻 一、本課題的研究目的和意義 互聯網普及以來,每日產生的數據量

原创 MyCat之旅

分佈式數據庫入門 分佈式系統的定義 分佈式系統是指組件分佈在網絡上,組件之間通過消息進行通信和動作協調的系統。 核心理念:多臺服務器協同工作,完成單臺無法完成的任務 尤其是高併發或者大數據量的任務 特點 透明性 分佈式

原创 論如何搞死一臺Linux

心情不好,弄死一臺Linux!!! 新建VM 設置VM 安裝Centos sudo rm -rf /*

原创 CDH 6.3.1停機後恢復服務

文章目錄1 啓動Mysql服務器2 啓動CDH集羣2.1 啓動Server查看啓動日誌2.2 啓動節點的AgentWeb頁面檢查 1 啓動Mysql服務器 登錄mysql管理賬戶 su - mysqladmin service

原创 CDH 集羣日常管理&調優

調優無非從如上幾個方面 硬件 Linux JVM Hadoop 文章目錄1 調優1.1 Linux調優1.2 JVM參數的調優1.3 Hadoop2 CDH 集羣管理2.1 配置參數2.2 監控2.3 慢磁盤 監控 1 調