原创 elasticsearch 運維記錄
目錄 (elasticsearch 基礎知識彙總) 索引分片 從策略層面控制分片分配的選擇 reroute 接口 節點下線 冷熱數據的讀寫分離 集羣自動發現 API 接口 數據寫入 數據讀取 數據刪除 數據更新 分片存儲設置
2020-06-22 13:01:07
原创 Logstash -- Nginx 日誌收集處理!
Nginx 日誌收集示例一： Logstash 默認自帶了 apache 標準日誌的 grok 正則: COMMONAPACHELOG %{IPORHOST:clientip} %{USER:ident} %{NOTSPACE:a
2020-06-22 11:51:26
原创 Hadoop分佈式集羣安裝配置教程
環境準備： Hadoop 集羣的安裝配置大致爲如下流程: 選定一臺機器作爲 master 在 Master 節點上配置 hadoop 用戶、安裝 SSH server、安裝 Java 環境 在 Master 節點上安裝 Had
2020-06-22 11:51:16
原创 registry 私有認證倉庫搭建示例
關於私有倉庫配置docker官網給出的參考示例 其實已經很詳盡了，但是還是不免在配置過程中 踩坑。。。。這裏根據官網文檔整理了配置示例供大家參考！ host文件： 192.168.11.10 hub.test.io
2020-02-24 03:21:46
原创 kubernetes基礎入門之-安裝部署配置示例
簡介： Kubernetes是Google開源的容器集羣管理系統，其提供應用部署、維護、 擴展機制等功能，利用Kubernetes能方便地管理跨機器運行容器化的應用，其主要功能如下： 1) 使用Docker對應用程序包裝(pa
2020-02-24 03:21:46
原创 Docker部署 elasticsearch 2.X 簡要步驟概述
概述： 簡單介紹使用docker部署elk 2.X 環境(僅僅給出步驟) 關於ELK 基礎原理學習請參考 ELK安裝 https://github.com/nbigot/openresty_nginx_logstash_kiba
2020-02-24 03:21:46
原创 Spark 分佈式集羣配置示例
本文概述： Hadoop 2.6.5 版本, 需要事先配置好Hadoop的分佈式集羣環境 如果沒有配置好Hadoop的分佈式集羣環境，請點擊查看 Hadoop分佈式集羣安裝配置教程 spark 版本 spark-2.0.2-b
2020-02-24 03:21:46
原创 Hadoop HA 高可用平臺配置實例
概述 Hadoop是一個由Apache基金會所開發的分佈式系統基礎架構。 用戶可以在不瞭解分佈式底層細節的情況下，開發分佈式程序。充分利用集羣的威力進行高速運算和存儲。 Hadoop實現了一個分佈式文件系統（Hadoop D
2020-02-24 03:21:46
原创 Zookeeper基礎安裝--僞分佈式集羣配置
Apache ZooKeeper™ 簡介 Apache Zookeeper 是由 Apache Hadoop 的 Zookeeper 子項目發展而來，現在已經成爲了 Apache 的頂級項目。Zookeeper 爲分佈式系統提供了
2020-02-24 03:21:46
原创 Spark 安裝配置及基本操作示例
簡介： Spark是UC Berkeley AMP lab (加州大學伯克利分校的AMP實驗室)所開源的類Hadoop MapReduce的通用並行框架，Spark，擁有Hadoop MapReduce所具有的優點；但不同於M
2020-02-24 03:21:46
原创 docker 基礎安裝配置以及swarm 基本操作使用
目錄 (Table of Contents) 目錄 Table of Contents 環境準備 1 系統安裝並初始化 2 IP 及主機名 配置 3 配置ssh免密碼登錄 安裝Docker以及初始配置 1 安裝D
2020-02-24 03:21:46
原创 kubernetes基礎入門之-配置kubernetes skyDNS服務
部署kubernetes skyDNS kubernetes可以爲pod提供dns內部域名解析服務。 其主要作用是爲pod提供可以直接通過service的名字解析爲對應service的ip的功能！ 首先在各節點的kubel
2020-02-24 03:21:46
原创 ElsaticSearch 2.3 Dockerfile 解析
ElsaticSearch 2.3 Dockerfile 解析 查看作者原文 Github地址 Docker Hub Dockerfile # 使用Dockerhu的java:8-jre作爲基礎鏡像，elashticsearc
2020-02-24 03:21:46
原创 Docker 集羣監控平臺---cAdvisor-InfluxDB-Grafana
目錄 目錄 基礎概念 cAdvisor InfluxDB Grafana 鏡像列表 啓動腳本 influxdb 設置 cAdvisor Grafana 圖形配置 示例圖請右鍵打開新標籤查看原圖 參考鏈接 基礎概念
2020-02-24 03:21:46
原创 elasticsearch.yml 集羣配置文件參數
5.1 版本請使用默認的配置文件逐一添加修改設置，切勿直接複製2.X配置文件 2.x 版本的諸多配置項在5.1版本中均無法使用 更多詳細參數請參考官方文檔 https://www.elastic.co/guide/en/elast
2020-02-24 03:21:46