原创 zookeeper kafka集羣安裝配置
轉至元數據結尾zookeeper kafka集羣安裝配置轉至元數據起始節點信息節點主機節點應用節點IPkafka01zookeeper kafka1.1.1.23kafka02zookeeper kafka1.1.1.24kafka03zo
2019-02-23 00:42:02
1
原创 elasticsearch集羣部署
自行到https://www.elastic.co/downloads/elasticsearch下載所對應的ES版本，選擇RPM 版本，我所使用的是6.4.11，安裝ES #rpm -ivh elasticsearch-6.4.1.rpm
2019-02-23 00:42:00
原创 ipython和jupyter安裝配置
pip通用配置pip是python的包管理工具，3.x的版本直接帶，可以直接使用，和Yum一樣，爲了使用國內鏡像，如下配置Linux系統：$ mkdir ~/.pip$vim ~/.pip/pip.conf[global]index-url
2019-02-23 00:42:00
1
原创 Prometheus+Grafana+kafka_exporter搭建監控系統監控kafka
kafka_exporter 通過 Kafka Protocol Specification 收集 Brokers, Topics 以及 Consumer Groups的相關指標，使用簡單，運行高效，相比於以往通過kafka內置的腳本進行收
2019-02-15 13:45:04
20
原创 kubeadm部署kubernetes 1.13.1集羣
kubeadm是Kubernetes官方提供的用於快速部署Kubernetes集羣的工具，本篇文章使用kubeadm搭建一個單master節點的3節點k8s集羣。#kubernetes部署dashboard可視化插件：https://blo
2019-01-30 13:26:17
1
原创 zkdoctor安裝部署
zkdoctor是一個ZooKeeper服務的統計、監控報警以及自動化運維平臺：監控ZooKeeper集羣運行狀態，做到有問題及時發現、及時解決，掌握ZooKeeper整體運行情況。準備環境jdk下載相應版本http://www.oracl
2019-01-09 13:30:14
13
原创 Filebeat+ELK配置rabbitmq日誌
在之前的搭建elk環境中，日誌的處理流程爲：filebeat --> logstash --> elasticsearch,隨着業務量的增長，需要對架構做進一步的擴展，引入kafka集羣。日誌的處理流程變爲：filebeat --> kaf
2018-12-27 13:52:23
31
原创 docker 安裝jupyterhub支持R語言
docker安裝systemctl stop firewalld.servicesystemctl disable firewalld.serviceyum install -y yum-utils device-mapper-persis
2018-12-23 13:43:49
10
原创 docker 打印出來的日誌與服務器時間不一致
docker 打印出來的日誌與服務器時間不一致docker的時間與宿主機是一致的解決方法進入dokcer內後，執行以下操作：ln -sf /usr/share/zoneinfo/Asia/Shanghai /etc/localtime ec
2018-12-23 13:43:49
原创 Centos 7上部署Rabbitmq集羣
rabbitmq消息中間件裏面的概念和功能publisher（生產者） 生產消息的功能。consumer（消費者） 消息的處理者。broker 消息中間件所在的主機virtual host
2018-12-12 13:28:35
原创 Linux中添加新硬盤後對硬盤的分區以及掛載
1,用fdisk對這塊硬盤分區#fdisk /dev/sdb按下m顯示菜單：因爲要新建分區選擇n這裏是問你是要建立主分區還是擴展分區，這裏是第一次建立選擇主分區p因爲是MBR分區只能有4個分區，這裏建立第一個分區，輸入1這裏問你個分區的起始
2018-12-01 13:23:47
原创 利用RPM安裝ES 集羣
自行到https://www.elastic.co/downloads/elasticsearch下載所對應的ES版本，選擇RPM 版本，我所使用的是6.4.11，安裝ES #rpm -ivh elasticsearch-6.4.1.rpm
2018-12-01 13:23:47
原创 docker-compose安裝kafka集羣及管理監控工具
編寫docker-compose文件配置zk 和kafka集羣#vim kafka.ymlversion: '2'services: zoo1: image: zookeeper restart: alwa
2018-11-28 14:04:29
1
原创 ansible自動化管理windows系統
一，ansible配置1、簡介Ansible 從1.7+版本開始支持Windows，但管理機必須爲Linux系統，遠程主機的通信方式也由Linux下的SSH變爲PowerShell，管理機需要安裝Python的pywinrm模塊，但Powe
2018-11-28 14:04:29
14
原创 centos7單機安裝openstack
OpenStack是一個美國國家航空航天局和Rackspace合作研發的，以Apache許可證授權，並且是一個自由軟件和開放源代碼項目。OpenStack主要包括以下幾個子項目:OpenStack Compute(Nova)、雲對象存儲Cl
2018-11-28 14:04:29
2