原创 Hadoop學習-安裝
一、hadoop介紹及其環境介紹 1.1 Hadoop簡介 Hadoop是Apache軟件基金會旗下的一個開源分佈式計算平臺。以Hadoop分佈式文件系統（HDFS，Hadoop Distributed Filesystem）
2020-06-03 11:48:02
1
原创 PhantomJS按尺寸截取頁面，並用python發送郵件
前言：當前有個任務是要把幾個網站的日誌返回狀態碼進行彙總，用餅圖展示，並每天發送郵件。 一、分析問題 畫出餅圖，這個我用kibana給畫出來了，下面不做講解； 截取餅圖，因爲kibana是用js展示出來的，而不真的是一張jp
2020-06-03 11:47:52
原创 部署redis集羣管理工具-codis
一、codis 簡介 摘自官方：Codis 是一個分佈式 Redis 解決方案, 對於上層的應用來說, 連接到 Codis Proxy 和連接原生的 Redis Server 沒有明顯的區別 (有一些命令不支持), 上層應用可以像使用單機
2018-08-24 22:14:47
原创 salt實戰系列-grains和pillar學習
grains 主要負責採集客戶端一些基本信息, 這個也完全可以自定義，可以在客戶端自定義，然後自動彙報上來；也可以從服務器端定義然後推下去，採集完後，再彙報上來 1. 打印所有items值 root@sh-salt-01 ~ > salt
2018-08-24 22:14:15
1
原创 jenkins部署及發佈使用
一、安裝jenkins 1. 環境說明： jdk，版本爲1.7及以上； tomcat，版本爲7.x 及以上； maven，版本爲3.x以上； svn，版本爲1.4以上； 以上環境安裝過程省略 2. 下載安裝 下
2018-08-24 22:14:02
原创 python爬取性感美女圖片
需求：最近對python爬蟲感興趣，於是也依葫蘆畫瓢試着用爬蟲爬取之前喜歡的網站上的美女圖片，網站：http://www.mm131.com/xinggan,其中每一套圖都是一張一個頁面，存一套圖如果是手動得點翻幾十個頁面，但現在用爬蟲的
2018-08-24 22:13:48
31
原创 elk日誌系統01-安裝配置
一、elk介紹 1.ElasticSearch： 節點（Node）：節點是一個ES的實例，一般一臺主機上部署一個節點- 集羣（Cluster）：集羣由若干節點組成，和任意節點的通信等價於和集羣的 通信 分片（Shard）：一
2018-08-24 22:13:47
原创 Kubernetes之kubectl常用命令
本文轉自：http://blog.csdn.net/xingwangc2014/article/details/51204224 官網命令介紹：http://kubernetes.io/docs/user-guide/kubectl/k
2018-08-24 22:13:47
原创 用python發送表格數據到郵箱
前言：運維工作中，我們經常需要將一些數據每天自動的發送到郵箱，比如網站的pv/uv、網站的狀態碼統計，或是一些其他日常監控數據的統計等，爲了更方便的查看，我們採取用表格形式發到郵箱，這樣既清晰有直觀。 1、數據準備 我寫了一個shell
2018-08-24 22:13:46
原创 kafka集羣管理工具kafka-manager部署安裝
一、kafka-manager 簡介 爲了簡化開發者和服務工程師維護Kafka集羣的工作，yahoo構建了一個叫做Kafka管理器的基於Web工具，叫做 Kafka Manager。這個管理工具可以很容易地發現分佈在集羣中的哪些topi
2018-08-24 22:13:46
原创 jenkins實用插件1-Active Choices Plugin
前言：實際用法請參開官方用法 Active Choices Plugin,官方 wiki 講解的非常詳細，我這裏也是從官方抽取自己喜歡的進行應用。 一、下載安裝插件 用jenkins自帶的插件管理下載又時會出現下載失敗，你可以選擇到官方下
2018-08-24 22:13:46
10
原创 docker集羣管理工具kubernetes初步搭建
前言：Kubernetes 是Google開源的容器集羣管理系統，它構建於docker技術之上，基於Docker構建一個容器的調度服務，提供資源調度、均衡容災、服務註冊、動態擴縮容等功能套件，本質上可看作是基於容器技術的mini-PaaS
2018-08-24 22:13:45
原创 kubernetes 安裝配置 kube-ui
1. 部署kube-ui環境 請參考 docker集羣管理工具kubernetes初步搭建 2. 下載kube-ui鏡像 # 目前好像docker.io上不支持下載。從國內的一個網站上下載 docker pull index.alauda
2018-08-24 22:13:45
1
原创 salt實戰系列-安裝salt
* 環境說明： * role hostname ip release master sh-salt-01 1.1.1.11 centos6.5 minion wh-app-01 1.1.1.12 centos6.5 m
2018-08-24 22:13:45
5
原创 centos7搭建docker本地regsitry
參考：Docker部署私有倉庫 一、環境準備 1. ip role ip docker倉庫機 1.1.1.100 docker客戶機 1.1.1.101 2. 關閉防火牆 systemctl stop firewall
2018-08-24 22:13:25
1