原创 基於Xtrabackup進行MySQL數據庫備份

一、Xtrabackup備份恢復原理備份innodb表時,xtrabackup若干個線程拷貝獨立表空間的.ibd文件,並不停監視此過程中redo log的變化,添加到自己的事務日誌文件(xtrabackup_logfile)中。在此過程中,

原创 自動化運維工具SaltStack詳細部署

==========================================================================================一、基礎介紹========================

原创 採用mydumper對MySQL部分數據庫進行熱備

現有2臺DB服務器,分別用於A業務與B業務,其中A業務比較重要,需要對A業務的1個DB(TaeOss)進行熱備,大概有40G的數據,並用業務B的DB服務器作爲備機,服務器分佈如下:10.137.143.151     A業務10.137.1

原创 Docker技術學習

貌似Docker這玩意最近挺火,也順便買了一本《Docker技術入門與實戰》,學習學習 以下部分是目前收集到的一些學習資料:(1)、Docker 中文社區http://www.dockboard.org/ (2)、史上最全Docker資料集

原创 結合Ansible技術監控Storm集羣

1、我的hosts配置# vim /etc/hosts192.168.1.100  storm_zk1 192.168.1.101  storm_zk2 192.168.1.102  storm_zk3   192.168.1.103  s

原创 前端nginx時,讓後端tomcat記錄真實IP

對於nginx+tomcat這種架構,如果後端tomcat配置保持默認,那麼tomcat的訪問日誌裏,記錄的就是前端nginx的IP地址,而不是真實的訪問IP。因此,需要對nginx、tomcat做如下配置:1)nginx配置......p

原创 Flume日誌收集分層架構應用實踐

Flume作爲一個日誌收集工具,非常輕量級,基於一個個Flume Agent,能夠構建一個很複雜很強大的日誌收集系統,它的靈活性和優勢,主要體現在如下幾點:1)模塊化設計:在其Flume Agent內部可以定義三種組件:Source、Cha

原创 採用fpm工具製作rpm包

本次rpm包的製作,採用fpm工具完成,FPM非常易用,此命令可以把rpm包的安裝、卸載做得更加優雅,在安裝前可以做一些準備工作,安裝後可以做一些收尾工作,在卸載前也可以做一些準備,比如檢測一下相應的服務是否停止了,在卸載軟件再做一些掃尾的

原创 我的友情鏈接

實踐檢驗真理百度技術博客熔 巖叔寶滴水穿石【煙雨樓臺】seryADC技術博客峯雲,就她了。斬月王偉韓宇斌-大道源於生活hcymysql上帝,咱們不見不散!Share your knowledge …技術之路---桀技術成就夢想星矢TNT、

原创 大流量DDoS***防護方案探討

關鍵詞:DDoS  雙向異常流量清洗  近源  協同摘要:隨着互聯網帶寬的增長,DDoS***流量越來越大,超過300G的流量型***已經開始流行。對於如此大的***流量,被***客戶往往不能獨自應對。電信運營商通過在骨幹網上部署高性能抗D

原创 Redis源碼學習

1、Redis內置數據結構之雙向鏈表listhttp://blog.csdn.net/xiejingfa/article/details/509380282、Redis內置數據結構之字符串sdshttp://blog.csdn.net/xi

原创 文件傳輸腳本(expect+rsync)

完成此腳本,主要是爲了將本地服務器上的文件同步到騰訊雲跳板機,然後再中轉上傳到騰訊雲服務器。當然這也只是初步的方案。# vim /data/scripts/put_file.exp#!/usr/bin/expect ############

原创 MongoDB集羣部署(副本集模式)

一、需求背景1、現狀描述(1)、針對近期出現的mongodb未授權的安全問題,導致mongodb數據會被非法訪問。應安全平臺部的要求,需要對所有mongodb進行鑑權設置,目前活動側總共有4臺,用於某XX產品;(2)、某XX產品用到4臺mo

原创 使用MySQL-MMM時遇到的一些問題(1)

我們線上DB的高可用部分採用的是官方原版的MySQL-MMM(http://mysql-mmm.org),但在最近幾日出現2次寫VIP自動切換到了備Master節點上(雙Master單寫),其實主Master也是正常的,於是就去MySQL-

原创 基於Varnish 3.0.4的網站靜態加速

Varnish 的一些特點:(1)、是基於內存緩存,重啓後數據將消失;(2)、利用虛擬內存方式,I/O 性能好;(3)、支持設置 0~60 秒內的精確緩存時間;(4)、VCL 配置管理比較靈活;(5)、32位機器上緩存文件大小爲最大2G;(