原创 Cloudtrail + Athena 讓雲平臺的審計更簡單

系統操作的監管/審計是很多公司的安全部門的要求。 那再AWS上,我們如何做到呢?Cloudtrail + Athena 是非常容易實現,並可以通過SQL的方式,根據審計的需求,查詢相應的結果。1. 首先先了解一下基本概念。什麼是 AWS C

原创 自建在線會議系統 ---- BigblueButton 詳細安裝步驟

在線會議和在線教育,是當前階段,最熱門的互聯網應用。一大批在線會議與在線教育廠商,都借勢大肆圈地。 但是對於一些中小企業,和個性化教學的學校,是否能用較低的成本,擁有自己的會議/教育系統呢? 開源項目Bigbluebutton是一個不錯的選

原创 AWS RDS Mysql 開啓數據庫審計功能

由於不同的安全需求,數據庫審計,也是很多客戶關心的話題。針對RDS Mysql,我們能審計每個用戶的登錄,和操作信息嗎?答案是肯定的。MySQL企業版有此功能,屬於收費組件。社區版的Mysql,常見的審計插件就是“MariaDB 審覈插件”

原创 ElastiCache For Redis Cluster創建與使用

Redis作爲一個緩存數據庫,在互聯網行業,備受推崇。其獨具的很多優勢,可以解決很多業務架構的緩存需求。針對Redis產品,AWS推出了對於的PAAS服務Elasticache for Redis。今天,我們簡單介紹一下,如何創建Elast

原创 RDS Mysql Single-AZ和Multi-AZ性能差異

高可用性,是很多數據庫工程師/架構師最重視的系統架構環節。在AWS上,Multi-AZ是RDS很重要的一個HA方案。但是啓用Multi-AZ,對系統性能是否有影響,性能犧牲多少,是很多用戶關係的點。今天,我就針對Multi-AZ的性能進行測

原创 Zookeeper 跨區高可用方案

最近由於業務需求,測試各種組件的高可用性。由於我們的環境在AWS 北京部署。只有兩個Aviable Zone(可用區)。註釋:有兩個數據中心,相互需要做容災的需求,和本文測試的情況是相同的。而Zookeeper需要3個以上的單數節點同時工作

原创 Aurora ~VS~ Mysql 性能測試

AWS基於Mysql/postgres開發的Aurora,是個很熱門的OLTP數據庫產品。目前很多用戶很關心Aurora。更多關於Aurora的介紹,請參考官方文檔:https://docs.aws.amazon.com/zh_cn/Ama

原创 AWS Mysql 跨區域 容災性能

系統高可用/容災,是系統運維人員非常關心的一個話題。基於AWS雲平臺的數據庫,我們能做哪些高可用的架構設計呢?目前中國區,有北京和寧夏兩個獨立的Region。關於RDS,不僅能做到Multi-AZ的設置,同時AWS還支持RDS的跨Regio

原创 AWS RDS服務高可用性

作爲AWS的PAAS服務,RDS已經發展的比較完善,基本上涵蓋了全部的OLTP的RDBMS數據庫。作爲雲服務商提供的PAAS服務,在數據庫使用的便利性上是由很大的優勢的,只要點一點鼠標,10分鐘就可以根據自己的需求,完成部署。但是PAAS爲

原创 Mysql slave是否可以update ?

最近平臺要做遷移,由於業務遷移過程需求,希望slave在平臺遷移過程中,既能保證master的數據同步到slave,但是也希望slave可以update.這個需求,作爲DBA,單單從數據庫層面,基本可以判斷,是不可行的.但是,實際測試,纔有

原创 Oracle 自動化備份腳本

Oracle 日常RMAN備份腳本,很基礎。但是對於多個需要備份的Oracle數據庫,可以很簡單實施,並利於後期批量狀態的查詢。 備份腳本,基於linux,windows環境需要適當修改。主腳本,會調用2,3步驟的rman.sql&st

原创 ORA-00600 kcratr_nab_less_than_odr 處理小計

今天由於客戶現場異常斷電,oracle數據庫又無法啓動了。遠程上去看看吧。 數據庫只能mount,已經無法啓動 SQL> select status from v$instance; STATUS ------------ MOUNTE

原创 MongoDB Replica Set 部署

在生產中使用MongoDB, 爲了數據安全性和訪問穩定性. 副本集是經常被使用到的.書接上回, 話說MongoDB副本集已經安裝過很多次了.但是每次都要去 百度 具體命令細節.只好自己整理筆記,記錄下來,以備查詢.MongoDB的下載與安裝

原创 我的第100篇博客

2007年申請的blog賬號。2011年8月寫了第一篇blog。 時光飛逝,如今已經過去7年。7年前,是oracle database激發了我的自信,開始寫了blog。如今,在技術的道路上,已經走過十幾個年頭。SQL Sever、Oracl

原创 Hadoop集羣(五) Hive安裝

作爲一個多年的DBA,hadoop家族中,最親切的產品就是hive了。畢竟SQL的使用還是很熟悉的。再也不用擔心編寫Mapreducer的痛苦了。 首先還是簡單介紹一下Hive吧Hive是基於Hadoop的數據倉庫解決方案。由於Hadoop