原创 OGG12.2如何extract LOB數據

Fusion Middleware Installing and Configuring Oracle GoldenGate for Oracle Database(12.2.0.1) 1.6.7 Large Object Dat

原创 xtrabackup備份原理及注意事項

物理備份(Xtrabackup) 相對於邏輯備份利用查詢提取數據中的所有記錄,物理備份更直接,拷貝數據庫文件和日誌來完成備份,因此速度會更快。當然,無論是開源的Mydumper還是官方最新的備份工具(5.7.11的mysqlpum

原创 OGG:Oracle to MySQL異構複製環境搭建

環境介紹 source: Oracle RDBMS 11.2.0.4 OGG for oracle OGG-12.2.0.1 IP:192.168.5.221 OS user:oggora 安裝目錄:/ogg4oracl

原创 Redis Sentinel機制與用法(一)

概述 Redis-Sentinel是Redis官方推薦的高可用性(HA)解決方案,當用Redis做Master-slave的高可用方案時,假如master宕機了,Redis本身(包括它的很多客戶端)都沒有實現自動進行主備切換,而R

原创 Redis基礎

一、安裝並啓動Redis # yum -y install gcc gcc-c++ libstdc++-devel # wget http://download.redis.io/releases/redis-3.0.6.tar

原创 修改GP系統表修復standby master

事件緣由: 客戶要求開發greenplum master高可用腳本,要實現master宕機的情況下,standby master被激活,接管業務。 但是在測試的過程中master切來切去,切亂了。 兩個節點都是master,都能讀寫數據庫

原创 HDFS只支持文件append操作, 而依賴HDFS的HBase如何完成增刪改查功能

1. HDFS的文件append功能 早期版本的HDFS不支持任何的文件更新操作,一旦一個文件創建、寫完數據、並關閉之後,這個文件就再也不能被改變了。爲什麼這麼設計?是爲了與MapReduce完美配合,MapReduce的工作模式是接受一

原创 5行代碼搞定floyd算法

簡介 floyd是圖搜算法中很經典的一個算法,用於求一副圖中任意兩點之間的最短路徑(時間,花費等)。其算法思想感覺比Dijkstra簡單,而且代碼也很容易實現。不過就是效率比較低,三個for循環導致複雜度爲O(n3)。 實例 假如有如下的

原创 用戶home目錄權限問題導致的ssh互信登錄失敗問題

現象 用戶配置完ssh互信之後,使用該用戶遠程/本地登錄主機,仍然要輸入密碼。 原因 當主機互信時所配置的用戶名所在主目錄的屬性爲 777時,系統出於安全會強制使已經配置的主機互信失效,強制要求輸入密碼。 具體可能和LINUX系統的安全

原创 Hadoop hdfs 參數設置

(1)dfs.replication 指定hdfs上傳文件時的副本數,默認是3。 分佈式系統上的文件副本數,由上傳時的系統副本數決定,不會受後面replication的更改而變化,除非用命令來更改文件的副本數。 因爲dfs.repli

原创 zookeeper啓動後查看狀態報Error contacting service. It is probably not running.錯誤

在集羣上安裝並啓動zookeeper後,查看zookeeper狀態,出現以下情況: [hadoop@oceanbase06 zookeeper-3.4.12]$ zkServer.sh status ZooKeeper JMX enabl

原创 Greenplum擴容

一、Greenplum擴展分類 在現有segment主機上添加新的segment。 添加新的segment主機並添加新的segment。 二、總體步驟介紹: 爲擴展準備新的節點 具體步驟包括修改操作系統參數,安裝數據庫軟件,交換S

原创 MGR單主模式搭建

三個節點 192.168.0.156 oceanbase06 192.168.0.157 oceanbase07 192.168.0.158 oceanbase08 數據庫端口:3306 組複製端口:24901 準備工作 關閉

原创 Raft論文讀書筆記

本文以問答的方式,總結Raft相關知識。 所有信息來源於Raft論文 第一章 1.爲什麼要尋找一個新的一致性算法? Unfortunately, Paxos has two significant drawbacks. The f

原创 OGG對於沒有主鍵表的處理

問:想用ogg對生產庫做個報表庫。現在生產庫中還有一堆表沒有主鍵(其中有些表的記錄甚至完全一樣),對這些表上的操作容易導致報表庫REPLICAT abended,請問這在OGG配置中是如何避免的?HANDLECOLLISIONS? 答: