原创 redis主從同步參數repl-backlog-size測算

一、背景 在不影響正常業務的情況下redis主從同步時總會出現timeout,部分同步失敗的情況。需要評估一下repl-backlog-size的大小,來避免複製時出現異常 二、步驟 1、獲取數據 藉助redis-cli 、info re

原创 「揭祕GP」Greenplum 6 軟件包目錄暢遊

今天咱們來一起看看 Greenplum 安裝目錄分別都有什麼內容,具體作用是什麼。請大家注意,本文章中介紹的僅僅是軟件安裝目錄的內容,並沒有涉及到數據存儲目錄的內容,二者不能混爲一談。 軟件包安裝位置 Greenplum 6 在安裝完成後

原创 「揭祕GP」Greenplum 的人工智能應用場景:MADlib、GPText、GPU

目錄 可擴展的機器學習算法庫:MADlib 1+1>2:MADlib + Greenplum 的優勢 人工智能算法概覽 採用GPU加速的數據庫實現方式 結構化分析與非結構化分析的完美結合:GPText Pivotal Greenplum

原创 「揭祕GP」Greenplum新一代數據遷移工具gpcopy,更快更穩更易用

gpcopy 是新一代的 Greenplum 數據遷移工具,可以幫助客戶在不同集羣間,不同版本間,快速穩定地遷移數據。同上一代遷移工具 gptransfer 相比,gpcopy 具有巨大的優勢:更快,更穩定,更易用,功能更豐富。另外,gp

原创 【揭祕GP】全新 Greenplum 集羣傳輸工具—GPCOPY 2.1.0 正式發佈

導讀:GPCOPY 是新一代的支持 Greenplum 集羣之間快速高效傳輸數據的工具。作爲 Greenplum 集羣數據傳輸的官方首選配套工具,GPCOPY 除了具有高速穩定易用的特點外,還支持不同版本 Greenplum 集羣之間的

原创 什麼是高併發?高併發解決方案

比如接口響應超時、CPU load 升高、GC 頻繁、死鎖、大數據量存儲等等,這些問題能推動我們在技術深度上不斷精進。   在過往的面試中,如果候選人做過高併發的項目,我通常會讓對方談談對於高併發的理解。   但是能系統性地回答好此問題的

原创 GreenPlum 數據傾斜排查

        在MPP無共享環境中,查詢的總響應時間取決於單個node執行最長的process。如果數據偏斜,則具有更多數據的node將花費更多時間來完成,因此每個node必須具有大約相等的行數並執行大約相同的處理量。如果一個node要

原创 如何用斷言更好地實現替換重複出現的單詞?

內容來自於塗偉忠 極客課程,僅限於學習交流使用,如有侵權及時刪除。  最常見的斷言有三種:單詞的邊界、行的開始或結束、環視。 單詞的邊界是使用 \b 來表示,這個比較簡單。而多行模式下,每一行的開始和結束是使用 ^ 和 $ 符號。 如果想

原创 正則中常見的4種匹配模式

匹配區間類型的需求使用這四種模式能達到事半功倍的效果。  正則中常見的四種匹配模式,分別是:不區分大小寫、點號通配模式、多行模式和註釋模式。 不區分大小寫模式,它可以讓整個正則或正則中某一部分進行不區分大小寫的匹配。 點號通配模式也叫單行

原创 PostgreSQL和Greenplum的臨時表空間介紹

PostgreSQL的臨時表空間,通過參數temp_tablespaces 進行配置,PostgreSQL允許用戶配置多個臨時表空間。 配置多個臨時表空間時,使用逗號隔開。 如果沒有配置temp_tablespaces 參數,臨時表空間對

原创 HTTP頭的查看

  在chrome裏打開開發者工具,選中Network。找到url即可看到此url的HTTP頭。 此外  :要區別F5和crtl+F5的區別 如果是前者,請求的是有緩存的頁面,可能之前頁面存在的異常依然存在;後者發送請求瀏覽器直接向目標U

原创 數據庫的幾個性能指標

TPC-B是由TPC(Transaction Processing Performance Council,事務處理性能委員會)提供的benchmark,主要用於衡量一個系統每秒能夠處理的併發事務數。TPC-B不像TPC-C那樣模擬了現實

原创 Linux 修改/etc/security/limits.conf

做GP壓測的時候,當併發上去之後會一直報 could not fork new process for connection: Resource temporarily unavailable (seg0 10.50.10.170:6

原创 Redis錯誤配置詳解

Redis提供了許多提高和維護高效內存數據庫使用的工具。在無需額外配置應用層的前提下,Redis獨特的數據類型、指令和命令調優就可以滿足應用的需求,但是錯誤的配置,更確切的說那些機外設備可能導致操作麻煩和性能問題。雖然導致了一些令人頭疼的

原创 GreenPlum pgbench壓測

一、安裝pgbench 二、測試TPC-B 三、插入、刪除、更新 併發的update會報一個錯誤訊息 concurrent updates distribution keys on the same row is not allowed