原创 CentOS通過/etc/security/limits.conf限制系統資源使用

1、系統範圍內限定資源使用 通常只需要修改/etc/security/limits.conf,增加相應數據行,重新登錄下用戶即可解決,具體如下所示: vim /etc/security/limits.conf * soft nofile

原创 簡述PGA相關概念及參數

1.概念簡介 1)PGA: 程序全局區(Program Global Area),服務器進程的私有內存區域,涉及服務器進程相關私有內存的所有區域和信息。 2)UGA: 用戶全局區(User Global Area),會話相關的內存區域。s

原创 mysql5.7主從切換(master/slave switchover)

本文源自:https://www.cnblogs.com/ctypyb2002/p/9793012.html 切換前  192.168.56.100 master  192.168.56.200 slave 切換後  192.168.56

原创 選項文件(Option Files)/配置文件(Configuration Files)的使用

1.選項文件的概念及作用 大多數MySQL程序能從選項文件(有時稱爲配置文件)中讀取啓動選項.運行程序時,爲了不必在命令行輸入常用選項,選項文件爲確定這些常用選項提供了一個方便的途徑. 爲了決定程序是否讀取選項文件,可以--help選項運

原创 Sqoop_具體總結 使用Sqoop將HDFS/Hive/HBase與MySQL/Oracle中的數據相互導入、導出

本文源自:https://www.cnblogs.com/wzjhoutai/p/7080216.html 使用Sqoop將MySQL中的數據導入到HDFS/Hive/HBase    二、使用Sqoop將HDFS/Hive/HBase中

原创 SQL運行時報錯ora-04030 (QERHJ hash-joi,kllcqas:kllsltba)的診斷案例

本文源自:https://blog.csdn.net/cnje5551/article/details/100230162 某公安系統開發人員在plsql中執行查詢時報ORA-04030: 在嘗試分配 123416 字節 (QERHJ h

原创 Hadoop生態系統官網、下載地址、文檔

本文源自:http://lxw1234.com/archives/2015/05/203.htm Apache版本:   Hadoop官網:http://hadoop.apache.org/ Hadoop下載:http://mirror.

原创 組複製(MySQL Group Replication)簡介

1.簡介 本文提供mysql組複製的背景信息。 創建一個容錯系統的最常見的方法是求助於組件冗餘,換句話說,組件能被移除,但系統將如期可以繼續操作。這將整個系統的複雜度提升到了更具挑戰性的級別。尤其是,複製庫必須面對多個而非一個服務器維護和

原创 Mongodb訪問控制

1.限定訪問的服務器特定IP --通過啓動mongodb時指定參數bind_ip # ./mongod --bind_ip=10.10.10.2 --通過配置文件指定bind_ip # vi /etc/mongodb.cnf bind_i

原创 OLAP開源引擎

本文源自:https://cloud.tencent.com/developer/article/1506782 OLAP開源引擎 目前市面上主流的開源OLAP引擎包含不限於:Hive、Hawq、Presto、Kylin、Impala、S

原创 AIX到linux的rcp安裝配置

AIX到linux rcp安裝配置 1、linux方rcp安裝包檢查及安裝 # rpm -qa|grep rsh # yum -y install rsh # yum -y install rsh-server # yum -y inst

原创 InnoDB鎖機制(locking)

本文將描述InnoDB用到的鎖類型。 1)共享和排他鎖(Shared and Exclusive Locks)。 2)意向鎖(Intention Locks)。 3)記錄鎖( Record Locks)。 4)間隙鎖(Gap Locks

原创 MySQL InnoDB多版本機制(MVCC)

1.InnoDB多版本簡介 InnoDB爲一個多版本存儲引擎:爲了支持像併發和回滾等事務特性,InnoDB保存被修改數據行的舊版本信息。這些舊版本信息存儲於叫做回滾段(沿用Oracle中類似的數據結構)表空間內。InnoDB使用回滾段中的

原创 InnoDB中不同SQL語句設置的鎖

鎖定讀,update,或delete一般會在SQL語句處理過程中掃描的每個索引記錄上加記錄鎖。其並不關心排除該數據行的語句中是否有where條件。InnoDB並不記得準確的where條件,但僅知道被掃描的索引範圍。 鎖定通常爲下一鍵值鎖,

原创 Mysql數據庫InnoDB架構

本文介紹InnoDB存儲引擎架構的主要組件。 1.緩衝池(Buffer Pool) 緩衝池是數據訪問時InnoDB在主內存中緩存表和索引數據的區域。緩衝池允許頻繁訪問的數據直接在內存中處理,這減速了處理的性能。專用數據庫服務器上,通常將