原创 mysql AB複製延遲配置工具
一、概念 延時複製：在設定的時間(默認3600s)內發生故障，可以進行恢復；先下載下來，然後等3600s後再執行。 架構：參照"Mysql一主多從部署" master–>slave1–>slave2 \–>slave3(延遲複製,一般
2020-06-24 22:46:41
原创 自動刪除oracle下的過期文件命令
linux下自動刪除過期文件命令[@more@] 語句寫法：find 對應目錄 -mtime +天數 -name "文件名" -exec rm -rf {} ; 例1： find /home/oracle/app/oracle/di
2020-06-24 22:46:31
原创 linux下命令使用大全
linux下命令使用大全 一、date命令 1、顯示3分鐘前時間 date --date="-3 minute" +%Y%m%d%H%M 2、顯示前3天時間 date --date '3 days ago' +%Y%m%d
2020-06-24 22:46:30
原创 hadoop namenode ha方案
Hadoop 2.0 NameNode HA和Federation實踐 Posted on 2012/12/10 一、背景 天雲趨勢在2012年下半年開始爲某大型國有銀行的歷史交易數據備份及查詢提供基於Hadoop的技術解決
2020-02-24 14:14:33
原创 如何使用hive
#創建表人信息表 person(String name,int age) hive> create table person(name STRING,age INT)ROW FORMAT DELIMITED FIELDS TERMI
2020-02-24 14:14:23
原创 lvs LVS調整hash bucket及內核編譯 優化
一、IPVS connection hash table size，該表用於記錄每個進來的連接及路由去向的信息。連接的Hash表要容納幾百萬個併發連接，任何一個報文到達都需要查找連接Hash表。Hash表的查找複雜度爲O(n/m)，其中n
2020-02-24 14:14:23
原创 hive安裝過程
一、查看需求 安裝java 1.6及hadoop 0.20.x 二、安裝hive tar -xf hive-x.y.z.tar.gz（本次安裝爲hive-0.8.1.tar.gz） 將解壓後的hive-0.8.1文件放在系統
2020-02-24 14:14:23
原创 ZooKeeper安裝過程
一、安裝需求 安裝java 1.6及hadoop 0.20.x 二、安裝zookeeper 1、下載zookeeper wget http://mirror.bit.edu.cn/apache//zookeeper/zook
2020-02-24 14:14:23
1
原创 hbase安裝配置
base配置 下載：hbase-0.96.2-hadoop2-bin.tar.gz[root@db96 ~]# wget http://apache.dataguru.cn/hbase/hbase-0.96.2/hbase-0.96.2-
2020-02-24 14:14:23
原创 mysql 性能優化方案 （轉）
網 上有不少mysql 性能優化方案，不過，mysql的優化同sql server相比，更爲麻煩與複雜，同樣的設置，在不同的環境下 ，由於內存，訪問量，讀寫頻率，數據差異等等情況，可能會出現不同的結果，因此簡單地根據某個給出方案來配
2020-02-24 14:14:23
原创 hadoop - jobTracker自動停止問題
這個問題貌似很少看到直接的解決方法啊，是大家都沒遇到還是直接忽略了？該異常確實不影響整個hadoop系統任務的執行，但是對於我這個強迫症患者，天天看着任務報錯還是很不爽的。 找了很久，終於找到問題的本質和解決辦法。 以下爲原博
2020-02-24 14:14:23
1
原创 Centos 6編譯內核支持LVS-SNAT模式
lvs分爲DR/NAT/TUN,3種模式，相信大家都瞭解了，但是有些網站網絡環境比較複雜，很多網段、各服務之間又有互相調用、兩地機房又有VPN，那麼以上提及的3中模式都難以適應此環境。 因此，我介紹下centos下，iptables+
2020-02-24 14:14:23
原创 win8-txt文件不能默認記事本打開
Q：txt文件不能默認記事本打開，每次打開都得選擇程序，跪求解決辦法，操作系統爲win7旗艦版 A：電腦基礎 中級團 合作回答者：1人 2012-03-04 這個需要 在註冊表 裏刪除 1、首先 win+r 2、打
2020-02-24 14:14:23
原创 linux下安裝python
sudo yum -y install python-devel openssl openssl-devel gcc sqlite-devel wget http://www.python.org/ftp/python/2.7.6/Py
2020-02-24 14:14:23
原创 hadoop運維彙總篇
在實際的生產環境運維一個Hadoop集羣有一些必須要關注的事情。 1、Namenode的高可靠性 2、節點配置與管理 3、Mapreduce的內存配置 4、啓用trash 首要的是保證數據安全可靠，其次再去考慮存儲效率、計
2020-02-24 14:14:23