原创 DB2 detch分區

1.SP_ADD_PARTITION (調用2.WAITFORDETACH 過程) CREATE OR REPLACE PROCEDURE DW.SP_ADD_PARTITION (     IN V_TABLE     VARCHA

原创 powerdesigner導出字段信息的vba腳本

導出字段等信息(在pd中執行如下腳本,部分地方需要修改) Option Explicit ValidationMode = True InteractiveMode = im_Batch 'on error resume next D

原创 搭建zookeeper集羣

1.爲什麼搭建zookeeper 由於kafka依賴zookeeper,所以在搭建kafka之前必須先搭建zookeeper集羣。 2.zookeeper簡介zookeeper是一個爲分佈式應用提供一致性服務的軟件,它是開源的Hado

原创 postgresql熱備份與恢復

一 熱備份的原理是“基礎備份文件”+“歸檔日誌”進行restore。 1 配置postgresql.conf文件 wal_level = hot_standby archive_mode = on archive_command

原创 spark streaming+flume avro實時計算

1.編寫測試代碼,製作成jar包(spark提供的測試代碼如下,已經編譯好了,自己寫代碼,要用maven或者sbt製做jar包:) package org.apache.spark.examples.streaming import o

原创 spark streaming初體驗

spark streaming是建立在spark上的大規模實時流計算框架。通過閱讀官方文檔,做了一個本地的測試。 1.需要的工具 netcat:通過TCP和UDP在網絡中讀寫數據的工具 下載地址:http://sourceforge.n

原创 自定義datastage階段

新建兩個表定義,用於階段的輸入(InTableDef)輸出(OutTableDef)。 (1).InTableDef的定義如下(輸入字段爲:inID): (2).OutTableDef的定義如下(輸出字段爲vaild):

原创 postgres關鍵字、常量和數據類型

一 標識符和關鍵字          1. SQL 標識符和關鍵字必須以一個字母 (a-z 以及帶變音符的字母和非拉丁字母 )或下劃線(_) 開頭, 隨後的字符可以是字母、下劃線、數字 (0-9)、 美元符號 ($)。      

原创 postgresQL備份數據庫shell

原創作者:wonderful #!/bin/bash declare -a dbarraydeclare -a dbusrDate=`date +%Y%m%d`CurTime=`date +%F%t%X`BakDir='/var/lib/

原创 postgreSQL角色權限控制

1.postgres的邏輯結構: databases->database->schema->object 其中schema就像操作系統的目錄一樣。 2.創建schema create schema jayzhou authori

原创 db2注意事項

1.   db2 nullif()      nullif('1','1')與nullif(1,1)雖然都返回null,但是兩條記錄union起來之後該字段只能存放數值類型,或者‘2.5’這種可以強制轉化成數字類型的字符串。 2. 

原创 VBA寫excel宏

Sub zzz() ' ' zzz 宏 ' '     'ActiveWorkbook.Names.Add Name:="S941.羣衆團體", RefersToR1C1:="=Sheet3!R1C6:R1C6"     'Active

原创 開發datastage parallel routine

1.首先用c語言編寫一個c語言程序:trans.c #include <string.h> #include <stdio.h> char *transname(char *strname) {         char *str;

原创 數據庫基本命令

1.     查看數據庫     [ODS-DB/home/dw]$db2 list db directory  --查看所有數據庫名等信息,2.     啓動數據庫實例db2start    --啓動實例3.     連接到數據庫 

原创 postgres備份方案

1 熱備份需要的基礎備份:backup-mwa-cd03-data.sh #!/bin/bash date=`date +%Y%m%d` bak_path="/var/lib/pgsql/9.3/backups" log_path="