原创 DB2 detch分區
1.SP_ADD_PARTITION (調用2.WAITFORDETACH 過程) CREATE OR REPLACE PROCEDURE DW.SP_ADD_PARTITION ( IN V_TABLE VARCHA
原创 powerdesigner導出字段信息的vba腳本
導出字段等信息(在pd中執行如下腳本,部分地方需要修改) Option Explicit ValidationMode = True InteractiveMode = im_Batch 'on error resume next D
原创 搭建zookeeper集羣
1.爲什麼搭建zookeeper 由於kafka依賴zookeeper,所以在搭建kafka之前必須先搭建zookeeper集羣。 2.zookeeper簡介zookeeper是一個爲分佈式應用提供一致性服務的軟件,它是開源的Hado
原创 postgresql熱備份與恢復
一 熱備份的原理是“基礎備份文件”+“歸檔日誌”進行restore。 1 配置postgresql.conf文件 wal_level = hot_standby archive_mode = on archive_command
原创 spark streaming+flume avro實時計算
1.編寫測試代碼,製作成jar包(spark提供的測試代碼如下,已經編譯好了,自己寫代碼,要用maven或者sbt製做jar包:) package org.apache.spark.examples.streaming import o
原创 spark streaming初體驗
spark streaming是建立在spark上的大規模實時流計算框架。通過閱讀官方文檔,做了一個本地的測試。 1.需要的工具 netcat:通過TCP和UDP在網絡中讀寫數據的工具 下載地址:http://sourceforge.n
原创 自定義datastage階段
新建兩個表定義,用於階段的輸入(InTableDef)輸出(OutTableDef)。 (1).InTableDef的定義如下(輸入字段爲:inID): (2).OutTableDef的定義如下(輸出字段爲vaild):
原创 postgres關鍵字、常量和數據類型
一 標識符和關鍵字 1. SQL 標識符和關鍵字必須以一個字母 (a-z 以及帶變音符的字母和非拉丁字母 )或下劃線(_) 開頭, 隨後的字符可以是字母、下劃線、數字 (0-9)、 美元符號 ($)。
原创 postgresQL備份數據庫shell
原創作者:wonderful #!/bin/bash declare -a dbarraydeclare -a dbusrDate=`date +%Y%m%d`CurTime=`date +%F%t%X`BakDir='/var/lib/
原创 postgreSQL角色權限控制
1.postgres的邏輯結構: databases->database->schema->object 其中schema就像操作系統的目錄一樣。 2.創建schema create schema jayzhou authori
原创 db2注意事項
1. db2 nullif() nullif('1','1')與nullif(1,1)雖然都返回null,但是兩條記錄union起來之後該字段只能存放數值類型,或者‘2.5’這種可以強制轉化成數字類型的字符串。 2.
原创 VBA寫excel宏
Sub zzz() ' ' zzz 宏 ' ' 'ActiveWorkbook.Names.Add Name:="S941.羣衆團體", RefersToR1C1:="=Sheet3!R1C6:R1C6" 'Active
原创 開發datastage parallel routine
1.首先用c語言編寫一個c語言程序:trans.c #include <string.h> #include <stdio.h> char *transname(char *strname) { char *str;
原创 數據庫基本命令
1. 查看數據庫 [ODS-DB/home/dw]$db2 list db directory --查看所有數據庫名等信息,2. 啓動數據庫實例db2start --啓動實例3. 連接到數據庫
原创 postgres備份方案
1 熱備份需要的基礎備份:backup-mwa-cd03-data.sh #!/bin/bash date=`date +%Y%m%d` bak_path="/var/lib/pgsql/9.3/backups" log_path="