原创 普通程序員的四年打雜收貨

上個月去思科的外包面了開發的職位 過程很不好 ,去了兩次是不同的部門 ,雖然跟現在做的不是很對口 但是也暴露了自己的問題,同時他們都問到了工作四年 覺得最大的收貨是什麼。 這個問題 當時就把我問到了,是啊 轉眼就工作四年了 ,之前剛畢業的

原创 hive(一) hive背景知識介紹-數據倉庫技術簡介

先看定義 : Hive是基於Hadoop的一個數據倉庫工具。 “工具”這意味着Hive並不是一個成型的數據倉庫系統,它只是一個工具,來幫助我們實現數據倉庫。 先來說說數據倉庫: 一般大家平時 聽說的使用的都是數據庫,平常意義上的說的數據

原创 mongodb入門-關係型RDMS數據庫對比及適用場景

引言   最近工作接觸到了mongodb數據庫,記錄下個人對其的理解和使用情況。雖然mongodb 出來的時間已經不短,但是相對mysql mssql oracle 這樣傳統的關係型數據庫來說還是比較年輕,接觸其的程序員應該也很少,本文從

原创 greenplum(一) Postgresql 22001 字符串被截斷的錯誤

最近用greenplum數據庫寫存儲過程時,發現 這個 22001 字符串被截斷的錯誤,由於之前 create or replace function () RETURNS record AS $BODY$ declare a v

原创 oracle ROW_NUMBER() OVER( PARTITION BY COL1 ORDER BY COL2)用法(含lag lead用法)

轉載自:http://blog.csdn.net/yinshan33/article/details/18738229注 原文的lag lead用法第一次見 ,記錄下 ROW_NUMBER() OVER( PARTITION BY COL

原创 greenplum(四)greenplum 常用數據庫管理語句,sql工具

原文地址:https://blog.csdn.net/you_xian/article/details/78549756在greenplum 使用過程中積累的一些常用查詢語句,整理出來備忘。歡迎各位留言補充。都是SQL命令以及數據字典的使

原创 nginx + tomacat 負載均衡

1 需求:客戶需要對現有的web服務接口 進行負載均衡配置。領導直接安排要求使用nginx做,直接從沒聽過這個東西,但都說這個東西很簡單。那隻能話不多說,直接幹活咯。後面卻搞了整整一天的時間。 2 背景知識: 先了解下web負載均衡相關知

原创 greenplum(六) 現場常見由業務導致的故障

1 應用側客戶端發現執行函數調度時出現連接重置,需重新連接數據庫的問題問題現象:問題代碼:select c.bcyc_id,c.acyc_id,c.eparchy_code, c.city_code, 'E0_001_01', count

原创 元數據管理系統解決方案及產品調研-數倉系列(一)

元數據管理系統產品選型分析 1  概述 需要給目前數據倉庫適用一套元數據管理系統,目的 減少人爲的維護工作量、web頁面協同工作(多人統一入口使用)、元數據權限管理等  1.1  應用背景 目前數據倉庫沒有專業的元數據管理系統,部分業務模

原创 greenplum(三) gp工具命令及工具函數語句,持續更新.....

1 命令行導入文本數據到表 psql -d bass_gp -h 10.243.4.145 -p 5432 -U dwadm -c "\copy dwtmp.tmp_test(cellid) from /data/22.txt " bas

原创 greenplum(五) greenplum開發筆記之建表規範

背景:某運營商經分分析系統 底層數據倉庫; 離線分析系統 物理模型表 表多批量操作 批量插入、更新 ,truncate操作,全表分組分析等。1 非分區表 ,建表樣例語句:--drop table dwctr.tc_term_xxx; cr

原创 linux 常用(三) ftp服務命令

ftp命令與通常的linux命令不太相同,所以自己記下。 登陸方式: 替換下面例子中 IP 或域名爲你的服務器地址 ftp ip 例如: ftp domain.comftp 192.168.0.1ftp user@ftpdomain.

原创 greenplum(五) 性能小結記錄

某省移動所用的greenplum集羣,硬件參數不得而知,集羣規模不得而知,因爲是開發人員。平常都只做業務邏輯的function開發。覺得跟以前用的oracle及db2相比 ,跑正常的電信行業的關聯及業務邏輯sql語句要快很多,故此記錄下

原创 俠之大者,爲廠接坑-苦逼的程序員們(代碼裏有鬼)

還是15年8月份保存的草稿。。。。。。。。。。 說的是這樣一羣的苦逼的程序員們 1 家庭環境一般;基本都是普通本科畢業 由於各種原因 沒有讀研 直接工作的。 2 話少 、交際圈窄;除了 上班 加班 就是窩在自己出租房裏 3 脾氣好、老好

原创 db2 -4229錯誤 sql執行及數據加工報錯信息的坑們-db2開發系列(二)

自從工作之後接觸的關係型數據庫有oracle、mysql、db2、greenplum、hive 。nosql有hbase、mongodb。nosql暫且不提,關係型裏面oracle mysql 等都挺好用,,就報錯信息 及內部機制 db2