原创 Postgresql中時間戳與日期的相互轉換(同樣適用於GreenPlum)

--日期轉時間戳 SELECT EXTRACT(epoch FROM NOW()); SELECT EXTRACT(epoch FROM CAST('2017-12-06 00:17:10' AS TIMESTAMP)); --時間

原创 GP通過外部表裝載數據時遇到ERROR:extra data after last expected column解決方法

一般通過hive -e導出文本時,我都習慣把比較容易出錯的String類型字段做一次regexp_replace()處理, 因爲如果字段裏面含有製表符,那是一件很坑很坑的事。 hive -e "select regexp_replac

原创 Python簡單抓取CSDN博文列表並寫入SQL Server數據庫

#/usr/bin/env python # -*- coding:utf-8 -*- import re #導入正則模塊 import requests #導入http客戶端庫 import lxml.html #基於libxml2這一

原创 GreenPlum之日常SQL腳本筆記(一)

--1.指定月份總共多少天 SELECT EXTRACT(DAY FROM CAST('2017-08-01' AS DATE) + INTERVAL '1 month' - INTERVAL '1 day') SELECT EXTR

原创 SQLServer字段替換隱藏字符CHAR(0),踩坑後Get新技能

大半夜的不由的想說一句:世界上本沒有坑,挖的人多了,於是就有了坑。但踩的坑多了,想問題的角度也就改變了,一切都很值。 坑王駕到背景:用Kettle導SQLServer中的十幾張表到PostgreSQL,導某個表的時候發現有些字段肉眼看上去

原创 12個scp命令傳輸文件的例子

本文轉自博客:http://www.cnblogs.com/voidy/SCP(Secure Copy)是一個在各個主機之間進行復制或者文件傳輸的一個命令行工具。 它使用一種同ssh一樣的安全機制。事實上,它在後臺使用ssh連接來進行文

原创 CentOS上以源碼的方式安裝Redis筆記

1.下載Redis指定版本到當前目錄 wget http://download.redis.io/releases/redis-4.0.1.tar.gz 2.解壓源碼包 tar zxf redis-4.0

原创 玩轉正則表達式(Regular),這個世界正在獎勵偷偷用心的人

聲明:以下只是本人學習正則表達式的筆記概要,主要參考: 正則表達式30分鐘入門教程 1.必記的常用元字符: .匹配除換行符以外的任意字符\w 匹配字母或數字或下劃線或漢字 \W表示與之相反\s匹配任意的空白符\S表示與之相反\d匹配數

原创 Python學習心得(六) 反射機制、裝飾器

1.反射機制 #/usr/bin/env python # -*- coding:utf-8 -*- ''' Python反射機制的核心本質:利用字符串的形式去對象(模塊)中操作(查找/獲取/刪除/添加)成員,一種基於字符串的事件驅動

原创 SQL Server通過外部程序集註冊正則表達式函數(CLR函數)

1.下載dll程序集(通過C#編寫的支持正則的方法),百度網盤下載: 1.1如果只想用,可以直接下載MSSQLRegexExtend.dllhttps://pan.baidu.com/s/1qX8eHa81.2正則程序集對應的解決方案MS