原创 Greenplum計算每月消耗的基本語法
SELECT dtime.sysmonth, opos.orderby_person, CASE WHEN opos."消耗金額" IS NULL THEN 0 ELSE opos."消耗金額" END FRO
2020-07-06 19:46:12
5
原创 windows環境安裝JDK java環境變量配置教程
windows環境安裝JDK java環境變量配置教程下載安裝環境變量配置進入環境變量配置頁面添加環境變量檢查JDK配置 下載 地址:https://www.oracle.com/technetwork/java/javase/d
2019-06-21 07:10:26
3
原创 Python拆分Excel 身份證信息 與分詞統計
Python解析Excel並且進行分詞統計文件描述需求描述功能快捷鍵合理的創建標題，有助於目錄的生成如何改變文本的樣式插入鏈接與圖片如何插入一段漂亮的代碼片生成一個適合你的列表創建一個表格設定內容居中、居左、居右SmartyPan
2019-06-11 17:18:32
3
原创 python分析excel(column判斷寫入,複製excel等)
import openpyxl from datetime import datetime,timedelta import pandas as pd import os, sys,re,shutil tt = datetime.n
2019-06-11 17:18:31
5
原创 SQL 計算一個時間段內每十分鐘統計一次腳本
表結構如下，假如我想統計每個id，在每個整點的十分鐘區間內有多少： 十分鐘區間邏輯如下： select upg.name,count(tmp.id) totalNum,tmp.newTime from( selec
2019-05-12 05:52:34
121
原创 採集日誌工具整理
1、filebeat url：https://www.elastic.co/cn/products/beats/filebeat 輕量型日誌採集器
2019-04-24 14:30:24
原创 一些BI可視化工具的使用總結
建設數據統一的數據平臺，免不了使用一些可視化工具，如下是在工作幾年後，對這些工具的總結，有不正確之處，請指正。 IBM cognos 潤乾 Smart BI Fine Report、FineBI PowerBI
2019-04-09 07:09:18
原创 00、Python一些工具箱
BIF 內置函數 如何查看內置函數： dir(__builtins__) 可以查看內置方法，結果如下： >>> dir(__builtins__) ['ArithmeticError', 'AssertionError', 'Attr
2019-04-07 09:06:52
原创 01、如何解決嵌套列表逐一輸出
加入目前有這麼一個列表 citys = ['shanghai','beijing','guangzhou','shenzhen',['江蘇',['南京','鎮江','蘇州',['崑山','南通']]]] 需要一一打印出列表： shang
2019-04-07 09:06:42
原创 Greenplum數學函數和操作符
最近可能需要幹一些數據分析的活，想到能否先用SQL實現一些算法，事不宜遲，第一步必須瞭解一些基礎的數學函數和操作符。 數學操作符 編號 操作符 描述 栗子 結果 001 + 加 select 32+90 122 002 - 減 selec
2019-02-19 06:49:18
原创 ubuntu16.04 安裝JDK1.7運行環境
環境說明：UBUNTU16.04 X64 jdk:jdk-7u80-linux-x64.tar.gz 下載鏈接：https://www.oracle.com/technetwork/java/javase/downloads/index.
2019-02-01 17:13:23
原创 Python將EXCEL導入 Greenplum
在項目中會碰到需要將excel批量導入數倉的需求，python的xlrd正好簡單易用，拿來一試！ import psycopg2 import xlrd import sys import time ''' 連接數據庫
2019-01-16 14:17:17
原创 GP算出每月消耗
SELECT dtime.sysmonth, opos.orderby_person, CASE WHEN opos."消耗金額" IS NULL THEN 0 ELSE opos."消耗金額" END FRO
2019-01-16 14:17:17
原创 Greenplum 資源狀態查看記錄
作爲BI工程師，對SQL的熟練掌握必不可少，greenplum作爲MPP數據庫，當然需要深入瞭解一些重要的開發技巧。 日常SQL開發規範要求： 1.代碼行清晰、整齊、層次分明、結構性強，易於閱讀； 2.代碼中應具備必要的註釋以增強代碼的可
2018-11-20 02:09:59
原创 TiDB開發測試
由於項目需要，需要對TiDB對接kettle進行功能測試，以下是初步測試結果，請參考，後續會不間斷更新 類目 測試方案 測試過程 測試結果 接口測試 連接數據庫（MySQL）、Transactions（Kettle） 使用Kettle
2018-08-30 16:21:51
4