原创 Python-Pandas中Series用法總結

Series:帶標籤的數組 本文對Pandas包中的一維數據類型Series特點及用法進行了總結歸納。 2.1 如何創建Series #導入Pandas包 import pandas as pd #創建Series #1.1

原创 Python-Oracle數據庫操作

在配置python環境,並安裝所需包後,運行下列代碼~ import pandas as pd from sqlalchemy import create_engine import cx_Oracle #進行oracl

原创 Python-配對函數zip()

1、zip將列表、元組或其他序列的元素進行配對,新建成一個元組構成的列表,它生成列表長度由最短的序列決定: #zip seq1=['foo','bar','baz'] seq2=['one','two','three'] zipp

原创 Python-Matplotlib繪製圖形

頻數分析 a. 定性分析:柱狀圖、餅形圖 i. 柱狀圖:柱的高度代表某種類型的頻數 ii. 餅狀圖:面積代表某種類型的頻數 b. 定量分析:直方圖、分佈曲線 i. 直方圖:將定量數據劃分爲若干連續區間,在這些連續的區間上繪製柱

原创 大數據-數據倉庫-Hive應用

一、關於Hive 1.1 什麼是Hive Hive是構建在Hadoop之上的數據倉庫軟件。它提供類似sql的查詢語句HiveQL對數據進行分析處理,Hive將HiveQL語句轉換成一系列MapReduce作業並執行。 目前,Hiv

原创 數據治理的方法論

數據治理的方法論引言:髒數據的種類及處理方法BI對數據的要求數據治理的原則數據治理的落地 引言: 數據分析師的角色猶如一位大廚,原料有問題,大廚肯定烹飪不出色香味俱佳的大菜,數據有問題,數據分析師得出的結論自然也就不可靠。 先從髒

原创 大數據-Hadoop應用

一、初識Hadoop 以一個小故事解釋什麼是Hadoop: 小明接到一個任務:計算一個100M的文本文件中的單詞的個數,這個文本文件有若干行,每行有若干個單詞,每行單詞與單詞之間均以空格鍵隔開。對於處理這種100M量級數據的計算任

原创 python鏈接Oracle數據庫

在配置python環境,並安裝所需包後,運行下列代碼~ import pandas as pd from sqlalchemy import create_engine import cx_Oracle #進行oracl

原创 SQL中Exists與IN用法比較

一、EXISTS用法說明 EXITS謂詞代表 存在量詞,帶有EXISTS謂詞的子查詢不返回任何數據,只產生邏輯真值TRUE或邏輯假值FALSE。只要EXITS引導的子句有結果集返回,該條件即成立,EXITS不在乎返回的是什麼內容,只在

原创 Python 配對函數zip()

1、zip將列表、元組或其他序列的元素進行配對,新建成一個元組構成的列表,它生成列表長度由最短的序列決定: #zip seq1=['foo','bar','baz'] seq2=['one','two','three'] zipped

原创 《啓示錄--打造用戶喜愛的產品》--讀書筆記

《啓示錄–打造用戶喜愛的產品》 Inspired – How To Create Products Customers Love 第一部分:人員People 第一章:關鍵角色及其職責 產品經理的兩項主要職責:評估產品機會(produc

原创 《SQL 必知必會》-讀書筆記

《SQL 必知必會》是學習數據庫的入門級經典書籍,裏面知識點雖然都比較基礎,不過講解的清晰簡介,也比較全面。通過全面的學習SQL,可以在工作面臨問題時想到更高效的辦法。 接下來主要記錄經典章節中知識點的用法(主要針對Oracle語法)

原创 SQL計算留存率等指標

一、問題1:留存率計算 字段及表說明: 表名:user_log 字段名: log_day:登錄日期 device_id:用戶設備id app_id:用戶app的id,其中device_id和app_id確定唯一的用戶 1.1計算某日留

原创 with open() as f的用法

常見的讀寫操作: with open(r'filename.txt') as f: data_user=pd.read_csv(f) #文件的讀操作 with open('data.txt', 'w') as f: f

原创 Python計算留存率和轉化率(漏斗分析)

一、案例數據 在數據運營中,留存率分析和轉化率(漏斗)分析是經常用到的,本文結合具體案例總結了如何利用python求n日留存率以及各環節間轉化率。 [指標釋義](https://zhuanlan.zhihu.com/p/5582365