原创 python數據科學(八):pandas基礎—— 丟棄、apply applymap、唯一性

數據科學(八)丟棄apply&appymap函數數據唯一性及成員資格 丟棄 丟棄行 axis=0 丟棄列 axis=1 import pandas as pd import numpy as np ## 丟棄部分數據 df

原创 數據可視化基礎(八):示例——函數積分圖、散點條形圖

數據可視化基礎(八)函數積分圖基礎圖形下標a b繪製方框外部x,y繪製多邊形添加公式散點條形圖自定義子圖基礎佈局去重合畫圖散點圖柱狀圖 函數積分圖 目標圖形 函數曲線+灰色區域+積分公式 基礎圖形 繪製曲線 import num

原创 python基礎(二十):excel 讀取

基礎(二十)excel讀取工作簿名稱指定工作簿數據讀取得到行數 excel import xlrd 導入模塊 讀取工作簿名稱 for sheet in book.sheets(): print(sheet.name) 指定工作

原创 python數據科學(三):ipython

概念 是一個python的交互式shell 使用 使用ipython notebook anaconda下載後帶有jupyter 1.下載jupyter 2. 打開 3.創建

原创 python基礎(十九):JSON 讀取

基礎(十九)JSON概念基本操作轉換字符串讀取寫入文件部分類型變化 JSON 官方解釋鏈接 json.org/json-zh.html 概念 JSON(Javascript Object Notation) 是一種輕量級的數

原创 python數據科學(十四):pandas基礎——時間事件日誌

時間事件日誌 數據科學(十四)讀取數據數據清洗數據解析數據分析時間總覽精力分配專注力連續時間的精力分配 個人時間統計工具。要點: 使用 dida365.com 來作爲 GTD 工具 使用特殊格式記錄事件類別和花費的時間,如: “

原创 python數據科學(十一):pandas基礎——時間日期、重採樣

數據科學(十一)時間日期時間差字符串和 datetime 轉換Pandas 裏的時間序列生成日期範圍規則化時間戳星期月每個月最後一個工作日組成的索引小時時期及算術運算時期序列直接用字符串時期的頻率轉換以年爲週期,以一年中的 3 月

原创 python基礎(十八):csv讀取

基礎(十八)csv含義操作讀取基本讀取namedtuple映射列名讀取csv到字典表寫入基本寫入以dict形式寫入csv csv含義 csv:逗號分隔值 tsv:tab鍵分隔值 操作 讀取 一個row是一個list 基本讀取

原创 python數據科學(四):pandas基礎—— 空數據、表格計算

數據科學(四)處理空數據複製丟掉dropna()使用默認值替換判斷表格計算減累加最大值減最小值每個數字有多少個最多的數字多少插入分組融合代碼 處理空數據 複製 丟掉dropna() dfkong=df1.dropna() 使用默認

原创 數據可視化基礎(三):顏色、樣式

數據可視化基礎(三)顏色基礎顏色其他代碼樣式點型線型樣式字符串代碼 顏色 基礎顏色 b:blue g:green r:red c:cyan 淺藍綠色 m:magenta 深粉色 y:yellow k:black w:white

原创 數據可視化基礎(一):散點圖、折線圖、條形圖

散點圖、折線圖、條形圖 數據可視化基礎(一)散點圖概念相關性外觀調整代碼折線圖概念外觀調整代碼條形圖概念水平疊加並列代碼 散點圖 概念 顯示兩組數據值,由一組不連接的點完成,每個點座標位置由變量的值決定,用於觀察兩種變量的相關性。

原创 機器學習數學基礎(三):線性代數 矩陣

機器學習數學基礎(三)(一)矩陣引例SVD什麼是SVD?舉例基礎概念定義代數餘子式伴隨矩陣方陣的逆範德蒙行列式矩陣的乘法/狀態轉移矩陣矩陣乘法矩陣和向量乘法狀態轉移矩陣矩陣和向量組矩陣的秩秩和線性方程組解的關係向量組等價(二)特徵

原创 CV理論基礎(一):概述

計算機視覺理論基礎(一)是什麼?做什麼?與哪些學科有關?研究什麼?研究理論和應用主要研究內容研究挑戰怎麼學?學習路線具體學習內容圖像預處理圖像特徵及描述深度學習之前的方法主要研究問題識別 分類CNNRCNN分割FCN醫學生物器官細

原创 機器學習數學基礎(二):概率論與統計量、大數定律、似然估計

機器學習數學基礎(二)概率論概率論基礎初步認識概率公式常見概率分佈兩點分佈二項分佈 Bernoulli distribution泊松分佈均勻分佈指數分佈正態分佈Beta分佈總結 參數、期望、方差sigmoid/logistic函數

原创 機器學習導論(二):數據集、分類、三要素

機器學習導論(二)機器學習機器學習概念分類初識機器學習分類三要素模型策略算法構建機器學習系統模型選擇泛化過擬合欠擬合奧卡姆剃刀原則評估正則化交叉驗證簡單交叉驗證10折交叉驗證留一驗證機器學習庫 機器學習 機器學習概念 以數據集(d