原创 Datawhale 零基礎入門CV賽事-Task4 模型訓練與驗證
Datawhale 零基礎入門CV賽事-Task4 模型訓練與驗證 4.1 學習目標 理解驗證集的作用，並使用訓練集和驗證集完成訓練 學會使用Pytorch環境下的模型讀取和加載，並瞭解調參流程 4.2 構造驗證集 在機器學習模型
2020-06-01 03:20:41
原创 計算機視覺實踐（街景字符編碼識別）/Datawhale 零基礎入門CV -賽題理解
賽題理解 賽題名稱：零基礎入門CV之街道字符識別 賽題目標：通過這道賽題可以引導大家走入計算機視覺的世界，主要針對競賽選手上手視覺賽題，提高對數據建模能力。 賽題任務：賽題以計算機視覺中字符識別爲背景，要求選手預測街道字符編碼，這
2020-05-21 17:56:02
原创 天池二手車價格預測--建模與調參
目錄模型選型模型調參1 模型選型2 模型調參結果 模型選型 模型調參 1 模型選型 採用了xgboost和lightGBM以及它倆的加權模型 2 模型調參 主要對葉子節點數，學習率以及估計器參數進行調整 def xgb_
2020-04-15 01:43:23
3
原创 天池二手車價格預測-特徵工程
天池二手車價格預測-特徵工程特徵工程（1）刪除分佈嚴重不平衡的特徵（2）對預測值進行對數正態轉化（3）針對日期特徵進行分桶（按年、月）統計（4）針對兩個日期字段進行間隔天數計算（5）構造品牌-價格的量化特徵(最大、最小、平均值、方
2020-03-31 14:53:54
原创 天池二手車價格預測-EDA-數據探索性分析
EDA-數據探索性分析 1、加載數據 2、枚舉特徵分類統計 3、數字特徵可視化 4、特徵擴充 5、數字特徵異常值檢測 6、正態分佈檢測 7、對數轉化圖形對比 8、對數正態轉化 9、數字特徵異常值檢測(正態變換後) 10、特徵選擇(
2020-03-31 14:53:54
原创 python使用迭代器注意事項
0、問題背景 看了段大牛的開源代碼： “”“ author='Kenneth Reitz', author_email='[email protected]', url='https://github.com/kennethr
2020-03-19 09:21:53
原创 python的可迭代對象與迭代器
1、可迭代對象Iterable 可迭代對象可直接用於for循環 直接作用於for循環的數據類型有以下幾種： 一類是集合數據類型，如list、tuple、dict、set、str等； 一類是generator，包括生成器和帶yiel
2020-03-19 09:21:53
原创 數據庫多表聯合查詢附簡單例子
多表聯合檢索： SQL語句： Select 用逗號隔開的一排列名 From 表名1，表名2, … Where 檢索條件+連接條件 相當於語句 如果沒有檢索條件+連接條件，同理於笛卡爾積 θ連接之等值連接： 例如：按"001
2020-02-28 22:40:47
原创 防止粗心的背鍋
場景 最近在做一個項目，每天忙的不可開交，忙着初驗，人手不夠，有很多模塊已經開發完，前期已跟產品確認過開發的，甲方數據一直加密，導致初驗無法達到理想效果，但其實後期甲方數據加密項目組的人都清楚，後面甩鍋甩到開發的我身上，說我最後才
2020-02-23 13:13:56
原创 轉載——Spark Web UI 監控
參考：https://blog.csdn.net/zxl55/article/details/79572475 日常鋪墊 本人最終用於大數據集測試的集羣中包含4個節點，每個節點是一個worker，每個worker上啓動一個Exec
2019-08-09 09:16:06
原创 XGBOOST學習資料
xgboost原理：https://blog.csdn.net/dream_catcher_10/article/details/51277138 GDBT原理：https://blog.csdn.net/dream_catcher_
2019-05-04 15:54:43
原创 歡迎使用CSDN-markdown編輯器000
這裏寫自定義目錄標題歡迎使用Markdown編輯器新的改變功能快捷鍵合理的創建標題，有助於目錄的生成如何改變文本的樣式插入鏈接與圖片如何插入一段漂亮的代碼片生成一個適合你的列表創建一個表格設定內容居中、居左、居右SmartyPants
2019-04-16 04:20:56
原创 python import 導入的路徑問題
前言 Python相對導入與絕對導入，這兩個概念是針對與兩個包內(包含__init__.py文件的文件夾)的導入而言的。包內導入：就是包A的模塊(.py文件)導入另一個包B的模塊(py)文件。 命令行與pycharm運行是的區別： 命
2019-04-16 04:20:56
原创 2019-3-20：pyspark程序運行報錯：no module named XXX（本地pycharm沒問題而線上cmd下運行有此問題）
（一）場景問題 1）我在本地pycharm項目分支下運行文件，運行方式是：先cd到項目根目錄，然後再運行本地提交命令；現在把該部分代碼打包上傳到線上，直接在命令行運行，就會報no module named XXX錯誤； 本地目錄：
2019-04-01 03:23:03
53
原创 2019-03-21 python導入包問題
http://codingpy.com/article/python-import-101/ https://segmentfault.com/a/1190000009842139
2019-04-01 03:23:03