原创 字節跳動 - 短視頻內容理解與推薦競賽

官網:https://biendata.com/competition/icmechallenge2019/ 數據集說明:https://biendata.com/competition/icmechallenge2019/data/

原创 模型訓練中batch_size的選擇

總結:訓練過程中,batch_size的選取對模型精度和模型泛化能力的影響: batch_size過大,模型沒有BN層,模型收斂速度變慢。而且模型容易陷入局部最小值,模型精度低。 batch_size適中,模型沒有BN層,模型收斂速

原创 Augmentor使用學習筆記

Augmentor介紹:Augmentor是一個Python包,旨在幫助機器學習任務的圖像數據人工生成和數據增強。它主要是一種數據增強工具,但也將包含基本的圖像預處理功能。 github地址鏈接:https://github.com/

原创 python-日誌學習(logging)

python logging: 英文原版:https://docs.python.org/2/howto/logging.html#logging-basic-tutorial 中文翻譯版:http://blog.csdn.net/t

原创 pytorch可視化工具visdom的使用

查看使用某端口的進程 lsof -i:8097 開啓visdom服務之後,8097端口會被佔用(視具體情況而定) 示例程序 #-*-coding:utf-8-*- from visdom import Visdom import to

原创 pip安裝包出現 Command "python setup.py egg_info" failed with error code 1 錯誤

描述: 在python2.7環境下,使用最新的pip(18.1)安裝ipython,出現以下錯誤消息: Command "python setup.py egg_info" failed with error code 1 in /t

原创 關於shell的理解

關於shell的理解: 知乎鏈接:https://www.zhihu.com/question/35382632/answer/65331452 shell: 中文名,殼。區別於kernel,核。Linux的核叫做kernel。 殼有

原创 Caltech Pedestrian Detection數據的預處理

參考博客鏈接: https://blog.csdn.net/a2008301610258/article/details/45873867 https://github.com/hizhangp/caltech-pedestrian

原创 ubuntu系統掛載硬盤(單次+永久)

掛載硬盤的命令: mount /dev/sda2 /media/disk1 # 系統重啓之後,掛載將會失效 永久掛載硬盤:需要修改 /etc/fstab 看看系統有哪些磁盤分區 ls /dev/sd* /dev/sda

原创 pytorch低版本加載高版本pytorch訓練得到的模型,出現‘module’ object has no attribute ‘_rebuild_tensor_v2’錯誤

情景 使用pytorch0.3來加載Mobilenetv1的模型(用更高版本的pytorch訓練得到的),出現“AttributeError: ‘module’ object has no attribute ‘_rebuild_te

原创 pytorch多GPU訓練保存的模型,在單GPU環境下加載出錯

背景 在公司用多卡訓練模型,得到權值文件後保存,然後回到實驗室,沒有多卡的環境,用單卡訓練,加載模型時出錯,因爲單卡機器上,沒有使用DataParallel來加載模型,所以會出現加載錯誤。 原因 DataParallel包裝的模型在保

原创 無界面的linux環境下下載百度網盤上的文件

背景 當時樓組在使用百度提供的一個經過二次開發的雲主機,當時需要拷貝模型文件,然後wget直接從github上提供google drive的鏈接失敗,故託同學幫忙下載,然後自己傳到自己的百度網盤。這個時候就面臨了從百度網盤上通過命令行

原创 PR曲線和ROC曲線概念及其區別

知識點 Precision=TP/(TP+FP) Recall=TP/(總的正樣本)=TP/(TP+FN) # 這個時候的 TPR=TP/(TP+FN)=Recall # 真正例率 FPR=FP/(TN+FP) # PR曲線 橫

原创 (轉載)理解dropout

注:轉載自 https://blog.csdn.net/stdcoutzyx/article/details/49022443 理解dropout 注意:圖片都在github上放着,如果刷不開的話,可以考慮翻牆。 轉載請註明

原创 (轉載)基於Overfeat的圖片分類、定位、檢測

基於Overfeat的圖片分類、定位、檢測原文地址:http://blog.csdn.net/hjimce/article/details/50187881作者:hjimce一、相關理論本篇博文主要講解來自2014年ICLR