原创 【解決方案】pytorch中loss變成了nan | 神經網絡輸出nan | MSE 梯度爆炸/梯度消失

loss_func = nn.MSELoss() loss = loss_func(val, target) 最近在跑一個項目,計算loss時用了很普通的MSE,在訓練了10到300個batch時,會出現loss tensor(

原创 express : 無法將“express”項識別爲 cmdlet、函數、腳本文件或可運行程序的名稱。express: command not found

關於 express.js 的一個小貼士。 npm install express -g 如上我們使用 node 的 npm 安裝了 express 框架後,並不會順帶着把 express 腳手架安裝。 此時,如果直接輸入

原创 《強化學習》中的第11章:基於函數逼近的離軌策略方法

前言: 本次筆記對《強化學習(第二版)》第十一章進行概括性描述。 以下概括都是基於我個人的理解,可能有誤,歡迎交流:[email protected]。 總的來說,第11章學習體驗不好。可能是由於內容本身比較抽象,第11章屬於星標

原创 “我有必要寫技術博客嗎?” 寫技術博客一年,談談其得失優劣

本文全文不含任何推廣,所提到的博主、公衆號皆爲筆者真真切切接觸、學習過的。 大三上學期讀了許多“程序員”的公衆號,當時計算機基礎知識並不好,很多文章讀的一知半解。只記得關注了幾個很棒的公衆號:java3y、碼農翻身、我沒有三顆心

原创 【開發隨筆】以強化學習環境 gym 庫爲例:爲什麼日常中我應該試圖標準化接口?

前言: 這兩天在看 openAI 的 gym ,並嘗試用其測試自己寫的 Sarsa 。一塌糊塗,這裏來記錄下經驗教訓。官網對於 gym 的文檔不多,也不詳細,讀了 gym 的源碼,很直觀,也確實用不着什麼官方文檔。強化學習與傳統

原创 基於小世界網絡/無標度網絡/複雜網絡進行SEIR病毒傳播仿真研究

在老師的指導下,完成了一次小小研究:學者觀點 | 從複雜網絡理論分析爲何這場戰“疫”如此艱苦,著作權爲天津大學管理與經濟學部所有,如需引用請事先聯繫 [email protected] 獲得許可。 所有仿真實驗均可復現,開源至:htt

原创 【彙編語言與計算機系統結構筆記10】C語言數組的彙編訪問:連續存儲、代碼優化、無邊界檢查;結構對齊要求 #簡潔筆記形式

本次筆記內容: 13.數據的機器表示 注:本次筆記開始,我找到了對應內容的課件,請見我於GitHub的CS筆記倉庫。因此,爲了節省時間,我只記錄老師上課強調的內容與對應ppt頁碼。 本節課對應幻燈片:彙編語言程序設計-C語言

原创 數學建模有必要論證“合理性”嗎 / 數學建模的合理性怎麼寫

前言: 參加過一些數學建模比賽,也順其自然地讀了不少參賽論文,對“數學建模有沒有必要論證合理性”這個問題發表一點拙見,歡迎捶我。 回答這個問題:數學建模沒必要論證合理性。 原因如下: 一般來講,數學模型都是“有依據”地建立起

原创 隨手筆記:我的架構師之路--沈劍 到家集團技術委員會主席&快狗打車CTO

同學也不太懂開發,他可能覺得我懂“開發”,然後正好看着了這個講座,就把講座推薦給我看看了。 雖然我不準備做架構(或者說不太瞭解),但是同學一片好心,我正好也有精力,就看看,記記筆記吧~ 要點總結 形成自己的核心競爭力(有一個垂直

原创 什麼樣的 python 可以可謂專業 PyPI 項目?剛剛學到三個概念:pep8、Sphinx、pytest與GitHub Action的集成

前言: 最近在讀很火的 tianshou (基於 pytorch 提供深度強化學習算法的簡易接口),兩個清華本科生做的。很規範、很優秀的項目。 做出來的項目,想要讓別人使用、維護、建立良性可持續社區,項目結構清晰、寫註釋、生成文

原创 《強化學習》中的第15章:神經科學

前言: 本次筆記對《強化學習(第二版)》第十五章進行概括性描述。 本次筆記內容依舊很少。神經科學是拓展部分,書上已經儘量將所舉例子語言簡化。 小結 大腦收益系統相關的神經通路很複雜,且沒有被人類完全理解。但發展與成果是有的:

原创 深度學習/雲計算 - 【學生黨】【GPU】16個雲服務器資源大彙總

前言: 筆者近期參加一些深度學習、數據科學類的比賽,本地算力已不足以滿足需求,需要更強的計算資源。本着“貨比三家”的原則,筆者蒐羅了互聯網上的雲計算資源,主要對其經濟性進行彙總如下。 文章目錄深腦鏈旗下的GPU共享平臺面向個人

原创 【彙編語言與計算機系統結構筆記11】程序格式與僞操作:段定義、堆棧 #簡潔筆記形式

本次筆記內容: 14.程序格式與僞操作-1 注:本節課更換爲一名女老師。我找到了對應內容的課件,請見我於GitHub的CS筆記倉庫。因此,爲了節省時間,我只記錄老師上課強調的內容與對應ppt頁碼。 本節課對應幻燈片:彙編語言

原创 《強化學習》中的第14章:心理學

前言: 本次筆記對《強化學習(第二版)》第十四章進行概括性描述。 本次筆記內容很少。太多的縮寫與內容的非重要程度,讀不進去第十四章。 小結 心理學/神經科學的研究與強化學習的研究是相互推動的: 早前我讀過一篇報道:神經科學團

原创 【Linux】Windows 10 安裝應用商店 ubuntu 終端後訪問本地文件

Linux 小白。因爲比賽需要用到一些 Linux 命令,因此不得不用終端。 應用商店安裝 ubuntu 後,想跳出根目錄,訪問 windows 文件,嘗試了網上說的幾個方法,都不太好使: mount # 本來想掛載D盤的