原创 Pytorch 訓練常見問題

問題:IndexError: invalid index of a 0-dim tensor. Use tensor.item() to convert a 0-dim tensor to a Python loss += criteri

原创 Linux 靜態路由管理

一. 路由刪減: 網段 route add -net 192.168.0.0/24 gw 192.168.0.1 指定主機 route add -host 192.168.0.1 dev 192.168.0.1 刪除路由 rout

原创 多模型的非if-else實現

數據分析過程中,經常要建立多個模型,而主函數要根據需求調響應的模型。 If-else 實現: public class JudgeModel{ public String judge(String modelName){

原创 RuntimeError: CUDA error: device-side assert triggered

pytorch中運行分類任務時,報如下錯誤: /pytorch/aten/src/THCUNN/SpatialClassNLLCriterion.cu:103: void cunn_SpatialClassNLLCriterion_upd

原创 解決mac終端 SSH超時斷開

List 打開 mac 終端 Terminal (快捷鍵 Command+T),cd /etc/ssh/ 目錄。 zeyuantxiadembp:ssh zhangzeyuan$ ls moduli ssh_config

原创 JAVA 函數式編程 forEach

下面的例子採用JAVA 8編譯和運行: JDK 8 及之後的版本,我們可以使用函數式接口作爲參數,函數式接口有以下三種類型: 1.lambda表達式 2.方法引用 3.構造方法引用 public class FuncTest {

原创 命令行運行Python腳本時傳入參數

argparse: import argparse parser = argparse.ArgumentParser(description='Hello World!') parser.add_argument('--gpus', t

原创 機器學習資源

本文轉自  深度學習世界2000年早期,Robbie Allen在寫一本關於網絡和編程的書的時候,深有感觸。他發現,互聯網很不錯,但是資源並不完善。那時候,博客已經開始流行起來。但是,Youtube還不是很普遍,Quora、 Twitte

原创 Spark實現根據key值來分目錄保存文件 多文件輸出(MultipleOutputFormat)

假設我們有這樣的(key,value)數據: sc.parallelize(List((20180701, "aaa"), (20180702, "bbb"), (20180701, "ccc")))我們想把它們存到路徑“output/”

原创 Ubuntu 16.04安裝GPU(GTX1080 Ti)

一、安裝ubuntu 16.041.ISOUltra 製作啓動盤2.安裝ubuntu 16.04系統3.用VPN上網https://jingyan.baidu.com/article/ca41422fecac111eae99eddf.ht

原创 Spark 分區(Partition)的認識、理解和應用

一、什麼是分區以及爲什麼要分區?Spark RDD 是一種分佈式的數據集,由於數據量很大,因此要它被切分並存儲在各個結點的分區當中。從而當我們對RDD進行操作時,實際上是對每個分區中的數據並行操作。圖一:數據如何被分區並存儲到各個結點 

原创 中文自動分詞的幾種方法的總結思考

中分分詞最大的困難在於歧義,這個又分爲2類:1、交集型歧義2、組合型歧義交集型歧義的解決方法有:1、最大匹配法從句子左端開始,不斷匹配最長的詞(組不了詞的單字則單獨劃開),直到把句子劃分完。算法的理由很簡單:人在閱讀時也是從左往右逐字讀入

原创 機器學習江湖中的五大流派

讓我們首先從一個簡單的問題開始,知識到底是從哪裏來的?以前已知的三個來源有:1. 進化——來自於你的DNA2. 經驗——來自於你的神經3.文化——這些知識來自於與他人交流,讀書學習等我們日常生活中幾乎每件事都是來自於這三個方面的知識,最近

原创 Spark開發中遇到的常見問題以及解決方案(一)

問題一:ERROR ActorSystemImpl: Uncaught fatal error from thread [sparkDriver-akka.remote.default-remote-dispatcher-8] shutt

原创 visio 2013 破解工具 (KMSpico)

我的環境是 win10, 64 bit,安裝了 visio 2013 ,但是一直不能破解,很是頭痛。   終於找到了正確的破解工具 KMSpico_setup.exe     下載地址: 鏈接: https://pan.baidu.