OpenNMT運行環境搭建
前言:深度學習入門第一步就是搭建運行環境,安裝各種框架,設置各種環境變量,其實熟練之後也就那麼回事。下面我以OpenNMT爲例,介紹搭建服務器運行環境的整個過程,供大家參考。
1、當前配置
-
服務器:ubuntu 18.04 LTS
-
cuda: 9.0
-
cudnn: 7.3.0
-
conda: 4.5.11
查看這些版本的命令,請自行百度吧,這裏就不贅述了。
2、OpenNMT文檔
3、環境配置
創建虛擬環境,這裏我們使用 Python 3.7,環境名爲opennmt
。如果報錯,就是鏡像掛了,文末有解決方案。
conda create -n opennmt python=3.7
安裝Pytorch 1.1
先進入虛擬環境,再用pip安裝torch和torchvision。注:配置pip豆瓣源,速度非常快。
source activate opennmt
pip install torch torchvision
clone NMT,並安裝依賴包。
git clone https://github.com/OpenNMT/OpenNMT-py.git
cd OpenNMT-py/
pip install -r requirements.txt
運行demo
python preprocess.py -train_src data/src-train.txt -train_tgt data/tgt-train.txt -valid_src data/src-val.txt -valid_tgt data/tgt-val.txt -save_data data/demo
出現如下結果就是運行成功了:
遇到的問題
1、執行 conda create -n opennmt python=3.7 時,報錯 Solving environment: failed
CondaHTTPError: HTTP 404 NOT FOUND for url https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free/noarch/repodata.json
Elapsed: 00:00.316530
The remote server could not find the noarch directory for the
requested channel with url: https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free
解決方案:因爲清華大學和中科大已經宣佈停止提供 Anaconda 鏡像服務。還是用回官方的吧。
命令步驟:
cd ~
rm .condarc
conda config --add channels https://repo.anaconda.com/pkgs/free/
conda config --set show_channel_urls yes