原创 centos6 安裝 xgboost0.6
1. 升級gcc4.4 到gcc4.8 wget http://people.centos.org/tru/devtools-2/devtools-2.repo mv devtools-2.repo /etc/yum.repos
2020-06-13 19:39:13
原创 安裝python插件 pandas，matplotlib 等及問題
1.安裝pandas pip install pandas -i http://pypi.douban.com/simple --trusted-host pypi.douban.com 2.安裝matplotlib pip inst
2020-06-13 19:39:13
原创 tensorflow在centos安裝
1.安裝python2.7 下載python-2.7.5.tar.gz文件， tar -xzvf python-2.7.5.tar.gz cd python-2.7.5 ./configure --prefix=/usr/loc
2020-06-13 19:39:13
原创 sqoop與vertica、hive連接
1.export /opt/sqoop/bin/sqoop export \ -Dsqoop.export.records.per.statement=10000 \ --batch \ --driver com.vertica.jdbc
2020-06-13 19:39:03
原创 beeline 參數
Beeline工作模式有兩種，即本地嵌入模式和遠程模式。嵌入模式情況下，它返回一個嵌入式的Hive（類似於Hive CLI）。而遠程模式則是通過Thrift協議與某個單獨的HiveServer2進程進行連接通信。 下面給一個簡單的登
2020-06-13 19:39:03
1
原创 tensorflow1.1 和python3.5.3安裝
一 。安裝python3.5.31.安裝tkinter（不需要這個模塊的不用安裝，import matplotlib.pyplot 需要此模塊）下載ActiveTcl-8.5 tar -zxvf ActiveTcl8.5.18.
2020-06-13 19:39:03
原创 hive 自動生成動態分區
一、設置參數 --允許使用動態分區可通過set hive.exec.dynamic.partition;查看 set hive.exec.dynamic.partition=true; --當需要設置所有列爲dynamic時需要這樣設置
2020-06-13 19:39:03