原创 IDEA spark項目sbt啓動相關問題整理

本文是win10系統上遇到的相關問題 1.先裝好IDEA 怎麼安裝idea自行百度,有許多文章 2.sbt 以及 IDEA sbt 插件安裝配置教程 參考鏈接https://blog.csdn.net/zrc199021/arti

原创 Gremlin 針對日期的properties進行過濾

Gremlin date properties filter 針對日期的properties進行過濾Gremlin date properties filter案例gremlin語法正確的gremlin語法如下 Gremlin d

原创 Linux SCP命令使用記錄

SCP的使用筆記從本地傳文件到遠程從遠程傳文件到本地 從本地傳文件到遠程 從服務器A傳輸文件到服務器B,其中服務器A爲本地機器 scp傳輸文件: scp local_file username@ip:/目錄/文件 //或者 sc

原创 grep的使用詳情

grep使用方法: grep -[acinv] '需要搜索的內容' filename 可選參數acinv說明: -a 以文本文件方式搜索 -c 計算找到的符合行的次數 -i 忽略大小寫 -n 順便輸出行號 -v 反向選擇,即找非搜索

原创 awk的部分使用說明

awk的使用說明 閱讀相關資料整理一下理解中的awk的使用說明 命令行的方式調用awk awk [-F field-separator] 'commands' filename 其中 [-F field-separator]

原创 查看MySQL數據庫大小

1.首先進入information_schema 數據庫(存放了其他的數據庫的信息) mysql> use information_schema; Database changed 2.查看大小 (1)查看所有數據庫大小 mysql>

原创 python 多維數組(array)排序

關於多維數組如何複合排序 如數組: >>> import numpy as np >>> data = np.array([[2,2,5],[2,1,3],[1,2,3],[3,1,4]]) >>>> data array([[2, 2,

原创 python 中List 與array互換

輸入list: >>> import numpy as np >>> a = [[1,2],[3,4]] >>> type(a) <class 'list'> 將list轉換爲數組: >>> b = np.array(a) >>> b a

原创 pandas 中 DataFrame

只是想記一下自己遇到的一些dataframe中剛開始碰到不會的地方。 >>> import pandas as pd >>> data = {'a':[1,2,3],'b':[4,5,6],'c':[7,8,9]} >>> frame =

原创 Python scikit-learn機器學習工具包學習筆記:cross_validation模塊

sklearn.cross_validation模塊的作用顧名思義就是做cross validation的。 cross validation大概的意思是:對於原始數據我們要將其一部分分爲train data,一部分分爲test data

原创 LR和SVM的比較

LR與SVM的不同: 1.損失函數不同: LR的損失函數是交叉熵,SVM損失函數是合頁損失函數 2.樣本點對模型的作用不同: SVM中,只有關鍵的樣本點(支持向量)對模型結果有影響,而LR中,每一個樣本點都對模型有影響。 3.輸出不同

原创 caffe2、detectron安裝遇到的問題歸納

在安裝caffe2和detectron過程中遇到的問題 1.cmake版本過低 需要使用cmake3及以上 2.使用cmake –version出現下述錯誤: CMake Error: Could not find CMAKE_R

原创 python 中列表(list)合併、數組(array)合併

列表合併 >>> a = [[1,2,3],[4,5,6]] >>> b = [[1,1,1],[2,2,2]] (1) >>> c = a+b >>> c [[1, 2, 3], [4, 5, 6], [1, 1, 1], [2, 2,

原创 python 中字典嵌套列表

>>> dict={} >>> dict['list']=[] >>> dict['list'].append([1,2,3,4]) >>> dict['list'].append([5,6,7]) >>> dict['list'].ap

原创 Python collections.defaultdict() 的使用

在Python裏面有一個模塊collections,解釋是數據類型容器模塊。這裏面有一個collections.defaultdict() 經常被用到。 defaultdict(function_factory)構建的是一個類似dicti