原创 算法小白的第一次嘗試---SVM實現
import org.apache.log4j.{Level, Logger} import org.apache.spark.mllib.classification.{SVMModel, SVMWithSGD} import or
2019-03-08 02:06:51
原创 算法小白的第一次嘗試---PLA（感知機算法）實現
import breeze.linalg.DenseVector import org.apache.log4j.{Level, Logger} import org.apache.spark.ml.feature.LabeledPo
2019-03-06 18:56:23
原创 Spark Breez矩陣計算
import breeze.linalg._ import breeze.numerics._ import breeze.stats.distributions.Rand /** * @author XiaoTangBao
2019-03-06 18:56:23
原创 最小二乘法---最詳細的解釋
http://blog.sina.com.cn/s/blog_7445c2940102wjz8.html#commentComment 最小二乘法，又是一個即熟悉又陌生的名字。對於學工科的我，簡直就是聽着最小二乘長大的(
2019-03-05 14:42:52
原创 Spark ml數據歸一化
import org.apache.log4j.{Level, Logger} import org.apache.spark.ml.linalg.Vectors import org.apache.spark.sql.SparkSe
2019-03-05 01:47:39
1
原创 算法小白的第一次嘗試--LinearRegression
import org.apache.log4j.{Level, Logger} import org.apache.spark.ml.feature.VectorAssembler import org.apache.spark.ml
2019-03-05 01:47:39
2
原创 spark-submit 報錯：No suitable driver 最終解決方案（測試通過）
最近一個Scala項目，開發完成後，在Scala IDE上調試通過，提交到集羣后一直報錯如下： 提交的命令爲： 特地將mysql驅動包copy到spark-submit目錄下，但是依舊報上訴錯誤。 在各大博客網站上尋找答案，發現答
2019-01-26 02:00:49
原创 算法小白的第一次嘗試---ID3實現決策樹
package DecesionTree import org.apache.spark.SparkConf import org.apache.spark.SparkContext import org.apache.spark.s
2019-01-17 12:55:01
2
原创 算法小白的第一測嘗試---ID3（Decision Tree）
package DecesionTree import org.apache.spark.SparkConf import org.apache.spark.SparkContext import org.apache.spark.s
2019-01-16 13:07:13
原创 Spark性能優化--基礎篇
在大數據計算領域，Spark已經成爲了越來越流行、越來越受歡迎的計算平臺之一。Spark的功能涵蓋了大數據領域的離線批處理、SQL類處理、流式/實時計算、機器學習、圖計算等各種不同類型的計算操作，應用範圍與前景非常廣泛。在美團•大衆點
2019-01-16 13:07:13
原创 算法小白的第一次嘗試---樸素貝葉斯
package Bayes import org.apache.spark.SparkConf import org.apache.spark.SparkContext import scala.collection.mutable.
2019-01-13 01:37:01
原创 算法小白的第一次嘗試---KNN
import scala.io.Source import scala.collection.mutable.ArrayBuffer import org.apache.spark.ml.feature.LabeledPoint im
2019-01-10 03:09:35
原创 Zookeeper----集羣模式搭建
最近學習了Zookeeper單機模式和Zookeeper集羣搭建，將經驗分享給各位初學者，希望大家共同進步！！！！Zookeeper單機環境搭建請看我另一篇博客.......... 筆者假設Zookeeper單機模式已搭建好（沒搭建好的可
2018-08-23 05:14:26
3
原创 利用jxl 讀取文件夾下的多張excl表，excl表較多時報錯數組越界，較少時不報錯，結果正確，求大神解釋
package jv; import java.io.File; import java.io.FileInputStream; import java.io.FileNotFoundException; import j
2018-08-23 05:14:26
2
原创 VMware安裝後沒有虛擬網卡Vmnet1和Vmnet8的解決方案
之前安裝過VMware虛擬機，後來由於電腦卡機的原因，刪掉後，最近重裝VMware,發現安裝完成後，在網絡連接和網絡適配器中均看不到VMnet1和VMnet8，嘗試了很多方法，均無效，最終嘗試下訴方法，成功！！！1.在C盤下搜索VM開頭的
2018-08-23 05:14:26
2