原创 Leanote 源碼版詳細安裝教程 Mac and Linux
Leanote 二進制版詳細安裝教程 Mac and Linux life edited this page on 10 Jan 2017 · 4 revisions 本教程適合 Mac 及 linux 用戶的二進制版安裝。 M
2020-06-18 23:07:43
原创 Apache Spark實戰教程(二)：Spark 中需要兩個RDD進行嵌套操作
一，前言 因爲在Spark中進行RDD的嵌套操作,所以在操作的時候報了一個錯誤 Caused by: org.apache.spark.SparkException: This RDD lacks a SparkContext.
2020-06-18 23:07:30
原创 Python用Pandas讀寫Excel
Python用Pandas讀寫Excel Pandas是python的一個數據分析包，納入了大量庫和一些標準的數據模型，提供了高效地操作大型數據集所需的工具。 Pandas提供了大量能使我們快速便捷地處理數據的函數和方法。 Pan
2020-03-02 09:48:39
原创 Spark SQL/DataFrame/DataSet操作（一）-----讀數據
一、讀取數據源 （1）讀取json ，使用spark.read。注意：路徑默認是從HDFS，如果要讀取本機文件，需要加前綴file://，如下 scala> val people = spark.read.format("json
2020-02-23 11:36:48
原创 import spark.implicits._ 報紅，無法導入
先給出錯誤的代碼 def main(args: Array[String]): Unit = { //Create SparkConf() And Set AppName SparkSession.bu
2020-02-23 11:36:48
原创 Elasticsearch cannot write xcontent for unknown value of type class java.sql.Timestamp
Elasticsearch cannot write xcontent for unknown value of type class java.sql.Timestamp 在使用Elasticsearch進行index數據時，發
2020-02-23 11:36:48
原创 Scala 系列教程（二）：安裝
Scala 安裝 Scala 語言可以運行在Window、Linux、Unix、 Mac OS X等系統上。 Scala是基於java之上，大量使用java的類庫和變量，使用 Scala 之前必須先安裝 Java（>1.5版本）。
2020-02-23 11:36:48
原创 CNN網絡結構的發展：從LeNet到EfficientNet
CNN基本部件介紹 1. 局部感受野 在圖像中局部像素之間的聯繫較爲緊密，而距離較遠的像素聯繫相對較弱。因此，其實每個神經元沒必要對圖像全局進行感知，只需要感知局部信息，然後在更高層局部信息綜合起來即可得到全局信息。卷積操作即是局部感受野
2020-02-23 11:36:48
2
原创 Scala 系列教程（一）：簡介
Scala 是 Scalable Language 的簡寫，是一門多範式的編程語言 聯邦理工學院洛桑（EPFL）的Martin Odersky於2001年基於Funnel的工作開始設計Scala。 Funnel是把函數式編程思想和
2020-02-23 11:36:48
原创 Apache Spark實戰教程(三)：兩個RDD求交集 差集 並集
一.前言 spark中兩個rdd，經常需要做交集，差集，並集等操作。好比任何一門編程語言中兩個集合，交併差也是常見的需求。現在我們看看在spark中怎麼實現兩個rdd的這種操作。 爲了方便看到結果，在spark shell中測試如
2020-02-23 11:36:48
原创 Linux Centos7 環境下Kafka三臺集羣安裝配置
一，準備工作 0，centos7三臺，安裝jdk8，關於jdk8配置參考：https://www.t9vg.com/archives/346 1，zookeeper三臺集羣安裝，具體參考 ：https://www.t9vg.com
2020-02-23 11:36:48
原创 連接Kafka超時錯誤信息的解決辦法
1，錯誤分析 [kafka-producer-network-thread | producer-1] ERROR com.zlikun.mq.ProducerTest - send error ! org.apache.kafk
2020-02-23 11:36:48
2
原创 Win10環境下 單節點zookeeper和單節點Kafka安裝和驗證
一，zookeeper安裝： 1，解壓到D:\Program Files\zookeeper目錄 2，配置conf目錄下的zoo.cfg，（從zoo.cfg.template拷貝出來）修改其中兩處 dataDir=F:\zooke
2020-02-23 11:36:48
原创 MaC 修改MySQL密碼
MaC 修改MySQL密碼 1.蘋果->系統偏好設置->最下邊點mysql 在彈出頁面中 關閉mysql服務（點擊stop mysql server） 2.進入終端輸入：cd /usr/local/mysql/bin/ 回車後 登
2020-02-23 11:36:48