原创 Caused by: java.lang.ClassNotFoundException: org.apache.avro.generic.GenericRecord

環境 windows10; idea; 錯誤分析 首先排除,maven下下載依賴沒問題,也就是寫代碼是沒有報紅; 那麼很有可能是pox.xml中的依賴配置有問題,如下: <dependency> <g

原创 虛擬化技術的優點和缺點

虛擬化技術的優點和缺點 在過去幾年中,虛擬化一直是數據中心和企業技術的重點,大量企業已經使用雲計算和其他解決方案實現了虛擬化。即使是小型企業,尤其是那些依賴數據處理的企業,也在享受虛擬化帶來的好處。然而,需要注意的是,這項技術並不

原创 Cloudera Manager_java.lang.ClassNotFoundException: com.mysql.jdbc.Driver

實驗環境 Cloudera manager6.3; 相關報錯 筆者使用Cloudera Manager6.3來進行管理,當打開spark-shell交互式終端,讀取mysql數據庫中的數據時出現如下報錯: scala> val j

原创 劍指offer(Python3實現)

swordToOffer 使用python3編寫《劍指offer》所有算法,在參考牛客網,劍指offer書本以及其他前輩所寫的程序的同時,也加入了自己的解題思路,力爭用簡單的語言描述清楚。 所有的程序均已上傳到github,之後將

原创 劍指offer 2

本期題目概覽 chapter2 試題 7: 用兩個棧實現隊列 用兩個棧來實現一個隊列,完成隊列的Push和Pop操作。 隊列中的元素爲int類型。 試題 8: 旋轉數組的最小數字 把一個數組最開始的若干個元素搬到數組的末尾

原创 在Windows平臺安裝Hadoop&&idea調試spark程序

使用idea可以方便的編譯scala程序,只是在windows環境下,安裝hadoop不太方便。 本文蒐集了網上給的教程,整理出一些能解決問題的方法。 實驗環境 windows10; idea2019.1.3 scala-sdk

原创 Overriding toString() method in Scala

示例代碼 不覆蓋toString方法 考慮一下的程序。再類中不適用toString方法。 // Scala Program without override toString method // Creating Class

原创 解決:java.rmi.ConnectException: Connection refused to host: 127.0.0.1; nested exception is:

實驗環境 windows10; idea2018.1.3; scala 2.11.12; 報錯詳情 當註冊一個服務時,出現如下報錯: Exception in thread "main" java.rmi.ConnectExcep

原创 使用Python剪輯 拼接音頻文件

使用Python剪輯 拼接音頻文件 近日有同學讓我幫他剪輯某一段音頻,筆者就蒐羅了下網上一些常用的剪輯音視頻軟件。各類雜七雜八的軟件挺多的,在糾結於選擇哪一個時,忽然想起”爲嘛不用Python神器試試呢?“ 有了想法,那就實踐唄!

原创 實習面經-京東廣告部門-數據研發

面試部門–京東廣告部門 筆者目前研二網絡空間安全碩士在讀,按照實驗室往年的慣例,這個寒假過後就要準備投實習崗位了(當然是越早準備越好)。我們實驗室今年1.10號以後就可以回家了,那會兒看到一位同學發的推薦貼,就試着投了下京東的廣告

原创 通過列表創建二叉樹——python實現

創建二叉樹 通過python實現,將所給列表作爲參數 相關代碼 # -*- coding:utf-8 -*- '二叉樹結點類' class TreeNode: def __init__(self, x):

原创 錯誤:找不到或無法加載主類(源文件中含有包名 package)----java

實驗環境 windows10; 報錯分析 如下圖所示,編譯(java)之後,執行(java)程序時,出現如下報錯:找不到或無法加載主類。 首先排除你的環境變量配置問題,即,命令行界面能夠識別java和javac命令,這就說明環境

原创 深刻掌握遞歸——從棧圖來認識

函數調用另外一個函數是合法的;函數調用自己也是合法的。調用自己的過程稱爲遞歸函數,這個執行過程叫做遞歸。 遞歸在數據結構中經常會用到,特別是解決樹的遞歸問題時很好用。但是想明白遞歸是挺燒腦的,一般即使兩層、三層遞歸也會容易給人繞進

原创 劍指offer 3

本期題目概覽 本期的五道題涉及到的知識點有:遞歸,整數的二進制表示,邏輯運算符,python中List 常用的內置方法。 chapter3 試題 11:變態跳臺階 一隻青蛙一次可以跳上1級臺階,也可以跳上2級……它也可以跳上n

原创 java.io.IOException: Failed to delete: C:\Users\dell\AppData\Local\Temp\spark- in windows

實驗環境 windows10 spark2.4 Scala 2.11.12 問題描述 \sbtSpark1_jar>spark-submit --class com.spark.WordCount.WordCount sbtS