原创 Ubuntu 16.04編譯OpenJDK8u40源碼,並使用Eclipse IDE for C/C++ Developers作爲工具調試

本篇文章大量參考來源於 JVM(一) OpenJDK1.8源碼在Ubuntu16.04下的編譯 和 在Ubuntu14下構建Hotspot並使用Eclipse調試 除此之外記錄自己遇到的問題並且給出解決方案,廢話不多說,直接開始。 一.環

原创 李宏毅機器學習實戰代碼篇——作業筆記

1.python的一些用法 np.arange(start,stop,step,dtype):return array  Return evenly spaced values within a given interval. Value

原创 error log

Events (10 events): Event: 0.923 loading class java/util/WeakHashMap$HashIterator Event: 0.923 loading class java/util

原创 Content root xxx is defined for modules "spark-core_2.10" and spark-mllib_2.10".

編譯Spark時出現問題:Content root "/home/zmx/nju/spark-monotasks-master/python" is defined for modules "spark-core_2.10" and "s

原创 使用虛擬機(MobaXterm)從零開始搭建Spark1.3集羣

準備工作 1. Hadoop:hadoop-2.4.1.tar.gz 2. Spark:下載編譯好的基於對應hadoop版本的版本:spark-1.3.0-bin-hadoop2.4.tgz 3.JAVA:jdk-7u80-linux-x

原创 通過跑較大數據集測試Hadoop 2.4.1是否安裝成功

1. 生成數據集testWordCount.txt 生成代碼如下 package problem.forthstudy.test; import java.io.File; import java.io.FileWriter; p

原创 Ubuntu 16.04搭建Spark源碼研讀和代碼調試的開放環境

1. 準備必要的開發工具和環境: 安裝 jdk 1.8:參考鏈接:https://blog.csdn.net/smile_from_2015/article/details/80056297 scala 2.11.8    下載地址:ht

原创 Java內存區域——虛擬機運行時數據區

1. 環境說明:jdk1.7 2. 運行時數據區概況     Java虛擬機在執行Java程序的過程中會把它所管理的內存分爲若干個不同的區域,我們將這些區域統稱爲運行時數據區域,如下圖所示。(深色表示線程共享內存區域,淺色表示線程私有內存

原创 Ubuntu 16.04編譯Yak源碼,並使用Eclipse IDE for C/C++ Developers作爲工具調試

 步驟和鏈接 https://blog.csdn.net/qq_34621987/article/details/87872704 類似,不同之處在於  1. 編譯Yak而不是OpenJDK,Yak源碼鏈接 鏈接: https://pan

原创 Ubuntu 16.04.4編譯OpenJDK8u40源碼,並使用Eclipse IDE for C/C++ Developers作爲工具調試

本篇文章大量參考來源於 JVM(一) OpenJDK1.8源碼在Ubuntu16.04下的編譯 和 在Ubuntu14下構建Hotspot並使用Eclipse調試 除此之外記錄自己遇到的問題並且給出解決方案,廢話不多說,直接開始。 一.環

原创 LeetCode題數組篇總結

1. 前言   由於博主刷LeetCode題總是斷斷續續的,因此經常出現在這一次刷題時已經忘記上一次刷了哪些題以及用了哪些方法的情況。於是,我打算對自己之前刷過的題進行一些回顧,必要時會對用到的方法進行總結。我刷題的方法是按類型刷,選定類

原创 Elastic Memory Management for Cloud Data Analytics

Abstract: 本文提出了一種自動的、彈性的內存管理方案——ElasticMem,該方案的應用環境是共享式集羣中執行的衆多數據分析應用程序(後面稱之爲query)。ElasticMem主要包含以下三部分: 在JVM中動態改變內存限制

原创 李宏毅機器學習實戰代碼篇——作業一筆記

1.python的一些用法 np.arange(start,stop,step,dtype):return array  Return evenly spaced values within a given interval. Value

原创 ubuntu上安裝git並且設置姓名和郵箱、添加sshkey、更換源、安裝MySQL-python 1.2.3等、設置mysql遠程登錄、解壓文件

1.安裝git ##安裝git sudo apt-get install git ##設置name git config --global user.name "your name" ##設置email git config --glo

原创 windows環境下python2.7連接mysql插入數據亂碼問題

1.問題:在windows環境下使用PyCharm時,我想向mysql的一張表中插入數據,代碼如下import MySQLdb from scrapy.conf import settings class XiaoHuar_Pipelin