原创 ACM算法題之傑哥和數字

★題目描述 傑哥特別喜歡和數字打交道,現在他有一個正整數X,他想知道有多少個滿足要求的正整數D存在,要求是D是X的因子,並且D和X至少有一位相同。 ★輸入格式 只有一行,一個正整數X。 對於30%的數據,X<=100。 對於50%的數據,

原创 yarn.Client: Neither spark.yarn.jars nor spark.yarn.archive is set

1. hdfs dfs -mkdir   /spark_jars 2.hdfs dfs -put /usr/local/spark-2.2.1/examples/jars/spark-examples_2.11-2.2.1.jar  

原创 linux ubuntu 14.0 升級g++到6的版本

1. sudo apt-get install software-properties-common 2. sudo add-apt-repository ppa:ubuntu-toolchain-r/test 3. sudo apt

原创 eclipse創建maven工程並集成spring+springmvc+mybatis的完整案例

1.數據庫測試腳本 create database pcs; use pcs; DROP TABLE IF EXISTS `user_t`; CREATE TABLE `user_t` ( `id` int(11) NOT NU

原创 hadoop yarn nodemanager無法啓動的解決方案

1.子節點:jps  發現沒有nodemanager 2.主節點修改 yarn-site.xml 在最後添加: <property>                <name>yarn.nodemanager.resource.memo

原创 windows下netcat的安裝配置

1.下載 netcat-1.12 https://eternallybored.org/misc/netcat/ 2.解壓到指定文件夾下 3.配置環境變量 4.打開cmd窗口 nc命令測試  

原创 System times on machines may be out of sync. Check system time and time zones.

問題截圖: 解決方案: 第一步:安裝 ntpdate sudo yum -y install ntp ntpdate 第二步:設置系統時間與網絡時間同步 ntpdate cn.pool.ntp.org    

原创 windows系統下Spark Streaming 的簡單演示

前提:已安裝併成功配置spark(單節點),已安裝配置完成netcat(博客:https://blog.csdn.net/qq_36940806/article/details/102290470) 1.cmd 進入命令行窗口,執行 sp

原创 c++ 兩個變量的結構體排序

一.待排序結構體 2 6 4 1 1 3 3 2 5 3 6 7 二.核心代碼 #include <iostream> #include <algorithm> using namespace std; struct node {

原创 centos7 root用戶下配置虛擬機的免密登錄

三臺主機 分別爲 hadoop01 ,hadoop02,hadoop03 第一步:(以下都是在hadoop01 ,hadoop02,hadoop03上都要執行的操作) 在三臺虛擬機hadoop01 ,hadoop02,hadoop03上分

原创 hadoop集羣下執行Terasort排序

1.產生數據:  hadoop jar /usr/local/hadoop-2.6.1/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.1.jar teragen  1073741

原创 PowerGraph學習

  一.前言 1.Natural Graphs(如社交網絡,網頁) 特點:冪律分佈 面臨的挑戰:高維度的點和低質量的分區策略     2. Pregel: Pregel是一個同步的,每個節點向外傳播消息的算法,每一個節點都會根據接收到的

原创 windows下 spark structed streaming 詞頻統計

前提:已安裝併成功配置spark(單節點), 已安裝配置完成netcat(博客:https://blog.csdn.net/qq_36940806/article/details/102290470) 1.cmd 進入命令行窗口,執行 s

原创 hadoop殺掉yarn任務

hadoop job -list hadoop job -kill xxx

原创 ACM算法題之區間

  ★題目描述 有一天,傑哥在數軸上玩遊戲,傑哥有N個區間,第i個區間的端點是li和ri,即第i個區間覆蓋了[li,ri],他想知道是否存在一個編號最小的區間包含所有的區間。如果存在,則輸出區間編號,否則輸出"-1". 區間包含指的是,假