原创 sqoop綜合案例

sqoop綜合案例 1.檢查Hadoop進程是否已經啓動 cd /apps/hadoop/sbin ./start-all.sh jps 2.首先在Linux本地,新建data/case4目錄,用於存放所需文件。 mk

原创 2020數學建模美賽C題

1、分析所提供的三個產品數據集,以確定、描述和支持數學證據、有意義的定量和/或定性模式、關係、衡量標準以及星級、評論和有益性評級之間的參數,這將有助於陽光公司在其三個新的在線市場產品中取得成功。 對於問題1,確定星級、評論和有益

原创 Spark on YARN安裝

Spark on YARN安裝 1.安裝Scala (1)首先解壓scala: tar -zxvf scala安裝包 (2)修改環境變量: vim /etc/profile 內容如下: export SCALA_HOME=/u

原创 Hadoop3.2.0詳細安裝步驟

一、環境準備 ①準備三臺虛擬機,查看ip ②先修改主機名(每個節點統一命名規範) 修改/etc/hosts文件:(如下) 172.18.96.1 master 172.18.96.2 slave1 172.18.96.3 slav

原创 Hadoop的完全分佈式安裝

Hadoop的安裝 一、準備工作 1.創建三臺虛擬機; 2.ip addr查看三臺虛擬機的ip; 3.用hostname修改主機名; 4.三臺主機都修改/etc/hosts文件: 文件內容爲: 172.18.74.59 cow

原创 thinkphp,新加入的模塊下的控制器的視圖文件導入不進去的解決辦法

訪問視圖頁面出現下面這種情況: No input file specified. 解決辦法: 打開thinkphp下的public目錄下的.htaccess文件: 在倒數第二行的index.php後面加一個問好即可。 如圖:

原创 javascipt開發的五子棋小遊戲(純js代碼)

canvas:畫布可以被js操作 ,畫板=>圖片(尺寸數據,我們需要修改它的尺寸,不是修改樣式) 繪製環境 如何繪製: 提筆到某個位置 描述繪製環境 開始繪製 提筆 querySelector:document對象上具有的一個辦法

原创 sqoop增量數據導入

sqoop增量導入要求 1.使用Sqoop按字段增長將Mysql中數據抽取到HDFS 2.使用Sqoop按時間增長將Mysql中數據抽取到HDFS 步驟: 1.首先檢查Hadoop相關進程,是否已經啓動。若未啓動,切換到/apps

原创 c#通過鍵盤輸入若干個整數,長度不得多於20個,最後將其中最大的數輸出,採用控制檯的形式實現。

通過鍵盤輸入若干個整數,長度不得多於20個,最後將其中最大的數輸出,採用控制檯的形式實現。 思路:從鍵盤上輸入連續的數字,採用空格隔開,對輸入的數字的數量計算,超過20不進行計算最大值,小於20則進行計算最大值。 using Sy

原创 代換密碼--凱撒密碼,置換密碼--柵欄密碼

一 、代換密碼 代換密碼是指先建立一個替換表,加密時將需要加密的明文依次通過查表,替換爲相應的字符,明文字符被逐個替換後,生成無任何意義的字符串,即密文,替代密碼的密鑰就是其替換表 。 凱撒密碼:明文中的所有字母都在字母表上向後(

原创 Mapreduce的wordcount操作

一、啓動hadoop cd /apps/hadoop/sbin ./start-all.sh 二、在linux上,創建一個目錄/data/mapreduce1 mkdir -p /data/mapreduce1 三、切換

原创 javascript開發的貪喫蛇小遊戲(純js代碼)

<!Document html> <html lang="=en"> <head> <meta charset='utf-8'> <title>貪喫蛇</title> <style type="text/css"> *{

原创 sql注入與盲注

實驗環境要求: 1、安裝win7或win10的筆記本或PC電腦一臺,硬盤100GB,內存8GB 2、安裝VMware® Workstation 14以上 總體目標:基於centos7搭建dvwa web服務靶機,使用主機上的瀏覽器

原创 2010年考研英語一閱讀A題翻譯加解析

【1】Of all the changes that have taken place in English-language newspapers during the past quarter-century, perhaps

原创 Flume Agent配置

Flume Agent配置 Flume介紹 Flume的Agent主要是由三個重要的組件組成:分別爲Source、Channel、Sink。 (1)Source:完成對日誌數據的收集,分成transtion和event導入到Cha