原创 [hadoop那些事]sqoop的安裝及配置,簡單的從mysql傳入hdfs中

基於Linux安裝mysql 的傳送門在這裏了(注意文章結尾的權限設置):https://blog.csdn.net/qq_44172732/article/details/106111959 本文主要爲學習筆記,主題爲sqoo

原创 [hadoop那些事] 錯誤: 找不到或無法加載主類 org.apache.hadoop.mapreduce.v2.app.MRAppMaster

hadoop classpath Linux返回類似這樣的代碼 /usr/hadoop/hadoop-3.1.2/etc/hadoop:/usr/hadoop/hadoop-3.1.2/share/hadoop/common/

原创 [hadoop那些事]hadoop及其組件資源 115雲盤平臺

https://115.com/s/sw3vs2x33md# bigdata 訪問碼:j024

原创 [每日推薦] notepad++ 連接上你的服務器,修改配置文件更加方便!!!高效(懶人 必備

避風港安裝notepad++安裝插件使用插件 安裝notepad++ 傳送門:https://notepad-plus-plus.org/downloads/v7.8.1/ 安裝插件 插件下載傳送門:(在notepad++上在線下

原创 [hadoop那些事] centos7環境下載並配置mysql,簡單存儲一些信息

本篇文章主要是爲sqoop測試寫的筆記,所以不太涉及理論方面的問題一、下載weget二、下載yum repo配置文件安裝repo三、安裝mysql四、啓動使用mysql獲取暫時密碼重設密碼創建新庫新表新數據 一、下載weget y

原创 [hadoop]Flume的安裝、配置 及其依賴Flume實時監控特定文件夾上傳到HDFS

代碼驛站一、簡單理解作用基本構成二、Flume的安裝及使用安裝及配置寫properties文件啓動flume三、啓動之後 一、簡單理解 作用 Flume提供一種分佈式的,可靠地,對大量數據的日誌進行高效處理,聚集,移動的服務。f

原创 [hadoop 基礎] 安裝虛擬機VMware15和Linux centOS (Linux 基礎) 搭建你可靠的學習平臺!

VMware15、Linux centOS的簡單安裝(學習筆記)VMware15各版本區別個人計算機的基礎設置centos安裝的截圖說明下載地址 VMware15 鏈接:https://www.vmware.com/cn/prod

原创 [hadoop 那些事] Hadoop源碼的編譯

文章目錄1.首先新建一個乾淨的虛擬機2.查看編譯所需配件3.進入(配件)安裝步驟3.1JDK安裝3.2 ant安裝3.3maven 安裝3.4 findbugs3.5 cmake安裝3.6 protobuf安裝4 編譯hadoop

原创 [hadoop那些事] 基於Linux的zookeeper的安裝

推薦一首音樂:一些規律(許飛/姚晨) 巨好聽 hadoop的搭建請移步這裏個人感覺還算詳細吧。 還有一些基本操作此篇文章不會再做贅述。 如圖將zookeeper傳入虛擬機中,並且解壓。 1.設置hosts 192.168.11

原创 [Python語言程序設計-第11期]測驗2: Python基本圖形繪製 (第2周)

哪個選項不能正確引用turtle庫進而使用setup()函數? import setup from turtle 關於turtle庫,哪個選項的描述是錯誤的? turtle座標系的原點默認在屏幕左上角 哪個選項是turtl

原创 [python 那些事] [初級練習] 簡單爬蟲 武漢加油

目標網站:https://news.163.com/special/epidemic/ 任務:爬取當日各地疫情基本狀況 適合人羣:瞭解基本python代碼,小項目實訓 代碼如下 先引入爬蟲利器requests 和 數據處理小能手p

原创 [hadoop 的坑] 如何查看虛擬機ip network不能成功啓動等情況

問題: 寫這篇文章只是希望告訴你不只是你一個人有這種苦難~ 解決辦法:跟我一步步走 輸入 ip addr 上圖下面部分是輸入ip addr之後產生的 注意觀察! 這裏是你MAC地址咯 把他記下來先,後面用得着 vi /et

原创 [hadoop 的坑] there is no HDFS_NAMENODE_USER defined

問題: ERROR: Attempting to operate on hdfs namenode as root ERROR: but there is no HDFS_NAMENODE_USER defined. Aborti

原创 [hadoop那些事] hadoop基於Linux7的安裝配置(完結)

安裝hadoop總體分三步 本人經常遺忘su所以每個看這篇文章的童鞋幫我記一下 1.安裝三臺機器(基本環境配置) 1.1修改主機名(三臺機器均執行) 1.2下載相關工具( net-tools,ntp) 1.3關閉防火牆(三臺

原创 CentOS 7 中使用ifconfig命令發現ens33 的ip地址沒有顯示的解決方法

CentOS 7 中ifconfig命令顯示不了ip地址的解決方法: 一、在任務管理器的服務那裏查看VMware NAT Service服務是否停止,若停止了,重新啓動即可 二、 CentOS 7 默認是不啓動網卡的,可以進入配置