原创 HDFS的shell命令操作-大蘿蔔博客
hdfs dfs 具體命令 [root@node01 Hadoop-2.6.0-cdh5.14.0]# bin/hdfs dfs Usage: Hadoop fs [generic options] [-appe
2020-07-01 03:46:14
原创 HDFS的shell命令操作-大蘿蔔博客網
hdfs dfs 具體命令[[email protected] Hadoop-2.6.0-cdh5.14.0]# bin/hdfs dfsUsage: Hadoop fs [generic options] [-appe
2020-07-01 03:46:14
原创 Hive如何創建數據庫與數據庫表並指定字段之間的分隔符-大蘿蔔博客
hive 數據庫操作 創建數據庫 create database if not exists myhive; # 使用數據庫 use myhive; 說明：hive的表存放位置模式是由hive-site.xml當中的一個屬性指定的
2020-07-01 03:46:14
原创 大數據輔助組件Apache Sqoop 如何使用-大蘿蔔博客網
sqoop介紹 Apache Sqoop是在Hadoop生態體系和RDBMS體系之間傳送數據的一種工具。來自於Apache軟件基金會提供。 Sqoop工作機制是將導入或導出命令翻譯成mapreduce程序來實現。在翻譯出的mapredu
2020-07-01 03:46:14
原创 HIVE的安裝部署-大蘿蔔博客
注意:hive安裝包我會放在本文最後 如有需要請自行下載 derby版hive直接使用： 缺點：多個地方安裝hive後，每一個hive是擁有一套自己的元數據，大家的庫、表就不統一； 解壓hive cd /export
2020-07-01 03:46:14
原创 Linux使用shell腳本打印99乘法表方法-大蘿蔔博客網
站長最近在學Linux 遇到一個99乘法表的題,下面來看下我的寫法吧for i in {1..9}; do for j in {1..9}; do ji=`expr $i \* $j`
2020-07-01 03:46:14
2
原创 Centos6.9 如何設置本地yum源-大蘿蔔博客網
第一步首先我們需要在VMware中將Centos的安裝包進行掛載第二步輸入命令df -h 查看當前連接的光驅的名稱 一般爲 sr0下面的例子中名字皆爲sr0 如果你的名字不是sr0請自行改更改第三步在掛載之前在/mnt下創建文件夾cdr
2020-07-01 03:46:14
原创 CentOS6.9服務器安裝jdk1.8 配置使用java環境變量-大蘿蔔博客網
第一步 解壓縮jdk在官網下載jdk-8u144-linux-x64.tar.gz 之後上傳到linux服務器使用解壓縮命令解壓出來到任意目錄 例如我解壓到根目錄 /下使用命令tar -zxvf jdk-8u144-linux-x64
2020-07-01 03:46:14
原创 windows開啓“卓越性能”模式-大蘿蔔博客網
一般我們的電腦電源選項中只有幾下幾項：其實在一些版本的Windows10中微軟添加了一項“卓越性能”模式，開啓此模式可以把電腦的硬件發揮最大的性能管理員運行“cmd”，運行如下命令即可打開：powercfg -duplicatesche
2020-07-01 03:46:14
原创 如何搭建NTP時間同步服務器-大蘿蔔博客網
安裝NTPD服務端rpm -qa ntp | grep ntpd檢測是否已經安裝，如未安裝執行yum安裝服務yum install ntp關閉防火牆service iptables stop設置開啓不自動啓動防火牆chkconfig i
2020-07-01 03:46:14
原创 HIVE的安裝部署-大蘿蔔博客網
注意:hive安裝包我會放在本文最後 如有需要請自行下載derby版hive直接使用：缺點：多個地方安裝hive後，每一個hive是擁有一套自己的元數據，大家的庫、表就不統一；解壓hivecd /export/softwares tar
2020-07-01 03:46:14
原创 大數據環境搭建篇 CDH分佈式環境搭建 (支持snappy)-大蘿蔔博客
準備: 1.配置好java環境變量 2.配置好主機名/etc/sysconfig/network 3.配置好hosts /etc/hosts 4.配置好免密登錄ssh 5.關閉selinux以及防火牆 ##第一步：上傳壓縮包並解
2020-02-23 11:37:39
原创 hive如何開啓輸出階段壓縮
##開啓Map輸出階段壓縮 開啓map輸出階段壓縮可以減少job中map和Reduce task間數據傳輸量。具體配置如下： 開啓hive中間傳輸數據壓縮功能 set hive.exec.compress.intermedia
2020-02-23 11:37:39
原创 Hive所有字段類型彙總
分類 類型 描述 字面量示例 原始類型 BOOLEAN true/false TRUE - TINYINT 1字節的有符號整數 -128~127 1Y - SMALLINT 2個字節的有符號整數，-32768
2020-02-23 11:37:38
原创 真正無廣告的看書軟件，免費可換源！-大蘿蔔博客網
軟件名稱：瘋狂閱讀 剛發現的追書神器，真正無廣告，免費可換源，全網最佳沒有之一。瘋狂閱讀：https://itunes.apple.com/cn/app/id1476048993
2020-02-23 11:37:38