原创 hadoop分佈式安裝zookeeper

1 環境軟件簡介 hadoop2.6   zookeeper 3.3.6 openSUSE 操作系統 前提:hadoop 已經安裝完畢~ 2 (1)官網下載zookeeper https://mirrors.tuna.tsinghua.e

原创 mysql like escape 通配符語法小記錄

MySql的like語句中的通配符:百分號、下劃線和escape % :表示任意個或多個字符。可匹配任意類型和長度的字符。 Sql代碼 select * from user where username like '%huxiao';  

原创 SQL :group by all | group by ··· with cube |group by with rollup 的用法

原文出處 :https://blog.csdn.net/lhy55040817/article/details/8015628    1. group by all SQL Server聯機叢書中是這樣描述group by all的:“只

原创 SQL : mysql8.0客戶端連接報錯:authentication plugin caching_sha2_pa

原因說明: mysql 8.0 默認使用 caching_sha2_password 身份驗證機制 —— 從原來的 mysql_native_password 更改爲 caching_sha2_password。  從 5.7 升級 8.

原创 SQL : hive sql 一些小語句記錄[刪除連續分區 drop partition]

想要除個別字段外的剩餘所有字段 這是HIVE中查詢語句的一個小技巧,一個表有很多字段,我們想要除個別字段外的剩餘所有字段,全部列出來不方便且不美觀,實際上hive語句可以解決這個問題。 選擇tableName表中除了name、id、pwd

原创 Hadoop、Hive、Spark 之間是什麼關係?

作者:Xiaoyu Ma 鏈接:https://www.zhihu.com/question/27974418/answer/38965760 來源

原创 hadoop分佈式安裝hbase

1 環境軟件簡介 hadoop2.6  zookeeper3.3.6 openSUSE 操作系統 前提:Hadoop zookeeper已經安裝完畢~ 下載hbase hbase-1.1.10-bin.tar.gz(去官網下載就好了

原创 Hadoop步驟 openSUSE 42

1. ssh 無密碼登錄 cd ~/.ssh ssh-keygen -t rsa   cat id_rsa.pub >> authorized_keys 本地測試:ssh localhost (第一次需要輸入密碼,以後不用輸入密碼) 異

原创 openSuse SSH服務防火牆關閉

需要root權限~ 方法一:-># rcSuSEfirewall2 stop(測試有效,方法二未測試) 方法二: 進入 /etc/sysconfig/ 目錄,用 vi 命令編輯 SuSEfirewall2 文件, -># vi SuS

原创 Spark 環境搭建 (hadoop之上)

1、前提是Hadoop環境已經搭建完成,ssh當然也已經配置完成,官網下載軟件包: scala-2.11.0.tgz spark-2.1.0-bin-hadoop2.6.tgz 使用了兩臺虛擬機master 和slave01,其中mast

原创 Perl腳本小程序之(依賴檢查)Dependent Check

#!/usr/bin/perlmy $DATABASENAME = "T_PDATA";my $FILENAME= "data.txt";if(@AR

原创 R 錯誤: XML content does not seem to be XML: 'input.xml'

R 錯誤: XML content does not seem to be XML: 'input.xml' 原因:查看getwd(),有可能是工作路徑不對,setwd()成相應的工作路徑即可~ 點贊 1 收藏 分享

原创 perl 操作excel範例

點贊 收藏 分享 文章舉報 菜鳥衝鋒號 發佈了36 篇原創文章 · 獲贊 40 · 訪問量 15萬+ 私信 關注

原创 Hive1.2.1安裝和使用(基於Hadoop2.6.0)

安裝hive,這裏使用mysql作爲hive的metastore; Ubuntu 15.10虛擬機中安裝mysql方法請看:http://kevin12.iteye.com/admin/blogs/2280771 Hadoop2.6.0集

原创 hadoop運行eclipse簡單實例

整個Hadoop是基於Java開發的,所以要開發Hadoop相應的程序就得用JAVA。在linux下開發JAVA還數eclipse方便。 1、下載 進入官網:http://eclipse.org/downloads/。 找到