原创 Linux文件與目錄管理

小知識:絕對路徑:路徑的寫法,由根目錄 / 寫起,例如: /usr/share/doc 這個目錄。相對路徑:路徑的寫法,不是由 / 寫起,例如由 /usr/share/doc 要到 /usr/share/man 底下時,可以寫成: cd

原创 MySQL跨主機複製表

轉載 https://blog.csdn.net/yabingshi_tech/article/details/44645719方法一: SQLyog 複製方法二 一:實驗環境--這裏把主機名爲target_pc的機器當做源端,把主機名爲

原创 Linux文件基本屬性

文件的基本屬性1.ll或者ls –l命令來顯示一個文件的屬性以及文件所屬的用戶和組;2.在Linux中第一個字符代表這個文件是目錄、文件或鏈接文件等等。當爲[ d ]則是目錄當爲[ - ]則是文件;若是[ l ]則表示爲鏈接文檔(link

原创 數據庫操作

Hive安裝完並初始化元數據後,會自動產生一個默認的數據庫default.但在時間的生產環境中,我們通常要創建自己的數據庫.文本介紹如何通過hive客戶端和java程序創建和刪除hive數據庫。 創建數據庫:在hive中創建數據庫,和在關

原创 Linux命令大全

http://www.runoob.com/linux/linux-command-manual.html

原创 mysql 索引

索引是快速搜索的關鍵。MySQL索引的建立對於MySQL的高效運行是很重要的。下面介紹幾種常見的MySQL索引類型。在數據庫表中,對字段建立索引可以大大提高查詢速度。假如我們創建了一個 mytable表:CREATE TABLE myta

原创 create table tab1

use zhucm_sql;--創建表並將本地數據導入表drop table if exists bala_zhu_weekly_tmp;create table 'bala_zhu_weekly_tmp'( 'Platform' VAR

原创 CREATE TABLE 2

CREATE TABLE if not exists `bala_zhu_weekly_insert` ( `Platform` varchar(10) CHARACTER SET utf8 DEFAULT NULL COMMENT '

原创 sqoop 使用

Sqoop是一個用來將Hadoop和關係型數據庫中的數據相互轉移的工具,可以將一個關係型數據庫(例如 : MySQL ,Oracle ,Postgres等)中的數據導進到Hadoop的HDFS中,也可以將HDFS的數據導進到關係型數據庫中

原创 mysql數據庫索引的優缺點以及創建方法

爲什麼要創建索引呢?這是因爲,創建索引可以大大提高系統的性能。第一,通過創建唯一性索引,可以保證數據庫表中每一行數據的唯一性。 第二,可以大大加快數據的檢索速度,這也是創建索引的最主要的原因。 第三,可以加速表和表之間的連接,特別是在實現

原创 Hive內部表和外部表的區別詳解

內部表&外部表未被external修飾的是內部表(managed table),被external修飾的爲外部表(external table); 區別: 內部表數據由Hive自身管理,外部表數據由HDFS管理; 內部表數據存儲的位置是h

原创 shell---VI使用

vi編輯器是所有Unix及Linux系統下標準的編輯器,它的強大不遜色於任何最新的文本編輯器,這裏只是簡單地介紹一下它的用法和一小部分指令。由於對Unix及Linux系統的任何版本,vi編輯器是完全相同的,因此您可以在其他任何介紹vi的地

原创 將SPARK啓動和運行時的一些INFO信息過濾掉

場景一:windows平臺上Intellij IDEA運行spark  打開spark安裝目錄下的conf 文件夾 D:\soft\spark\conf ,將log4j.properties.template  複製重命名爲log4j.p

原创 plotly 安裝解決關於python:pip install plotly 失敗問題

Plotly 做數據分析和可視化的在線平臺,功能強大,在線繪製很多圖形比如條形圖、散點圖、餅圖、直方圖等等。支持在線編輯,以及多種語言python、javascript、matlab、R等許多API。 好像很厲害的樣子,網上教程pip i

原创 插入指定字段

TRUNCATE `zhucm_sql`.`bala_zhu_weekly_insert`;insert into zhucm_sql.bala_zhu_weekly_insert(Platform,Store_Name,Order_Nu