原创 (8)4.3 DWD層事件表獲取8

4.3.1 商品點擊表 1)建表語句 hive (gmall)> drop table if exists dwd_display_log; CREATE EXTERNAL TABLE dwd_display_log( mid_i

原创 9(16)第8章 需求三:用戶留存主題16

第8章 需求三:用戶留存主題 8.1.2 需求描述 8.2 DWS層 8.2.1 DWS層(每日留存用戶明細表) 1)建表語句 hive (gmall)> drop table if exists dws_user_retenti

原创 9(17)8.3 ADS層17

8.3 ADS層 8.3.1 留存用戶數 1)建表語句 hive (gmall)> drop table if exists ads_user_retention_day_count; create external table

原创 (5)3.4DWD層5

3.4DWD層 對ODS層數據進行判空過濾。對商品分類表進行維度退化(降維)。 3.4.1 創建訂單表 hive (gmall)> drop table if exists dwd_order_info; create exter

原创 (2.1)sqoop安裝2.1

全量導入例如: bin/sqoop import \ (輸入命令) –connect jdbc:mysql://bigdata.ibeifeng.com:3306/testdb \ (指定連接jdbc端口和數據庫名稱) –user

原创 (5)數倉搭建之ODS層5

3.1 創建數據庫 1)創建gmall數據庫 hive (default)> create database gmall; 說明:如果數據庫存在且有數據,需要強制刪除時執行:drop database gmall cascade;

原创 9(14)7.3Sqoop導出腳本14

7.3Sqoop導出腳本 1)編寫Sqoop導出腳本 在/home/atguigu/bin目錄下創建腳本sqoop_export.sh [atguigu@hadoop102 bin]$ vim sqoop_export.sh 在腳

原创 9(16)GMV指標獲取的全調度流程16

8.2GMV指標獲取的全調度流程 1)生成數據 CALL init_data(‘2019-02-12’,300,200,300,FALSE); 2)編寫Azkaban程序運行job (1)import.job文件 type=com

原创 (1)數倉搭建1

第3章數倉搭建 3.0配置Hadoop支持Snappy壓縮 1)將編譯後支持Snappy壓縮的Hadoop jar包解壓縮,並將lib/native目錄中所有文件上傳到hadoop102的/opt/module/hadoop-2.

原创 9(10)第5章需求二:轉化率及漏斗分析10

第5章需求二:轉化率及漏斗分析 5.2ADS層之新增用戶佔日活躍用戶比率 5.2.1 建表語句 hive (gmall)> drop table if exists ads_user_convert_day; create ext

原创 lamp

1 架構 2 安裝 3 配置文件的位置 4 服務啓動關閉腳本,查看端口 5 此服務的使用方法 6 修改配置文件 7 排錯(從下到上,從內到外) 源碼編譯搭建LAMP架構 LAMP=Linux + Apache + MySQL +

原创 lamp(三)

源碼編譯安裝7.0.5 https://www.php.net/ https://www.php.net/downloads.php rpm -ivh http://dl.fedorproject.org/pub/epel/6/x

原创 端口號更改

yum install openssh-server yum list installd |grep ssh firewall-cmd --zone=public --add-port=1234/tcp --permanent firew

原创 docker

yum install -y epel-release yum install -y docker-io /etc/sysconfig/docker 安裝後的配置文件 [root@gitlab ~]# ls /etc/sysc

原创 lamp(二)

mysql https://www.mysql.com/ https://dev.mysql.com/downloads/mysql/ boost_!_59_0.tar.gz mysql從5.7版本之後,boost是必須的,建議把