原创 (8)4.3 DWD層事件表獲取8
4.3.1 商品點擊表 1)建表語句 hive (gmall)> drop table if exists dwd_display_log; CREATE EXTERNAL TABLE dwd_display_log( mid_i
原创 9(16)第8章 需求三:用戶留存主題16
第8章 需求三:用戶留存主題 8.1.2 需求描述 8.2 DWS層 8.2.1 DWS層(每日留存用戶明細表) 1)建表語句 hive (gmall)> drop table if exists dws_user_retenti
原创 9(17)8.3 ADS層17
8.3 ADS層 8.3.1 留存用戶數 1)建表語句 hive (gmall)> drop table if exists ads_user_retention_day_count; create external table
原创 (5)3.4DWD層5
3.4DWD層 對ODS層數據進行判空過濾。對商品分類表進行維度退化(降維)。 3.4.1 創建訂單表 hive (gmall)> drop table if exists dwd_order_info; create exter
原创 (2.1)sqoop安裝2.1
全量導入例如: bin/sqoop import \ (輸入命令) –connect jdbc:mysql://bigdata.ibeifeng.com:3306/testdb \ (指定連接jdbc端口和數據庫名稱) –user
原创 (5)數倉搭建之ODS層5
3.1 創建數據庫 1)創建gmall數據庫 hive (default)> create database gmall; 說明:如果數據庫存在且有數據,需要強制刪除時執行:drop database gmall cascade;
原创 9(14)7.3Sqoop導出腳本14
7.3Sqoop導出腳本 1)編寫Sqoop導出腳本 在/home/atguigu/bin目錄下創建腳本sqoop_export.sh [atguigu@hadoop102 bin]$ vim sqoop_export.sh 在腳
原创 9(16)GMV指標獲取的全調度流程16
8.2GMV指標獲取的全調度流程 1)生成數據 CALL init_data(‘2019-02-12’,300,200,300,FALSE); 2)編寫Azkaban程序運行job (1)import.job文件 type=com
原创 (1)數倉搭建1
第3章數倉搭建 3.0配置Hadoop支持Snappy壓縮 1)將編譯後支持Snappy壓縮的Hadoop jar包解壓縮,並將lib/native目錄中所有文件上傳到hadoop102的/opt/module/hadoop-2.
原创 9(10)第5章需求二:轉化率及漏斗分析10
第5章需求二:轉化率及漏斗分析 5.2ADS層之新增用戶佔日活躍用戶比率 5.2.1 建表語句 hive (gmall)> drop table if exists ads_user_convert_day; create ext
原创 lamp
1 架構 2 安裝 3 配置文件的位置 4 服務啓動關閉腳本,查看端口 5 此服務的使用方法 6 修改配置文件 7 排錯(從下到上,從內到外) 源碼編譯搭建LAMP架構 LAMP=Linux + Apache + MySQL +
原创 lamp(三)
源碼編譯安裝7.0.5 https://www.php.net/ https://www.php.net/downloads.php rpm -ivh http://dl.fedorproject.org/pub/epel/6/x
原创 端口號更改
yum install openssh-server yum list installd |grep ssh firewall-cmd --zone=public --add-port=1234/tcp --permanent firew
原创 docker
yum install -y epel-release yum install -y docker-io /etc/sysconfig/docker 安裝後的配置文件 [root@gitlab ~]# ls /etc/sysc
原创 lamp(二)
mysql https://www.mysql.com/ https://dev.mysql.com/downloads/mysql/ boost_!_59_0.tar.gz mysql從5.7版本之後,boost是必須的,建議把