1.背景介紹
PV/UV統計是流式分析一個常見的場景。通過PV可以對訪問的網站做流量或熱點分析，例如廣告主可以通過PV值預估投放廣告網頁所帶來的流量以及廣告收入。另外一些場景需要對訪問的用戶作分析，比如分析用戶的網頁點擊行爲，此時就需要對UV做統計。
使用Spark Streaming SQL，並結合Redis可以很方便進行PV/UV的統計。本文將介紹通過Streaming SQL消費Loghub中存儲的用戶訪問信息，對過去1分鐘內的數據進行PV/UV統計，將結果存入Redis中。
2.準備工作
- 創建E-MapReduce 3.23.0以上版本的Hadoop集羣。
- 下載並編譯E-MapReduce-SDK包
git clone [email protected]:aliyun/aliyun-emapreduce-sdk.git
cd aliyun-