原创 Apache Hive——DML Load裝載數據

目錄Apache Hive——DML操作Load Apache Hive——DML操作 Load 在將數據加載到表中時,Hive不會進行任何轉換。加載操作是將數據文件移動到與Hive表對應的位置的純複製/移動操作。 語法結構: L

原创 數據倉庫-數據倉庫主要特徵

目錄2. 數據倉庫的主要特徵2.1 面向主題2.2 集成性2.3 非易失性(不可更新性)2.4 時變性 2. 數據倉庫的主要特徵 數據倉庫是面向主題的(Subject-Oriented)、集成的(Integrated)、非易失的(

原创 Jmeter之HTTP請求常見狀態碼

目錄HTTP請求常見狀態碼2開頭(請求成功)3開頭(請求被重定向)4開頭(請求錯誤)5開頭(服務器錯誤)學習鏈接 HTTP請求常見狀態碼 2開頭(請求成功) 表示成功處理了請求的狀態代碼。 200 (成功) 服務器已成功處

原创 WEB自動化(JAVA版)——WebDriver相關API

目錄WebDriver相關API代碼示例 WebDriver相關API get(String url) 訪問指定url頁面 getCurrentUrl() 獲取當前頁面的url地址 getTitle() 獲取當前頁面的標題 ge

原创 Hive與RDBMS區別

目錄Hive與傳統數據庫對比Hive數據模型 Hive與傳統數據庫對比 hive用於海量數據的離線數據分析 hive具有sql數據庫的外表,但應用場景完全不同,hive只適合用來做批量數據統計分析。 更直觀的對比請看下面這幅圖:

原创 數據倉庫-數據倉庫的分層架構

目錄數據倉庫分層架構 數據倉庫分層架構 按照數據流入流出的過程,數據倉庫架構可分爲三層——源數據、數據倉庫、數據應用。 數據倉庫的數據來源於不同的源數據,並提供多樣的數據應用,數據自下而上流入數據倉庫後向上層開放應用,而數據倉庫

原创 Hive架構&組件

目錄Hive架構Hive架構圖Hive組件Hive與Hadoop的關係 Hive架構 Hive架構圖 Hive組件 用戶接口:包括CLI、JDBC/ODBC、WebGUI。其中,CLI(command line interfac

原创 Jmeter之HTTP response

目錄HTTP response詳解響應頭詳解 HTTP response詳解 一個http response(http響應)指的是從服務器端到客戶端的響應消息,它包括了以下信息: 響應狀態碼 響應頭 響應報文 總結: 響應狀

原创 WEB自動化(JAVA版)——Chrome、Firefox和IE自動化環境問題點

目錄Chrome自動化環境問題點Firefox自動化環境問題點IE自動化環境問題點 Chrome自動化環境問題點 待補充 Firefox自動化環境問題點 待補充 IE自動化環境問題點 待補充

原创 WEB自動化(JAVA版)——元素定位(cssSelector)

目錄元素定位-cssSelectorcss精確定位代碼示例 元素定位-cssSelector 根據tagName By.cssSelector(“input”); 根據ID By.cssSelector(“input#id

原创 WEB自動化(JAVA版)——特殊元素定位與操作-iframe

目錄特殊元素定位與操作-iframe代碼示例 特殊元素定位與操作-iframe iframe切換 四種切換方式: driver.switchTo().frame(index); driver.switchTo().frame(i

原创 WEB自動化(JAVA版)——三大等待

目錄硬性等待隱式等待顯式等待代碼示例硬性等待代碼示例隱式等待代碼示例顯示等待代碼示例 硬性等待 線程休眠,強制等待 Thread.sleep(long millis); 隱式等待 在設置的超時時間範圍內不斷查找元素,直到找到

原创 WEB自動化(JAVA版)——特殊元素定位與操作-select下拉框

目錄特殊元素定位與操作-select下拉框代碼示例 特殊元素定位與操作-select下拉框 如果頁面元素是一個下拉框,我們可以將此web元素封裝爲Select對象。 Select select = new Select(WebE

原创 Apache Hive介紹&Hive實現思路模擬

目錄Hive簡介什麼是Hive爲什麼使用Hive Hive簡介 什麼是Hive Hive是基於Hadoop的一個數據倉庫工具,可以將結構化的數據文件映射 爲一張數據庫表,並提供類SQL(Hive SQL 或者 HQL)查詢功能。

原创 數據倉庫-數據倉庫元數據管理

目錄數據倉庫元數據管理 數據倉庫元數據管理 元數據(Meta Data),主要記錄數據倉庫中模型的定義、各層級間的映射關係、監控數據倉庫的數據狀態及ETL的任務運行狀態。一般會通過元數據資料庫(Metadata Repositor