原创 Hive中java對數據庫、表的操作
在應用Hive之前，首先搭建Hive環境，關於Hive的搭建 參考之前的搭建文檔 http://blog.csdn.net/liulihui1988/article/details/74351532 java代碼執行Hive腳本
2020-06-16 00:00:57
原创 Hive對Weblog數據分析，測試
在應用Hive之前，首先搭建Hive環境，關於Hive的搭建 參考之前的搭建文檔 http://blog.csdn.net/liulihui1988/article/details/74351532 Hive分析Tomcat日誌數
2020-06-16 00:00:57
原创 hadoo分佈式文件操作HDFS
HDFS的java訪問接口——FileSystem 寫文件 create 讀取文件 open 刪除文件delete 創建目錄 mkdirs 刪除文件或目錄 delete 列出目錄的內容 listStatus 顯示文件系統的目錄和
2020-02-21 14:59:54
原创 hive 的介紹和安裝
Hive:數據倉庫 Apache Hive 是數據倉庫軟件便於閱讀,寫作,和管理大型數據集居住在分佈式存儲使用SQL。結構可以投射到數據已經存儲。提供了一個命令行工具和JDBC驅動程序將用戶連接到Hive 在搭建Hive之前要首先
2020-02-21 14:59:43
1
原创 hadoop-2.x高可用集羣搭架
一、規劃 1、硬件資源 ip6:centos-node6 ip7:centos-node7 ip8:centos-node8 ip9:centos-node9 2、配置環境變量： export JAVA_HOME=/usr
2020-02-21 14:59:43
原创 Hive中對數據庫，表的操作
在應用Hive之前，首先搭建Hive環境，關於Hive的搭建 參考之前的搭建文檔 http://blog.csdn.net/liulihui1988/article/details/74351532 Hive官方應用文檔 htt
2020-02-21 14:59:43
原创 HBbase單機快速入門環境搭建
下載解壓最新版本 HBase下載地址 ：http://archive.apache.org/dist/hbase/ 點擊stable目錄選擇不同版本，然後下載後綴爲 .tar.gz 的文件; 例如 hbase-0.98.9-ha
2020-02-21 14:59:43
原创 hadoop的MapReduce在java驅動代碼
統計文件中單詞出現的次數,文件text 1、java 代碼，WcMapper.class繼承Mapper可執行業務代碼 package com.jxl.mr; import java.io.IOException; impo
2020-02-21 14:59:43
原创 Kafka java實例代碼
工程準備 1、首先搭建Kafka集羣環境，這裏我們kafka的集羣環境已經搭建好的，詳情參考： http://blog.csdn.net/liulihui1988/article/details/77099022 2、搭建Mave
2020-02-21 14:59:42
原创 kafka初步認識
kafka 使用背景 在我們大量使用分佈式數據庫、分佈式計算機集羣的時候，是否遇到這樣的一些問題： 我們想分析下用戶的行爲(pageviews),以便能設計出更好的廣告位; 我想對用戶的搜索關鍵詞進行統計，分析出前的流行趨勢;
2020-02-21 14:59:42
原创 HBase基於Hadoop2.5完全分佈式HA環境搭架
服務器 節點分佈圖 HBase完全分佈式模式 hbase 完全分佈式搭架之前，保證hadoop集羣上做HDFS 確認是運行着的，hadoop的集羣搭建參考 http://blog.csdn.net/liulihui1988/a
2020-02-21 14:59:42
原创 Dubbo使用入門xml配置
Dubbo一個分佈式、高性能、透明化的RPC服務框架，提供服務自動註冊、自動發現等高效服務治理方案。 Dubbo 設計抽象出來的角色如下圖： Consumer : 是一個抽象概念，是Dubbo抽象出來的消費者角色； Pro
2020-02-21 14:59:42
原创 HBase 性能優化方法總結
表的設計 1 Pre-Creating Regions 默認情況下，在創建HBase 表的時候會自動創建一個region 分區，當導入數據的時候，所有的 HBase客戶端都向這一個region寫數據，直到這個region 足
2020-02-21 14:59:42
原创 HBase應用Java API的HBaseAdmin來創建和編輯模式
遠程 鏈接 hbase之前，保證hadoop集羣上做HDFS 確認是運行着的，Hbase完全分佈式HA環境搭架參考：http://blog.csdn.net/liulihui1988/article/details/7508542
2020-02-21 14:59:42
原创 Kafka集羣環境搭架
軟件環境 Linux 服務器，一臺或者多臺，這裏我們設置三臺 ip6:centos-node6 ip7:centos-node7 ip8:centos-node8 zookeeper 集羣環境 之前我們已經有搭建好的zoo
2020-02-21 14:59:42