原创 HBase中使用過濾器進行查詢
使用過濾器進行查詢 比較過濾器有幾種? RowFilter 基於RowKey的過濾 FamilyFilter 基於列簇的過濾 QualifierFilter 基於字段的過濾 ValueFilter 基於值的過濾 DependentCo
原创 Hadoop-HA高可用集羣搭建
第一步:首先準備搭建背景 1.修改Linux主機名 2.修改IP 3.修改主機名和IP的映射關係 /etc/hosts 4.關閉防火牆 5.ssh免登陸 6.安裝JDK,配置環境變量等 7.注意集羣時間要同步 集羣部署節點角色的規
原创 linux下redis的部署安裝
第一步: 安裝gcc(用於編譯redis原碼) yum –y install gcc gcc-c++ libstdc++-devel tcl –y 第二步: 下載redis源碼包(網址redis.io) sftp(put命令)或者rz
原创 redis配置文件(原文件內容)
# Redis configuration file example. # # Note that in order to read the configuration file, Redis must be # started with
原创 Flume 安裝部署
Flume 安裝部署 Flume 的安裝非常簡單 上傳安裝包到數據源所在節點上 然後解壓 tar -zxvf apache-flume-1.6.0-bin.tar.gz 然後進入 flume 的目錄,修改 conf 下的 flume-e
原创 redis中的incr命令和incrby命令
Redis Incr 命令將 key 中儲存的數字值增一,如果 key 不存在,那麼 key 的值會先被初始化爲 0 ,然後再執行 INCR 操作。 Redis Incrby 命令將 key 中儲存的數字加上指定的增量值,如果 key 不
原创 Kafka集羣搭建
搭建Kafka集羣 1.1、準備3臺虛擬機 192.168.140.128 kafka01 192.168.140.129 kafka02 192.168.140.130 kafka03 1.2、初始化環境 1)安裝jdk、安裝zooke
原创 tail -f 與tail -F的區別
tail -f 等同於--follow=descriptor,根據文件描述符進行追蹤,當文件改名或者刪除時,停止追蹤. tail -F 等同於--follow=name -retry ,根據文件名進行追蹤,並保持
原创 redis的bin目錄下的腳本含義
bin目錄文件說明 redis-benchmark 腳本用於性能測試 redis-check-aof 腳本用於redis數據持久化,是來一條存儲一條 redis-check-rdb 腳本用於redis數據持久化,是每隔一段時間存儲一次 r
原创 redis的啓動
知道安裝目錄的直接cd到redis安裝目錄下 不知道的輸入 命令:whereis redis 命令:cd 路徑/bin 開啓:./redis-server ../conf/redis-6379.conf 查詢:ps -ef | grep
原创 一鍵啓動關閉zookeeper集羣腳本
一共需要編寫三個文件 第一個文件:slave用於存放集羣主機的host地址 內容如下: node-1 node-2 node-3 第二個文件:啓動腳本startzk.sh 內容如下:(路徑爲自定義執行腳本路徑) cat /expo
原创 端口占用問題解決
異常: 服務運行時產生端口占用問題 解決方法: 1.第一種情況是你新建服務設置端口 查看端口占用情況:在cmd中輸入netstat -ano,按下回車鍵 查看自己設置的端口是否已經被佔用,勤快的可以修改端口 2.第二種
原创 Comparator 接口用法
轉載:http://blog.csdn.net/u012250875/article/details/55126531 1.爲什麼寫? comparator 是javase中的接口,位於java.util包下,該接口抽象度極高,有必要
原创 Hadoop安全模式如何解除(azkaban進行文件創建)
異常: 解決方案: 使用如下命令解除安全模式 bin/hadoop dfsadmin -safemode leave
原创 hadoop中mapreduce本地運行是權限問題
Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljav