原创 大數據這麼火,什麼是大數據呢?-大蘿蔔博客網

大數據”是一個術語,用來描述一種數據集,它及其龐大、複雜,以至於暢通的數據處理應用程序難以應對。術語“大數據”通常指的是應用預測分析、用戶行爲分析或者某些其他從數據中提取有價值信息的高級數據分析方法,並不是專指某特定規模的數據集。——

原创 如何徹底關閉Windows10自動更新?

Windows10是微軟新一代桌面操作系統,華麗的圖標,扁平的界面,平滑的切換,給人一種舒適的操作體驗。但是,新系統的問題也是層出不窮,尤其是更新以後,會出現許多莫明其妙的問題。那麼,怎樣能保持住穩定的系統版本,不讓系統自動升級呢?只有

原创 Hive如何創建數據庫與數據庫表並指定字段之間的分隔符

hive 數據庫操作 創建數據庫 create database if not exists myhive; # 使用數據庫 use myhive; 說明:hive的表存放位置模式是由hive-site.xml當中的一個

原创 HBASE的Java API操作手冊---大蘿蔔博客網整理

  我們使用Maven來搭建項目,首先導入pom文件 <repositories> <repository> <id>cloudera</id> <url>https:/

原创 MapReduce如何開啓壓縮算法對結果進行壓縮-大蘿蔔博客

注:本文使用snappy算法進行壓縮 內容在驅動類裏面修改 方式一:在代碼中進行設置壓縮 設置map階段的壓縮 Configuration configuration = new Configuration(); confi

原创 支付寶 二維碼/轉賬碼/生成方式,突破二維碼生成數量的限制

支付寶個人二維碼生成限制之後,一天就20張.大家都在找突破方法.這裏分享一下目前的幾種方式.支付寶收款的幾種方式:通過xposed 設置金額/備註.然後可以得到一張二維碼.這是傳統的方式通過支付寶的接口,自己拼接字符串.然後根據字符串生

原创 Linux啓用Google BBR教程-大蘿蔔博客網

BBR是Google的TCP阻塞控制算法,可以最大程度的利用帶寬,提升網絡傳輸速率。Linux內核4.9及以上已支持tcp_bbr(Debian 9之後版本和Ubuntu 17.04之後版本支持直接開啓BBR,CentOS 7需要升級內

原创 CentOS HBASE的安裝部署

1.軟件包的上傳解壓解壓命令:tar -zxvf hbase-1.2.0-cdh5.14.0.tar.gz -C /export/install/2.修改配置文件第一個配置文件:vim conf/hbase-env.sh將第27行的ja

原创 Hbase各個組件以及底層架構詳細介紹-大蘿蔔博客網

簡介 hbase是bigtable的開源java版本。是建立在hdfs之上,提供高可靠性、高性能、列存儲、可伸縮、實時讀寫nosql的數據庫系統。 它介於nosql和RDBMS之間,僅能通過主鍵(row key)和主鍵的range來檢索

原创 hive如何開啓輸出階段壓縮-大蘿蔔博客

開啓Map輸出階段壓縮開啓map輸出階段壓縮可以減少job中map和Reduce task間數據傳輸量。具體配置如下:開啓hive中間傳輸數據壓縮功能set hive.exec.compress.intermediate=true;開啓

原创 Azkaban調度器安裝使用-大蘿蔔博客

1. solo-server模式部署解壓配置mkdir /export/servers/azkaban tar -zxvf azkaban-solo-server-0.1.0-SNAPSHOT.tar.gz –C /export/ser

原创 Hive所有字段類型彙總-大蘿蔔博客網

分類類型描述字面量示例原始類型BOOLEANtrue/falseTRUE-TINYINT1字節的有符號整數 -128~1271Y-SMALLINT2個字節的有符號整數,-32768~327671S-INT4個字節的帶符號整數1-BIGI

原创 如何解決windows10 1903版本使用VMware經常黑屏/繁忙問題-大蘿蔔博客網

最近碰到了win10使用VMware經常黑屏的問題,站長真的很頭疼,去上網搜了一下,經驗證這個方法可以有效地解決win10更新1903之後的黑屏VMware黑屏的問題,大家有遇到這個問題的小夥伴趕緊收藏下來吧VMware 15.1版本的

原创 MapReduce如何開啓壓縮算法對結果進行壓縮-大蘿蔔博客網

注:本文使用snappy算法進行壓縮 內容在驅動類裏面修改方式一:在代碼中進行設置壓縮設置map階段的壓縮Configuration configuration = new Configuration(); configuration.

原创 Linux 在虛擬機中如何新增一塊硬盤-大蘿蔔博客網

掛載新的硬盤## 1.1 目標虛擬機 增加一塊 硬盤1.2 路徑第一步: 瞭解linux系統分區的原理第二步: 查看系統分區情況第三步: 虛擬機 增加 硬盤第四步: 分區第五步: 格式化第六步: 掛載第七步: 設置重啓後 掛載不失效1.