原创 Hive大數據項目實踐

在搭建了Hadoop和hive環境後,就可以使用hive來進行數據庫相關操作了。Hive提供了hql(類sql)語句來操作,基本過程與mysql類似,區別的就是對於hive中的聚合操作,將使用hadoop底層的mapreduce進程來執行

原创 Hadoop3.1.2僞分佈式環境下安裝和配置Hive3.1.2

Hive是基於Hadoop的一個數據倉庫工具,用來進行數據提取、轉化、加載,這是一種可以存儲、查詢和分析存儲在Hadoop中的大規模數據的機制。hive數據倉庫工具能將結構化的數據文件映射爲一張數據庫表,並提供SQL查詢功能,能將SQL語

原创 PyQt安裝下載

直接使用pip install pyqt5時常出現網絡斷掉,所以記載一下使用國內鏡像安裝的方法。 下面的命令就是使用豆瓣提供的鏡像服務。pip install PyQt5 -i https://pypi.douban.com/simple

原创 Javaweb分頁顯示實現

分頁顯示對於數據在頁面中的展示是非常重要的工具,當數據條數較多時,就需要使用分頁來顯示。實現分頁顯示的思路包括:(1)確定數據庫中一共有多少條數據,即數據總數;(2)設定每頁準備顯示多少條數據,計算出一共需要分多少頁,即分頁數目=數據總數

原创 超詳細的Hadoop3.1.2架構單機、僞分佈式、完全分佈式安裝和配置

Hadoop是大數據處理主流框架,如果要學習大數據處理與存儲,hadoop是必須掌握的一種框架技術。動手安裝是最基礎的實踐,下面介紹一下單機、僞分佈式和完全分佈式安裝與配置、測試過程,供有需要的參考。 目錄 (1)軟件準備 (2)Cent

原创 Supervisor進程管理實踐

在linux中有些任務執行時需要將進程放在後臺執行,而如果採用系統自帶的命令啓動後,那個運行窗口必須一直開着不能關閉,當關閉窗口時該進程就會終止,影響相關程序的運行。如果進程比較多的時候就顯得更麻煩,需要開啓多個運行窗口。在linux中管

原创 Hadoop3.1.2僞分佈式環境下安裝和配置Hbase2.2.0

本篇屬於Hadoop系列環境搭建系列,騰訊雲或百度雲上都有許多搭建好的環境可以直接用。不過親自動手實踐一下,收穫肯定會更多一些。 目錄 (1)軟件環境準備 (2)HBASE安裝及配置 (1)軟件環境準備 Hadoop運行環境:即環境中已經

原创 PHP Codeigniter3框架+Redis基本操作

Codeigniter是非常簡單好用的PHP框架。Redis是非常流行的分佈式緩存服務器框架。這裏介紹一下CI框架與Redis相結合,實現數據讀取的簡單操作。 目錄 第一步,開發工具及軟件準備: 第二步,CI框架部署、Redis安裝部署

原创 PHP網站開發--Codeigniter框架實戰案例書籍推薦

網絡上Codeigniter框架資源不少,博文很多篇,但能夠參考的書籍並不多。這裏推薦一本書籍,《CodeIgniter敏捷開發框架(實戰案例版)》,作者曹鑑華,由中國水利水電出版社出版。目前已經在京東、噹噹以及相關計算機類書籍電商銷售平

原创 超詳細的Hadoop3.1.2架構單機僞分佈式安裝和配置

Hadoop是大數據處理主流框架,如果要學習大數據處理與存儲,hadoop是必須掌握的一種框架技術。動手安裝是最基礎的實踐,下面介紹一下僞分佈式安裝與配置、測試過程,供有需要的參考。 (1)軟件準備        包括:VMWare Wo

原创 SpringMVC 入門簡單示例

先說明一下,有關SpringMVC相關的資源太多了,這裏僅記錄一下實現過程。同時實現過程中採用了tomcat的服務版本爲2.5。具體過程記錄如下: 1. 整體Springhello程序結構: 2.開始創建Dynamic web proj

原创 java數據集合賦值與讀取

在網站開發時數據是網站的核心內容。數據如何存儲也是關鍵的處理部分,數據庫肯定是數據存儲的首選之地,但如果所有數據都存儲到數據庫,業務處理時總需要對數據庫進行讀寫,數據庫服務器壓力是非常大的。有些數據屬於中間數據,是不需要寫進數據庫的,可以

原创 Javaweb使用Javabean完成數據庫新聞讀取

新聞類讀取業務比較通用,可以拓展至其他類型需求。在javaweb處理過程中有幾種方式: (1)直接使用java代碼訪問數據庫,進行查詢業務獲得查詢結果,然後在頁面顯示。這種方式就是在同一個頁面中需要使用java代碼訪問數據庫,然後jsp代

原创 Apache2開啓path_info的解決方案

 Apache2在默認情況下沒有開啓PathInfo模式,如果使用apache提供的httpd服務,網站文件上傳後可以進入首頁,如http://114.53.245.102,採用這種方式訪問時可以看到首頁頁面,但在域名後增加url字段時便

原创 Javaweb網站用戶註冊登錄實現小記

用戶註冊登錄過程主要分爲幾個步驟:(1)前端頁面設計;(2)數據訪問模型包;(3)Servlet容器數據接收處理;(4)跳轉至頁面。下面分步驟小記一下,供以後參考: 整個實現環境:Eclipse Version: 2018-09 (4.9