原创 自建hadoop yum 倉庫

Hadoop day 1 Apache Ambari 部署 裏面安裝組件經常失敗,因爲ambari 安裝組件都是從yum倉庫下載軟件,但是國外的倉庫由於某種不可抗拒的因素…你懂的。所以今天要建立一個自己的hadoop倉庫。 倉庫 方式1:

原创 Apache Ambari 部署

參考http://ambari.apache.org/1.2.2/installing-hadoop-using-ambari/ 準備工作 1 理解組件 Ambari 支持的Hadoop組件主要分爲3層: Core Hadoop: Apa

原创 關於分佈式事務那點事

我想用spring自動切換數據源來實現分佈式的事務 主要是想懶一下,兩個數據源下有相同兩個表時省着弄兩個dao實體類,(內容一樣但dao的名字不同纔行) 上我的配置文件 <?xml version="1.0" encoding="UTF

原创 hadoop踩過的那些坑 之 hive篇

大神(LY)已經搭建好了hadoop生態圈,忍不住也想小試伸手進到ambari發現alert有錯誤告警,就想搞定它 這分明就是jdbc報錯了,於是看hive日誌 Could not create "increment"/"ta