原创 mysql保存emoji表情(微信開發用戶暱稱..)

java.sql.SQLException: Incorrect string value: ‘\xF0\x9F\x92\x94’ for colum n ‘name’ at row 1 at com.mysql.jdbc.S

原创 MongoDB Query 的幾個方法

Query.All("name", "a", "b");//通過多個元素來匹配數組Query.And(Query.EQ("name", "a"), Query.EQ("title", "t"));//同時滿足多個條件Query.EQ("n

原创 Java ActiveMQ Spring ActiveMQ整合+註解消息監聽

對於ActiveMQ消息的發送,原聲的api操作繁瑣,而且如果不進行二次封裝,打開關閉會話以及各種創建操作也是夠夠的了。那麼,Spring提供了一個很方便的去收發消息的框架,spring jms。整合Spring後,代碼不僅變得非

原创 MongoDB中Query的方法

Query.All(“name”, “a”, “b”);//通過多個元素來匹配數組 Query.And(Query.EQ(“name”, “a”), Query.EQ(“title”, “t”));//同時滿足多個條件 Que

原创 瀏覽器iframe跨域

        最近項目中使用到了umeditor 1.2.2,在圖片上傳的過程中遇到跨域問題。umeditor在圖片上傳模塊中使用iframe來獲取服務端的返回結果。衆所周知,在chrome等瀏覽器中是不允許iframe跨域訪問的。當在

原创 解決SpringBoot jar包太大的問題

本文主要是解決springboot  maven打包jar太大。springBoot的web應用一般都添加了spring-boot-maven-plugin插件Maven xml代碼  <build>      <plugins>    

原创 HBASE遷移數據幾種方式

一.數據導入HBase中常見方式 數據的來源: (1)日誌 (2)RDBMS 導入的方式: .使用hbase的api put api(kettle,sqoop) .使用HBase的API中的Put是最直接的方法

原创 大數據之hive安裝

大數據之hive安裝及分析web日誌實例 數據搜索與分析是運維狗必備技能 “In reality, 90+% of MR jobs are generated by Hive SQL 一、理論知識預熱 一句話介紹:基於Hadoop

原创 mapreduce實現原理

1.MapReduce簡介  一   MapReduce是一種分佈式計算模型.是由Google提出的,主要是解決海量數據的計算。 二  MapReduce主要分爲兩個階段:Map和Reduce,用戶只需實現map()和reduce()即可

原创 MYSQL查詢語句優化

mysql的性能優化包羅甚廣: 索引優化,查詢優化,查詢緩存,服務器設置優化,操作系統和硬件優化,應用層面優化(web服務器,緩存)等等。這裏的記錄的優化技巧更適用於開發人員,都是從網絡上收集和自己整理的,主要是查詢語句上面的優化,其它層

原创 Java的加密技術(BASE64與單向加密算法MD5,SHA,MAC)

最近在研究Java的加密算法,包括以下的 一.基本單向加密算法: 1.base64嚴格的說不屬於加密算法,屬於編碼格式 2.MD5(Message Digest algorithm 5,信息摘要算法) 3.SHA(Secure H

原创 hive分區表幾大注意事項

分區表: 1.問題的引入 1).bf_log /usr/hive/warehouse 20170910.log 20170922.log 我想分析某一天的數據,如果按照以上的就會掃描全表,從而增加

原创 Node Js入門

1.從node官網下載安裝文件,官網地址:http://nodejs.org/ 2.開始安裝nodejs,默認是安裝在C:\Program Files\nodejs下面 3.進入nodejs的安裝目錄 4.node安裝完成.在安裝目錄

原创 Hbase深入學習

Memstore&StoreFile client寫入->存入MemStore,一直到MemStore滿->flush成爲一個StoreFile,直到增長到一定的閥值->compact合併操作->將多個storefile合併成一個sto

原创 Hive配置 連接遠程mysql

在hive連接遠程mysql中間遇到了一些問題: 1.java.sql.SQLException: Access denied for user ‘root’@’hadoop- serion’ (using password: YE