原创 Android開發使用SQLite存儲數據

在web開發中用慣了mysql,DB2等數據庫,現在學習移動開發,接觸到了SQLite這個輕型數據庫,對移動開發的重要性不必多說,在學習的過程中發現一篇博文介紹的非常詳細。在這裏想與大家分享。 非常感謝原作者!以下是原文。 在Andr

原创 Druid攝取kafka實時流json配置

{ "type": "kafka", //攝取類型 "dataSchema": { "dataSource": "ea-test",

原创 Java 壓縮解壓(tar)

使用Apache的commons-compress-1.9.jar實現jar壓縮和解壓tar文件 (1)壓縮文件 private static void tarFile(File file, TarArchiveOutputStre

原创 使用shade插件生成jar

pom配置文件如下 <build> <finalName>testJar</finalName> <plugins> <plugin> <g

原创 大數據分析架構本地環境搭建及測試

功能:log 日誌收集和分析 流程:1.應用程序產生本地log文件            2.flume監控文件並收集日誌到kafka中            3.spark Structure streaming監聽kafka獲取結構流

原创 Spark demo

這兩天公司準備搭建大數據平臺 以日誌分析爲例,大概流程是: 1.數據分析平臺提供接口供其他系統調用寫入日誌 2.flume收集日誌用kafka做sink 3.spark分析日誌,結果輸出HBase 下面是spark相關的一些簡單demo,