原创 Java8 default方法
在Java8之前，接口中只允許定義方法，而不能實現方法，接口中的方法必須在非抽象子類中進行實現。 public interface InterfaceDemo { void add(); void sub(); } pub
2020-02-23 08:00:53
原创 hello world
package com.ccc; /** * @ProjectName HelloWorld * @Package com.ccc * @ClassName HelloWorld * @Description printing
2020-02-23 08:00:53
原创 IDEA中，Maven項目POM文件中的依賴未報錯（出現紅色波浪線），但Maven Projects中的模塊的Dependencies中的依賴卻報錯
問題描述： IDEA中，Maven項目POM文件中的依賴未報錯（出現紅色波浪線），但Maven Projects中模塊的Dependencies
2020-02-23 08:00:53
原创 Java8 Stream Lambda
1、Stream的聚合操作例子：對集合對象進行排序、取值操作（使用2種實現方式）User liLei = new User(1, "liLei", 28, (short)0); User hanMeiMei = new User(2, "
2020-02-23 08:00:53
原创 Kafka知識點記錄
Kafka知識點記錄 consumer訂閱topic之後，當consumer調用poll(Long)方法的時候，會自動加入消費者組，然後Kafka爲consumer分配partition，接着Kafka將partion中的消息
2019-07-10 04:00:36
原创 DataX使用記錄
DataX使用記錄 DataX 是阿里巴巴集團內被廣泛使用的離線數據同步工具/平臺，實現包括 MySQL、SQL Server、Oracle、PostgreSQL、HDFS、Hive、HBase、OTS、ODPS 等各種異構數據源
2019-06-30 03:25:31
1
原创 數據傳輸工具-Sqoop
一、背景 在實際開發場景中，數據需要在Hadoop和關係型數據庫之間來回傳輸，可以使用Sqoop工具來實現。 例如，源數據存儲在MySQL或者Oracle關係型數據庫中，需要將源數據抽取到HDFS或者Hive中，又或者結果數據存儲在H
2019-03-07 19:58:44
1
原创 實時計算組件-flink本地開發環境搭建
本篇記錄搭建flink本地開發環境的過程，使用的flink版本爲1.5。 00 下載安裝、啓動 一、JDK版本要求 想要運行flink，JDK版本需要是JDK8+，如果版本低於8，需要進行升級噢。 二、下載安裝、啓動 從下載頁面下載
2018-11-26 04:26:53
原创 Storm作爲新消費者對接Kafka 0.10.x+版本
Storm應用場景—作爲新消費者對接Kafka 0.10.x+版本（一） 00 背景 隨着Kafka版本的升級，Storm作爲消費者對接Kafka 0.10.x+版本的方式上，與之前存在差異，現將新的方式記錄下來，爲以後遇到使用Sto
2018-10-27 04:36:09
原创 Spark算子常規訓練一
應用場景一：統計單詞總長度，以及類似場景 /** * * 統計單詞總長度，以及類似場景 * map應用 * * @author ccc */ public class HelloWorldMap implements Se
2018-10-27 04:36:09
原创 任務調度工具之cron
00 背景 我們經常需要設置任務在某個時間或每隔一段時間運行。這時候任務調度工具可以解決問題此類定時調度任務場景問題。本篇介紹Linux系統中的cron任務調度工具。 01 cron介紹 在linux系統中，有一個cron表文件，它存
2018-10-15 04:04:43
1
原创 從源碼看flume採集的數據是如何進入到kafka主題的同一分區
00 背景 在實際開發過程中，會遇到希望將採集的數據進入到kafka主題的同一分區中的需求場景，爲消費者消費數據提供便利，例如，同一會員的消費信息、瀏覽信息等等。 此篇主題是探討flume採集的數據如何進入到kafka主題的同一分區，
2018-10-10 04:14:40
原创 Spring Boot集成MyBatis（一）
前言 本篇是初探Spring Boot集成持久層框架MyBatis。 主要介紹： 1.在pom文件中添加mybatis-spring-boot-starter依賴; 2.依賴樹； 添加依賴 通過 maven倉庫 進行下載 <depe
2018-09-03 19:10:31
原创 在虛擬機virtual box 中搭建Linux(centos7)服務器(一)
前言 最近自己一直想着搭建一個服務器，然後可以隨便在服務器上折騰。正好趁着畢設的機會，模擬開發環境下的流程，需求的確定->數據庫表的設計->開發文檔的編寫->前後端開發->本地測試->部署項目到服務器->測試。 本篇展示搭建的結果，包括
2018-09-03 19:10:31