原创 JAVA設計模式之責任鏈模式案例之風控評估因子的實現
責任鏈模式 顧名思義，責任鏈模式（Chain of Responsibility Pattern）爲請求創建了一個接收者對象的鏈。這種模式給予請求的類型，對請求的發送者和接收者進行解耦。這種類型的設計模式屬於行爲型模式。 在這種模
2020-06-23 10:48:49
原创 Flink快速回憶之Operators（運算符）
Operators（運算符）DataStream Transformations （數據流的轉換）DataStream → DataStreamDataStream* → DataStreamDataStream,DataStre
2020-06-23 10:48:49
原创 NoSuchMethodError異常解決
這網上大多都是說jar包沒有引或者沒有引對,我看了下都引了,也都沒錯因爲之前運行的好好的. 一個好哥們說我之前有複製過一個項目裏面有方法和我這個路徑一樣肯能是 包衝突，兩個包的相同路徑有相同的方法，不知道調哪一個 於是我便點進去
2020-06-23 10:48:49
原创 登錄位移速度評估（算法用到：球⾯距離）
登錄位移速度評估 此情況主要是對用戶的登錄地址在短時間出現在不同地方來進行評估是否存在風險！ 評估這個我們需要知道客戶兩次不同登錄地址的距離，進行判斷在兩次登錄的間隔時間裏客戶有沒有可能利用現在的交通工具到達！ 距離是通過經緯度來
2020-06-23 10:48:49
原创 Flink快速回憶之概述和部署
概述 Flink是構建在數據流之上的有狀態計算的流計算框架，通常被⼈們理解爲是 第三代 ⼤數據分析⽅案。 概念 Task和Operator Chain（階段和運算鏈） Flink是⼀個分佈式流計算引擎，該引擎將⼀個計算job拆分成
2020-06-23 10:48:49
原创 SpringBoot 遺忘後的簡單快速回憶之自動配置 和自定義屬性注入（在最後）
SpringBoot的自動配置 Spring Boot是由Pivotal團隊提供的全新框架，其設計目的是用來簡化新Spring應用的初始搭建以及開發過程。該框架使用了特定的方式來進行配置，從而使開發人員不再需要定義樣板化的配置。通
2020-06-23 10:48:49
原创 FastDFS 分佈式文件系統安裝與集成最後並與SpringBoot 集成文件上傳與下載
FastDFS 分佈式文件系統安裝與集成 什麼是分佈式文件系統 分佈式文件系統（Distributed File System） 是指文件系統管理的物理儲存資源不一定直接連接本地節點上，而是通過計算機網絡與節點相連。 分佈式文件系
2020-06-23 10:48:49
原创 ⽤戶輸⼊特性評估(算法用到了歐式距離公式)
⽤戶輸⼊特性評估 算法推理 傳過來的用戶輸入特性，是用戶輸入用戶名，密碼，驗證碼各自所用的時間， 我們從客戶歷史登入成功的這些輸入特性中利用算法來評估出一個標準範圍，來判斷以後的輸入是否存在非本人之類的風險情況！ 我們可以將用
2020-06-23 10:48:49
原创 Hadoop簡單回憶
hadoop 學習後的簡單梳理，也是爲後面複習能更好的尋回做索引 Hadoop 主要就是用來解決大數據的存儲和計算問題的！ 那麼什麼是大數據那？ 數據量級很大的應用處理，數據集在TB及以上，或日增量在/G的數據！ 所以大數據的特點
2020-06-23 10:48:49
原创 Flink快速回憶之Streaming (DataStream API)
Streaming (DataStream API（數據流接口）DataSource（數據源）File-based(以文件爲基礎的來源)Socket Based(基於套接字的來源)Collection-based 基於集合Use
2020-06-23 10:48:49
原创 Mysql的主從複製和讀寫分離（中間件Mycal版）
Mysql的主從複製和讀寫分離 主從複製 1,修改mysql的配置文件 [root@localhost mysql]#vim /etc/my.cnf 2.分別在配置文件中加入如下配置 server-id=1 log-b
2020-06-23 10:48:49
原创 Mysql的讀寫分離（SparingBoot 程序自我設計實現版）
SparingBoot 程序自我設計實現版的讀寫分離 需先進行主從複製請參考另一篇《Mysql的主從複製和讀寫分離（中間件Mycal版）》 思路 所謂的手寫讀寫分離，需要用戶自定義一個動態的數據源，該數據源可以根據當前上下文中調用
2020-06-23 10:48:49
原创 Flink Windows 窗口計算
Flink WindowsKeyed WindowsWindow Lifecycle 窗口生命週期Keyed vs Non-Keyed WindowsWindow Assigners 窗口指定Tumbling Windows
2020-04-20 16:26:26
原创 Flink集成Kafka 並將評估狀態存入狀態讓外界查詢
Flink集成Kafka 並將評估狀態存入狀態讓外界查詢 首先需要在工具類上添加兩個get方法用來獲取應用信息應用名登錄用戶名來作爲狀態鍵 有關這個工具類請看前篇博客《接風控責任鏈之測試與數據抽取工具類》 //取登錄應用信息
2020-04-20 16:26:16
原创 Flink快速回憶之State & Fault Tolerance
State & Fault Tolerance 這裏寫目錄標題State & Fault ToleranceManaged Keyed StateValueStateListStateMapStateReducingStateAg
2020-04-20 16:26:16