原创 內心的迷茫

如果 做的事情 沒有挑戰 ,內心是沒有激情的 。本身 架構師 就是解決問題的人 。 我需要的能夠解決問題的成就感 。 但 其實 小公司 基本都是業務導向的 。 差不多先生 居多 。如果 不帶團隊的話 ,我基本是不會選擇 小公司的 。 他們需

原创 canal kafka 模式疑問

canal kafka 模式 依然 會丟到 EventStore中 ,然後起一worker 線程 , 獲取message ,send 給kafka ,確定消費binlog位置 。 感覺 爲什麼不放棄EventStore 直接交給 kaf

原创 canal源碼解析 es adapter sql 字段解惑

當使用 cannal adapter 時候 ,esMapping sql 使我感到疑惑 ,binlog 消息 通過這個sql 做了聚合 。 但是 下面這個sql 不是做了查詢所有數據? 然後在同步到es中去的? dataSourceKe

原创 春日局

春日局 ,我第一次聽到這個名字 ,是來源於fgo這個遊戲 ,但是她傳奇的一生 ,有着令人着迷的魔力 小時候 ,因爲她的父親齋藤利三 ,被人說是叛徒 。又因爲天花 ,長了一臉的麻子 。長大後, 嫁給一個喫喝嫖賭 ,有兩個孩子的浪人 ,不得不過

原创 hbase 服務化文檔

公司想把hbase 單獨抽出 說白了 就是解決 hbase put ,scan 操作 ,開發比較吃力 ,不優雅的問題。 要做的事情 1 . hbase 方法 做好 告警 2 . hbase 連接池設置 3 . hbase 連接超時時間配置等

原创 spring cloud sleuth 與zipkin

zipkin 作爲調用鏈核心組件,需要解決兩個問題 。 1 , 流量問題 ,如果 全量流量收集 , zipkin 流量會是 業務流量的數倍 。 2 , 數據問題 , 如此大的流量 ,當然會產生更多數據 。 針對流量這塊 1. 減少不必要

原创 後端架構更新

1 . 推薦算法 es 更新 , mysql 全量 , 增量 導入 2 . 驗籤 , 需要和客戶端進行對接 3 . 搜索功能改進 4 . 網關 zuul 遷移到 gateway 5 . 網關係統進一步開發 , (流量分析 ,後臺管理) 6

原创 業務架構

人人咖 app 用戶中心 短視頻 視頻觀看者 一般遊客 註冊用戶 點贊 關注 關注feed 評論 轉發 收藏 首頁視頻 搜索 視頻製做者 - 點贊通知 - 關注通知 - 粉絲 - 評論通知 - 視頻製作 運營 用戶審

原创 賬號密碼

[email protected] ftkj123456 ftkj123 Ftkj82777099

原创 驗簽過程

服務端 生成 token 公 key , 私 key 。 前端獲取匿名token ,公key , token ,公 key , 參數 一定算法 加密 生成 序列 , 傳給服務端 根據token 找到私key , 解密 序列

原创 elasticsearch docker 集羣配置

version: '3' services: elasticsearch_n0: image: elasticsearch:7.2.0 container_name: elasticsearch_n0 privi

原创 人人咖 架構問題

根據昨天 一天的瞭解,架構存在很多問題。 現在架構是 30服務器 路由端口映射到內網服務器 ,映射8080 端口 和4000端口 , 第一路由器密碼 我這邊沒有 ,第二 路由器做端口映射會影響整個集羣擴展能力 遠不如 nginx + 多個

原创 首頁短視頻推薦

短視頻首頁推薦 這塊 ,當前是使用mysql rand 方法排序 。簡單的說一切很隨機 ,沒法推薦給用戶想要看的內容 。 抖音短視頻的推薦機制(或者說算法)是怎樣的?https://www.zhihu.com/question/270224

原创 java 會議記錄

早上的話 和 java小組的開了會 ,java 同學們 反映了很多問題 1 丁浩 同學提出的 dubbo 轉 spring cloud , 推薦接口問題 2 韓愛萍同學 提出的 數據庫規範問題 3 李俊 同學 提出的 認證問題 4 還有

原创 oauth2 單點登陸流程

基於 spring oauth2 接口1 訪問登陸頁面的時候帶回 client_id : client_secret: (clientid_it , client_secret 需要隨機生成 ) 接口 2 用戶登陸時首先 調用