原创 [操作系統] MenuetOS :最輕量的、非Linux的、開源操作系統

1 MenuetOS 概述 1.1 簡介 MenuetOS是一款由英國軟件工程師Ville Mikael Turjanmaa和Madis Kalme開發的、開放源碼的32/64位操作系統。 該系統完全由x86彙編語言在2000年編寫完成

原创 [數據倉庫] 在抖音集團,存儲實時數倉這樣建 [轉]

0 序 文由:瞭解、學習數據行業前沿大廠的數倉實踐和技術演進 在直播、電商等業務場景中存在着大量實時數據,這些數據對業務發展至關重要。而在處理實時數據時,我們也遇到了諸多挑戰,比如實時數據開發門檻高、運維成本高以及資源浪費等。

原创 [clickhouse] Clickhouse之開窗函數篇

0 概述 0.1 序 clickhouse : 21.3.4.25 0.2 開窗函數 窗口函數可讓用戶對與當前行相關的一組行執行計算。用戶可以執行的一些計算與使用聚合函數執行的計算類似,但窗口函數不會導致行被分組爲單個輸出 - 仍會返

原创 [湖倉架構] Apache Paimon核心原理

這是一篇較爲完整的介紹Apache Paimon和Flink進階應用的文章。 0 序 Apache Paimon 畢業(2024.04.16) 北京時間 2024 年 4 月 16日,開源軟件基金會 Apache Software Fo

原创 公開壓縮算法概述

0 序 文由 下載開源軟件時,源站經常會提供多種格式的下載文件如zip、tar.gz等。如果是Linux操作系統,我們一般會下意識地選擇tar.gz格式的壓縮文件;而對於Windows操作系統,我們常選擇zip格式。我一直以來就是這麼用

原创 [Flink] Flink 基礎概念篇

0 序 1 Flink 基礎概念 基礎概念類 作業(Job) 類似於MaxCompute或Hadoop Job,一個實時計算的作業描述了一個完整的流式數據處理業務邏輯,是流式計算的基礎業務單元。 JobManager TaskMan

原创 [智能網聯汽車] 解讀理想汽車的整車EEA電子電氣架構 | 2020 [轉]

0 序 本文首發於華夏EV網、2020年。時至今日,這篇文章雖已過去了2年,今天的我們,對了解當前整車電子電氣架構(EEA)的技術演進仍有一定的參考意義。 關鍵詞: 整車電子電氣架構(EEA) 分佈式架構 域集中式架構 中央集中式架

原创 [數據安全] 荷蘭數據保護局《個人和私人組織數據抓取指南》:“數據抓取幾乎總是非法”

0 序 2024年5月1日,荷蘭數據保護局(Autoriteit Persoonsgegevens,AP)發佈了《個人和私人組織數據抓取指南》。 指南中爲數據抓取設定了嚴格的框架,與《通用數據保護條例》(GDPR)保持一致,並明確了允許數

原创 [智能網聯汽車] 2024華爲智能汽車解決方案發佈會:乾崑車雲服務3.0:智能、便捷、安全的全新升級 [轉]

在當今數字化時代,智能汽車已經成爲了人們生活中的重要組成部分。華爲於2024年4月24日在2024華爲智能汽車解決方案發佈會上,華爲智能汽車解決方案BU CEO靳玉志發表演講:發佈了最新的車雲服務——乾崑(kun)車雲服務3.0,爲用戶提供

原创 [網絡爬蟲] 網絡爬蟲實踐:大麥網演唱會預約搶票 【待續】

1 正常的最優搶票流程 1. 提前準備事項: 設置登錄密碼、郵箱、解綁淘寶,賬號綁定中只綁定【支付寶】 操作路徑:我的-賬號安全-登錄密碼、郵箱設置 提前設置好觀演人、收貨地址 操作路徑:我的

原创 [任務/調度/Docker] 基於Docker安裝XXL-Job-Admin

0 序 安裝信息 mysql : 5.7.x xxl-job-admin : 2.4.1 linux : centos 7.9 1 安裝步驟 Step1 安裝 docker 環境 yum -y update yum remov

原创 [數據庫] 淺談mysql的serverId/serverUuid

0 序 版本 本文圍繞 mysql 5.7.38 版本開展討論 情景1: MYSQL數據庫的主從複製架構:1主1從 MYSQL數據庫的binlog應用情況:存在多個基於binlog同步機制的FlinkCdcJob,從MYSQ

原创 [數據庫] 排查MySQL鎖表情況及解決思路

0 序 1 排查方法:查看當前鎖表事務 由於出現的是鎖表的問題,所以第一步從數據庫入手,查看導致鎖表的SQL語句是什麼;查看是否鎖表SQL語句; SELECT * FROM INFORMATION_SCHEMA.INNODB_LOCKS;

原创 [JWT] HTTP請求中Authorization: Bearer Header的用途 [轉]

"Authorization: Bearer" 是一種在 HTTP 請求頭部中用於傳遞訪問令牌(Access Token)的常見格式。它用於在客戶端和服務器之間進行身份驗證和授權操作。 底層原理是這樣的:當客戶端發送 HTTP 請求時

原创 [Java SE] 經典問題:超出Java Long型(8字節/64位)的二進制比特流數據如何進行大數的數值計算?

0 問題描述 經典問題:超出Java Long型(8字節/64位)的二進制比特流數據如何進行大數的數值計算? 近期工作上遇到了這個問題:需要將一個無符號數、且位長>=8字節(等於8字節時,首位bit爲1,其他bit不全爲0)的二進制字