原创 [轉]AutoGPT體驗和感想
ChatGPT 是新一代 AI 文本助手,可以幫助解決我們在多個領域的問題。 在某些複雜問題上,ChatGPT 需要經過不斷的調教與溝通,才能得到接近正確的答案。 當你是某個領域的專家時,你很容易做到這一點。 但是,在你不熟悉的領域,你甚至
原创 AI 監控平臺產品分析--Evidentlyai產品實踐指南
大數據,人工智能浪潮席捲IT行業,最近數月Gen AI新產品頻頻亮相。讓人不得不感嘆,AI時代已經到來。對企業來說一般會構建AI平臺,包括AI開發,訓練平臺,發佈平臺等。 但是,一般來說AI模型是面向特定的業務主題,而且對業務影響較大,從開
原创 怎麼理解數據湖?
— 1 — 什麼是數據湖? 數據湖是目前比較熱的一個概念,許多企業都在構建或者計劃構建自己的數據湖。但是在計劃構建數據湖之前,搞清楚什麼是數據湖,明確一個數據湖項目的基本組成,進而設計數據湖的基本架構,對於數據湖的構建至關重要。關於什麼
原创 Finebi實現自定義阿拉伯酋長國地圖+氣泡圖實現
場景描述:需要實現在阿拉伯酋長國地圖上顯示各個酋長國的度量指標數據氣泡圖,並且能夠下鑽到各個酋長國下轄港口。 現狀及問題:目前Finebi上僅僅支持世界地圖到國家級別,國內地圖可到省、市、縣級別。 解決方法:通過finebi官網使用手冊瞭解
原创 PostgreSQL HA cluster java端實現數據庫讀寫分離
前面文章構建了PostgreSQL HA集羣,那問題來了:如何在Java程序端實現對數據庫的讀操作和寫操作分離? 即:主庫負責處理事務性的增刪改操作,從庫負責處理查詢操作,從而實現讀寫分離的操作。通過讀寫分離,就可以降低單臺數據庫的訪問壓力
原创 postgreSQL集羣監控方案比選
對於數據庫的監控是一個老生常談的問題,也是數據庫實施後非常必要的一個工作,方便運維(DBA)自主查看主機,數據庫,表,以及錯誤信息,極大的方便錯誤定位。 在雲商部署,一般雲廠商有自研的監控工具,如果是獨立部署,則需要自己部署一套監控系統。經
原创 PostgreSQL high availability 高可用集羣--架構&搭建
近期研究關係型數據庫postgreSQL 的高可用集羣,經調研決定使用下面技術棧: VIP keepalived haproxy patroni etcd postgreSQL 15 整體架構圖如下: 主機配置情況如下: 關於pa
原创 [轉]3種常見的數據分析場景梳理
數據分析已經逐步的被應用到工作/生活的各個領域,加上數字化、數智化的加速推進、ChatGPT的出現、AIGC(生成式人工智能)的發展,數據庫的進一步健全,數據質量將越來越精準,具備數據分析技能將被更加廣泛的應用,在未來,大到企業、小到個人,
原创 程序員革命--低代碼實戰初體驗
爲了豐富TO B 解決方案中低代碼方案的內容,近期着重研究了國內外低代碼平臺的適用性和易用性。幾年前,初次聽到低代碼的時候憑直覺覺得只不是一個技術噱頭,沒有什麼實質性的東西,一個通用性的工具能做到面面俱到?今天,在深入研究了國內外低代碼平臺
原创 Selenium+BeautifulSoup實現懶加載頁面數據抓取
背景描述: 1.爬取列表頁數據 2.頁面數據時動態懶加載,只有當頁面滾動才能加載出相關圖片 3.查看頁面源碼所得結構和頁面顯示的結構不一樣 4.頁面滾動到底部,中間部分的圖片無法獲取到 BeautifulSoup適合與爬取靜態頁面數據,擅長
原创 azure虛擬主機系統盤擴容
背景:由於前期規劃不足,導致虛擬機根目錄數據容量不足,亟待進行擴容 虛機本來的配置是30G硬盤,由於數據越來越多,導致不夠用,所以選擇進行擴容。 記錄一下,以便大家查用。 解決方案步驟: 1.關閉需要擴容的虛擬機,選擇磁盤,調整磁盤大小
原创 azure vm 啓動報錯allocation-failure,解決方案
https://docs.microsoft.com/zh-cn/troubleshoot/azure/virtual-machines/allocation-failure 背景:azure 上的虛機,啓動報錯allocation-fai
原创 FinBI升級操作指南
近期研究FineBI製作交互式報表,發現TAB頁籤中拖入控件後,自動撐大。而官方文檔操作指南中說明可以拖入多個控件顯示,遂聯繫了官方技術支持,光放技術支持給出的答案是要升級FineBI至最新版本。記錄升級過程,以方便大家。 TAB使用官方說
原创 linux 使用密鑰登錄windows server 2016
背景:想要使用ssh從linux遠程登錄到windows server 2016,執行windows上的命令行 實踐: 1,在windows server上安裝openssh,選擇合適的版本,64位系統選擇:OpenSSH-Win64.zi
原创 一文讀懂數據倉庫、數據湖、湖倉一體
1、數據倉庫 數據倉庫,英文名稱爲Data Warehouse,可簡寫爲DW或DWH。早期系統採用關係型數據庫來存放管理數據,但是隨着大數據技術的興起,人們對於多方面數據進行分析的需求愈加強烈,這就要求建立一個能夠面向分析、集成保存大量歷史