原创 pg_dump版本不符導致PostgreSQL不能備份

項目使用AWS Aurora Postgresql數據,自動備份任務突然報錯了,收到郵件查看錯誤信息,是由於Postgresql升級了,但備份機器上的pg_dump沒有升級,導致版本不一致,備份出錯。 錯誤信息: 21:59:35

原创 Linux開機自動mount windows cifs共享

本文介紹如何Linux如何開機自動mount Windows cifs共享,可以在server重啓時候自動mount數據,不影響應用程序的數據訪問 linux安裝cifs驅動sudo apt-get install cifs-u

原创 docker不能運行任何containers

問題描述 IT對服務器版本進行了升級,然後不能運行任何container,報錯如下: ERROR: for es-master Cannot start service es-master: OCI runtime create

原创 優化Docker Image案例

Docker知識 一個layer是一個改變,每個命令(RUN, COPY,)都會產生一個新的layer。 每個layer都有一個ID,Image之間可以複用相同的layer。 當更新時,若有layer不發生變化,不需要重新上傳到

原创 AWS助理架構師認證備考之路

考試介紹及報名 AWS官方推出的雲計算架構師能力認證,分爲助理級和專業級,本攻略針對助理級架構師認證AWS Soluctions Architect - Associate (SAA-C01)。 通過AWS認證中心網站預約考試即可

原创 Python去除文本中非utf8字符

在處理文檔相關項目中,經常會碰到utf8的非法字符,例如用戶上傳一個文件,系統根據用戶文件產生相應結果返回。如果用戶文件(utf編碼的csv文件)中有utf8的非法字符,需要程序能自動去掉這些字符,因爲這些字符也是無意義的。 錯誤

原创 Tableau 使用技巧總結

dashboard的大小可以使用一個範圍值,range(),這樣可以更好適應不同屏幕尺寸。 佈局layout使用blank可以更方便。設置主內容固定寬帶,blank自動調整寬度。 Venv圖當兩邊數據差別較大時,需要手動調整佈局,而

原创 Python多重繼承

多重繼承可以允許繼承多個父類,實現多個父類的功能,具體可以參考這裏 那麼若當多個父類有相同的方法時,調用這個方法會如何。 答:會調用繼承第一個類中的方法。這是按照Python方法解決順序執行,參考如下代碼。 class A:

原创 優化Docker Image大小

Docker知識 一個layer是一個改變,每個命令(RUN, COPY,)都會產生一個新的layer。 每個layer都有一個ID,Image之間可以複用相同的layer。 當更新時,若有layer不發生變化,不需要重新上傳到re

原创 Docker應用數據存儲方法及使用場景

容器技術已經廣泛應用在接口開發等各個方面,那麼容器中產生的應用數據如用戶上傳的文件,系統日誌等,應該如何做好持久化存儲,以便共享及後續數據分析。本文會解答這個問題。 docker容器中創建的文件默認是存儲在容器可寫層,這意味着有如下限

原创 Elasticsearch ReadTimeoutError Read timed out

問題描述: 當往ES批量導入數據時,如果需要index的columns比較多,會出現如下的超時錯誤。 success, errors = bulk(self.es, self.set_data()) File "/home

原创 容器與虛擬機的區別(譯)

翻譯,原文請見https://www.backblaze.com/blog/vm-vs-containers/ 容器和虛擬機都能很好地利用計算機軟硬件資源,當然容器技術是新興的,並且在各種數據中心變得非常流行。如果你正在尋找如何

原创 Linux掛載的nfs文件在重啓後消失

Ubuntu 掛載NFS目錄,用來讀取服務器資源 sudo mount -o ro -t nfs 192.168.*.20:/vault2/datasets /mnt/data/datasets/ 但當系統重啓時候,掛載會消失。 如

原创 Supervisor應用配置實例

Supervisor是一個進程管理系統,允許用戶在Unix-like操作系統上監視與管理一系列進程。管理的進程被當做supervisor的子進程,supervisor可以準確知道進程的狀態,當進程中斷時可以自動重啓。當需要管理一個用戶

原创 怎樣讓IE瀏覽器顯示application/json數據而不是下載

在開發API接口時候,當API返回的header中Content-Type: application/json時候,IE默認會保存JSON數據,導致開發者不能及時看到response. Firefox,chrome可以正常顯示JSO