原创 ElasticSearch 詳細配置文件
ES配置文件:elasticsearch.yml 配置示例一: cluster.name: es_csms-polaris-app-stg1 node.name: es_csms-polaris-app-stg1-ins7152 node
原创 Nginx做反向代理轉發請求默認忽略帶下劃線的請求頭
現象: 在本地可以正常獲取前端header傳的參數,但是部署到服務器後無法獲取前端傳的請求header(服務器地址使用nginx做了代理轉發) 原因: nginx對header name的字符做了限制,默認 u
原创 Tomcat 監控指標
Tomcat 監控指標列表 監測點 監測指標 指標含義 Tomcat 發送字節() 發送的字節數 接收字節() 收到的字節數 錯誤個數() 發生錯誤的請求數 請求個數
原创 swap滿了,cache太多,怎麼破?
最近處理線上問題的時候總是遇到用戶說我的主機swap分區怎麼用滿了,cache怎麼使用的很多,麻煩幫忙看看。。。 一、找出那些進程佔用swap內存 for i in `cd /proc;ls |grep "^[0-9]" |awk $0
原创 Linux週期性執行任務:cron
linux中使用cron工具做定時任務,系統的定時任務/etc/crontab 下首先需要確定crond進程在運行。 crond是linux下用來週期性執行任務的一個守護進程,crond服務通常被放在/etc/init.d/crond ,
原创 【Python學習篇】線程安全隊列Queue
隊列是線程間最常用的交換數據的形式,Queue模塊實現了線程安全的隊列,尤其適合多線程編程。Queue模塊實現了三種類型隊列: ❑Queue Queue:一個先進先出(FIFO)的隊列,最先加入隊列的元素最先取出; ❑LifoQu
原创 ubuntu主機使用ssh客戶端連接時可能報:server responded "algorithm negotiation failed” 解決
報錯信息: Server responded "algorithm negotiation failed” . Key exchange with the remote host failed.This can happen for
原创 【數據分析】Numpy及數組創建,數據類型,形狀和計算 No.3
一、Numpy Python中做科學計算的基礎庫,重在數值計算,多用於處理大型多維數組上的數值運算。 特點:快速、方便、科學計算的基礎庫 安裝:pip install numpy 二、numpy創建數組(矩陣) import nump
原创 【機器學習】機器學習算法分類及開發流程 No.6
1、算法分類 數據類型:離散型數據和連續型數據 數據的類型將是機器學習模型不同問題不同處理的依據 (1) 監督學習(預測):特徵值+目標值 分類(目標值離散型): k-近鄰算法、貝葉斯分類、決策樹與隨機森林、邏輯迴歸,神經網絡 迴歸(目標
原创 【劍指offer】整數中1出現的次數(從1到n整數中1出現的次數)To 統計字符串中字符出現的次數(Python)
題目描述 求出1~13的整數中1出現的次數,並算出100~1300的整數中1出現的次數?爲此他特別數了一下1~13中包含1的數字有1、10、11、12、13因此共出現6次,但是對於後面問題他就沒轍了。ACMer希望你們幫幫他,並把問題更加
原创 【機器學習】過擬合及欠擬合、嶺迴歸 No.12
一、過擬合及欠擬合 1、過擬合:一個假設在訓練集數據上能夠比其他假設更好的擬合,但是在訓練集外的數據集上卻不能很好的擬合數據,此時認爲這個假設出現了過擬合現象。(模型過於複雜) 過擬合原因:原始特徵太多,存在一些嘈雜特徵,模型過於複雜是因
原创 數據庫檢查
數據庫的檢查,大致可以分爲以下幾大類: 1)服務器相關:包括cpu、io、內存、磁盤、網絡等方面的檢查; 2)數據庫相關:包括數據庫的參數配置,主從複製性能等; 3)業務相關:表結構、索引和SQL語句。 根據上面的分類,我們可以整
原创 【數據分析】numpy 讀取數據及索引 No.4
一、Numpy數組的軸 在numpy中可以理解爲方向,使用0,1,2…數字表示,對於一維數組,只有一個0軸,對於2維數組(shape(2,2)),有0軸和1軸,對於三維數組(shape(2,2,3)),有0,1,2,軸。 如: 二維數組的
原创 【Python學習篇】Python_Mysql 上下管理器使用
如下Python操作數據庫方法,使用上下文管理器管cursor。 def main(): conn = get_conn(....) try: crea
原创 【Python學習篇】Python_Mysql使用上下文管理器對數據庫連接進行管理
with語句可以實現任何try/finally語句實現的功能,而且代碼更加清晰簡潔。因此,我們也可以對數據庫的操作進行封裝,封裝完成以後,可以使用with語句保證數據庫連接無論在什麼情況下都會關閉。 爲了在with語句中管理數據庫