原创 ElasticSearch 詳細配置文件

ES配置文件:elasticsearch.yml 配置示例一: cluster.name: es_csms-polaris-app-stg1 node.name: es_csms-polaris-app-stg1-ins7152 node

原创 Nginx做反向代理轉發請求默認忽略帶下劃線的請求頭

現象:        在本地可以正常獲取前端header傳的參數,但是部署到服務器後無法獲取前端傳的請求header(服務器地址使用nginx做了代理轉發) 原因:        nginx對header name的字符做了限制,默認 u

原创 Tomcat 監控指標

Tomcat 監控指標列表   監測點 監測指標 指標含義  Tomcat 發送字節() 發送的字節數   接收字節() 收到的字節數   錯誤個數() 發生錯誤的請求數   請求個數

原创 swap滿了,cache太多,怎麼破?

最近處理線上問題的時候總是遇到用戶說我的主機swap分區怎麼用滿了,cache怎麼使用的很多,麻煩幫忙看看。。。 一、找出那些進程佔用swap內存 for i in `cd /proc;ls |grep "^[0-9]" |awk $0

原创 Linux週期性執行任務:cron

linux中使用cron工具做定時任務,系統的定時任務/etc/crontab 下首先需要確定crond進程在運行。 crond是linux下用來週期性執行任務的一個守護進程,crond服務通常被放在/etc/init.d/crond ,

原创 【Python學習篇】線程安全隊列Queue

隊列是線程間最常用的交換數據的形式,Queue模塊實現了線程安全的隊列,尤其適合多線程編程。Queue模塊實現了三種類型隊列: ❑Queue Queue:一個先進先出(FIFO)的隊列,最先加入隊列的元素最先取出; ❑LifoQu

原创 ubuntu主機使用ssh客戶端連接時可能報:server responded "algorithm negotiation failed” 解決

  報錯信息: Server responded "algorithm negotiation failed” . Key exchange with the remote host failed.This can happen for

原创 【數據分析】Numpy及數組創建,數據類型,形狀和計算 No.3

一、Numpy Python中做科學計算的基礎庫,重在數值計算,多用於處理大型多維數組上的數值運算。 特點:快速、方便、科學計算的基礎庫 安裝:pip install numpy 二、numpy創建數組(矩陣) import nump

原创 【機器學習】機器學習算法分類及開發流程 No.6

1、算法分類 數據類型:離散型數據和連續型數據 數據的類型將是機器學習模型不同問題不同處理的依據 (1) 監督學習(預測):特徵值+目標值 分類(目標值離散型): k-近鄰算法、貝葉斯分類、決策樹與隨機森林、邏輯迴歸,神經網絡 迴歸(目標

原创 【劍指offer】整數中1出現的次數(從1到n整數中1出現的次數)To 統計字符串中字符出現的次數(Python)

題目描述 求出1~13的整數中1出現的次數,並算出100~1300的整數中1出現的次數?爲此他特別數了一下1~13中包含1的數字有1、10、11、12、13因此共出現6次,但是對於後面問題他就沒轍了。ACMer希望你們幫幫他,並把問題更加

原创 【機器學習】過擬合及欠擬合、嶺迴歸 No.12

一、過擬合及欠擬合 1、過擬合:一個假設在訓練集數據上能夠比其他假設更好的擬合,但是在訓練集外的數據集上卻不能很好的擬合數據,此時認爲這個假設出現了過擬合現象。(模型過於複雜) 過擬合原因:原始特徵太多,存在一些嘈雜特徵,模型過於複雜是因

原创 數據庫檢查

數據庫的檢查,大致可以分爲以下幾大類: 1)服務器相關:包括cpu、io、內存、磁盤、網絡等方面的檢查; 2)數據庫相關:包括數據庫的參數配置,主從複製性能等; 3)業務相關:表結構、索引和SQL語句。 根據上面的分類,我們可以整

原创 【數據分析】numpy 讀取數據及索引 No.4

一、Numpy數組的軸 在numpy中可以理解爲方向,使用0,1,2…數字表示,對於一維數組,只有一個0軸,對於2維數組(shape(2,2)),有0軸和1軸,對於三維數組(shape(2,2,3)),有0,1,2,軸。 如: 二維數組的

原创 【Python學習篇】Python_Mysql 上下管理器使用

如下Python操作數據庫方法,使用上下文管理器管cursor。 def main(): conn = get_conn(....) try: crea

原创 【Python學習篇】Python_Mysql使用上下文管理器對數據庫連接進行管理

with語句可以實現任何try/finally語句實現的功能,而且代碼更加清晰簡潔。因此,我們也可以對數據庫的操作進行封裝,封裝完成以後,可以使用with語句保證數據庫連接無論在什麼情況下都會關閉。 爲了在with語句中管理數據庫