原创 Splunk大數據日誌分析系統安裝、使用

Splunk對於各種日誌的監測非常好用,個人感覺它與Ganglia的最大不同點在於:Ganglia只是採集實時的數據並顯示,不會對這些數據進行存儲和備份,但是Splunk會將監測到的數據進行存儲,並對這些數據進行有效的索引。另外,Splun

原创 用vim寫python代碼

適用環境:linux系統,windows的沒有研究過,可能路徑不同如何使用:git clone https://github.com/itnihao/vimrc-python.gitcd vimrc-pythonmv ~/.vimrc ~/

原创 我的友情鏈接

51CTO博客開發

原创 Redis Cluster 3.0.5 集羣實戰

一、說明redis 3.0 集羣功能出來已經有一段時間了,目前最新穩定版是3.0.5,我瞭解到已經有很多互聯網公司在生產環境使用,比如唯品會、美團等等,剛好公司有個新項目,預估的量單機redis無法滿足,開發又不想在代碼層面做拆分,所以就推

原创 Django model字段類型

Django model字段類型:AutoField 一個 IntegerField, 添加記錄時它會自動增長. 你通常不需要直接使用這個字段; 如果你不指定主鍵的話,系統會自動添加一個主鍵字段到你的 model.(參閱 _自動主鍵字段) 

原创 Linux下CPU顯示信息解釋

在使用top命令的時候會看到這麼一行:裏面的各個值分別是什麼意思呢?今天被問到這個問題,發現答的不是很清楚。果然啊,天天用最多的top命令都還沒摸透。。。慚愧。。。於是就查了些資料:官方解釋Cpu(s)表示的是cpu信息。各個值的意思是:u

原创 Splunk添加索引之後經過一段時間搜索不到數據

    今早splunk搜索服務器出現了異常,本來轉發器有4個,上班發現只能搜索到2個,很奇怪。後來別人說轉發器可能有限制,但經過分析,轉發器是沒有限制的,找到兩個問題點    1:查找splunk日誌,發現有吞吐量限制,默認爲256cat

原创 我的友情鏈接

51CTO博客開發

原创 django數據查詢優化annotate和aggregate

from django.db.models import CountDevice.objects.extra({'install_data':"date(create_time)"}).values('install_data').anno

原创 Xadmin 常用插件

#顯示列表list_display = (‘name’,) #可在列表編輯的字段list_editable = (‘title’)#主搜索字段search_fields = (“name”,)#不顯示字段exclude = (‘user’,

原创 nginx屏蔽某些UserAgent,來杜絕瘋狂爬蟲

CPU瘋狂上漲到90%遭到一個叫WinHttp.WinHttpRequest的useragent的頻繁騷擾,所以不得不屏蔽這個useragent,nginx屏蔽useragent的配置如下:        if ($http_user_ag

原创 nginx日誌分析利器GoAccess

面試的時候一定會被面到的問題是:給出web服務器的訪問日誌,請寫一個腳本來統計訪問前10的IP有哪些?訪問前10的請求有哪些?當你領略過goaccess之後,你就明白,這些問題,除了考驗你的腳本背誦記憶能力以外,唯一的作用只有裝A或者裝C了

原创 Redis Cluster 3.0.5 集羣實戰

一、說明redis 3.0 集羣功能出來已經有一段時間了,目前最新穩定版是3.0.5,我瞭解到已經有很多互聯網公司在生產環境使用,比如唯品會、美團等等,剛好公司有個新項目,預估的量單機redis無法滿足,開發又不想在代碼層面做拆分,所以就推

原创 MySQL性能優化之swap佔用高

1、/proc/sys/vm/swappiness的內容改成0(臨時),/etc/sysctl.conf上添加vm.swappiness=0(永久)這個參數決定了Linux是傾向於使用swap,還是傾向於釋放文件系統cache。在內存緊張的

原创 zabbix之通過jmx監控tomcat

zabbix監控tomcat1.編譯zabbix的時候需要添加參數--enable-java關於如何安裝zabbix,可以參考上一篇文章http://blog.unix178.com/備份zabbix_server.conf和zabbix_