原创 mongodb佔用內存過大
主機4核8G內存 1、情景: 當天運營讓統計最近3個月消耗數量, 3個每月聚合統計，每月數據大約在1千萬，表最大1.5億條， 同時有查詢插入，每秒查詢20，插入10 此時內存降低1G，報警 2、嘗試解決 查詢完畢後，內存沒
2020-06-21 11:06:48
46
原创 mongodb日誌分析
1、 日誌信息的格式 <日誌時間> <嚴重級別> <信息所屬分類> [<內容>] <消息> 例如 ： 2014-11-03T18:28:32.450-0500 I NETWORK [initandlisten] waiting for
2020-06-21 09:25:52
原创 form-data和x-www-form-urlencoded的本質區別
一是數據包格式的區別，二是數據包中非ANSCII字符怎麼編碼，是百分號轉碼發送還是直接發送 一、application/x-www-form-urlencoded 1、它是post的默認格式，使用js中URLencode轉碼方法。包括將n
2020-06-21 09:25:52
5
原创 @Async實現原理
https://cloud.tencent.com/developer/article/1426027 Spring容器啓動初始化bean時，判斷類中是否使用了@Async註解，創建切入點和切入點處理器，根據切入點創建代理，在調用@A
2020-06-21 09:25:52
原创 spring DeferredResult
可以實現異步、類似長連接，輪詢查詢配置改變，但是urlfilter不能對response進行參數輸出 1、Callable https://www.baidu.com/link?url=xj0t8IHKNM2awUY8nuVbW6bHtp
2020-06-21 09:25:52
1
原创 Jmeter中吞吐量
1、吞吐量 throughput=總的線程數/持續時間=100/4.524=22.1個線程/sec https://www.cnblogs.com/ceshixuexi/p/7116683.html 2、 https://www.jian
2020-06-21 09:25:52
原创 系統瓶頸分析1+舊系統分析
最近對系統瓶頸進行簡單分析 1、redis操作儘量異步，能程序緩存就不要用redis，減少網絡還有訪問redis次數 2、java問題排查 cpu問題參考 https://blog.csdn.net/coderpopo/article/d
2020-06-21 09:25:52
原创 mongodbexport
mongoexport --help Usage: mongoexport <options> Export data from MongoDB in CSV or JSON format. See http://docs.mong
2020-06-21 09:25:52
原创 彩虹表rainbowtable
ainbowCrack 的創建彩虹表,並解密 環境: win10 rainbowCrack : 1.7版本 參考網站:http://www.project-rainbowcrack.com/ 這個rainbowCrack工具的官網 下載
2020-06-21 09:25:52
原创 git merge詳解
https://www.cnblogs.com/cb0327/p/5066685.html 1、分爲 遠程、本地、工作空間、緩存 2、pull =fetch +merge 3、pull衝突時會回滾 4、git pull衝突時，可以先git
2020-06-21 09:25:52
原创 2019雙十一購物測試
1、京東 京東出了京喜app，再加上保價服務，一部分商品就可以提前購買，能減少一部分流量 體驗還是很好的。再加上試妝功能，還是不錯的。 但是有時你會發現，沒有優惠卷，或者優惠卷只能使用一次尷尬局面。 別急，有了優惠劵，可能又沒貨了，尷尬
2020-06-21 09:25:52
原创 scala教程入門
https://www.runoob.com/scala/scala-tutorial.html 簡單介紹，類似java，部分跟java的lamda表達式類似 比java簡潔
2020-06-21 09:25:52
原创 hadoop生態環境安裝
hadoop2.8.5+hive2.3.6+hbase2.1.0 1、啓動hadoop https://www.cnblogs.com/chevin/p/9090683.html https://blog.csdn.net/Source
2020-06-21 09:25:52
原创 mongodb插入查詢速度測試
1、mongodb數據插入測試， 簡單格式，1億條，佔用硬盤8G 單線程每秒插入15604條 4核8G內存最大到6萬每秒後面降到2萬每秒，再大CPU容易爆,CPU平均再80%，內存佔用3G,硬盤io幾乎達到10% 偶爾會到100%. 客戶
2020-06-21 09:25:52
原创 mongodb聚合aggregate
1、$skip\$limit對查詢限制，$sort對結果排序 https://www.jianshu.com/p/72fc4409936c 常用管道 含義 $group 將collection中的document分組，可用於
2020-06-21 09:25:52