使用mongodb處理上億級別數據

最近接到一個任務關於效能監控平臺的開發，該效能平臺要求監控日誌的發送量以及成功率等信息，瞭解到需求，由於每天將會有平均200萬的日誌信息，最大接近400萬，這數據還是十分龐大的，哪麼半年下來起碼有6億以上的數據，這時候使用關係型數據庫已經滿足不了需求，畢竟關係型數據庫不能處理這麼大的數據量，我們決定採用mongodb非關係型數據庫，該數據庫有良好的數據處理能力，在開發的途中，遇到過排序空間不足引用索引來解決的問題，以及使用aggregation聚合函數來進行分析數據，能夠大大減少數據的分析時間，滿足系統的需求。