實踐Hadoop MapReduce 任務的性能翻倍之路

作者：李萬雪， eBay軟件開發工程師，2017年畢業於上海交通大學。目前負責日誌在大數據平臺上的分析和opentracing在ebay日誌平臺的實現。

原文鏈接：https://mp.weixin.qq.com/s?__biz=MzA3MDMyNDUzOQ==&mid=2650505625&idx=1&sn=374ae0fdf7b02cf3dfdd9180580204cb&chksm

---

摘要

eBay的CAL（Central Application Logging）系統負責收集eBay各種應用程序的日誌數據，並且通過Hadoop MapReduce job生成日誌報告，應用程序開發人員與運維人員通過報告可獲得以下內容：

• API調用響應時間的百分位值
• 服務調用關係
• 數據庫操作

eBay每天產生PB量級的CAL日誌，

---

---

---

---

---

---