原创 基於Flume的美團日誌收集系統(一)架構和設計
基於Flume的美團日誌收集系統(一)架構和設計 dju alex ·2013-12-09 22:30 轉自：http://tech.meituan.com/mt-log-system-arch.html 美團的日誌收集系統負責
2020-02-24 13:19:34
原创 Spark性能優化指南——高級篇
Spark性能優化指南——高級篇 轉自：http://tech.meituan.com/spark-tuning-pro.html?utm_source=tuicool&utm_medium=referral 前言 繼基礎篇講解
2020-02-24 13:19:34
原创 Hive SQL的編譯過程
Hive SQL的編譯過程 木葉丸 ·2014-02-12 17:30 轉自：http://tech.meituan.com/hive-sql-to-mapreduce.html Hive是基於Hadoop的一個數據倉庫系統，在
2020-02-24 13:19:34
原创 scala進階18-隱式轉換-隱式參數
/** * 隱式參數 */ object Context_Implicits { implicit val default: String = "Java" } object Param { //編譯器會檢查誰是impl
2020-02-24 13:19:34
原创 Hive SQL的編譯過程
Hive SQL的編譯過程 木葉丸 ·2014-02-12 17:30 轉自：http://tech.meituan.com/hive-sql-to-mapreduce.html Hive是基於Hadoop的一個數據倉庫系統，在
2020-02-24 13:19:34
原创 Spark在美團的實踐
Spark在美團的實踐 轉自：http://tech.meituan.com/spark-in-meituan.html 本文已發表在《程序員》雜誌2016年4月期。 前言 美團是數據驅動的互聯網服務，用戶每天在美團上的點擊、
2020-02-24 13:19:34
原创 Spark性能優化指南——基礎篇
Spark性能優化指南——基礎篇 轉自：http://tech.meituan.com/spark-tuning-basic.html 前言 在大數據計算領域，Spark已經成爲了越來越流行、越來越受歡迎的計算平臺之一。Sp
2020-02-24 13:19:34
原创 scala進階14-自身類型self type
/** * self不是關鍵字,是this的別名,具有更強的可讀性,無代碼中的outer => */ class Self { self => val tmp = "Scala" def foo = self.tmp
2020-02-24 13:19:34
原创 scala進階19-隱式轉換內幕
import scala.io.Source import java.io.File class RicherFile(val file: File) { def read = Source.fromFile(file.getPat
2020-02-24 13:19:34
原创 基於Flume的美團日誌收集系統(二)改進和優化
基於Flume的美團日誌收集系統(二)改進和優化 dju alex ·2013-12-09 22:35 轉自：http://tech.meituan.com/mt-log-system-optimization.html 在《基
2020-02-24 13:19:34
原创 scala進階16-抽象類型
import scala.io.{BufferedSource, Source} /** * 用type關鍵字定義抽象類型 * 抽象類型可用在方法中 */ trait Reader { type In <: java.i
2020-02-24 13:19:34
原创 Kafka文件存儲機制那些事
Kafka文件存儲機制那些事 “悠悠香草” ·2015-01-14 00:00 轉自：http://tech.meituan.com/kafka-fs-design-theory.html Kafka是什麼 Kafka是最初
2020-02-24 13:19:34
原创 scala進階17-隱式類/方法-增強類功能
import java.io.File import scala.io.Source /** * 隱式方法 */ class RichFile(val file: File) { def read = Source.from
2020-02-24 13:19:34
原创 scala進階12-複合類型
trait Compound_Type1 trait Compound_Type2 class Compound_Type extends Compound_Type1 with Compound_Type2 object Compo
2020-02-24 13:19:34