原创 Presto在滴滴的探索與實踐

1. Presto簡介1.1 簡介Presto是Facebook開源的MPP（Massive Parallel Processing）SQL引擎，其理念來源於一個叫Volcano的並行數據庫，該數據庫提出了一個並行執行SQL的模型，它被設計

2020-10-19 10:13:56 1

原创 實時數倉在滴滴的落地實踐

1. 實時數倉建設目的隨着互聯網的發展進入下半場，數據的時效性對企業的精細化運營越來越重要，商場如戰場，在每天產生的海量數據中，如何能實時有效的挖掘出有價值的信息， 對企業的決策運營策略調整有很大幫助。其次從智能商業的角度來講，數據的結果代

2020-10-14 10:03:51

原创 滴滴導航若干關鍵功能的技術突破與實踐

1. MJO三維全景導航1.1 應用背景對於絕大多數駕駛者使用2D導航地圖，都會出現立交上認錯路口，高速上錯過匝道，不知何時該併線的問題。路口圖形誘導的出現，一定程度上緩解了路口偏航的問題。業內通俗幾種做法，如下圖：從左到右順序： 實景圖：

2020-10-10 14:03:54

原创 數據挖掘技術在軌跡數據上的應用實踐

1. 背景首先簡要介紹一下什麼是數據挖掘。數據挖掘（Data Mining）是指從大量數據中發現特定信息和模式的過程，也有很多人將這一過程看作知識發現（Knowledge Discovery in Database）。數據挖掘常用的算法手段

2020-10-05 10:03:56 4

原创 淺談滴滴需求響應式公交背後的技術

{"type":"doc","content":[{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null}},{"type":"image"

2020-09-30 08:04:05

原创 機器學習在滴滴網絡定位中的探索和實踐

今天給大家分享的是機器學習在滴滴網絡定位中的實踐工作，會重點介紹三階段的演進：無監督模型、有監督迴歸模型、端到端CNN模型。1. 什麼是網絡定位目前定位技術主要包括GPS、網絡定位、慣性航位推算、MM（地圖匹配）、視覺定位等。GPS是最爲人

2020-09-29 10:08:56 8

原创 滴滴AR實景導航背後的技術

{"type":"doc","content":[{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null}},{"type":"image"

2020-09-12 21:43:59 2

原创 滴滴Ceph分佈式存儲系統優化之鎖優化

1. 背景在支撐一些延遲敏感的在線應用過程中，我們發現Ceph的尾延遲較差，當應用併發負載較高時，Ceph很容易出現延遲的毛刺，對延遲敏感的應用造成超時甚至崩潰。我們對Ceph的尾延遲問題進行了深入細緻的分析和優化。造成尾延遲的一個重要原因

2020-09-08 10:09:00 2

原创 滴滴七層接入平臺實踐和探索

1. 概況從2014年底誕生至今，滴滴七層接入平臺服務規模如下： 負責全公司http請求東西向和南北向的流量接入和治理，涉及多個事業部。 請求峯值qps數百萬，日請求量數千億，接入域名數千個、接入服務數千個、轉發規則數萬個。 千億級的流量轉

2020-09-07 10:08:54 2

原创 GPU虛擬機創建時間深度優化

從公有云服務商那裏購買過虛擬主機的資深用戶，一般會發現這麼個規律：創建一臺CPU虛擬主機是比較快的，但是要創建一臺包含GPU卡的虛擬主機通常需要等比較長的時間，整個創建過程短則數十秒鐘，長則數分鐘。對於絕大多少的用戶來說，虛擬主機的創建時間

2020-09-02 14:03:56

原创 可編程網卡芯片在滴滴雲網絡的應用實踐

1. 數據中心面臨的問題隨着滴滴雲規模的不斷擴大，業務層面對延遲以及帶寬的要求越來越高。2018年滴滴雲網絡團隊上線了基於開源社區的OVS-DPDK方案。DPDK是X86平臺報文快速處理的庫和驅動的集合, 其主要優勢爲通過Bypass Li

2020-08-31 10:03:58

原创 滴滴ElasticSearch千萬級TPS寫入性能翻倍技術剖析

1. 背景前段時間，爲了降低用戶使用ElasticSearch的存儲成本，我們做了數據的冷熱分離。爲了保持集羣磁盤利用率不變，我們減少了熱節點數量。ElasticSearch集羣開始出現寫入瓶頸，節點產生大量的寫入rejected，大量從k

2020-08-25 14:03:50 1

原创 DiDi Food中的智能補貼實戰漫談

0. 目錄本文內容較長，主要會包括以下幾點： 差異化定價的經濟學原理 差異化定價在DiDi Food中的抓手 補貼問題的定義 DiDi Food中智能補貼的架構與流程 增量預估 分發策略

2020-08-17 10:13:57 1

原创 滴滴工程效能平臺建設之路

1. 滴滴工程效能的演進在大家的印象裏，工程效能就是基於工具本身的工程項目建設，簡單地說就是爲研發團隊鑄劍——提供所需的各類生產力工具。相信大家對下面這張圖中的企業都非常熟悉，國內及國際高科技頭部公司在 R&D 方面的投入佔比通常能達到公司

2020-08-01 14:09:00

原创 搜索相關性算法在 DiDi Food 中的搜索

導讀：今天給大家分享的主題是搜索匹配問題在 DiDi Food 中的一些探索與應用。本文首先介紹了搜索相關性的一些背景，之後介紹了業界常見的三種匹配模型，以及在DiDi Food業務中的模型效果對比。 匹配模型包括：1. 基

2020-05-26 02:31:27