Airbnb數據質量（一）：重建

{"type":"doc","content":[{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null},"content":[{"type":"text","marks":[{"type":"italic"},{"type":"strong"}],"text":"本文最初發佈於Airbnb工程&數據科學博客，作者Jonathan Parks、Vaughn Quoss、Paul Ellwood，由InfoQ中文站翻譯並分享。"}]},{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null}},{"type":"blockquote","content":[{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null}},{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null},"content":[{"type":"text","text":"在Airbnb，我們一直有一種數據驅動的文化。我們組建了一流的數據科學和工程團隊，建立了行業領先的數據基礎設施，並推出了許多成功的開源項目，包括Airflow和Superset。與此同時，Airbnb已經從一個光速發展的初創公司轉變爲一個擁有數千名員工的成熟組織。在轉型過程中，Airbnb經歷了大多數公司都會遇到的典型的增長挑戰，包括那些影響數據倉庫的挑戰。這篇文章探討了Airbnb在高速增長期間面臨的數據挑戰，以及我們爲克服這些挑戰所採取的措施。"}]}]},{"type":"heading","attrs":{"align":null,"level":2},"content":[{"type":"text","text":"簡介"}]},{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null},"content":[{"type":"text","text":"在Airbnb，我們一直有一種數據驅動的文化。我們組建了一流的數據科學和工程團隊，建立了行業領先的數據基礎設施，並推出了許多成功的開源項目，包括"},{"type":"link","attrs":{"href":"https:\/\/airflow.apache.org\/","title":"","type":null},"content":[{"type":"text","text":"Airflow"}]},{"type":"text","text":"和"},{"type":"link","attrs":{"href":"https:\/\/superset.apache.org\/","title":"","type":null},"content":[{"type":"text","text":"Superset"}]},{"type":"text","text":"。與此同時，Airbnb已經從一個光速發展的初創公司轉變爲一個擁有數千名員工的成熟組織。在轉型過程中，Airbnb經歷了大多數公司都會遇到的典型的增長挑戰，包括那些影響數據倉庫的挑戰。這篇文章探討了Airbnb在高速增長期間面臨的數據挑戰，以及我們爲克服這些挑戰所採取的措施。"}]},{"type":"heading","attrs":{"align":null,"level":2},"content":[{"type":"text","text":"背景"}]},{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null},"content":[{"type":"text","text":"隨着Airbnb從一家小型初創公司發展成爲今天的公司，很多事情都變了。公司冒險進入了新的業務領域，收購了許多公司，並大幅改進了產品戰略。同時，對數據的要求也發生了變化。例如，領導層對數據的及時性和質量有很高的期望，對成本和遵從性的關注度也更高了。爲了確保我們能夠繼續滿足這種預期，顯然，我們需要針對我們的數據做大量的投資。這些投資集中於與所有權、數據架構和治理相關的領域。"}]},{"type":"heading","attrs":{"align":null,"level":3},"content":[{"type":"text","text":"所有權"}]}]}