Airbnb数据质量（一）：重建

{"type":"doc","content":[{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null},"content":[{"type":"text","marks":[{"type":"italic"},{"type":"strong"}],"text":"本文最初发布于Airbnb工程&数据科学博客，作者Jonathan Parks、Vaughn Quoss、Paul Ellwood，由InfoQ中文站翻译并分享。"}]},{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null}},{"type":"blockquote","content":[{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null}},{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null},"content":[{"type":"text","text":"在Airbnb，我们一直有一种数据驱动的文化。我们组建了一流的数据科学和工程团队，建立了行业领先的数据基础设施，并推出了许多成功的开源项目，包括Airflow和Superset。与此同时，Airbnb已经从一个光速发展的初创公司转变为一个拥有数千名员工的成熟组织。在转型过程中，Airbnb经历了大多数公司都会遇到的典型的增长挑战，包括那些影响数据仓库的挑战。这篇文章探讨了Airbnb在高速增长期间面临的数据挑战，以及我们为克服这些挑战所采取的措施。"}]}]},{"type":"heading","attrs":{"align":null,"level":2},"content":[{"type":"text","text":"简介"}]},{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null},"content":[{"type":"text","text":"在Airbnb，我们一直有一种数据驱动的文化。我们组建了一流的数据科学和工程团队，建立了行业领先的数据基础设施，并推出了许多成功的开源项目，包括"},{"type":"link","attrs":{"href":"https:\/\/airflow.apache.org\/","title":"","type":null},"content":[{"type":"text","text":"Airflow"}]},{"type":"text","text":"和"},{"type":"link","attrs":{"href":"https:\/\/superset.apache.org\/","title":"","type":null},"content":[{"type":"text","text":"Superset"}]},{"type":"text","text":"。与此同时，Airbnb已经从一个光速发展的初创公司转变为一个拥有数千名员工的成熟组织。在转型过程中，Airbnb经历了大多数公司都会遇到的典型的增长挑战，包括那些影响数据仓库的挑战。这篇文章探讨了Airbnb在高速增长期间面临的数据挑战，以及我们为克服这些挑战所采取的措施。"}]},{"type":"heading","attrs":{"align":null,"level":2},"content":[{"type":"text","text":"背景"}]},{"type":"paragraph","attrs":{"indent":0,"number":0,"align":null,"origin":null},"content":[{"type":"text","text":"随着Airbnb从一家小型初创公司发展成为今天的公司，很多事情都变了。公司冒险进入了新的业务领域，收购了许多公司，并大幅改进了产品战略。同时，对数据的要求也发生了变化。例如，领导层对数据的及时性和质量有很高的期望，对成本和遵从性的关注度也更高了。为了确保我们能够继续满足这种预期，显然，我们需要针对我们的数据做大量的投资。这些投资集中于与所有权、数据架构和治理相关的领域。"}]},{"type":"heading","attrs":{"align":null,"level":3},"content":[{"type":"text","text":"所有权"}]}]}