在 Netflix，我们对数据基础设施进行了大量投资，这些基础设施由数十个数据平台、数百个数据生产者和消费者以及 PB 级的数据组成。
在许多其他组织中，管理数据基础设施成本的有效方法是设置预算和其他严格的约束来限制支出。但是，由于我们数据基础设施的高度分布式性质，以及我们对自由和责任的重视，这些过程是反文化的，而且效率低下。
因此，我们的效率方法是提供成本透明度，并尽可能让决策者了解效率背景。我们最大的优势是有一个定制的仪表板，它可以作为数据生产者和消费者的反馈回路：它是 Netflix 数据用户在成本和使用趋势方面唯一全面的真实来源。本文详细介绍了我们创建数据效率仪表板的方法和经验教训。
Netflix 的数据平台全景
Netflix 的数据平台大致可以分为静态数据和动态数据系统。静态存储中的数据，如 S3 数据仓库、Cassandra、Elasticsearch 等物理存储数据，基础架构成本主要来自于存储。动态数据系统，如 Keystone、Mantis、Spark、Flink 等，会带来与处理瞬态数据相关的数据基础设施计算成本。每个数据平台包含数千个不同的数据对象（即资源），这些数据对象通常由不同的团队和数据用户拥有。
原文链接:【https://www.infoq.cn/article/Lv1N2KHFimzpibtqwumg】。未经作者许可，禁止转载。