Mimir 与 Apache Pinot 对比

Mimir 概述

Grafana Mimir 是一个开源软件项目，为 Prometheus 提供可扩展的长期存储解决方案。Grafana Mimir 于 2022 年在 Grafana Labs 启动并宣布，旨在成为最具可扩展性和高性能的开源指标时间序列数据库。该项目整合了 Grafana Labs 工程师在以大规模运行 Grafana Enterprise Metrics 和 Grafana Cloud Metrics 时获得的知识和经验。

Apache Pinot 概述

Apache Pinot 是一个实时分布式 OLAP 数据存储，旨在以低延迟响应复杂的分析查询。它最初由 LinkedIn 开发，后来于 2015 年开源。Pinot 非常适合处理大规模数据和实时分析，为大型数据集上的复杂查询提供近乎瞬时的响应。它被 LinkedIn、Microsoft 和 Uber 等多家大型组织使用。

用于时间序列数据的 Mimir

Grafana Mimir 非常适合处理时间序列数据，使其成为涉及指标存储和分析场景的合适选择。它为 Prometheus（一种流行的开源监控和警报系统）提供长期存储功能。借助 Grafana Mimir，用户可以存储和查询长时间的时间序列指标，从而进行历史分析和趋势检测。它对于需要可扩展和高性能时间序列数据存储以进行指标监控和可观测性目的的应用程序特别有用。

用于时间序列数据的 Apache Pinot

Apache Pinot 由于其列式存储和实时摄取功能，是处理时间序列数据的可靠选择。Pinot 从 Apache Kafka 等流式数据源摄取数据的能力确保了可以分析正在生成的时间序列数据，此外还可以选择批量摄取数据。

Mimir 关键概念

• 指标：在 Grafana Mimir 中，指标表示随时间跟踪的测量值或观测值。它们可以包括各种类型的数据，例如系统指标、应用程序性能指标或传感器数据。
• 长期存储：Grafana Mimir 提供专门为长期保留时间序列数据而定制的存储解决方案，允许用户存储和查询长时间的历史指标数据。
• 微服务：Grafana Mimir 采用基于微服务的架构，其中系统由多个水平可扩展的微服务组成，这些微服务可以独立并行运行。

Apache Pinot 关键概念

• 段：段是 Pinot 中数据存储的基本单元。它是一种列式存储格式，包含表数据的子集。
• 表：Pinot 中的表是段的集合。
• 控制器：控制器管理元数据并协调数据摄取、查询执行和集群管理。
• Broker：Broker 负责接收查询，将查询路由到相应的服务器，并将结果返回给客户端。
• 服务器：服务器存储段并处理这些段上的查询。

Mimir 架构

Grafana Mimir 采用基于微服务的架构，其中系统由多个水平可扩展的微服务组成。这些微服务可以独立并行运行，从而实现工作负载的有效分配和可扩展性。Grafana Mimir 的组件被编译成单个二进制文件，提供了一个统一且有凝聚力的系统。该架构旨在实现高可用性和多租户，使多个用户和应用程序可以同时使用数据库。这种分布式架构确保了在处理大规模指标存储和检索场景中的可扩展性和弹性。

Apache Pinot 架构

Pinot 是一个分布式列式数据存储，它使用混合数据模型，结合了 NoSQL 和 SQL 数据库的特性。其架构由三个主要组件组成：控制器、Broker 和服务器。控制器管理元数据和集群操作，而 Broker 处理查询路由，服务器存储和处理数据。Pinot 的列式存储格式实现了高效的压缩和快速的查询处理。