Azure 数据资源管理器 vs OpenTSDB

Azure 数据资源管理器概览

Azure 数据资源管理器是一个基于云的、完全托管的大数据分析平台，作为 Microsoft Azure 平台的一部分提供。它由 Microsoft 于 2018 年宣布，并作为 PaaS 产品提供。Azure 数据资源管理器为摄取和查询遥测数据、日志和时序数据提供高性能功能。

OpenTSDB 概览

OpenTSDB (Open Time Series Database) 是一个基于 Apache HBase（NoSQL 数据库）构建的开源、分布式和可扩展的时序数据库。OpenTSDB 旨在满足对存储和处理来自各种来源（例如物联网设备、传感器和监控系统）生成的大量时序数据的日益增长的需求。它最初由 StumbleUpon 于 2010 年开发，后来成为一个拥有活跃贡献者社区的独立项目。

Azure 数据资源管理器用于时序数据

Azure 数据资源管理器非常适合处理时序数据。其高性能功能和摄取大量数据的能力使其适用于近乎实时地分析和查询时序数据。凭借其高级查询运算符（例如计算列、在行上搜索和筛选、按聚合分组和联接），Azure 数据资源管理器能够有效地分析时序数据。其可扩展的架构和分布式特性确保它可以有效地处理时序数据的速度和容量要求。

OpenTSDB 用于时序数据

OpenTSDB 专为时序数据存储和分析而设计，使其成为管理大规模时序数据集的理想选择。其架构实现了高写入和查询性能，并且可以以最少的资源消耗处理每秒数百万个数据点。OpenTSDB 灵活的查询功能允许用户有效地对时序数据执行复杂分析。

Azure 数据资源管理器关键概念

• 关系数据模型：Azure 数据资源管理器是一个基于关系数据库管理系统的分布式数据库。它支持数据库、表、函数和列等实体。与传统的 RDBMS 不同，Azure 数据资源管理器不强制执行诸如键唯一性、主键或外键之类的约束。相反，必要的关联关系在查询时建立。
• Kusto 查询语言 (KQL)：Azure 数据资源管理器使用 KQL，这是一种功能强大且富有表现力的查询语言，使用户能够轻松探索和分析他们的数据。
• 范围：在 Azure 数据资源管理器中，数据被组织成称为范围的单元，这些单元是不可变的、压缩的记录集，可以有效地存储和查询。

OpenTSDB 关键概念

• 数据点：时间上的单个测量值，包括时间戳、指标、值和关联的标签。
• 指标：一个命名的值，表示系统的特定方面，例如 CPU 使用率或温度。
• 标签：与数据点关联的键值对，提供元数据并帮助分类和查询数据。

Azure 数据资源管理器架构

Azure 数据资源管理器构建在云原生分布式架构之上，该架构同时支持 NoSQL 和类似 SQL 的查询功能。它是一个基于列式存储的数据库，利用压缩的不可变数据范围来实现高效的存储和检索。Azure 数据资源管理器架构的核心组件包括控制平面、数据管理和查询处理。控制平面负责管理资源和元数据，而数据管理组件处理数据摄取和组织。查询处理负责执行查询并将结果返回给用户。

OpenTSDB 架构

OpenTSDB 构建在 Apache HBase（分布式和可扩展的 NoSQL 数据库）之上，并依赖其架构进行数据存储和管理。OpenTSDB 将时序数据存储在 HBase 表中，数据点按指标、时间戳和标签组织。该数据库使用无模式数据模型，该模型允许在添加新指标和标签时具有灵活性。OpenTSDB 架构还支持通过在多个 HBase 节点之间分配数据来实现水平扩展。