Azure 数据资源管理器与 RRDtool

Azure 数据资源管理器概述

Azure 数据资源管理器是一个基于云的、完全托管的大数据分析平台，作为 Microsoft Azure 平台的一部分提供。它由 Microsoft 于 2018 年宣布推出，并作为 PaaS 产品提供。Azure 数据资源管理器为摄取和查询遥测数据、日志和时间序列数据提供了高性能功能。

RRDtool 概述

RRDtool，全称 Round-Robin Database Tool（轮询数据库工具），是一个开源、高性能的数据日志记录和绘图系统，旨在处理时间序列数据。RRDtool 由 Tobias Oetiker 于 1999 年创建，专门用于存储和可视化时间序列数据，例如网络带宽、温度或 CPU 负载。它的主要特点是高效存储数据点，使用固定大小的数据库，该数据库自动聚合和归档较旧的数据点，从而确保数据库大小随时间推移保持不变。

Azure 数据资源管理器用于时间序列数据

Azure 数据资源管理器非常适合处理时间序列数据。其高性能功能和摄取大量数据的能力使其适用于近乎实时地分析和查询时间序列数据。凭借其高级查询运算符，例如计算列、在行上搜索和筛选、按组聚合和联接，Azure 数据资源管理器能够高效分析时间序列数据。其可扩展的架构和分布式特性确保它可以有效地处理时间序列数据的速度和容量要求。

RRDtool 用于时间序列数据

RRDtool 是为时间序列数据存储和可视化而创建的，使其非常适合需要高效处理此类数据的应用程序。其轮询数据库结构确保了恒定的存储空间使用，同时提供自动数据聚合和归档。但是，RRDtool 可能不适合需要复杂查询或关系数据存储的应用程序，因为它的重点主要在于时间序列数据。

Azure 数据资源管理器关键概念

• 关系数据模型：Azure 数据资源管理器是一个基于关系数据库管理系统的分布式数据库。它支持数据库、表、函数和列等实体。与传统的 RDBMS 不同，Azure 数据资源管理器不强制执行键唯一性、主键或外键等约束。相反，必要的关联关系在查询时建立。
• Kusto 查询语言 (KQL)：Azure 数据资源管理器使用 KQL，一种功能强大且富有表现力的查询语言，使用户能够轻松探索和分析其数据。
• 区段：在 Azure 数据资源管理器中，数据被组织成称为区段的单元，这些区段是不可变的、压缩的记录集，可以高效地存储和查询。

RRDtool 关键概念

• 轮询数据库：一种固定大小的数据库，使用循环缓冲区存储时间序列数据，并在添加新数据时覆盖旧数据。
• RRD 文件：一个包含 RRDtool 数据库的所有配置和数据的单个文件。
• 合并函数：一种将多个数据点聚合为单个数据点的函数，例如 AVERAGE、MIN、MAX 或 LAST。

Azure 数据资源管理器架构

Azure 数据资源管理器构建于云原生、分布式架构之上，该架构支持 NoSQL 和类 SQL 查询功能。它是一个基于列式存储的数据库，利用压缩的、不可变的数据区段来实现高效的存储和检索。Azure 数据资源管理器架构的核心组件包括控制平面、数据管理和查询处理。控制平面负责管理资源和元数据，而数据管理组件处理数据摄取和组织。查询处理负责执行查询并将结果返回给用户。

RRDtool 架构

RRDtool 是一个专门的时间序列数据库，它不使用 SQL 或传统的关系数据模型。相反，它采用轮询数据库结构，数据点存储在固定大小的循环缓冲区中。RRDtool 是一个命令行工具，可用于创建和更新 RRD 文件，以及从存储的数据生成图形和报告。它可以与各种脚本语言（例如 Perl、Python 和 Ruby）通过可用的绑定进行集成。