Azure 数据资源管理器与 Redis

Azure 数据资源管理器概述

Azure 数据资源管理器是一个基于云的、完全托管的大数据分析平台，作为 Microsoft Azure 平台的一部分提供。它由 Microsoft 于 2018 年宣布推出，并作为 PaaS 产品提供。Azure 数据资源管理器为摄取和查询遥测数据、日志和时间序列数据提供高性能功能。

Redis 概述

Redis，代表远程字典服务器（Remote Dictionary Server），是一个开源的、内存中的数据结构存储，可以用作数据库、缓存和消息代理。它由 Salvatore Sanfilippo 于 2009 年创建，并因其高性能和灵活性而广受欢迎。Redis 支持各种数据结构，例如字符串、哈希、列表、集合、范围查询的排序集合、位图、HyperLogLog 以及半径查询的地理空间索引。

Azure 数据资源管理器用于时间序列数据

Azure 数据资源管理器非常适合处理时间序列数据。其高性能能力和摄取大量数据的能力使其适用于近实时分析和查询时间序列数据。凭借其高级查询运算符，例如计算列、在行上搜索和筛选、按聚合分组和连接，Azure 数据资源管理器能够高效分析时间序列数据。其可扩展的架构和分布式特性确保它可以有效地处理时间序列数据的速度和容量要求。

Redis 用于时间序列数据

Redis 有一个专门用于处理时间序列数据的模块，称为 RedisTimeSeries。RedisTimeSeries 提供诸如降采样、数据保留策略以及 Redis 中时间序列数据的专用查询等功能。作为内存数据库，Redis 在读取和写入时间序列数据时非常快，但由于 RAM 的成本高于磁盘，使用 Redis 可能会变得昂贵，具体取决于数据集的大小。如果您的用例不需要极快的响应时间，则可以通过使用更传统的时间序列数据库来省钱。

Azure 数据资源管理器关键概念

• 关系数据模型：Azure 数据资源管理器是一个基于关系数据库管理系统的分布式数据库。它支持数据库、表、函数和列等实体。与传统的 RDBMS 不同，Azure 数据资源管理器不强制执行诸如键唯一性、主键或外键之类的约束。相反，必要的关联关系在查询时建立。
• Kusto 查询语言 (KQL)：Azure 数据资源管理器使用 KQL，这是一种强大而富有表现力的查询语言，使用户能够轻松地探索和分析其数据。
• 区段（Extents）：在 Azure 数据资源管理器中，数据被组织成称为区段的单元，这些区段是不可变的、压缩的记录集，可以有效地存储和查询。

Redis 关键概念

• 内存存储：Redis 将数据存储在内存中，与基于磁盘的数据库相比，这允许更快的数据访问和操作。
• 数据结构：Redis 支持广泛的数据结构，包括字符串、哈希、列表、集合等等，这为数据建模和存储提供了灵活性。
• 持久性：Redis 提供可选的数据持久性，允许将数据定期保存到磁盘或写入日志以实现持久性。
• 发布/订阅：Redis 提供发布/订阅消息传递系统，实现客户端之间的实时通信，而无需集中式消息代理。

Azure 数据资源管理器架构

Azure 数据资源管理器构建在云原生、分布式架构之上，该架构同时支持 NoSQL 和类似 SQL 的查询功能。它是一个基于列式存储的数据库，利用压缩的、不可变的数据区段来实现高效的存储和检索。Azure 数据资源管理器架构的核心组件包括控制平面、数据管理和查询处理。控制平面负责管理资源和元数据，而数据管理组件处理数据摄取和组织。查询处理负责执行查询并将结果返回给用户。

Redis 架构

Redis 是一个 NoSQL 数据库，它使用键值数据模型，其中每个键都与一个值相关联，该值存储为 Redis 支持的数据结构之一。该数据库是单线程的，这简化了其内部架构并减少了争用。Redis 可以部署为独立服务器、集群或主从复制设置，以实现可扩展性和高可用性。Redis 集群模式自动跨多个节点分片数据，提供数据分区和容错能力。