目录
输入和输出集成概述
此输入插件从 Mesos 收集指标。
此插件使用参数化的 SQL INSERT 语句将来自 Telegraf 的指标直接写入 MariaDB,提供了一种将指标存储在结构化关系表中的灵活方式。
集成详情
Mesos
Telegraf 的 Mesos 插件旨在收集和报告来自 Apache Mesos 集群的指标,这对于容器编排和资源管理中的监控和可观测性至关重要。Mesos 以其可扩展性和管理多样化工作负载的能力而闻名,它生成关于资源使用、任务、框架和整体系统性能的各种指标。通过使用此插件,用户可以跟踪其 Mesos 集群的健康状况和效率,深入了解资源分配,并确保应用程序及时获得必要的资源。配置允许用户指定相关的 Mesos master 详细信息,以及要收集的所需指标组,使其能够适应不同的部署和监控需求。总的来说,此插件无缝集成在 Telegraf 收集管道中,支持云原生环境的详细可观测性。
MariaDB
Telegraf 中的 SQL 输出插件通过执行参数化的 SQL 语句,可以将指标直接写入 SQL 兼容的数据库(如 MariaDB)。通过支持 MySQL 驱动程序,该插件与 MariaDB 无缝集成,以实现可靠的结构化指标存储。此设置非常适合喜欢基于 SQL 的分析或希望将指标与业务数据一起存储以进行统一查询的用户。MariaDB 是 MySQL 的一个社区开发的、企业级的分支,它强调性能、安全性和开放性。该插件支持将时序指标插入到自定义模式中,从而可以使用 SQL 连接器灵活地进行分析并与 Metabase 或 Grafana 等 BI 工具集成。
配置
Mesos
[[inputs.mesos]]
## Timeout, in ms.
timeout = 100
## A list of Mesos masters.
masters = ["http://localhost:5050"]
## Master metrics groups to be collected, by default, all enabled.
master_collections = [
"resources",
"master",
"system",
"agents",
"frameworks",
"framework_offers",
"tasks",
"messages",
"evqueue",
"registrar",
"allocator",
]
## A list of Mesos slaves, default is []
# slaves = []
## Slave metrics groups to be collected, by default, all enabled.
# slave_collections = [
# "resources",
# "agent",
# "system",
# "executors",
# "tasks",
# "messages",
# ]
## Optional TLS Config
# tls_ca = "/etc/telegraf/ca.pem"
# tls_cert = "/etc/telegraf/cert.pem"
# tls_key = "/etc/telegraf/key.pem"
## Use TLS but skip chain & host verification
# insecure_skip_verify = false
MariaDB
[[outputs.sql]]
## Database driver
## Valid options: mssql (Microsoft SQL Server), mysql (MySQL), pgx (Postgres),
## sqlite (SQLite3), snowflake (snowflake.com) clickhouse (ClickHouse)
driver = "mysql"
## Data source name
## The format of the data source name is different for each database driver.
## See the plugin readme for details.
data_source_name = "username:password@tcp(host:port)/dbname"
## Timestamp column name
timestamp_column = "timestamp"
## Table creation template
## Available template variables:
## {TABLE} - table name as a quoted identifier
## {TABLELITERAL} - table name as a quoted string literal
## {COLUMNS} - column definitions (list of quoted identifiers and types)
table_template = "CREATE TABLE {TABLE}({COLUMNS})"
## SQL INSERT statement with placeholders. Telegraf will substitute values at runtime.
## table_template = "INSERT INTO metrics (timestamp, name, value, tags) VALUES (?, ?, ?, ?)"
## Table existence check template
## Available template variables:
## {TABLE} - tablename as a quoted identifier
table_exists_template = "SELECT 1 FROM {TABLE} LIMIT 1"
## Initialization SQL
init_sql = "SET sql_mode='ANSI_QUOTES';"
## Maximum amount of time a connection may be idle. "0s" means connections are
## never closed due to idle time.
connection_max_idle_time = "0s"
## Maximum amount of time a connection may be reused. "0s" means connections
## are never closed due to age.
connection_max_lifetime = "0s"
## Maximum number of connections in the idle connection pool. 0 means unlimited.
connection_max_idle = 2
## Maximum number of open connections to the database. 0 means unlimited.
connection_max_open = 0
## NOTE: Due to the way TOML is parsed, tables must be at the END of the
## plugin definition, otherwise additional config options are read as part of the
## table
## Metric type to SQL type conversion
## The values on the left are the data types Telegraf has and the values on
## the right are the data types Telegraf will use when sending to a database.
##
## The database values used must be data types the destination database
## understands. It is up to the user to ensure that the selected data type is
## available in the database they are using. Refer to your database
## documentation for what data types are available and supported.
#[outputs.sql.convert]
# integer = "INT"
# real = "DOUBLE"
# text = "TEXT"
# timestamp = "TIMESTAMP"
# defaultvalue = "TEXT"
# unsigned = "UNSIGNED"
# bool = "BOOL"
# ## This setting controls the behavior of the unsigned value. By default the
# ## setting will take the integer value and append the unsigned value to it. The other
# ## option is "literal", which will use the actual value the user provides to
# ## the unsigned option. This is useful for a database like ClickHouse where
# ## the unsigned value should use a value like "uint64".
# # conversion_style = "unsigned_suffix"
输入和输出集成示例
Mesos
-
资源利用率监控:使用 Mesos 插件持续监控整个 Mesos 集群的 CPU、内存和磁盘使用情况。对于快速扩展的应用程序,跟踪这些指标有助于确保根据工作负载动态分配资源,防止瓶颈并优化性能。
-
框架性能分析:集成此插件以测量在 Mesos 上运行的不同框架的性能。通过比较活动框架及其任务成功率,您可以确定哪些框架提供最佳资源效率或可能需要优化。
-
系统健康警报:基于 Mesos 插件收集的指标设置警报,以便在资源利用率超过关键阈值或特定任务失败时通知工程团队。这允许在发生严重故障之前进行主动干预和维护。
-
容量规划:利用收集的指标分析历史资源使用模式,以协助容量规划。通过了解峰值负载和资源利用率趋势,团队可以就扩展基础设施和根据需要部署额外资源做出明智的决策。
MariaDB
-
商业智能集成:将应用程序性能指标直接存储到 MariaDB 中,并将其连接到 Metabase 或 Apache Superset 等 BI 工具。此设置允许将运营数据与业务 KPI 混合用于统一仪表板,从而提高跨部门的可见性。
-
使用历史指标进行合规性报告:使用此插件将指标记录到 MariaDB 中,用于审计和合规性用例。关系模型支持使用时间戳条目精确查询过去的性能指标,从而支持法规文档。
-
基于 SQL 逻辑的自定义警报:将指标插入到 MariaDB 中,并使用自定义 SQL 查询来定义警报阈值或条件。与 cron 作业或计划脚本结合使用,这可以实现传统指标平台无法实现的高级警报工作流程。
-
物联网传感器指标存储:通过 Telegraf 收集来自 IoT 设备的传感器数据,并使用规范化的模式将其存储在 MariaDB 中。这种方法经济高效,并且可以与现有的基于 SQL 的系统良好集成,以进行实时或历史分析。
反馈
感谢您成为我们社区的一份子!如果您有任何一般性反馈或在这些页面上发现任何错误,我们欢迎并鼓励您提出意见。请在 InfluxDB 社区 Slack 中提交您的反馈。