Fluentd 和 Grafana 集成

输入和输出集成概述

Fluentd 输入插件从 Fluentd 的 in_monitor 插件端点收集指标。它提供对各种插件指标的洞察，同时允许自定义配置以减少序列基数。

此插件使 Telegraf 能够将指标直接流式传输到 Grafana 仪表板，实时利用 Grafana Live 进行即时数据可视化和运营洞察。

集成详情

Fluentd

此插件从 in_monitor 插件提供的 Fluentd 插件端点收集指标。它从 /api/plugin.json 资源读取数据，并允许根据插件类型排除特定插件。

Grafana

Telegraf 可以使用 Websocket 输出插件将实时数据发送到 Grafana。Telegraf 收集的指标会立即推送到 Grafana 仪表板，从而实现实时可视化和分析。此插件非常适合需要低延迟、实时数据可视化的用例，例如运营监控、实时分析和即时事件响应场景。它支持身份验证标头、可自定义的数据序列化格式（如 JSON）以及通过 TLS 进行的安全通信，在动态、交互式仪表板环境中提供灵活性和易集成性。

配置

Fluentd

[[inputs.fluentd]]
  ## This plugin reads information exposed by fluentd (using /api/plugins.json endpoint).
  ##
  ## Endpoint:
  ## - only one URI is allowed
  ## - https is not supported
  endpoint = "http://localhost:24220/api/plugins.json"

  ## Define which plugins have to be excluded (based on "type" field - e.g. monitor_agent)
  exclude = [
    "monitor_agent",
    "dummy",
  ]

Grafana

[[outputs.websocket]]
  ## Grafana Live WebSocket endpoint
  url = "ws://localhost:3000/api/live/push/custom_id"

  ## Optional headers for authentication
  # [outputs.websocket.headers]
  #   Authorization = "Bearer YOUR_GRAFANA_API_TOKEN"

  ## Data format to send metrics
  data_format = "influx"

  ## Timeouts (make sure read_timeout is larger than server ping interval or set to zero).
  # connect_timeout = "30s"
  # write_timeout = "30s"
  # read_timeout = "30s"

  ## Optionally turn on using text data frames (binary by default).
  # use_text_frames = false

  ## TLS configuration
  # tls_ca = "/path/to/ca.pem"
  # tls_cert = "/path/to/cert.pem"
  # tls_key = "/path/to/key.pem"
  # insecure_skip_verify = false

输入和输出集成示例

Fluentd

1. 基本配置：设置 Fluentd 输入插件以从 Fluentd 实例的监控端点收集指标，确保您能够跟踪性能和使用统计信息。
2. 排除插件：使用 exclude 选项忽略监控需求中不需要的特定插件指标，从而简化数据收集并专注于重要事项。
3. 自定义插件 ID：在 Fluentd 配置中实现 @id 参数以保持一致的 plugin_id，这有助于避免频繁重启期间出现高序列基数的问题。

Grafana

1. 实时基础设施仪表板：部署 Telegraf 以将服务器健康指标直接流式传输到 Grafana 仪表板，使 IT 团队能够实时可视化基础设施性能。此设置允许立即检测和响应关键系统事件。

2. 交互式物联网监控：集成 Telegraf 收集的物联网设备指标，并将实时数据推送到 Grafana，创建动态和交互式仪表板以监控智慧城市项目或制造过程。这种实时可见性显着提高了响应能力和运营效率。

3. 即时应用程序性能分析：将生产环境中的应用程序指标实时流式传输到 Grafana 仪表板，使开发团队能够在部署期间快速检测和诊断性能瓶颈或异常，从而最大限度地减少停机时间并提高可靠性。

4. 实时事件分析：在大型现场活动期间，利用 Telegraf 捕获和流式传输实时受众或系统指标，直接传输到 Grafana 仪表板。活动组织者可以动态监控并对不断变化的条件或趋势做出反应，从而显着提高受众参与度和运营决策能力。

反馈

感谢您成为我们社区的一份子！如果您有任何一般性反馈或在这些页面上发现任何错误，我们欢迎并鼓励您提出意见。请在 InfluxDB 社区 Slack 中提交您的反馈。