跳转至

采集器「AWS-Kafka」配置手册

阅读本文前，请先阅读：

使用本采集器前，必须安装「观测云集成 Core 核心包」及其配套的第三方依赖包

1. 配置结构

本采集器配置结构如下：

字段 类型 是否必须 说明
regions list 必须 所需采集的地域列表
regions[#] str 必须 地域 ID。如：'cn-north-1'
总表见附录

2. 配置示例

采集北京地域的实例数据

Python
1
2
3
collector_configs = {
    'regions': ['cn-north-1' ]
}

3. 数据上报格式

数据正常同步后，可以在观测云的「基础设施-资源目录」中查看数据。

上报的数据示例如下：

JSON
 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
{
  "measurement": "aws_kafka",
  "tags": {
    "ClusterArn"    : "arn:aws:kafka:ap-southeast-1:",
    "ClusterName"   : "kafka",
    "ClusterType"   : "PROVISIONED",
    "CurrentVersion": "K1JYRMDPD0WRC1",
    "State"         : "ACTIVE",
    "name"          : "kafka"
  },
  "fields": {
    "BrokerNodeGroupInfo" : "{}",
    "ClientAuthentication": "{}",
    "CreationTime"        : "2022-12-02T07:36:10.439000Z",
    "StateInfo"           : "{}",
    "Tags"                : "{\"GCR-Migration-2021-463\": \"d-serv79n\", \"map-migrated-project-id\": \"GCR-3\"}",
    "message"             : "{实例 JSON 数据}"
  }
}

tags、fields 中的字段可能会随后续更新有所变动

4. IAM 策略权限

如果用户使用带入 IAM 角色的方式采集资源，需要开启一定的操作权限

该采集器需要以下权限：

kafka:ListClustersV2

X. 附录

请参考 AWS 官方文档：