跳转至

采集器「华为云-DLI」配置手册

阅读本文前，请先阅读：

使用本采集器前，必须安装「观测云集成 Core 核心包」及其配套的第三方依赖包

1. 配置结构

本采集器配置结构如下：

字段 类型 是否必须 说明
region_projects dict 必须 所需采集数据的「地域 - 项目 ID」列表
region_projects[#] str:list 必须 键值对中：
Key 代表地域（如：'cn-north-4'）
Value 代表该地域下所需采集的项目 ID 列表
总表见附录

2. 配置示例

指定地域

采集cn-north-4地域对应项目的 DLI 实例数据

Python
1
2
3
4
5
collector_configs = {
    'region_projects': {
        'cn-north-4': ['c631f046252d4exxxxxxxxxxx', '15c6ce1c12da40xxxxxxxx9'],
    }
}

3. 数据上报格式

数据正常同步后，可以在观测云的「基础设施 / 自定义（对象）」中查看数据。

上报的数据示例如下：

JSON
 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
16
17
18
19
20
21
22
{
  "measurement": "huaweicloud_dli",
  "tags": {
    "RegionId"      : "cn-north-4",
    "database_name" : "default",
    "table_name"    : "default",
    "job_id"        : "4a3e6adc-xxxx-xxxx-xxxx-c02e8aa510ea",
    "job_type"      : "DDL",
    "name"          : "4a3e6adc-xxxx-xxxx-xxxx-c02e8aa510ea",
    "owner"         : "xxxx",
    "project_id"    : "15c6ce1c12dxxxx076643ac2b9",
    "queue_name"    : "default",
    "status"        : "FINISHED"
  },
  "fields": {
    "created_time" : 1691397445219,
    "updated_time" : 1691397450342,
    "detail"       : "{SQL JSON 数据}",
    "duration"     : 5123,
    "message"      : "{实例 JSON 数据}"
  }
}

部分参数说明如下

字段 类型 说明
start_time integer 作业开始的时间。是单位为“毫秒”的时间戳。
duration integer 作业运行时长，单位毫秒。
status str 此作业的当前状态，包含提交（LAUNCHING）、运行中（RUNNING）、完成（FINISHED）、失败（FAILED）、取消（CANCELLED）。
detail str SQL查询的相关列信息的Json字符串
database_name integer 记录其操作的表所在的数据库名称。类型为Import和Export作业才有“database_name”属性。
table_name integer 记录其操作的表名称。类型为Import和Export作业才有“table_name”属性。

tags、fields 中的字段可能会随后续更新有所变动

tags.name 值为实例 ID，作为唯一标识

以下字段均为 JSON 序列化后字符串

  • fields.message

X. 附录

华为云 DIL「地域 ID」

请参考华为云官方文档：