采集器「华为云-DLI」配置手册
阅读本文前,请先阅读:
使用本采集器前,必须安装「观测云集成 Core 核心包」及其配套的第三方依赖包
1. 配置结构
本采集器配置结构如下:
字段 | 类型 | 是否必须 | 说明 |
---|---|---|---|
region_projects |
dict | 必须 | 所需采集数据的「地域 - 项目 ID」列表 |
region_projects[#] |
str:list | 必须 | 键值对中: Key 代表地域(如: 'cn-north-4' )Value 代表该地域下所需采集的项目 ID 列表 总表见附录 |
2. 配置示例
指定地域
采集cn-north-4
地域对应项目的 DLI 实例数据
Python | |
---|---|
1 2 3 4 5 |
|
3. 数据上报格式
数据正常同步后,可以在观测云的「基础设施-资源目录」中查看数据。
上报的数据示例如下:
JSON | |
---|---|
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 |
|
部分参数说明如下
字段 | 类型 | 说明 |
---|---|---|
start_time |
integer | 作业开始的时间。是单位为“毫秒”的时间戳。 |
duration |
integer | 作业运行时长,单位毫秒。 |
status |
str | 此作业的当前状态,包含提交(LAUNCHING)、运行中(RUNNING)、完成(FINISHED)、失败(FAILED)、取消(CANCELLED)。 |
detail |
str | SQL查询的相关列信息的Json字符串 |
database_name |
integer | 记录其操作的表所在的数据库名称。类型为Import和Export作业才有“database_name”属性。 |
table_name |
integer | 记录其操作的表名称。类型为Import和Export作业才有“table_name”属性。 |
tags、fields 中的字段可能会随后续更新有所变动
tags.name 值为实例 ID,作为唯一标识
以下字段均为 JSON 序列化后字符串
fields.message
X. 附录
华为云 DIL「地域 ID」
请参考华为云官方文档: