You need to enable JavaScript to run this app.
文档中心
日志服务

日志服务

复制全文
下载 pdf
机器学习任务日志采集
采集机器学习任务日志
复制全文
下载 pdf
采集机器学习任务日志
本文档介绍机器学习任务日志相关的功能介绍、采集方法。​
功能概述​
火山引擎机器学习平台是面向机器学习应用开发者,提供开发机、自定义训练和在线服务等丰富建模工具、多框架高性能模型推理服务的企业级全自研开发平台,支持从数据托管、代码开发、模型训练、模型部署的全生命周期工作流。​
机器学习平台的日志能力为用户提供强大的日志处理功能,同时简化日志查询与搜索页面简化,更好地满足用户对日志管理和查询的需求。 ​
相关配置如下:​
​
配置​
说明​
日志类型​
机器学习日志。​
日志存储位置​
在机器学习平台绑定日志项目和日志主题前,需在日志服务手动创建对应日志项目和日志主题,管理日志资源详情请参考管理机器学习任务日志资源。​
  • 日志项目:自定义​
  • 日志主题:自定义​
日志存储时长​
  • 默认为 30 天。​
日志分区​
  • 预设 2 个分区。​
  • 默认开启自动分裂日志主题分区,在写入流量较大时分裂分区以满足数据写入需求。​
索引设置​
自动配置索引。​
日志字段​
详细的日志字段列表请参考机器学习任务日志字段。​
​
采集机器学习任务日志​
使用限制、开通机器学习任务日志至日志服务操作,详情请参考日志功能升级。​
机器学习任务日志字段​
在线任务字段​
​
字段​
说明​
availability_zone​
可用区。​
flavor​
实例规格。​
mlp_deployment​
在线服务部署 ID。​
mlp_resource_group​
资源组 ID。​
mlp_resource_queue​
资源队列 ID。​
mlp_service​
在线服务 ID。​
mlp_service_instance​
在线服务实例 ID。​
mlp_task_source_type​
任务来源类型。​
role​
角色。​
role_index​
角色索引。​
content​
原始日志内容。​
​
开发机字段​
​
字段​
说明​
tag_account_id​
账户 ID。​
cluster_id​
集群 ID。​
container_name​
容器名称。​
mlp_devinstance​
开发机 ID。​
pod_name​
Pod 名称。​
devinstance_worker_id​
开发机工作节点 ID。​
content​
原始日志内容。​
​
自定义任务字段​
​
字段​
说明​
availability_zone​
可用区。​
flavor​
实例规格。​
mlp_customtask​
自定义任务 ID。​
mlp_customtask_instance​
自定义任务实例。​
mlp_pipeline​
工作流(Pipeline)ID。​
mlp_resource_group​
资源组 ID。​
mlp_resource_queue​
资源队列 ID。​
mlp_task_source_type​
任务来源类型。​
role​
角色。​
role_index​
角色索引。​
content​
原始日志内容。​
​
自定义任务 PySpy 字段​
​
字段​
说明​
aggregated_by​
聚合方式。​
dump_id​
采样转储 ID。​
hash​
哈希值。​
instance​
实例。​
is_dataloader​
是否为数据加载器。​
owns_gil​
是否持有 GIL。​
pid​
进程 ID。​
rank​
分布式训练中的 Rank。​
thread_name​
线程名称。​
vpc_ір​
VPC IP 地址。​
content​
原始日志内容。​
​
​
最近更新时间:2026.02.03 14:53:42
这个页面对您有帮助吗?
有用
有用
无用
无用