视觉智能分析功能上线

视觉智能分析

边缘智能平台现已上线“视觉智能分析”功能。该功能旨在帮助您轻松、高效地对视频流和视频文件进行深度理解与分析。

• 它基于边缘大模型网关，并深度集成了后端的先进多模态大模型（如 Doubao-Seed-1.6-vision ），能够精准识别和理解复杂的视频内容。
• 为了进一步提升处理效率和节约资源，该功能还配备了丰富的视频预处理能力，如视频帧去重、关键帧筛选、图片压缩等。

如需体验视觉分析功能，请提交工单联系我们。

白名单

视觉智能分析

OpenAPI 服务地址变更

OpenAPI

为符合火山引擎的统一规范，边缘智能平台的 API 服务地址已变更为：https://vei-api.volcengineapi.com。
请注意：

• 如果您的业务正在调用边缘智能的 OpenAPI，请尽快将服务地址更新为新地址，以免影响业务。
• 推荐您通过 SDK 来调用服务。

全量发布

API 列表

模型服务部署支持滚动发布

边缘推理

部署模型服务时，如果选择多副本，那么可以启用滚动发布策略。

全量发布

• 部署模型服务 - Triton 框架
• 部署模型服务 - 自定义框架

边缘智能“项目”改名为“空间”

边缘智能

为便于和火山引擎访问控制服务中的“项目”有效区分，边缘智能平台中的“项目”重命名为“空间”。

• “空间”是边缘智能平台的资源隔离容器。要使用边缘智能平台，您必须先创建一个空间，然后为空间绑定边缘节点。
• 访问控制服务中的“项目”是火山引擎提供的资源管理工具，可用于将不同火山引擎云产品下的“资源”分组，实现在项目层面进行访问控制、账单分类等。更多信息，请参见项目概述。，

v3.5.0

--

新增官方模型

边缘推理

官方模型库中新增开放域目标检测、视觉提示目标检测、视觉提示分割、图文匹配模型。

v3.5.0

• 开放域目标检测-OWLv2
• 视觉提示目标检测-OWLv2
• 开放域目标检测-OmDet
• 图文匹配-SigLIP2
• 视觉提示分割-SAM2.1

新增官方模型

边缘推理

官方模型库中新增 Qwen2.5-VL-7B-HF 和 Qwen2.5-7B-HF 模型。以上模型支持结合自定义框架进行部署。

v3.3.0

• Qwen2.5-VL-7B-HF
• Qwen2.5-7B-HF

推理服务支持外部访问

边缘推理

部署推理服务（基于 Triton 框架或自定义框架）时，您可以启用外部访问。对于开启外部访问的推理服务，您可以在集群外部通过<节点ip:port>/path访问服务。

v3.1.0

• 部署模型服务 - Triton 框架
• 部署模型服务 - 自定义框架

模型服务部署能力升级

边缘推理

模型服务部署能力得到扩展，支持以下新特性：

• 向节点组部署模型服务
• 部署多个副本
• 为模型服务分配 GPU 数量（适用于向有多个 GPU 的节点部署自定义框架模型服务）

v2.12.0

• 部署模型服务 - Triton 框架
• 部署模型服务 - 自定义框架

新发布智能巡检功能

智能运维

智能巡检是边缘智能提供的一个运维工具。针对常见的资源异常情形，该工具预设了相应的检查项。您可以通过手动创建巡检任务，诊断资源状态，及时发现问题，提升问题排查效率。

v2.11.0

• 智能巡检
• 检查项和修复建议

自定义模型的版本配置支持指定模型所需存储空间

边缘推理

在自定义模型的版本配置中，当选择从第三方模型仓库拉取模型文件，可以为模型指定所需存储空间大小。
部署模型服务时，系统将根据您的配置，向边缘节点申请相应大小的存储空间以存放模型文件。

v2.10.0

创建一个版本

新增官方模型

边缘推理

官方模型库中新增 4 个基于 YOLOX 的边缘智能自研模型，包括适用于明厨亮灶场景的厨师帽检测、口罩检测、玩手机检测模型，以及适用于消防安全场景的烟火检测模型。

v2.10.0

• 厨师帽检测-01-YOLOX-ONNX
• 口罩检测-02-YOLOX-ONNX
• 玩手机检测-02-YOLOX-ONNX
• 烟火检测-01-YOLOX-ONNX

自定义模型支持应用自定义引擎

边缘推理

边缘推理默认应用 Triton 推理引擎。为更好地满足大模型部署需求，现已支持自定义推理引擎。我们为所有模型增加了 推理框架 属性，取值包含 Triton 框架 和 自定义框架。

• Triton 框架：模型部署时，默认使用边缘智能提供的 Triton 推理引擎。
• 自定义框架：模型部署时，需要您提供推理引擎镜像，我们将模型连同您的镜像一起部署到边缘节点。

v2.8.0

• 创建一个自定义模型
• 部署模型服务 - Triton 框架

北向通道升级

设备管理

北向通道功能全面升级。升级后：

• 允许在边缘节点维度进行通道部署。
• 一个通道可订阅多个设备实例的数据（支持按设备模板、驱动模板、设备实例来指定设备）。
• 一个通道能将数据传输到多个接收方。
• 无需部署北向通道，边缘节点默认会传输设备数据到边缘智能服务端，允许您在控制台查看设备数据和视频设备直播。

v2.7.0

创建北向通道

节点支持自定义运维信息上报、云边网络功能

节点管理

在绑定节点或编辑节点时，您可以选择为节点开启或关闭 运维信息上报 和 云边网络 功能。

全量发布

绑定节点
查看和编辑节点信息

新增官方模型：摔倒检测、打架检测

边缘推理

官方模型库中新增两个物体检测类型的官方模型，分别用于识别人员摔倒和人员打架事件。

全量发布

• 摔倒检测-01-PPYOLOE-ONNX
• 打架检测-01-PPYOLOE-ONNX

新支持节点/节点组管理

节点管理（原“一体机管理”）

为方便您对节点进行分组管理和使用，新支持了“节点管理”和“节点组管理“功能。

全量发布

管理节点组

新支持带分析组件的输入节点

数据处理

视频数据流节点中新增了 3 个带分析组件的输入节点，允许您在获取视频输入数据时即进行 ROI 检测、越线检测。
针对 DeepStream 框架，您可以利用批量合流节点，将多个输入节点（带分析组件）的数据进行汇总处理。

全量发布

视频数据流算子

支持基于 DLStreamer 框架的视频数据流（Beta）

数据处理

边缘智能的数据处理模块允许您创建基于 DLStreamer 框架的视频数据流模板，使用预置的 DLStreamer 框架节点编排数据处理流程。基于 DLStreamer 框架的视频数据流支持在 x86 架构的边缘节点上部署和运行。
边缘智能还提供了一个官方的 DLStreamer 数据流模板，方便您便捷高效地搭建适用于常见场景的数据流。

全量发布

开发视频数据流模板

官方模型提供推荐配置

边缘推理

当您使用官方模型部署模型服务时，边缘智能提供了默认的部署参数配置。
在首次部署模型服务时，我们推荐您使用参数的默认值。模型服务成功部署后，您可以根据实际需求编辑模型服务的配置。

全量发布

官方模型概览

支持云服务器版本资源包

通用

边缘智能提供了云服务器版本的资源包。云服务器版资源包允许您在 GPU 云服务器上使用 aPaaS 工具。
购买云服务器版资源包后，您将获得由火山引擎提供的 GPU 云服务器。GPU 云服务器会自动部署边缘智能的 aPaaS 工具，可作为边缘节点直接使用。

全量发布

• 资源包计费说明
• 在云服务器上使用 aPaaS 工具

支持处理时序数据

数据处理

数据处理模块支持配置时序数据流模板（基于 Ekuiper 框架）与部署相关实例。
时序数据流能够接入设备的时序数据，允许您通过 SQL 语句对数据进行清洗、整理和分析，并将最终处理结果推送至消息中间件或其他设备。您也可以结合视频数据流与时序数据流进行使用，将通过视频数据流得到的元数据作为时序数据流的输入，在边缘侧做进一步的处理。

全量发布

数据流概述