本章节介绍 TOS 内容感知与处理(SenseFlow)的功能与计费等信息。
说明
SenseFlow 功能当前处于邀测阶段,仅开放华北2(北京)地域。如需使用,请联系客户经理。
TOS 内容感知与处理(SenseFlow)是为 AI 应用而生的对象存储智能工作台。数据无需出桶,即可在原生存储环境内完成感知、检索、生成的全流程智能闭环,有效降低 AI 应用的开发门槛与运维成本。
您只需创建 SenseFlow 规则,为存储桶内指定范围的数据绑定场景化模板与预置工作流,数据入桶后将自动完成以下核心能力的闭环:
- 内容感知:调用多模态 AI 模型,自动理解图片、视频等非结构化数据的内容与语义,提取核心特征,实现对数据本身的深度理解。
- 多模态检索:对语义特征与内容描述进行向量化处理并构建索引,支持以自然语言实现跨模态语义检索,如以文搜图、以文搜视频。
- 内容生成:调用预置工作流完成内容理解与智能生成任务,输出可复用的处理结果,支撑多样化的内容生产需求。
- SenseFlow 功能当前暂不收费。正式收费前,将提前公告收费标准及具体收费时间,请关注产品收费通知,以免产生非预期费用。
- 字幕擦除算子由火山引擎视频云服务的 AI MediaKit 提供,使用该算子将由 AI MediaKit 单独收取服务费用(不包含在 SenseFlow 费用内),详情请参见字幕擦除。
SenseFlow 功能使用需要遵循对象存储自身的各项使用限制,详情请参考约束限制。 该功能致力于解决多模态非结构化数据在对象存储中的理解、检索、运营和再利用问题,其具备如下功能优势,适用于以下场景。
- 面向视频监控数据场景,适用于安防园区、门店巡检、家庭监控等。自动识别特定对象、场景或事件,命中预设条件时自动触发通知,并对命中结果生成摘要或事件说明。
- 面向移动端图片与视频的云端管理场景,适用于个人相册、家庭相册等消费级应用。自动理解照片与视频内容,支持按人物、场景、时间进行语义检索,并可自动生成动图、精彩时刻集锦或每日回忆等个性化内容。
- 面向企业级媒资管理与内容生产场景,适用于广告素材库、影视资产库、品牌内容中心等。通过语义、风格或主题快速定位历史素材,支持多选聚合形成临时清单,便于跨项目复用与二次创作。
SenseFlow 功能使用流程如下:
流程说明:
开启 SenseFlow 后,原有的数据会丢失或被修改吗?
不会。SenseFlow 对您的原始数据是只读的。它会读取您的对象内容进行分析,但生成的索引和元数据将作为独立的附加数据进行存储,不会修改您的原始文件。部分工作流(如视频剪辑)会生成新的对象,并默认存储在您的存储桶中,但同样不会影响原始对象。
为存储桶开启 SenseFlow 规则后,需要多久才能检索到内容?
这取决于您规则范围内需要处理的数据量。对于新上传的文件,通常在分钟级别内即可完成索引并被检索到。
我是否可以只使用 SenseFlow 的部分功能,例如只用内容感知,不用检索?
可以。SenseFlow 的功能是模块化的。通过模板和工作流的配置,您可以按需启用所需的功能。例如,您可以配置一个规则只进行内容感知并触发通知,而无需构建可供前端查询的检索索引。