AI 行为研究

• 当前 AI 行为研究功能依赖火山引擎 DataFinder 产品，且功能当前为 Beta 版本，正在邀测阶段，如果您希望使用此功能，需先购买开通 DataFinder 产品，并联系技术支持人员申请邀测试用权限。
• 如果已申请开通邀测试用，使用时仍然提示无法使用“AI 行为研究”，请联系您的项目管理员开通功能权限。详情请参见权限管理。

Agent 运营分析

• 已购买 Agent 运营分析。若未采购需先了解产品功能，请联系商务人员。
• 如果您所在的公司或您个人已经购买私有化部署版本，需要找管理员添加用户，详情请参见管理用户。

第一步

准备数据

将用户行为数据接入增长分析 DataFinder。

如需分群探查，则需在增长分析 DataFinder 内创建好用户分群。

第二步

创建业务空间

结合业务场景、业务分类等因素，为需要集中分析的业务场景规划并创建业务空间，创建完成后，在业务空间内上传本业务场景相关的埋点范围、埋点相关知识，帮助模型理解背景知识、理解埋点意义，提高模型在后续分析过程中的专注度、提高分析结果质量。

上传埋点与知识

业务空间创建完成后，给业务空间上传业务相关的埋点和埋点知识。

第三步

配置分析任务

在“分群探查”页面中选择已圈选好的用户分群，并配置任务参数进行群体洞察分析。

在“user_id 探查”页面，输入用户 ID 与任务参数进行个体洞察分析。

第四步

查看分析结果

画像分析结果：AI 行为研究基于 DataFinder 采集到的用户行为数据、用户属性数据，可通过模型能力分析总结用户画像，包括用户标识和行为特性、用户兴趣等画像结论。

行为细查结果：查看当前用户洞察分析过程中的核心会话链路，包括核心会话列表、各会话中的关键行为链路。

行为洞察结果：查看各个洞察分析结论及其论据；并支持下钻查看论据中的详细会话和行为流详情。

汇总报告：在完成多个个体用户的洞察分析后，可查看“汇总报告”，AI 行为研究会为您汇总分析当前所有指定用户、并生成对应指定人群的群体特征生成汇总报告。

第一步

创建业务空间

在正式使用 Agent 运营分析功能之前，您需要创建业务空间，用于承载各类待分析评测的 Agent 应用。

第二步

配置 Agent

添加待分析评测的 Agent，并完成数据配置。

第三步

分析与评测

运营工具：Agent 运营分析提供基于规则、LLM 的打标工具，支持针对线上真实数据发起运营分析任务，基于打标结果可针对 Agent 的业务使用情况、线上效果情况提供分析报告和分析看板，洞察更多 Agent 指标增长。

评测工具：Agent 运营分析的评测工具提供评测数据管理、自动化评估器和综合评测实验结果统计，您可以根据评测结果，在效果、性能和成本等方面优化 Agent。

观测数据：Agent 运营分析内置的观测工具，为您提供可视化的全链路请求调用记录。

第一章 快速了解

背景信息

初步了解产品功能。

第二章 正式使用

1. 配置分析任务：分群探查

尝试选择用户分群，并指定分析任务参数，进行群体洞察分析。

2. 配置分析任务：个体探查

尝试指定用户 ID，并指定分析任务参数，进行个体洞察分析。

3. 查看分析结果

查看与理解行为研究报告，将其转化为业务优化动作。报告包含：

• 画像分析结果
• 行为细查结果
• 行为洞察结果

4. 总结群体特征

完成多个个体用户的洞察分析后，可对用户群体做汇总分析，获取由 AI 智能分析生成的用户群体特征报告。

5. 追问与重新分析

若对行为研究报告的结果有疑问，可选择追问智能体，获取进一步信息；可选择重新分析。

第一章 快速了解

Agent 运营分析概述

初步了解产品功能。

第二章 正式使用

1. 添加 Agent

尝试添加需要做运营分析的 Agent，并接入具体数据。

2. 管理标签与标签规则组
3. 管理运营评估任务

为 Agent 发起运营评估任务。任务会根据设定的标签规则、评估时间范围、评估用户范围以及抽样方式，对接入的 Agent 数据进行评估打标，并输出评估报告，报告内容包含智能洞察结果、核心数据指标、会话意图分析、问题和优化建议等详细数据。

4. 管理评测集
5. 管理评估器
6. 管理评测实验

构建评测实验，建立评估指标与策略，评估 Agent 综合标签是否达标，并根据评测结果调优 Agent。

第一章 快速了解

背景信息

了解产品功能。

第二章 准备工作

前提与准备

在增长分析 DataFinder 内接入用户行为数据、构建用户分群。

第三章 正式使用

1. 创建业务空间

创建业务空间并授权、上传埋点与知识。

2. 配置分析任务：分群探查

选择用户分群，并指定分析任务参数，进行群体洞察分析。

3. 配置分析任务：个体探查

指定用户 ID，并指定分析任务参数，进行个体洞察分析。

4. 查看分析结果

查看与理解行为研究报告，将其转化为业务优化动作。报告包含：

• 画像分析结果
• 行为细查结果
• 行为洞察结果

5. 总结群体特征

完成多个个体用户的洞察分析后，可对用户群体做汇总分析，获取由 AI 智能分析生成的用户群体特征报告。

6. 追问与重新分析

若对行为研究报告的结果有疑问，可选择追问智能体，获取进一步信息；可选择重新分析。

第一章 快速了解

Agent 运营分析概述

了解产品功能。

第二章 正式使用

1. 创建业务空间

创建业务空间，用于承载各类待分析评测的 Agent 应用。

2. 添加 Agent
3. 管理 Agent

添加需要做运营分析的 Agent，并接入具体数据。

4. 管理标签与标签规则组
5. 管理运营评估任务

为 Agent 发起运营评估任务。任务会根据设定的标签规则、评估时间范围、评估用户范围以及抽样方式，对接入的 Agent 数据进行评估打标，并输出评估报告，报告内容包含智能洞察结果、核心数据指标、会话意图分析、问题和优化建议等详细数据。

6. 管理评测集
7. 管理评估器
8. 管理评测实验

构建评测实验，建立评估指标与策略，评估 Agent 综合标签是否达标，并根据评测结果调优 Agent。

9. 观测数据

使用观测工具，可以帮助您：

• 了解模型在不同任务上的运行时间和资源消耗情况，以便进行性能优化。
• 当模型出现错误输出时，通过 Trace 可以追踪计算过程，定位错误发生的位置。
• 确保模型的使用符合安全和合规要求。通过 Trace 可以记录模型的输入和输出，以及中间计算过程，以便进行审计和监管，同时检测潜在的安全漏洞和恶意攻击。

第一章 快速了解

背景信息

了解产品功能。

第二章 准备工作

前提与准备

在增长分析 DataFinder 内接入用户行为数据、构建用户分群。

第三章 正式使用

1. 创建业务空间

创建业务空间并授权、上传埋点与知识。

2. 配置分析任务：分群探查

选择用户分群，并指定分析任务参数，进行群体洞察分析。

3. 配置分析任务：个体探查

指定用户 ID，并指定分析任务参数，进行个体洞察分析。

4. 查看分析结果

查看与理解行为研究报告，将其转化为业务优化动作。报告包含：

• 画像分析结果
• 行为细查结果
• 行为洞察结果

5. 总结群体特征

完成多个个体用户的洞察分析后，可对用户群体做汇总分析，获取由 AI 智能分析生成的用户群体特征报告。

6. 追问与重新分析

若对行为研究报告的结果有疑问，可选择追问智能体，获取进一步信息；可选择重新分析。

第四章 权限管控

权限管理

精细化管理产品功能、知识数据的使用权限，避免越权操作，保障数据和资源的安全可控。

第一章 快速了解

Agent 运营分析概述

了解产品功能。

第二章 正式使用

1. 创建业务空间

创建业务空间，用于承载各类待分析评测的 Agent 应用。

2. 添加 Agent
3. 管理 Agent

添加需要做运营分析的 Agent，并接入具体数据。

4. 管理标签与标签规则组
5. 管理运营评估任务

为 Agent 发起运营评估任务。任务会根据设定的标签规则、评估时间范围、评估用户范围以及抽样方式，对接入的 Agent 数据进行评估打标，并输出评估报告，报告内容包含智能洞察结果、核心数据指标、会话意图分析、问题和优化建议等详细数据。

6. 管理评测集
7. 管理评估器
8. 管理评测实验

构建评测实验，建立评估指标与策略，评估 Agent 综合标签是否达标，并根据评测结果调优 Agent。

9. 观测数据

使用观测工具，可以帮助您：

• 了解模型在不同任务上的运行时间和资源消耗情况，以便进行性能优化。
• 当模型出现错误输出时，通过 Trace 可以追踪计算过程，定位错误发生的位置。
• 确保模型的使用符合安全和合规要求。通过 Trace 可以记录模型的输入和输出，以及中间计算过程，以便进行审计和监管，同时检测潜在的安全漏洞和恶意攻击。

第三章 权限管控

管理用户

精细化管理产品功能使用权限，避免越权操作，保障数据和资源的安全可控。