数据智能体
数据智能体
- 文档首页
数据智能体知识引擎 VeKnow数据接入可视化知识处理数据输出导入通用知识库
复制全文
下载 pdf
文档反馈
问问助手支持将输出的原始文件导入企业知识引擎的通用知识库，导入时支持文档去重、知识分段与存储配置。本文为您介绍如何使用导入通用知识库算子。
您需要先在企业知识引擎中创建通用内容类型的知识库，以实现后续的知识导入，具体操作请参见新建企业知识库。
新建导入通用知识库算子
在知识分段算子后，点击加号+，增加导入知识库（简洁版）算子，并对算子进行配置。
配置参数
导入通用知识库
配置基础信息。
参数
说明
知识库类型
固定为通用知识库。
知识库
选择需要导入的通用内容类型的知识库。支持单击去创建，快速跳转到知识库页面创建通用内容类型的知识库。
知识库存储路径
知识导入知识库后的存储路径。
知识数据名称
从上游节点中选择指定输出参数作为知识数据名称。
知识地址
从上游节点中选择指定输出参数作为知识地址。
文档去重
通过校验文件内容 MD5 方式识别文件内容是否一致，只有完全一致的文件才会判定为重复。开启开关后，导入的文档内容与知识库已有知识完全一致，也会继续导入。
单击下一步，配置分段与存储。
参数
说明
文档类型
选择文档类型进行知识分段。
分段模式
- 自动分段：采用通用切片策略，由模型按照文档结构自动识别文档进行切片。
- 自定义分段：支持自定义长度、规则，按照更贴近业务自定义规则的场景切片。
说明
不同文档类型的配置项可能不同，请以实际页面信息为准进行配置。
解析策略
按需配置图片VLM理解、去除页眉页脚、文档OCR识别等解析策略
分段最大长度
单个切片的最大字符长度，包含英文、中文字符、标点符号、空格等。
知识增强配置
调用大模型对各分段抽取更丰富的知识点以构建索引，可提升分段召回效果，但会增加处理时长和资源消耗。
- 文档摘要：一段话概括文档主题和核心结论，用于文档级的粗筛。
- 文档导读：覆盖文档核心要点的详细概括，如背景、发现、结论，便于快速掌握文档内容，主要用于用户浏览文档关键信息使用。
- 分段摘要：一句话凝练切片核心，用于切片的快速与精准检索，可提升检索召回的精准度。
- 分段关键问题：切片可回答的高频问题，增强 Query 和 chunk 的语义距离，可提升检索召回的精准度。
- 分段关键词：便于检索的标签，用于关键词过滤，可提升检索召回的精准度。
有效期
设置知识的有效期。支持设置：
- 永久有效
- 固定截止日期：需要设置具体的截止日期，并设置到期后知识是否自动删除。
- 动态字段截止：需要指定上游字段作为截止日期字段，并设置到期后知识是否自动删除。
导入并发
设置导入知识的并发数上限。
依赖配置
对任务的数据依赖进行配置，支持配置上游依赖和自依赖。
- 上游依赖支持系统自动配置和自定义配置。
- 系统自动配置会自动生成上游数据依赖，您可以根据实际情况决定是否使用。
- 当选择自定义配置时，您可以手动新增数据依赖。
进入新增依赖界面后，您可以搜索对应任务或者数据集创建依赖，选择对应任务后会生成对应的依赖。若您需要通过手动创建系统自定义依赖，可以联系技术支持获得帮助。
- 自依赖：
- 开关打开时，则当前该任务依赖过去该任务的运行情况，并支持设置数据最早回溯时间配置。若上一个周期的任务失败，无法运行下一个周期的任务。
- 当开关关闭时，则当前该任务不依赖过去该任务的运行情况，即使上一个周期的任务失败，也可以正常运行下一个周期的任务。
高级配置
支持对该算子执行任务的高级参数进行进一步配置。
监控配置
支持设定多条报警规则，每条报警规则内最多设置5条报警条件，规则之间符合或的逻辑关系，即满足任意一条则将触发通知，支持用户根据下拉框选择结果异常报警、失败报警、超时报警3种类型。
当任务执行出现符合报警条件的情况时，支持通过飞书、钉钉等方式进行通知指定用户。