| | |
| | |
| | |
工作流 说明 在工作流中配置各节点。工作流默认包含 Source 和 Destination 两个节点,分别为起点和终点。您还可以单击 Add Transform 添加最多 5 个 Transform 节点。 | | |
| | 在类型下拉列表中选择 Kafka,然后配置以下字段。 - Kafka Instance:在下拉列表中选择要迁移的 Kafka 实例。如需创建新的 Kafka 实例,请参见创建实例。
- Kafka Topic:在下拉列表中选择要迁移的 Kafka 消息主题。如需创建新的 Kafka 消息主题,请参见创建 Topic。
- Bootstrap Servers:输入 Kafka 实例的接入点 IP 地址。获取接入点 IP 地址的方式,请参见查看接入点。
- Consumer Group:输入 Kafka 实例的消费组。获取消费组的方式,请参见查看 Group 详情。如果 Kafka 实例没有开启自动创建 Group 功能,则需要在 Kafka 实例中手动创建消费组。具体操作,请参见创建 Group。
- 高级配置(可选):您还可以使用代码进行高级配置。单击字段可在右侧查看字段详细说明。配置示例如下。
|
| | 在类型下拉列表中选择 S3File,然后配置以下字段。 - Bucket:选择 TOS 存储桶。如需创建新的 TOS 存储桶,请参见创建存储桶。
- Endpoint:输入 TOS 存储桶的访问域名。获取访问域名的方式,请参见查看桶详情。
- Credentials Providers:凭证提供方。当前固定为 org.apache.hadoop.fs.s3a.SimpleAWSCredentialsProvider。
- 修改 AK/SK:选择是否修改 Access Key 和 Access Secret。
- Access Key:输入获取的访问密钥 Access Key 。获取 Access Key 的方式,请参见 Access Key(密钥)管理。此参数仅当开启修改 AK/SK 时可见。
- Access Secret:输入获取的访问密钥 Access Secret 。获取 Access Secret 的方式,请参见 Access Key(密钥)管理。此参数仅当开启修改 AK/SK 时可见。
- File Format:在下拉列表中选择文件格式。当前支持 text、csv、parquet、orc、json、excel、xml 和 binary 格式。
- 高级配置(可选):您还可以使用代码进行高级配置。单击字段可在右侧查看字段详细说明。配置示例如下。
|
| | 数据迁移目的地。当前固定为 Milvus,需配置以下字段。 - 实例类型:选择 Dedicated 或 Serverless。
- Milvus 实例:在下拉列表中选择要将数据迁移到的 Milvus 实例。如需创建新的 Milvus 实例,请参见创建实例。
- URL :显示 Milvus 实例的访问地址,不可修改。
- Token 是否可修改:选择是否可修改 Token。
- Token:输入 Milvus 实例的账号和密码,用 : 分隔。此参数仅当 Token 是否可修改开启时可见。
- Collection:输入要将数据迁移到的集合名。
- 高级配置(可选):您还可以使用代码进行高级配置。单击字段可在右侧查看字段详细说明。配置示例如下。
|
| | 在下拉列表中选择 LLM,然后配置以下字段。 - Model Provider:在下拉列表中选择 LLM 模型提供方。
- Model:输入 LLM 模型名称,例如 doubao-seed-1-6-251015。
- 修改 API Key:选择是否可修改 API Key。
- API Key:输入用于调用 LLM 模型的 API Key。此参数仅当修改 API Key 开启时可见。
- Prompt:输入告知 LLM 模型期望结果的提示词。
- Output Column:输入 LLM 模型的输出列。
- 高级配置(可选):您还可以使用代码进行高级配置。单击字段可在右侧查看字段详细说明。配置示例如下。
|
| | 在下拉列表中选择 LLM,然后配置以下字段。 - Model Provider:在下拉列表中选择 Embedding 模型提供方。
- Model:输入 Embedding 模型名称,例如 doubao-seed-1-6-251015。
- 修改 API Key:选择是否可修改 API Key。
- API Key:输入用于调用 Embedding 模型的 API Key。此参数仅当修改 API Key 开启时可见。
- 高级配置(可选):您还可以使用代码进行高级配置。单击字段可在右侧查看字段详细说明。配置示例如下。
|
| | 在下拉列表中选择 FieldMapper,然后使用代码进行高级配置。单击字段可在右侧查看字段详细说明。配置示例如下。 |
| | |
| | |
| | 在下拉列表中使用的 Flink 资源池。如需创建新的资源池,请参见创建资源池。 |
| | |
| | |
| | 在下拉列表中选择单个 TaskManager 的 CPU 核数,默认值为 1。 |
| | 在下拉列表中选择单个 TaskManager 的内存大小,选项将根据您设置的 CPU 核数自动调整。 |
| | 单个 TaskManager 的 Slot 数量,默认值为 4。 |
| | JobManager 的 CPU 核数,默认值为 1。 |
| | JobManager 的内存大小,选项将根据您设置的 CPU 核数自动调整。 |