← 洞察/ AI + 艺术创作工作坊IN-046

使用外部工具和资源运行 AI 智能体

ComfyUI LLM 聚会提供了各种工具包,可以轻松地与 LLM 模型集成。

1. LLM party中可用的外部工具和资源

ComfyUI LLM 聚会提供了各种工具包,可以轻松地与 LLM 模型集成。

  • Networking(网络): 允许 LLM 连接到互联网以搜索实时信息。

  • Knowbase(知识库): 允许 LLM 加载特定的本地文件。

  • Utility(实用工具): 允许 LLM 获取特定的实时信息,例如天气、时间、位置等。

2. 在 ComfyUI 中使用可扩展工具启动您的 AI 智能体

您可以下载下面的工作流程作为示例。

👉

multiple-tool-integration-AI-agent-s.json

此工作流程已与一些常用工具(在线搜索、加载本地文档、获取时间和天气等)集成。

但是,许多工具需要设置 API 密钥(搜索、天气等)或下载外部模型(嵌入长本地文件或在线内容)。

让我们从在 ComfyUI 中使用搜索功能询问 AI 开始。

2.1 准备好您的 Google 搜索 API 密钥

要使用 Google 搜索,您需要获取自己的 google_api_key 和 google_CSE_ID。您每天将有 100 个免费的 Google 搜索 API 请求。

获取您的 Google API 密钥

您可以通过 此处 创建您的 google_api_key。

点击“获取密钥”。

如果您还没有项目,请单击“新建项目”,然后单击“下一步”。

然后单击 “显示密钥”。

然后复制并保存密钥。

将其粘贴到 ComfyUI 中。

获取您的 google_CSE_ID

现在您可以开始在此处**获取您的 google_CSE_ID。

如果您还没有项目,请添加一个项目。

选择“搜索整个网络”,然后单击“创建”。

您快完成了。

现在您获得了搜索引擎 ID。

粘贴到 ComfyUI 中,您现在就可以开始了。

2.2 在线搜索并询问 AI

这里我们将以“利用菌丝体的生物智能设计未来伦敦”为例。以下是几个要点:

  • 确保您设置的城市时间与天气和您的问题一致。
  • 明确告诉 AI 在回答您的问题时您希望它使用什么工具。

然后我们可以看到 LLM 在搜索更可靠的信息后回答了我们的问题。

3. 高级技能

3.1 在 ComfyUI 中跳过某些节点

当您在 ComfyUI 中有很多节点时,有时您可能希望跳过其中一些节点以进行测试。有两种方法可以做到这一点。

对于单个节点:

右键单击单个节点以绕过它。

对于大量节点:

您需要添加一个组,然后拖动组的角以包含您要跳过运行的所有节点。

然后您可以通过右键单击并选择“将组设置为从不”来隐藏该组。

3.2 关于将长内容输入 LLM

对于短文本,将内容直接作为用户提示输入 LLM。

对于长内容,请先对其进行嵌入,以实现高效的 LLM 处理。配置您的本地嵌入模型路径和向量数据库基本路径。

将其包含在讲座中有点复杂。如果您对此感兴趣,请自行在线搜索。

搜索