跳转到主要内容
Olostep 插件为 Dify 代理、聊天流和工作流带来了网页数据。Olostep 是面向 AI 代理和企业 AI 工作流的网页数据基础设施。其 API 提供实时网页搜索、抓取和爬取功能,以从网页中提取、清理和构建数据。 从 Dify 市场安装 →

为什么选择 Olostep

  • 面向开发者和企业的网页数据基础设施
  • 每位客户每月可扩展至数亿至数十亿次请求
  • 市场上性能最佳、可靠性最高且成本效益最高的 API
  • 被增长最快的 AI 公司使用
从从少数 URL 提取数据到爬取数亿个页面,Olostep 为开发者和 AI 公司提供可靠、可扩展且高性价比的清洁、结构化网页数据访问。

工具

设置

  1. 在 olostep.com 注册,并从 Olostep 仪表板复制你的 API 密钥。
  2. 在 Dify 中,进入 插件,在市场中找到 Olostep 并点击 安装。
  3. 打开插件,点击 授权 并粘贴你的 API 密钥。
Dify 将密钥存储为机密。插件仅将其发送到 Olostep API。

使用

代理

将 Olostep 工具添加到代理应用中。代理选择所需的工具,例如使用 Search Web 查找页面并使用 Scrape URL 阅读它们。

工作流和聊天流

添加一个工具节点,选择一个 Olostep 工具并映射其输入。每个工具都会为后续节点返回 JSON,并为 LLM 节点返回可读文本。 例如,一个研究工作流可以为一个主题运行 Search Web,然后对结果 URL 进行 Batch Scrape,然后使用 LLM 节点总结页面。

爬取和批量抓取

Crawl Website 和 Batch Scrape 默认等待结果最多 2 分钟。你可以通过 等待结果(秒) 将其提高到 4 分钟。 如果在等待结束时任务仍在运行,工具将返回其 id,并将 status 设置为 in_progress。稍后将该 id 传递给 Get Results 以获取页面。 每次调用最多返回 100 个页面。如果还有更多可用,结果将包含 next_cursor:将其与 id 一起传递给 Get Results 以获取下一批页面。
Batch Scrape 最多可处理 10 万个 URL。新账户每批次限制为 100 个 URL:联系 info@olostep.com 以解除此限制。

自托管 Dify

插件仅通过 HTTPS 连接到 https://api.olostep.com,因此你的 Dify 实例需要对该主机的出站网络访问权限。

资源