> ## Documentation Index
> Fetch the complete documentation index at: https://docs.olostep.com/llms.txt
> Use this file to discover all available pages before exploring further.

# Olostep + Dify

> 通过官方的 Olostep 插件为 Dify 代理、聊天流和工作流提供实时网页搜索、抓取、爬取和引用答案。

Olostep 插件为 [Dify](https://dify.ai) 代理、聊天流和工作流带来了网页数据。[Olostep](https://www.olostep.com) 是面向 AI 代理和企业 AI 工作流的网页数据基础设施。其 API 提供实时网页搜索、抓取和爬取功能，以从网页中提取、清理和构建数据。

[从 Dify 市场安装 →](https://marketplace.dify.ai/plugin/olostep/olostep)

## 为什么选择 Olostep

* 面向开发者和企业的网页数据基础设施
* 每位客户每月可扩展至数亿至数十亿次请求
* 市场上性能最佳、可靠性最高且成本效益最高的 API
* 被增长最快的 AI 公司使用

从从少数 URL 提取数据到爬取数亿个页面，Olostep 为开发者和 AI 公司提供可靠、可扩展且高性价比的清洁、结构化网页数据访问。

## 工具

| 工具 | 功能 |
| - | - |
| Scrape URL | 抓取页面并返回清洁的 markdown（包括 JavaScript 渲染） |
| Search Web | 搜索实时网页并返回标题、URL 和描述 |
| Answer Question | 从实时网页回答问题，并提供来源 URL |
| Map Website | 列出网站上的 URL（最多 10 万个） |
| Crawl Website | 爬取网站并返回每个页面的 markdown |
| Batch Scrape | 一次批量抓取最多 10 万个 URL，并返回每个页面的 markdown |
| Get Results | 获取爬取或批量抓取的页面，每次调用最多 100 个 |

## 设置

1. 在 [olostep.com](https://www.olostep.com) 注册，并从 [Olostep 仪表板](https://www.olostep.com/dashboard)复制你的 API 密钥。
2. 在 Dify 中，进入 **插件**，在市场中找到 **Olostep** 并点击 **安装**。
3. 打开插件，点击 **授权** 并粘贴你的 API 密钥。

Dify 将密钥存储为机密。插件仅将其发送到 Olostep API。

## 使用

### 代理

将 Olostep 工具添加到代理应用中。代理选择所需的工具，例如使用 Search Web 查找页面并使用 Scrape URL 阅读它们。

### 工作流和聊天流

添加一个工具节点，选择一个 Olostep 工具并映射其输入。每个工具都会为后续节点返回 JSON，并为 LLM 节点返回可读文本。

例如，一个研究工作流可以为一个主题运行 **Search Web**，然后对结果 URL 进行 **Batch Scrape**，然后使用 LLM 节点总结页面。

## 爬取和批量抓取

Crawl Website 和 Batch Scrape 默认等待结果最多 2 分钟。你可以通过 **等待结果（秒）** 将其提高到 4 分钟。

如果在等待结束时任务仍在运行，工具将返回其 `id`，并将 `status` 设置为 `in_progress`。稍后将该 `id` 传递给 **Get Results** 以获取页面。

每次调用最多返回 100 个页面。如果还有更多可用，结果将包含 `next_cursor`：将其与 `id` 一起传递给 **Get Results** 以获取下一批页面。

> [!NOTE]
>
> Batch Scrape 最多可处理 10 万个 URL。新账户每批次限制为 100 个 URL：联系 [info@olostep.com](mailto:info@olostep.com) 以解除此限制。

## 自托管 Dify

插件仅通过 HTTPS 连接到 `https://api.olostep.com`，因此你的 Dify 实例需要对该主机的出站网络访问权限。

## 资源

* [Dify 市场列表](https://marketplace.dify.ai/plugin/olostep/olostep)
* [GitHub 仓库](https://github.com/olostep-api/olostep-dify-plugin)
* [Dify 文档](https://docs.dify.ai)
* [Olostep 网站](https://www.olostep.com)


This documentation is built and hosted on [Mintlify](https://mintlify.com), a developer documentation platform.