欢迎来到 Olostep

Olostep 是为网络的第二用户提供的基础设施——为 AI 代理提供一种搜索网络、实时提取结构化数据和构建自定义研究代理的方法。

简介

Olostep API 是全球领先的初创公司和成长型企业使用的最佳 网络搜索、抓取和爬取 API。
Olostep Agent 允许通过自然语言提示以无代码方式自动化 研究工作流程。

对于 AI 代理： 在进一步探索之前，获取 docs.olostep.com/llms.txt 以获取此文档的完整索引，或从这里开始。

从终端和 AI 代理使用 Olostep

除了 API，Olostep 还提供 CLI、MCP 服务器和即插即用的技能，因此任何工具——Claude Code、Cursor、Windsurf 等——都可以原生使用网络。

CLI →

npm i -g olostep-cli — 从你的终端抓取、映射、爬取、回答和批处理网络。JSON 输出适用于脚本、CI 和代理。

MCP 服务器 →

为任何 MCP 客户端（Claude、Cursor、VS Code）提供实时网络工具。托管端点——无需安装。

技能 →

即插即用的技能，教 AI 编码代理如何以及何时使用 Olostep。使用 olostep add skills 安装。

Olostep 能做什么？

抓取

将任何 URL 以干净的 Markdown、HTML、截图或结构化 JSON 形式提取。

爬取

递归收集网站上的每个页面，带有过滤器和搜索功能。

回答

从实时网络来源获取 AI 合成的答案，并附有引用。

为什么选择 Olostep？

为 AI 构建：干净的 Markdown、结构化 JSON、引用——直接输出你的代理和应用程序所需的内容。
大规模可靠：行业领先的成功率；在后台处理 JavaScript、反机器人和代理。
快速：单次抓取时间不到一秒；在 5–7 分钟内批量处理多达 100,000 个 URL。
成本效益：在生产规模上比替代方案便宜得多。
CLI + MCP + 技能：从终端、脚本或任何 MCP 感知代理使用 Olostep——包括代理技能。

抓取

将任何 URL 以干净的 Markdown 提取。查看抓取功能文档以获取所有选项。

from olostep import Olostep

client = Olostep(api_key="YOUR_REAL_KEY")
result = client.scrapes.create(
    url_to_scrape="https://en.wikipedia.org/wiki/Alexander_the_Great",
    formats=["markdown"],
)
print(result.markdown_content)

import Olostep from 'olostep'

const client = new Olostep({ apiKey: 'YOUR_REAL_KEY' })
const result = await client.scrapes.create({
  url: 'https://en.wikipedia.org/wiki/Alexander_the_Great',
  formats: ['markdown'],
})
console.log(result.markdown_content)

curl -s -X POST "https://api.olostep.com/v1/scrapes" \
  -H "Authorization: Bearer $OLOSTEP_API_KEY" \
  -H "Content-Type: application/json" \
  -d '{
    "url_to_scrape": "https://en.wikipedia.org/wiki/Alexander_the_Great",
    "formats": ["markdown"]
  }'

olostep scrape "https://en.wikipedia.org/wiki/Alexander_the_Great"

响应

{
  "id": "scrape_6h89o8u1kt",
  "object": "scrape",
  "result": {
    "markdown_content": "## Alexander the Great...",
    "markdown_hosted_url": "https://olostep-storage.s3.us-east-1.amazonaws.com/markDown_6h89o8u1kt.txt",
    "page_metadata": { "status_code": 200, "title": "Alexander the Great - Wikipedia" }
  }
}

爬取

递归收集网站上的每个页面，带有包含/排除过滤器和可选的 search_query 以聚焦爬取。查看爬取功能文档。

from olostep import Olostep

client = Olostep(api_key="YOUR_REAL_KEY")
crawl = client.crawls.create(
    start_url="https://docs.olostep.com",
    max_pages=50,
)
for page in crawl.pages():
    print(page.url)

import Olostep from 'olostep'

const client = new Olostep({ apiKey: 'YOUR_REAL_KEY' })
const crawl = await client.crawls.create({
  url: 'https://docs.olostep.com',
  maxPages: 50,
})
for await (const page of crawl.pages()) {
  console.log(page.url)
}

curl -s -X POST "https://api.olostep.com/v1/crawls" \
  -H "Authorization: Bearer $OLOSTEP_API_KEY" \
  -H "Content-Type: application/json" \
  -d '{
    "start_url": "https://docs.olostep.com",
    "max_pages": 50
  }'

olostep crawl "https://docs.olostep.com" --max-pages 50

响应

{
  "id": "crawl_abc123",
  "object": "crawl",
  "status": "completed",
  "pages_count": 47,
  "pages": [
    { "url": "https://docs.olostep.com/get-started/welcome", "retrieve_id": "..." },
    { "url": "https://docs.olostep.com/features/scrapes", "retrieve_id": "..." }
  ]
}

回答

提出问题并从实时网络来源获取 AI 合成的答案，并附有引用。传递 JSON 模式以塑造输出。查看回答文档。

from olostep import Olostep

client = Olostep(api_key="YOUR_REAL_KEY")
answer = client.answers.create(task="What does Olostep do?")
print(answer.result)
print(answer.sources)

import Olostep from 'olostep'

const client = new Olostep({ apiKey: 'YOUR_REAL_KEY' })
const answer = await client.answers.create({ task: 'What does Olostep do?' })
console.log(answer.result)
console.log(answer.sources)

curl -s -X POST "https://api.olostep.com/v1/answers" \
  -H "Authorization: Bearer $OLOSTEP_API_KEY" \
  -H "Content-Type: application/json" \
  -d '{"task": "What does Olostep do?"}'

olostep answer "What does Olostep do?"

响应

{
  "id": "answer_abc123",
  "object": "answer",
  "task": "What does Olostep do?",
  "result": {
    "json_content": "{\"result\":\"Olostep is an API that lets AI agents search, scrape, and structure web data.\"}",
    "sources": [
      "https://docs.olostep.com/get-started/welcome",
      "https://www.olostep.com/"
    ]
  }
}

批处理

并行抓取多达 100,000 个 URL；在 5–7 分钟内返回结果。

映射

使用包含/排除模式发现网站上的每个 URL。

搜索

实时网络搜索，带有结构化链接和可选的内联抓取。

解析器

自愈提取器，将页面转换为大规模的类型化 JSON。

计划

定期安排运行抓取、爬取和回答。

文件

上传文件以进行批处理或连接你的知识库。

资源

探索功能

查看所有支持的功能以满足你的抓取和 AI 搜索需求。

API 参考

开始使用 API 并测试各种参数。

集成

在 n8n、make、relay、zapier 等中使用 Olostep。

示例

浏览现成的示例以快速入门。

开始使用

功能

余额与账单

简介

从终端和 AI 代理使用 Olostep

CLI →

MCP 服务器 →

技能 →

Olostep 能做什么？

抓取

爬取

回答

为什么选择 Olostep？

抓取

爬取

回答

更多功能

批处理

映射

搜索

解析器

计划

文件

资源

探索功能

API 参考

集成

示例

​简介

​从终端和 AI 代理使用 Olostep

CLI →

MCP 服务器 →

技能 →

​Olostep 能做什么？

抓取

爬取

回答

​为什么选择 Olostep？

​抓取

​爬取

​回答

​更多功能

批处理

映射

搜索

解析器

计划

文件

​资源

探索功能

API 参考

集成

示例

简介

从终端和 AI 代理使用 Olostep

Olostep 能做什么？

为什么选择 Olostep？

抓取

爬取

回答

更多功能

资源