Skip to main content

概览

在深入了解网站的特定部分之前,通常有必要先了解其整体结构。在本指南中,我们将向你展示如何从Stripe网站提取所有URL,这将帮助你:
  • 理解整体网站架构
  • 发现你可能不知道的内容部分
  • 使用LLMs决定哪些URL需要进一步抓取

提取所有Stripe URL

要从Stripe网站提取所有URL,请使用maps端点和Stripe的域名。这将返回其网站上所有可发现URL的完整列表。

示例响应

分析Stripe网站结构

在提取所有URL后,你可以分析结构以识别模式。这对于理解Stripe如何组织其内容特别有用。例如,你可能会注意到这些URL模式:
  • /blog/** - 博客文章和文章
  • /docs/** - 文档页面
  • /payments/** - 支付产品信息
  • /billing/** - 计费产品信息
在某些情况下,你可能只想获取网站特定部分的URL。例如,所有博客文章。你可以在下一个指南中使用我们内置的过滤器。