Zum Hauptinhalt springen
Das Olostep-Plugin bringt Webdaten zu Dify Agenten, Chatflows und Workflows. Olostep ist eine Webdaten-Infrastruktur für KI-Agenten und Unternehmens-KI-Workflows. Seine APIs bieten Live-Websuche, Scraping und Crawling, um Daten aus dem Web zu extrahieren, zu bereinigen und zu strukturieren. Aus dem Dify-Marktplatz installieren →

Warum Olostep

  • Webdaten-Infrastruktur für Entwickler und Unternehmen
  • Skaliert auf Hunderte Millionen bis Milliarden von Anfragen pro Kunde pro Monat
  • Die leistungsstärkste, zuverlässigste und kosteneffektivste API auf dem Markt
  • Wird von den am schnellsten wachsenden KI-Unternehmen genutzt
Von der Extraktion von Daten aus einer Handvoll URLs bis zum Crawlen von Hunderten Millionen Seiten bietet Olostep Entwicklern und KI-Unternehmen zuverlässigen, skalierbaren und hoch kosteneffektiven Zugang zu sauberen, strukturierten Webdaten.

Werkzeuge

Einrichtung

  1. Registriere dich auf olostep.com und kopiere deinen API-Schlüssel aus dem Olostep-Dashboard.
  2. Gehe in Dify zu Plugins, finde Olostep im Marktplatz und klicke auf Installieren.
  3. Öffne das Plugin, klicke auf Autorisieren und füge deinen API-Schlüssel ein.
Dify speichert den Schlüssel als Geheimnis. Das Plugin sendet ihn nur an die Olostep-API.

Verwendung

Agenten

Füge die Olostep-Werkzeuge zu einer Agenten-App hinzu. Der Agent wählt das benötigte Werkzeug, zum Beispiel Search Web, um Seiten zu finden, und Scrape URL, um sie zu lesen.

Workflows und Chatflows

Füge einen Werkzeugknoten hinzu, wähle ein Olostep-Werkzeug und ordne seine Eingaben zu. Jedes Werkzeug gibt JSON für spätere Knoten und lesbaren Text für LLM-Knoten zurück. Zum Beispiel kann ein Forschungs-Workflow Search Web für ein Thema ausführen, dann Batch Scrape auf den Ergebnis-URLs und schließlich die Seiten mit einem LLM-Knoten zusammenfassen.

Crawls und Batches

Crawl Website und Batch Scrape warten standardmäßig bis zu 2 Minuten auf Ergebnisse. Du kannst dies auf 4 Minuten erhöhen mit Warte auf Ergebnisse (Sekunden). Wenn der Job noch läuft, wenn die Wartezeit endet, gibt das Werkzeug seine id mit status auf in_progress zurück. Übergebe diese id später an Get Results, um die Seiten zu erhalten. Jeder Aufruf gibt bis zu 100 Seiten zurück. Wenn mehr verfügbar sind, enthält das Ergebnis next_cursor: übergebe es an Get Results mit der id, um die nächsten Seiten zu erhalten.
Batch Scrape nimmt bis zu 100k URLs. Neue Konten sind auf 100 URLs pro Batch begrenzt: kontaktiere info@olostep.com, um dies aufzuheben.

Selbstgehostetes Dify

Das Plugin verbindet sich nur über HTTPS mit https://api.olostep.com, daher benötigt deine Dify-Instanz ausgehenden Netzwerkzugang zu diesem Host.

Ressourcen