Naar hoofdinhoud gaan
De Olostep-plugin brengt webgegevens naar Dify agenten, chatflows en workflows. Olostep is webgegevensinfrastructuur voor AI-agenten en enterprise AI-workflows. De API’s bieden live webzoekopdrachten, scraping en crawling om gegevens van het web te extraheren, schoon te maken en te structureren. Installeer vanuit de Dify Marketplace →

Waarom Olostep

  • Webgegevensinfrastructuur voor ontwikkelaars en bedrijven
  • Schaalbaar tot honderden miljoenen tot miljarden verzoeken per klant per maand
  • De meest performante, betrouwbare en kosteneffectieve API op de markt
  • Gebruikt door de snelst groeiende AI-bedrijven
Van het extraheren van gegevens van een handvol URL’s tot het crawlen van honderden miljoenen pagina’s, Olostep biedt ontwikkelaars en AI-bedrijven betrouwbare, schaalbare en zeer kosteneffectieve toegang tot schone, gestructureerde webgegevens.

Tools

Installatie

  1. Meld je aan op olostep.com en kopieer je API-sleutel van het Olostep-dashboard.
  2. Ga in Dify naar Plugins, vind Olostep in de Marketplace en klik op Installeren.
  3. Open de plugin, klik op Autoriseren en plak je API-sleutel.
Dify slaat de sleutel op als een geheim. De plugin stuurt deze alleen naar de Olostep API.

Gebruik

Agenten

Voeg de Olostep-tools toe aan een agent-app. De agent kiest de tool die hij nodig heeft, bijvoorbeeld Search Web om pagina’s te vinden en Scrape URL om ze te lezen.

Workflows en chatflows

Voeg een toolnode toe, kies een Olostep-tool en koppel de invoer. Elke tool retourneert JSON voor latere nodes en leesbare tekst voor LLM-nodes. Bijvoorbeeld, een onderzoeksworkflow kan Search Web uitvoeren voor een onderwerp, vervolgens Batch Scrape op de resulterende URL’s, en daarna de pagina’s samenvatten met een LLM-node.

Crawls en batches

Crawl Website en Batch Scrape wachten standaard tot 2 minuten op resultaten. Je kunt dit verhogen tot 4 minuten met Wacht op resultaten (seconden). Als de taak nog steeds bezig is wanneer de wachttijd eindigt, retourneert de tool zijn id met status ingesteld op in_progress. Geef die id later door aan Get Results om de pagina’s op te halen. Elke oproep retourneert tot 100 pagina’s. Als er meer beschikbaar zijn, bevat het resultaat next_cursor: geef dit door aan Get Results met de id om de volgende pagina’s te krijgen.
Batch Scrape neemt tot 100k URL’s. Nieuwe accounts zijn beperkt tot 100 URL’s per batch: neem contact op met info@olostep.com om dit op te heffen.

Zelf-gehoste Dify

De plugin maakt alleen verbinding met https://api.olostep.com via HTTPS, dus je Dify-instantie heeft uitgaande netwerktoegang tot die host nodig.

Bronnen