Naar hoofdinhoud gaan
De Olostep-plugin brengt webgegevens naar Dify agenten, chatflows en workflows. Olostep is webgegevensinfrastructuur voor AI-agenten en enterprise AI-workflows. De API’s bieden live webzoekopdrachten, scraping en crawling om gegevens van het web te extraheren, schoon te maken en te structureren. Installeer vanuit de Dify Marketplace →

Waarom Olostep

  • Webgegevensinfrastructuur voor ontwikkelaars en ondernemingen
  • Schaalbaar tot honderden miljoenen tot miljarden verzoeken per klant per maand
  • De meest performante, betrouwbare en kosteneffectieve API op de markt
  • Gebruikt door de snelst groeiende AI-bedrijven
Van het extraheren van gegevens van een handvol URL’s tot het crawlen van honderden miljoenen pagina’s, Olostep biedt ontwikkelaars en AI-bedrijven betrouwbare, schaalbare en zeer kosteneffectieve toegang tot schone, gestructureerde webgegevens.

Tools

Installatie

  1. Meld je aan op olostep.com en kopieer je API-sleutel van het Olostep-dashboard.
  2. Ga in Dify naar Plugins, vind Olostep in de Marketplace en klik op Installeren.
  3. Open de plugin, klik op Autoriseren en plak je API-sleutel.
Dify slaat de sleutel op als een geheim. De plugin stuurt deze alleen naar de Olostep API.

Gebruik

Agenten

Voeg de Olostep-tools toe aan een agent-app. De agent kiest de benodigde tool, bijvoorbeeld Search Web om pagina’s te vinden en Scrape URL om ze te lezen.

Workflows en chatflows

Voeg een toolnode toe, kies een Olostep-tool en koppel de invoer. Elke tool retourneert JSON voor latere nodes en leesbare tekst voor LLM-nodes. Een onderzoeksworkflow kan bijvoorbeeld Search Web uitvoeren voor een onderwerp, vervolgens Batch Scrape op de resultaat-URL’s, en daarna de pagina’s samenvatten met een LLM-node.

Crawls en batches

Crawl Website en Batch Scrape wachten standaard tot 2 minuten op resultaten. Je kunt dit verhogen naar 4 minuten met Wacht op resultaten (seconden). Als de taak nog steeds actief is wanneer de wachttijd eindigt, retourneert de tool zijn id met status ingesteld op in_progress. Geef die id later door aan Get Results om de pagina’s te krijgen. Elke oproep retourneert tot 100 pagina’s. Als er meer beschikbaar zijn, bevat het resultaat next_cursor: geef dit door aan Get Results met de id om de volgende pagina’s te krijgen.
Batch Scrape neemt tot 100k URL’s. Nieuwe accounts zijn beperkt tot 100 URL’s per batch: neem contact op met info@olostep.com om dit op te heffen.

Zelf-gehoste Dify

De plugin maakt alleen verbinding met https://api.olostep.com via HTTPS, dus je Dify-instantie heeft uitgaande netwerktoegang tot die host nodig.

Bronnen