Naar hoofdinhoud gaan
De Olostep n8n-integratie brengt krachtige mogelijkheden voor webzoekopdrachten, scraping en crawling naar n8n-workflows. Bouw geautomatiseerde workflows die webgegevens van elke website zoeken, extraheren en structureren zonder code te schrijven. Begin met Olostep op n8n →

Functies

De integratie biedt 6 krachtige operaties voor geautomatiseerde webgegevens-extractie:

Website Scrapen

Extraheer inhoud van elke enkele URL in meerdere formaten (Markdown, HTML, JSON, tekst)

Zoeken

Doorzoek het web en krijg gestructureerde resultaten

Antwoorden (AI)

Doorzoek het web met AI en krijg gestructureerde antwoorden met bronnen en citaten

Batch Scrapen van URL's

Scrape tot 10k URL’s tegelijk. Perfect voor grootschalige gegevens-extractie

Crawl Maken

Verkrijg de inhoud van subpagina’s van een URL. Ontdek en scrape zelfstandig hele websites

Kaart Maken

Verkrijg alle URL’s op een website voor site-structuuranalyse en inhoudsontdekking

Installatie

1. Installeer de Node

Installeer het Olostep-nodepakket via npm:
npm install n8n-nodes-olostep
Herstart vervolgens n8n om de nieuwe node te laden. Volg eventueel de n8n community nodes installatiegids voor gedetailleerde instructies.

2. Verbind Uw Account

Wanneer u de Olostep-node voor het eerst in een workflow gebruikt, moet u referenties configureren:
  1. Voeg de “Olostep Scrape” node toe aan uw workflow
  2. Klik op de node om de instellingen te openen
  3. Klik op “Nieuwe Referentie Maken” of selecteer bestaande referenties
  4. Voer uw Olostep API-sleutel in
  5. Klik op “Opslaan” om de referentie op te slaan
Verkrijg uw API-sleutel van het Olostep Dashboard.

Beschikbare Acties

Website Scrapen

Extraheer inhoud van een enkele URL. Ondersteunt meerdere formaten en JavaScript-rendering. Toepassingen:
  • Monitor specifieke pagina’s op wijzigingen
  • Extraheer productinformatie van e-commerce sites
  • Verzamel gegevens van nieuwsartikelen of blogposts
  • Haal inhoud op voor inhoudsaggregatie
Configuratie:
URL om te Scrapen
string
vereist
Website URL om te scrapen (moet http:// of https:// bevatten)
Uitvoerformaat
dropdown
standaard:"Markdown"
Kies formaat: Markdown, HTML, JSON, of Plain Text
Landcode
string
Landcode voor locatie-specifieke inhoud (bijv. “US”, “GB”, “CA”)
Wacht Voor Scrapen
integer
Wachttijd in milliseconden voor JavaScript-rendering (0-10000)
Parser
string
Optionele parser-ID voor gespecialiseerde extractie (bijv. “@olostep/amazon-product”)
Uitvoer Velden:
  • Scrape ID
  • Gescrapete URL
  • Markdown Inhoud
  • HTML Inhoud
  • JSON Inhoud
  • Tekst Inhoud
  • Status
  • Tijdstempel
  • Screenshot URL (indien beschikbaar)
  • Paginametadata
Voorbeeld Workflows:
Trigger: Schema (Elke dag om 9 uur)Actie: Olostep - Website Scrapen
  • URL: Concurrent productpagina
  • Formaat: JSON
  • Parser: @olostep/amazon-product
Actie: Google Sheets - Rij Toevoegen
  • Voeg prijsgegevens toe aan volgspreadsheet
Actie: E-mail - E-mail Verzenden (Als prijs daalt)
  • Waarschuw team over prijswijzigingen
Trigger: RSS Feed - Nieuw ItemActie: Olostep - Website Scrapen
  • URL: {{$json.link}}
  • Formaat: Markdown
Actie: Notion - Pagina Maken
  • Sla artikelinhoud op in Notion-database
Trigger: Google Sheets - Nieuwe RijActie: Olostep - Website Scrapen
  • URL: Bedrijfswebsite uit sheet
  • Formaat: Markdown
Actie: OpenAI - Tekst Voltooien
  • Extraheer bedrijfsinformatie met AI
Actie: Google Sheets - Rij Bijwerken
  • Voeg verrijkte gegevens terug aan sheet toe

Zoeken

Doorzoek het web voor een gegeven query en krijg gestructureerde resultaten (niet-AI, parser-gebaseerde zoekresultaten). Toepassingen:
  • Geautomatiseerde onderzoeksworkflows
  • Leadontdekking en verrijking
  • Concurrentieanalyse
  • Inhoudsonderzoek
Configuratie:
Query
string
vereist
Zoekopdracht
Uitvoer: Geeft gestructureerde zoekresultaten terug als JSON met titels, URL’s, fragmenten en metadata. Voorbeeld Workflows:
Trigger: Schema (Dagelijks om 8 uur)Actie: Olostep - Zoeken
  • Query: “laatste AI-ontwikkelingen”
Actie: Code - Verwerk Resultaten
  • Extraheer en formatteer kerninformatie
Actie: Notion - Pagina’s Maken
  • Sla onderzoeksbevindingen op
Trigger: Handmatig (Knop)Actie: Olostep - Zoeken
  • Query: ”{{$json.searchTerm}}”
Actie: Airtable - Records Maken
  • Sla leads met contactinformatie op

Batch Scrapen van URL’s

Scrape tot 10k URL’s tegelijk. Perfect voor grootschalige gegevens-extractie. Toepassingen:
  • Scrape hele productcatalogi
  • Extraheer gegevens van meerdere zoekresultaten
  • Verwerk lijsten van URL’s uit spreadsheets
  • Bulk inhoudsextractie
Configuratie:
URL's om te Scrapen
text
vereist
JSON-array van objecten met url en custom_id velden.Voorbeeld: [{"url":"https://example.com","custom_id":"site1"}]
Uitvoerformaat
dropdown
standaard:"Markdown"
Kies formaat voor alle URL’s: Markdown, HTML, JSON, of Plain Text
Landcode
string
Landcode voor locatie-specifiek scrapen
Wacht Voor Scrapen
integer
Wachttijd in milliseconden voor JavaScript-rendering
Parser
string
Optionele parser-ID voor gespecialiseerde extractie
Uitvoer Velden:
  • Batch ID (gebruik dit om resultaten later op te halen)
  • Status
  • Totaal aantal URL’s
  • Aangemaakt Op
  • Aangevraagd Formaat
  • Landcode
  • Gebruikte Parser
Voorbeeld Workflows:
Trigger: Webhook - Ontvang POST VerzoekActie: Code - Formatteer URL’s
  • Converteer CSV/lijst naar JSON-array formaat
Actie: Olostep - Batch Scrapen van URL’s
  • URL’s: {{$json.urlArray}}
  • Formaat: JSON
  • Parser: @olostep/amazon-product
Actie: Webhook - POST
  • Stuur batch ID naar uw systeem voor ophalen
Trigger: Schema - Elke dag om 6 uurActie: Google Sheets - Lees Rijen
  • Haal URL’s op om te monitoren
Actie: Code - Formatteer URL’s
  • Converteer naar batch-array formaat
Actie: Olostep - Batch Scrapen van URL’s
  • Verwerk alle URL’s tegelijk
Actie: Slack - Stuur Bericht
  • Informeer team dat scrapen voltooid is

Crawl Maken

Verkrijg de inhoud van subpagina’s van een URL. Ontdek en scrape zelfstandig hele websites door links te volgen. Perfect voor documentatiesites, blogs en inhoudsopslagplaatsen. Toepassingen:
  • Crawl en archiveer hele documentatiesites
  • Extraheer alle blogposts van een website
  • Bouw kennisbanken van webinhoud
  • Monitor wijzigingen in websitestructuur
Configuratie:
Start URL
string
vereist
Start-URL voor de crawl (moet http:// of https:// bevatten)
Maximaal aantal pagina's
integer
standaard:"10"
Maximaal aantal pagina’s om te crawlen
Of links op pagina’s gevolgd moeten worden
Uitvoerformaat
dropdown
standaard:"Markdown"
Formaat voor gescrapete inhoud
Landcode
string
Optionele landcode voor locatie-specifiek crawlen
Parser
string
Optionele parser-ID voor gespecialiseerde inhoudsextractie
Uitvoer Velden:
  • Crawl ID (gebruik dit om resultaten later op te halen)
  • Objecttype
  • Status
  • Start-URL
  • Maximaal aantal pagina’s
  • Volg Links
  • Aangemaakte Tijdstempel
  • Formaten
Voorbeeld Workflows:
Trigger: Schema - Maandelijks op de 1e om 12 uurActie: Olostep - Crawl MakenActie: Webhook - POST
  • Stuur crawl ID naar uw archiefsysteem
Actie: Slack - Stuur Bericht
  • Informeer team dat crawl bezig is
Trigger: Schema - Wekelijks op maandag om 9 uurActie: Olostep - Crawl Maken
  • Start-URL: Concurrent blog-URL
  • Maximaal aantal pagina’s: 100
  • Formaat: Markdown
Actie: Wacht - Voor 10 minuten
  • Wacht tot crawl voltooid is
Actie: Airtable - Records Maken
  • Sla crawlgegevens op voor analyse

Kaart Maken

Verkrijg alle URL’s op een website. Extraheer alle URL’s van een website voor inhoudsontdekking en site-structuuranalyse. Toepassingen:
  • Bouw sitemaps en site-structuurdiagrammen
  • Ontdek alle pagina’s voordat u batch-scraping uitvoert
  • Vind gebroken of ontbrekende pagina’s
  • SEO-audits en analyse
Configuratie:
Website URL
string
vereist
Website URL om links van te extraheren (moet http:// of https:// bevatten)
Zoekopdracht
string
Optionele zoekopdracht om URL’s te filteren (bijv. “blog”)
Top N URL's
integer
Beperk het aantal geretourneerde URL’s
Inclusie URL-patronen
string
Glob-patronen om specifieke paden op te nemen (bijv. “/blog/**”)
Exclusie URL-patronen
string
Glob-patronen om specifieke paden uit te sluiten (bijv. “/admin/**”)
Uitvoer Velden:
  • Kaart ID
  • Objecttype
  • Website URL
  • Totaal aantal gevonden URL’s
  • URL’s (JSON-array)
  • Zoekopdracht
  • Top N Limiet
Voorbeeld Workflows:
Trigger: Handmatig (Knop)Actie: Olostep - Kaart MakenActie: Code - Extraheer URL’s
  • Parseer URL’s uit kaartresultaat
Actie: Olostep - Batch Scrapen van URL’s
  • URL’s: {{$json.urls}}
  • Formaat: JSON
Actie: Google Sheets - Rijen Toevoegen
  • Voeg alle productgegevens toe aan spreadsheet
Trigger: Schema - MaandelijksActie: Olostep - Kaart Maken
  • URL: Uw website
  • Top N: 1000
Actie: Airtable - Records Maken
  • Sla alle URL’s op voor tracking
Actie: Slack - Stuur Bericht
  • Rapporteer totaal aantal gevonden pagina’s

Populaire Workflow Voorbeelden

E-commerce Prijsbewaking

Monitor concurrentieprijzen en ontvang directe meldingen:
Trigger: Schema (Elk uur)

Actie: Olostep - Website Scrapen
  - URL: Concurrent productpagina
  - Formaat: JSON
  - Parser: @olostep/amazon-product

Actie: IF - Controleer of prijs is gewijzigd

Actie: Slack - Stuur Bericht
  - Waarschuwing: "Prijs gewijzigd naar $\{\{price\}\}"

Inhoudsaggregatie

Aggregate inhoud van meerdere bronnen:
Trigger: Google Sheets - Nieuwe Rij

Actie: Olostep - Website Scrapen
  - URL: \{\{$json.url\}\}
  - Formaat: Markdown

Actie: OpenAI - Samenvatten
  - Vat de inhoud samen

Actie: Airtable - Record Maken
  - Sla artikel op met samenvatting

Leadverrijkingspijplijn

Verrijk leadgegevens met webinformatie:
Trigger: HubSpot - Nieuw Contact

Actie: Olostep - Website Scrapen
  - URL: \{\{$json.companyWebsite\}\}
  - Formaat: Markdown

Actie: OpenAI - Gegevens Extraheren
  - Extraheer: bedrijfsomvang, industrie, producten

Actie: HubSpot - Contact Bijwerken
  - Voeg verrijkte gegevens toe aan contact

Onderzoeksautomatisering

Automatiseer onderzoek van meerdere bronnen:
Trigger: Airtable - Nieuw Record

Actie: Olostep - Kaart Maken
  - URL: Onderzoek doelwebsite
  - Inclusie: /research/**

Actie: Code - Parseer URL's

Actie: Olostep - Batch Scrapen van URL's
  - URL's: \{\{$json.discoveredUrls\}\}
  - Formaat: Markdown

Actie: Notion - Pagina's Maken
  - Maak onderzoeksdatabase

Sociale Media Monitoring

Volg vermeldingen en inhoud:
Trigger: Schema (Elke 6 uur)

Actie: Olostep - Website Scrapen
  - URL: Nieuws site zoekpagina
  - Formaat: HTML

Actie: Code - Extraheer Vermeldingen
  - Vind merkvermeldingen

Actie: Google Sheets - Rij Toevoegen
  - Log vermeldingen met tijdstempel

Multi-Step Workflows

Volledige Product Scraping Pijplijn

Bouw een uitgebreide productgegevenspijplijn:
1

Ontdek Product URL's

Gebruik Kaart Maken om alle productpagina’s op de doelwebsite te vinden
  • Inclusie patronen: /products/**
  • Exclusie patronen: /cart/**, /checkout/**
2

Batch Verwerk Producten

Gebruik Batch Scrapen van URL’s om alle productgegevens te extraheren
  • Formaat: JSON
  • Parser: Product-specifieke parser indien beschikbaar
3

Opslaan in Database

Stuur batch ID naar uw systeem of wacht en haal resultaten op
  • Gebruik Airtable, Google Sheets, of uw database
4

Monitor voor Wijzigingen

Plan dagelijkse scrapes om prijs/beschikbaarheidswijzigingen bij te houden
  • Vergelijk met bestaande gegevens
  • Waarschuw bij significante wijzigingen

SEO Inhoudsstrategie

Analyseer concurrenten en plan inhoud:
1

Kaart Concurrent Sites

Gebruik Kaart Maken op concurrent websites
  • Extraheer alle blogposts en inhoudspagina’s
2

Scrape Inhoud

Gebruik Batch Scrapen van URL’s om volledige inhoud te krijgen
  • Formaat: Markdown voor eenvoudige analyse
3

AI Analyse

Gebruik OpenAI om onderwerpen en trefwoorden te analyseren
  • Identificeer inhoudsgaten
  • Vind trending onderwerpen
4

Maak Inhoudskalender

Voeg inzichten toe aan Notion of Airtable
  • Plan uw inhoudsstrategie

Gespecialiseerde Parsers

Olostep biedt vooraf gebouwde parsers voor populaire websites. Gebruik ze met het Parser veld:

Amazon Product

@olostep/amazon-productExtraheer: titel, prijs, beoordeling, recensies, afbeeldingen, varianten

Google Zoeken

@olostep/google-searchExtraheer: zoekresultaten, titels, fragmenten, URL’s

Google Maps

@olostep/google-mapsExtraheer: bedrijfsinformatie, recensies, beoordelingen, locatie

E-mails Extraheren

@olostep/extract-emailsExtraheer: e-mails van pagina’s, contactlijsten en voetteksten

Socials Extraheren

@olostep/extract-socialsExtraheer: sociale profiel links (X/Twitter, GitHub, etc.)

Kalenders Extraheren

@olostep/extract-calendarsExtraheer: kalenderlinks (Google Calendar, ICS) van pagina’s

Parsers Gebruiken

Voeg eenvoudig de parser-ID toe aan het Parser veld. Twee voorbeelden:
Actie: Olostep - Website Scrapen
  - URL: https://www.amazon.com/dp/PRODUCT_ID
  - Formaat: JSON
  - Parser: @olostep/amazon-product
Actie: Olostep - Website Scrapen
  - URL: https://example.com/contact
  - Formaat: JSON
  - Parser: @olostep/extract-emails
De parser extraheert automatisch gestructureerde gegevens specifiek voor de taak.

Integratie met Populaire Apps

Google Sheets

Perfect voor gegevensverzameling en tracking:
1. Olostep scrapes website
2. Filter of transformeer gegevens
3. Google Sheets - Rij Toevoegen
Toepassingen:
  • Prijsvolgspreadsheet
  • Leadverrijkingsdatabases
  • Inhoudsinventaris
  • Concurrentieanalysesheets

Airtable

Bouw krachtige databases met gescrapete gegevens:
1. Olostep scrapes of crawls
2. Code - Formatteer gegevens
3. Airtable - Records Maken
Toepassingen:
  • Productcatalogi
  • Onderzoeksdatabases
  • Inhoudskalenders
  • Linkdatabases

Slack

Ontvang directe meldingen:
1. Olostep monitort pagina
2. IF - Controleer op wijzigingen
3. Slack - Stuur Bericht
Toepassingen:
  • Prijsdaling waarschuwingen
  • Inhoudsupdate meldingen
  • Foutmonitoring
  • Dagelijkse overzichten

HubSpot / Salesforce

Verrijk CRM-gegevens automatisch:
1. Nieuw contact toegevoegd
2. Olostep scrapes bedrijfswebsite
3. OpenAI extraheert kerninformatie
4. CRM - Contact Bijwerken
Toepassingen:
  • Leadverrijking
  • Bedrijfsonderzoek
  • Concurrentie-intelligentie
  • Accountmapping

Notion

Bouw kennisbanken:
1. Olostep crawls documentatie
2. Code - Parseer inhoud
3. Notion - Pagina's Maken
Toepassingen:
  • Documentatiespiegels
  • Onderzoeksopslagplaatsen
  • Inhoudsbibliotheken
  • Teamwiki’s

Best Practices

Bij het scrapen van meer dan 3-5 URL’s, gebruik Batch Scrapen van URL’s in plaats van meerdere Website Scrapen acties. Batchverwerking is:
  • Veel sneller (parallelle verwerking)
  • Kosteneffectiever
  • Makkelijker te beheren
  • Beter voor snelheidslimieten
Voor JavaScript-rijke sites, gebruik de “Wacht Voor Scrapen” parameter:
  • Eenvoudige sites: 0-1000ms
  • Dynamische sites: 2000-3000ms
  • Zware JavaScript: 5000-8000ms
Test met verschillende waarden om de optimale wachttijd te vinden.
Gebruik vooraf gebouwde parsers (bijv. Amazon, Google, en taak-specifieke parsers van de Olostep Store zoals e-mails, socials, kalenders):
  • Krijg automatisch gestructureerde gegevens
  • Betrouwbaardere extractie
  • Geen noodzaak voor aangepaste parsing
  • Onderhouden door Olostep
Gebruik n8n’s IF-node om onnodige scrapes te vermijden:
  • Controleer of URL is gewijzigd
  • Verifieer of gegevens niet recent zijn gescrapet
  • Pas bedrijfslogica toe voor het scrapen
Dit bespaart API-credits en uitvoeringstijd.
Batch, Crawl, en Kaart operaties zijn asynchroon:
  • Sla de geretourneerde ID op (batch_id, crawl_id, map_id)
  • Gebruik een Wacht-node als u direct ophaalt
  • Overweeg webhook-callbacks voor voltooiing
  • Stel aparte workflows in voor ophalen
Kies de juiste opslag op basis van uw behoeften:
  • Google Sheets: Eenvoudige tracking, team samenwerking
  • Airtable: Relationele gegevens, rijke opmaak
  • Database: Grootschalig, complexe queries
  • Notion: Kennisbank, documentatie
Stel monitoring in voor uw scraping-workflows:
  • Gebruik Foutworkflows in n8n
  • Stuur waarschuwingen naar Slack/E-mail bij fouten
  • Volg API-gebruik in Olostep-dashboard
  • Log belangrijke statistieken

Veelvoorkomende Toepassingen per Industrie

E-commerce

  • Prijsbewaking: Volg concurrentieprijzen in real-time
  • Productonderzoek: Ontdek trending producten en marktkansen
  • Voorraadtracking: Monitor beschikbaarheid van voorraad
  • Reviewanalyse: Verzamel en analyseer klantrecensies

Marketing & SEO

  • Inhoudsontdekking: Vind inhoudskansen
  • Concurrentieanalyse: Volg concurrentiestrategieën
  • Backlinkonderzoek: Ontdek linkkansen
  • Trefwoordonderzoek: Extraheer trefwoordgegevens uit zoekresultaten

Verkoop & Leadgeneratie

  • Leadverrijking: Verrijk CRM-gegevens met webinformatie
  • Bedrijfsonderzoek: Verzamel bedrijfsintelligentie
  • Contactontdekking: Vind beslissers
  • Concurrentie-intelligentie: Volg concurrentiebewegingen

Onderzoek & Analyse

  • Gegevensverzameling: Verzamel gegevens van meerdere bronnen
  • Marktonderzoek: Volg industrietrends
  • Academisch Onderzoek: Verzamel onderzoeksgegevens
  • Prijsintelligentie: Analyseer prijsstrategieën

Media & Uitgeverij

  • Inhoudsaggregatie: Curate inhoud van meerdere sites
  • Nieuwsmonitoring: Volg nieuws en vermeldingen
  • Sociale Media: Monitor sociale platforms
  • Trenddetectie: Identificeer trending onderwerpen

Probleemoplossing

Fout: “Ongeldige API-sleutel”Oplossingen:
  • Controleer API-sleutel van dashboard
  • Zorg ervoor dat er geen extra spaties in de API-sleutel staan
  • Maak de referentie opnieuw in n8n
  • Verifieer dat de API-sleutel actief is
Fout: Inhoudsvelden zijn leegOplossingen:
  • Verhoog de “Wacht Voor Scrapen” tijd
  • Controleer of de website inloggen vereist
  • Probeer een ander formaat (HTML vs Markdown)
  • Verifieer of de URL toegankelijk is
  • Controleer of de site geautomatiseerde toegang blokkeert
Fout: “Ongeldig JSON-formaat voor batch-array”Oplossingen:
  • Gebruik formaat: [{"url":"https://example.com","custom_id":"id1"}]
  • Zorg voor correcte JSON-syntaxis
  • Gebruik Code-node om URL’s correct te formatteren
  • Test JSON met online validator
Fout: “Snelheidslimiet overschreden”Oplossingen:
  • Spreid workflow-uitvoeringen uit met Wacht-nodes
  • Gebruik batchverwerking in plaats van individuele scrapes
  • Upgrade uw Olostep-plan
  • Controleer snelheidslimiet in dashboard
Fout: Specifieke URL’s falen bij scrapenOplossingen:
  • Verifieer URL-formaat (inclusief http:// of https://)
  • Controleer of URL authenticatie vereist
  • Test URL eerst in browser
  • Probeer met landparameter
  • Neem contact op met support voor geblokkeerde domeinen

n8n Voordelen

Zelf-Gehost

n8n is zelf-gehost, wat u volledige controle geeft over uw workflows en gegevens. Geen leveranciersafhankelijkheid, geen gegevens die uw infrastructuur verlaten.

Geen Taaklimieten

In tegenstelling tot cloud-gebaseerde automatiseringsplatforms legt n8n geen taaklimieten op. Voer zoveel workflows uit als u nodig heeft zonder extra kosten.

Open Source

n8n is open source, waardoor u het kunt aanpassen en uitbreiden om aan uw specifieke behoeften te voldoen.

Kosteneffectief

Zelf-gehoste n8n is gratis, met optionele cloudhosting beschikbaar. U betaalt alleen voor het gebruik van de Olostep API.

Prijzen

Olostep rekent op basis van API-gebruik, onafhankelijk van n8n:
  • Scrapes: Betaal per scrape
  • Batches: Betaal per URL in batch
  • Crawls: Betaal per gecrawlde pagina
  • Maps: Betaal per kaartoperatie
Bekijk de huidige prijzen op olostep.com/pricing. n8n: Zelf-gehoste n8n is gratis. Cloudhosting beschikbaar met optionele betaalde plannen.

Ondersteuning

Hulp nodig met de n8n-integratie?

Gerelateerde Bronnen

Aan de Slag

Klaar om uw webzoekopdrachten, scraping en crawling workflows te automatiseren?

Installeer de Node

Installeer n8n-nodes-olostep en begin met het bouwen van geautomatiseerde workflows
Verbind Olostep met n8n en automatiseer vandaag nog uw webgegevens-extractie!