Taken en monitoring commando’s

Deze commando’s starten werk dat een tijdje loopt en lezen de voortgang en resultaten. Commando’s die resultaten weergeven, bladeren erdoor met --limit en --cursor (of --offset): geef de cursor van het vorige resultaat door om de volgende pagina te krijgen.

crawl

Crawl een website. olostep crawl <url> voert olostep crawl create uit. Zie Crawls.

olostep crawl list

Toon je recente crawls.

olostep crawl list [--limit integer] [--source text] [--offset integer] [--json] [--fields a,b]

Vlaggen

Vlag	Vereist	Beschrijving
`--limit`	Nee	Paginagrootte.
`--source`	Nee	Bronfilter.
`--offset`	Nee	Offset vanaf de vorige pagina.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep crawl list --limit 10

olostep crawl get

Toon de voortgang en instellingen van een crawl.

olostep crawl get [--json] [--fields a,b] <crawl_id>

Argumenten

Argument	Beschrijving
`crawl_id`	Crawl id.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep crawl get <crawl_id>

olostep crawl pages

Toon een pagina van de resultaten van een crawl. Elke pagina heeft een Retrieve ID voor olostep content retrieve.

olostep crawl pages [--limit integer] [--cursor text] [--json] [--fields a,b] <crawl_id>

Argumenten

Argument	Beschrijving
`crawl_id`	Crawl id.

Vlaggen

Vlag	Vereist	Beschrijving
`--limit`	Nee	Maximale records op deze pagina.
`--cursor`	Nee	Opaque volgende cursor van een vorig resultaat.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep crawl pages <crawl_id>
olostep crawl pages <crawl_id> --limit 100 --json

olostep crawl create

Crawl een website, volg links vanaf een start-URL tot een paginalimiet.

Gebruikt credits.

olostep crawl create (--max-pages integer) [--depth integer] [--include-urls string]... [--exclude-urls string]... [--include-external] [--include-subdomain] [--follow-robots-txt] [--ignore-sitemap] [--scrape-options json] [--preview] [--start-url text] [--json] [--fields a,b] [--dry-run] [<start_url>]

Afkorting: olostep crawl <url>. Argumenten

Argument	Beschrijving
`start_url`	Een http(s) URL. Optioneel; je kunt het ook als vlag doorgeven.

Vlaggen

Vlag	Vereist	Beschrijving
`-n`, `--max-pages`	Ja	Maximale pagina’s om te crawlen.
`--depth`	Nee	Maximale linkdiepte vanaf de start-URL.
`--include-urls`	Nee	URL-patronen om op te nemen. Herhaal de vlag, of scheid waarden met komma’s.
`--exclude-urls`	Nee	URL-patronen om uit te sluiten. Herhaal de vlag, of scheid waarden met komma’s.
`--include-external`	Nee	Volg externe links.
`--include-subdomain`	Nee	Inclusief subdomeinen.
`--follow-robots-txt`	Nee	Volg robots.txt.
`--ignore-sitemap`	Nee	Negeer de sitemap.
`--scrape-options`	Nee	Scrape-opties ondersteund door het dashboard. JSON-object, of `@file.json`.
`--start-url`	Nee	Hetzelfde als het `start_url` argument.

Accepteert ook --json, --fields, --dry-run en --preview. Zie Globale vlaggen.

olostep crawl https://docs.example.com -n 50
olostep crawl https://example.com -n 200 --depth 3 --include-urls "/blog/**" --exclude-urls "/tag/**"

batch

Scrape veel URL’s in één taak. Zie Batches.

olostep batch list

Toon je recente batches.

olostep batch list [--limit integer] [--source text] [--status text] [--search text] [--offset integer] [--json] [--fields a,b]

Vlaggen

Vlag	Vereist	Beschrijving
`--limit`	Nee	Paginagrootte.
`--source`	Nee	Bronfilter.
`--status`	Nee	Batchstatus.
`--search`	Nee	Zoekfilter.
`--offset`	Nee	Offset vanaf de vorige pagina.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep batch list --limit 20
olostep batch list --status completed --json

olostep batch get

Toon de voortgang en metadata van een batch.

olostep batch get [--json] [--fields a,b] <batch_id>

Argumenten

Argument	Beschrijving
`batch_id`	Batch id.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep batch get <batch_id>

olostep batch items

Toon een pagina van de items van een batch: elke invoer-URL en het resultaat.

olostep batch items [--limit integer] [--cursor text] [--json] [--fields a,b] <batch_id>

Argumenten

Argument	Beschrijving
`batch_id`	Batch id.

Vlaggen

Vlag	Vereist	Beschrijving
`--limit`	Nee	Maximale records op deze pagina.
`--cursor`	Nee	Opaque volgende cursor van een vorig resultaat.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep batch items <batch_id> --limit 50
olostep batch items <batch_id> --cursor <next_cursor>

olostep batch create

Maak een batch die een lijst van URL’s scrapt. Elk item heeft je eigen custom_id en een url. Tot 10.000 items.

Gebruikt credits.

olostep batch create (--items json) [--country text] [--parser json] [--metadata json] [--preview] [--json] [--fields a,b] [--dry-run]

Vlaggen

Vlag	Vereist	Beschrijving
`--items`	Ja	De URL’s om te scrapen: een JSON-lijst van `{"custom_id": "...", "url": "..."}`, of `@file.json`.
`--country`	Nee	Optioneel land.
`--parser`	Nee	Een parser om op elke pagina uit te voeren: `{"id": "<parser_id>"}`, of `@file.json`.
`--metadata`	Nee	Batch metadata. JSON-object, of `@file.json`.

Accepteert ook --json, --fields, --dry-run en --preview. Zie Globale vlaggen.

olostep batch create --items '[{"custom_id":"home","url":"https://example.com"},{"custom_id":"pricing","url":"https://example.com/pricing"}]'
olostep batch create --items @urls.json --country US

olostep batch update

Vervang de metadata van een batch.

olostep batch update (--metadata json) [--preview] [--json] [--fields a,b] [--dry-run] <batch_id>

Argumenten

Argument	Beschrijving
`batch_id`	Batch id.

Vlaggen

Vlag	Vereist	Beschrijving
`--metadata`	Ja	Metadata object. JSON-object, of `@file.json`.

Accepteert ook --json, --fields, --dry-run en --preview. Zie Globale vlaggen.

olostep batch update <batch_id> --metadata '{"project":"q4-pricing"}'

olostep batch export

Begin met het voorbereiden van een download van de resultaten van een batch. Controleer het met olostep batch export-status.

olostep batch export [--preview] [--json] [--fields a,b] [--dry-run] <batch_id>

Argumenten

Argument	Beschrijving
`batch_id`	Batch id.

Accepteert ook --json, --fields, --dry-run en --preview. Zie Globale vlaggen.

olostep batch export <batch_id>
olostep batch export-status <batch_id>

olostep batch export-status

Controleer de voortgang van een export en krijg de download-URL wanneer deze klaar is.

olostep batch export-status [--json] [--fields a,b] <batch_id>

Argumenten

Argument	Beschrijving
`batch_id`	Batch id.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep batch export-status <batch_id>

monitors

Houd het web in de gaten voor wijzigingen op een schema. Zie Monitors.

olostep monitors list

Toon je monitors.

olostep monitors list [--include-deleted] [--json] [--fields a,b]

Vlaggen

Vlag	Vereist	Beschrijving
`--include-deleted`	Nee	Inclusief verwijderde monitors.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep monitors list

olostep monitors get

Toon de instellingen en huidige status van een monitor.

olostep monitors get [--json] [--fields a,b] <monitor_id>

Argumenten

Argument	Beschrijving
`monitor_id`	Monitor id.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep monitors get <monitor_id>

olostep monitors create

Maak een monitor die het web in de gaten houdt voor wat je beschrijft, op een schema.

Gebruikt credits.

olostep monitors create (--query text) [--urls string]... (--frequency text) [--notification json] [--webhook json] [--source-policy json] [--output-schema json] [--preview] [--json] [--fields a,b] [--dry-run]

Vlaggen

Vlag	Vereist	Beschrijving
`--query`	Ja	Wat te monitoren, in gewone woorden.
`--urls`	Nee	Optionele bron-URL’s. Herhaal de vlag, of scheid waarden met komma’s.
`--frequency`	Ja	Hoe vaak te controleren, in woorden, zoals `elke dag om 9 uur` (UTC).
`--notification`	Nee	Notificatiekanalen en voorkeursinstellingen voor gebeurtenissen. JSON-object, of `@file.json`.
`--webhook`	Nee	Webhook-configuratie. JSON-object, of `@file.json`.
`--source-policy`	Nee	Inbegrepen/uitgesloten URL’s en domeinen. JSON-object, of `@file.json`.
`--output-schema`	Nee	Verwacht gestructureerd uitvoerschema. JSON-object, of `@file.json`.

Accepteert ook --json, --fields, --dry-run en --preview. Zie Globale vlaggen.

olostep monitors create --query "Nieuwe prijswijzigingen op example.com" --urls https://example.com/pricing --frequency "elke dag om 9 uur"

olostep monitors update

Wijzig de frequentie, meldingen, webhook of metadata van een monitor.

olostep monitors update [--frequency text] [--notification json] [--webhook json] [--metadata json] [--preview] [--json] [--fields a,b] [--dry-run] <monitor_id>

Argumenten

Argument	Beschrijving
`monitor_id`	Monitor id.

Vlaggen

Vlag	Vereist	Beschrijving
`--frequency`	Nee	Hoe vaak te controleren, in woorden, zoals `elke dag om 9 uur` (UTC).
`--notification`	Nee	Notificatiekanalen en voorkeursinstellingen voor gebeurtenissen. JSON-object, of `@file.json`.
`--webhook`	Nee	Webhook-configuratie. JSON-object, of `@file.json`.
`--metadata`	Nee	Monitor metadata. JSON-object, of `@file.json`.

Accepteert ook --json, --fields, --dry-run en --preview. Zie Globale vlaggen.

olostep monitors update <monitor_id> --frequency "elke 20 minuten"

olostep monitors pause

Pauzeer een monitor.

olostep monitors pause [--preview] [--json] [--fields a,b] [--dry-run] <monitor_id>

Argumenten

Argument	Beschrijving
`monitor_id`	Monitor id.

Accepteert ook --json, --fields, --dry-run en --preview. Zie Globale vlaggen.

olostep monitors pause <monitor_id>

olostep monitors resume

Hervat een gepauzeerde monitor.

olostep monitors resume [--preview] [--json] [--fields a,b] [--dry-run] <monitor_id>

Argumenten

Argument	Beschrijving
`monitor_id`	Monitor id.

Accepteert ook --json, --fields, --dry-run en --preview. Zie Globale vlaggen.

olostep monitors resume <monitor_id>

olostep monitors delete

Verwijder een monitor.

Vraagt voordat het wordt uitgevoerd; gebruik --yes wanneer er geen terminal is.

olostep monitors delete [--preview] [--json] [--fields a,b] [--dry-run] [--yes] <monitor_id>

Argumenten

Argument	Beschrijving
`monitor_id`	Monitor id.

Accepteert ook --json, --fields, --dry-run, --preview en --yes. Zie Globale vlaggen.

olostep monitors delete <monitor_id> --dry-run
olostep monitors delete <monitor_id> --yes

olostep monitors events

Toon een pagina van de uitvoeringsevenementen van een monitor.

olostep monitors events [--limit integer] [--cursor text] [--status text] [--json] [--fields a,b] <monitor_id>

Argumenten

Argument	Beschrijving
`monitor_id`	Monitor id.

Vlaggen

Vlag	Vereist	Beschrijving
`--limit`	Nee	Maximale records op deze pagina.
`--cursor`	Nee	Opaque volgende cursor van een vorig resultaat.
`--status`	Nee	Filter op uitvoeringsstatus.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep monitors events <monitor_id> --limit 20

olostep monitors planning

Toon het plan van een monitor en hoe het wordt uitgevoerd.

olostep monitors planning [--json] [--fields a,b] <monitor_id>

Argumenten

Argument	Beschrijving
`monitor_id`	Monitor id.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep monitors planning <monitor_id>

olostep monitors run

Voer een monitor nu uit, met zijn opgeslagen instellingen.

Gebruikt credits.

olostep monitors run (--monitor-id text) [--preview] [--json] [--fields a,b] [--dry-run]

Vlaggen

Vlag	Vereist	Beschrijving
`--monitor-id`	Ja	Monitor id.

Accepteert ook --json, --fields, --dry-run en --preview. Zie Globale vlaggen.

olostep monitors run --monitor-id <monitor_id>

olostep monitors run-get

Toon één monitoruitvoering en zijn gestructureerde momentopname.

olostep monitors run-get [--include-trace] [--json] [--fields a,b] <monitor_id> <run_id>

Argumenten

Argument	Beschrijving
`monitor_id`	Monitor id.
`run_id`	Uitvoerings id.

Vlaggen

Vlag	Vereist	Beschrijving
`--include-trace`	Nee	Inclusief uitvoeringstrace.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep monitors run-get <monitor_id> <run_id>
olostep monitors run-get <monitor_id> <run_id> --include-trace --json

olostep monitors logs

Toon recente logs van de uitvoeringen van een monitor.

olostep monitors logs [--since integer] [--json] [--fields a,b] <monitor_id>

Argumenten

Argument	Beschrijving
`monitor_id`	Monitor id.

Vlaggen

Vlag	Vereist	Beschrijving
`--since`	Nee	Starttijd, in milliseconden sinds de Unix-epoch.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep monitors logs <monitor_id>

olostep monitors snapshot

Toon de gestructureerde momentopname van één monitoruitvoering.

olostep monitors snapshot [--json] [--fields a,b] <monitor_id> <run_id>

Argumenten

Argument	Beschrijving
`monitor_id`	Monitor id.
`run_id`	Uitvoerings id.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep monitors snapshot <monitor_id> <run_id> --json

Verkrijg de openbare deel-link van een monitor. Verandert niet wie het kan zien.

olostep monitors share [--json] [--fields a,b] <monitor_id>

Argumenten

Argument	Beschrijving
`monitor_id`	Monitor id.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep monitors share <monitor_id>

agents

Voer onderzoeksagenten uit. Zie Agents.

olostep agents list

Toon de onderzoeksagenten die beschikbaar zijn voor je team.

olostep agents list [--json] [--fields a,b]

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep agents list

olostep agents get

Toon de details en standaardinvoer van een agent.

olostep agents get [--version text] [--json] [--fields a,b] <agent_id>

Argumenten

Argument	Beschrijving
`agent_id`	Agent id.

Vlaggen

Vlag	Vereist	Beschrijving
`--version`	Nee	Versie.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep agents get <agent_id>

olostep agents runs

Toon de uitvoeringen van een onderzoeksagent.

olostep agents runs [--json] [--fields a,b] <agent_id>

Argumenten

Argument	Beschrijving
`agent_id`	Agent id.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep agents runs <agent_id>

olostep agents run

Voer een onderzoeksagent uit met je invoerwaarden.

Gebruikt credits.

olostep agents run [--version text] [--input-values json] [--preview] [--json] [--fields a,b] [--dry-run] <agent_id>

Argumenten

Argument	Beschrijving
`agent_id`	Agent id.

Vlaggen

Vlag	Vereist	Beschrijving
`--version`	Nee	Agent versie.
`--input-values`	Nee	Invoerwaarden die overeenkomen met het gedeclareerde schema van de agent. JSON-object, of `@file.json`.

Accepteert ook --json, --fields, --dry-run en --preview. Zie Globale vlaggen.

olostep agents get <agent_id>
olostep agents run <agent_id> --input-values @inputs.json

olostep agents run-get

Toon de status en resultaten van een onderzoeksagent-uitvoering.

olostep agents run-get [--json] [--fields a,b] <agent_id> <run_id>

Argumenten

Argument	Beschrijving
`agent_id`	Agent id.
`run_id`	Uitvoerings id.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep agents run-get <agent_id> <run_id>

olostep agents request

Vraag het Olostep-team om een aangepaste onderzoeksagent voor je te maken.

olostep agents request (--task text) [--model text] [--schedule text] [--budget text] [--preview] [--json] [--fields a,b] [--dry-run]

Vlaggen

Vlag	Vereist	Beschrijving
`--task`	Ja	Aangevraagde onderzoeksworkflow.
`--model`	Nee	Aangevraagd model.
`--schedule`	Nee	Aangevraagd schema.
`--budget`	Nee	Aangevraagd budget.

Accepteert ook --json, --fields, --dry-run en --preview. Zie Globale vlaggen.

olostep agents request --task "Elke maandag, vind nieuwe Series A fintech bedrijven in Europa" --schedule "wekelijks"

logs

Lees de verzoeken die je team heeft gedaan aan de Olostep API.

olostep logs list

Toon een pagina van je API-verzoeklogs. Filter op status, eindpunt en methode.

olostep logs list [--days 1|7|30|90] [--page integer] [--size integer] [--status text] [--endpoint text] [--method GET|POST|PUT|PATCH|DELETE] [--json] [--fields a,b]

Vlaggen

Vlag	Vereist	Beschrijving
`--days`	Nee	Terugkijkvenster in dagen. Een van: `1`, `7`, `30`, `90`.
`--page`	Nee	Paginanummer, beginnend bij 1.
`--size`	Nee	Paginagrootte.
`--status`	Nee	HTTP-statusfilter.
`--endpoint`	Nee	Eindpunt/padfilter.
`--method`	Nee	HTTP-methodefilter. Een van: `GET`, `POST`, `PUT`, `PATCH`, `DELETE`.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep logs list --days 7
olostep logs list --days 1 --status 429 --method POST

olostep logs export

Exporteer je API-verzoeklogs als JSON of CSV.

olostep logs export [--days 1|7|30|90] [--format json|csv] [--max-pages integer] [--status text] [--endpoint text] [--method GET|POST|PUT|PATCH|DELETE] [--json] [--fields a,b]

Vlaggen

Vlag	Vereist	Beschrijving
`--days`	Nee	Terugkijkvenster in dagen. Een van: `1`, `7`, `30`, `90`.
`--format`	Nee	Exportformaat. Een van: `json`, `csv`.
`--max-pages`	Nee	Maximale pagina’s van logs om te exporteren (1 tot 100).
`--status`	Nee	HTTP-statusfilter.
`--endpoint`	Nee	Eindpunt of padfilter.
`--method`	Nee	HTTP-methodefilter. Een van: `GET`, `POST`, `PUT`, `PATCH`, `DELETE`.

Accepteert ook --json en --fields. Zie Globale vlaggen.

olostep logs export --days 30 --format csv

Olostep CLI

Opdrachtreferentie

Taken en monitoring commando’s

crawl

olostep crawl list

olostep crawl get

olostep crawl pages

olostep crawl create

batch

olostep batch list

olostep batch get

olostep batch items

olostep batch create

olostep batch update

olostep batch export

olostep batch export-status

monitors

olostep monitors list

olostep monitors get

olostep monitors create

olostep monitors update

olostep monitors pause

olostep monitors resume

olostep monitors delete

olostep monitors events

olostep monitors planning

olostep monitors run

olostep monitors run-get

olostep monitors logs

olostep monitors snapshot

agents

olostep agents list

olostep agents get

olostep agents runs

olostep agents run

olostep agents run-get

olostep agents request

logs

olostep logs list

olostep logs export

​crawl

​olostep crawl list

​olostep crawl get

​olostep crawl pages

​olostep crawl create

​batch

​olostep batch list

​olostep batch get

​olostep batch items

​olostep batch create

​olostep batch update

​olostep batch export

​olostep batch export-status

​monitors

​olostep monitors list

​olostep monitors get

​olostep monitors create

​olostep monitors update

​olostep monitors pause

​olostep monitors resume

​olostep monitors delete

​olostep monitors events

​olostep monitors planning

​olostep monitors run

​olostep monitors run-get

​olostep monitors logs

​olostep monitors snapshot

​olostep monitors share

​agents

​olostep agents list

​olostep agents get

​olostep agents runs

​olostep agents run

​olostep agents run-get

​olostep agents request

​logs

​olostep logs list

​olostep logs export

crawl

olostep crawl list

olostep crawl get

olostep crawl pages

olostep crawl create

batch

olostep batch list

olostep batch get

olostep batch items

olostep batch create

olostep batch update

olostep batch export

olostep batch export-status

monitors

olostep monitors list

olostep monitors get

olostep monitors create

olostep monitors update

olostep monitors pause

olostep monitors resume

olostep monitors delete

olostep monitors events

olostep monitors planning

olostep monitors run

olostep monitors run-get

olostep monitors logs

olostep monitors snapshot

olostep monitors share

agents

olostep agents list

olostep agents get

olostep agents runs

olostep agents run

olostep agents run-get

olostep agents request

logs

olostep logs list

olostep logs export