Scrape un URL con la configurazione fornita e ottieni il contenuto.
Bearer authentication header of the form Bearer <token>, where <token> is your auth token.
Die URL, von der aus das Scraping gestartet werden soll.
Zeit in Millisekunden, die gewartet werden soll, bevor das Scraping beginnt.
Formate, in denen Sie den Inhalt wünschen.
html, markdown, text, json, raw_pdf, screenshot Option, bestimmte CSS-Selektoren aus dem Inhalt zu entfernen. Optional können Sie auch ein JSON-stringifiziertes Array spezifischer Selektoren übergeben, die Sie entfernen möchten. Die CSS-Selektoren, die entfernt werden, wenn diese Option auf Standard gesetzt ist, sind ['nav','footer','script','style','noscript','svg',[role=alert],[role=banner],[role=dialog],[role=alertdialog],[role=region][aria-label*=skip i],[aria-modal=true]]
default, none, array Aktionen, die auf der Seite ausgeführt werden sollen, bevor der Inhalt abgerufen wird.
Wohnsitzland, aus dem die Anfrage geladen werden soll. Unterstützte Werte sind: - US (Vereinigte Staaten) - CA (Kanada) - IT (Italien) - IN (Indien) - GB (England) - JP (Japan) - MX (Mexiko) - AU (Australien) - ID (Indonesien) - UA (VAE) - RU (Russland) - RANDOM Einige Operationen, wie das Scraping von Google Search und Google News, unterstützen alle Länder.
Geben Sie den zu verwendenden HTML-Transformer an, falls vorhanden. Die Mercury Parser-Bibliothek von Postlight wird verwendet, um Anzeigen und andere unerwünschte Inhalte aus dem gescrapten Inhalt zu entfernen.
postlight, none Option, Bilder aus dem gescrapten Inhalt zu entfernen. Standardmäßig auf false gesetzt.
Liste von Klassennamen, die aus dem Inhalt entfernt werden sollen.
Wenn json als Format definiert ist, können Sie diesen Parameter verwenden, um den zu verwendenden Parser anzugeben. Parser sind nützlich, um strukturierten Inhalt aus Webseiten zu extrahieren. Olostep hat einige Parser für die gängigsten Webseiten eingebaut, und Sie können auch Ihre eigenen Parser erstellen.
Mit dieser Option können Sie alle Links erhalten, die auf der Seite vorhanden sind, die Sie scrapen.
Konfiguration für Bildschirmgröße. Voreingestellte Abmessungen sind über screen_type verfügbar: desktop (1920x1080), mobile (414x896) oder default (768x1024).
Benutzerdefinierte Metadaten. Noch nicht unterstützt.