cloudflare heeft jaren gevochten tegen scrapers en verkoopt anti-botbescherming nu hebben ze een /crawl API gelanceerd die een hele website kan scrapen met één verzoek >stuur een enkele API-aanroep >cloudflare rendert de pagina voor je >geeft de inhoud terug als HTML, Markdown of JSON >extraheert automatisch links en pagina-elementen >geen browserautomatisering, geen scraping-scripts Hetzelfde bedrijf dat de helft van de anti-scraping infrastructuur van het internet heeft gebouwd, heeft het scrapen net gemakkelijker gemaakt AI-bedrijven gaan hier dol op zijn