Cloudflare tillbringade år med att bekämpa scrapers och sälja antibot-skydd nu har de lanserat ett /crawl-API som kan skrapa en hel webbplats med en enda förfrågan >skicka ett enda API-anrop >cloudflare renderar sidan åt dig >returnerar innehållet som HTML, Markdown eller JSON >extraherar länkar och sidelement automatiskt >ingen webbläsarautomatisering, ingen skrapning av skript Samma företag som byggde halva internets anti-scraping-infrastruktur gjorde det enklare att scrapa AI-företag kommer att älska detta