Esta skill utiliza a API REST /crawl do Cloudflare Browser Rendering para rastrear sites, extrair conteúdo como HTML/Markdown/JSON e construir bases de conhecimento. Também aborda como tornar sites rastreáveis com ferramentas como robots.txt, sitemaps e Cloudflare AI Crawl Control.
Pesquisa e Web#ai#apipor portdeveloper
