Resumo: O web scraping com JavaScript e Node.js requer o Node.js 22.12 ou posterior, o fetch integrado para os pedidos e o Cheerio para analisar HTML. Utilize o Cheerio quando os dados estão no HTML que o seu pedido recebe, e o Playwright quando o JavaScript constrói a página ou esta exige cliques e esperas. Este guia constrói um único scraper, da paginação e do JSON oculto aos testes offline e a uma API de scraping como alternativa.
A extração de dados da Web com JavaScript começa com uma tarefa simples: os dados estão numa página Web, escreves código JavaScript e queres esses dados num formato JSON limpo, sem teres de lidar com blocos ou matrizes vazias. Se esta ideia for nova para ti, lê primeiro o que é a extração de dados da Web.
Este guia utiliza o books.toscrape.com, uma livraria de treino criada para scrapers, como exemplo prático. Irá obter e analisar uma página com o fetch e Cheerio, percorrerá um catálogo paginado de forma educada, verificará se o JavaScript constrói uma página, renderizará e percorrerá páginas com o Playwright, testará o seu analisador offline e transferirá páginas bloqueadas para uma API de scraper sem alterar o analisador.
Início rápido
- Utilize o Node.js 22.12 ou posterior (recomenda-se a versão 24 ou 26 LTS)
npm install cheeriopara páginas cujos dados estejam no HTMLnpm install playwrightpara páginas que necessitem de um navegador real- Verifique o ficheiro robots.txt e os termos do site antes de iniciar o rastreio




