Visão geral do produto
O Firecrawl cuida da obtenção de conteúdo web para outras aplicações. Ele lê páginas e as converte em Markdown ou JSON estruturado, por exemplo para alimentar uma base de conhecimento com geração aumentada por recuperação (RAG) a partir da documentação de uma empresa. A recuperação de informações, a escolha do modelo e a verificação das respostas continuam a cargo da aplicação; obter uma página não significa obter uma resposta confiável.
A função depende do ponto de partida. Scrape lê uma URL conhecida; Map descobre links de um site; Crawl busca várias páginas dentro de um escopo definido; Search parte de uma consulta e pode também obter o conteúdo dos resultados. Em sites grandes, descobrir e selecionar URLs antes de coletar os textos facilita o controle de duplicações, atualizações e créditos.
O que o Firecrawl oferece
- 01Obter texto em Markdown ou solicitar JSON com esquema de campos e instruções de extração.
- 02Descobrir URLs com Map e filtrar os links relevantes para a coleta.
- 03Restringir o Crawl por caminhos e profundidade.
- 04Pesquisar páginas e, opcionalmente, obter o conteúdo dos resultados.
Um fluxo prático
- 01Selecionar URLs representativas e definir campos, formato e lacunas inaceitáveis.
- 02Usar Scrape para uma página conhecida, Map para selecionar URLs, Crawl para uma seção ou Search para uma consulta.
- 03Conferir o estado da página e comparar texto e campos JSON com o original.
- 04Guardar URLs de origem, remover duplicatas e definir atualizações antes de integrar os dados ao agente.
Resumo baseado na fonte; as afirmações do produto não foram testadas de forma independente.
O que o diferencia
A proposta é preparar conteúdo web com uma API comum e opções de renderização e formato, reduzindo a manutenção de analisadores HTML específicos. Isso não garante acesso a todos os sites nem extração perfeita: valide os campos e as páginas necessários no seu caso.
Para quem é indicado
- Desenvolvedores de assistentes com fontes web e bases RAG.
- Equipes que organizam documentação pública ou informações de produtos.
- Engenheiros que integram dados web a agentes e processos existentes.
O que confirmar
- Conferir a franquia gratuita, os planos pagos e o consumo de formatos adicionais na tabela atual.
- Separar limites de requisições por minuto e de navegadores simultâneos; usar recuo progressivo em respostas 429.
- Uma requisição bem-sucedida pode trazer uma página com erro 403 ou 404; verificar os metadados.
- Não presumir acesso a páginas que exigem login nem preenchimento de todos os campos.
Perguntas frequentes
Qual é a diferença entre Scrape, Map e Crawl?
Scrape lê uma URL conhecida. Map ajuda principalmente a encontrar URLs de um site. Crawl descobre e lê várias páginas no escopo configurado. A lista do Map não contém necessariamente o texto completo das páginas.
O Firecrawl substitui um modelo ou um sistema RAG completo?
Não. Ele fornece conteúdo web. Seleção de documentos, recuperação, modelo e verificação das respostas continuam sendo responsabilidades da aplicação.
HTTP 200 significa que a página foi obtida corretamente?
Não necessariamente. O estado da requisição à API é diferente do estado da página de destino. Confira data.metadata.statusCode e o conteúdo retornado, conforme a documentação do Scrape.
As informações foram conferidas em 26 de out. de 2026 com o site oficial ou documentação primária.
