convez.ai

Scraper universal com Selenium e IA

56 nós no fluxo · 12 tipos de nó · licença MIT

Fluxo que recebe solicitações via webhook, encontra ou usa uma URL alvo, controla um navegador Selenium (opcionalmente injetando cookies), captura screenshots da página e usa modelos de IA para extrair e retornar dados relevantes.

Desenho do fluxo

Desenho do fluxo n8n "Scraper universal com Selenium e IA": 56 nós e as ligações entre eles
Só a forma do fluxo: os nós, os nomes e as ligações. Parâmetros, código e prompts vêm no JSON, para importar no seu n8n.

Baixar o fluxo

Verificando seu acesso…

O que faz

  • Receber requisições via webhook: Aceita payloads com assunto, URL alvo, dados a extrair e cookies de sessão.
  • Normalização de campos de entrada: Extrai e define campos como assunto e domínio a partir do payload.
  • Busca de página relevante: Procura no Google por URLs no domínio alvo relacionadas ao assunto quando uma URL direta não é enviada.
  • Seleção do melhor URL: Usa um modelo de extração para escolher a URL mais relevante para coleta de informação.
  • Criação e configuração de sessão de navegador: Inicia uma sessão Selenium/Chrome com argumentos anti-detecção e redimensiona a janela.
  • Limpeza de indicadores de automação: Executa script para ocultar traços do webdriver e ajustar propriedades do navigator.
  • Injeção de cookies de sessão: Converte e injeta cookies recebidos (incluindo normalização sameSite) para permitir sessões autenticadas.
  • Navegação e captura: Vai para a URL alvo (ou extraída), captura screenshot e transforma a imagem em arquivo binário.
  • Análise por IA e extração estruturada: Envia a imagem para modelos de IA para detectar bloqueios (WAF) ou extrair os dados solicitados, depois estrutura a resposta em campos definidos.
  • Tratamento de erros e limpeza: Grande número de pontos de limpeza para deletar sessões Selenium e retornar respostas de erro ou sucesso adequadas.
  • Debug de IP e proxy: Rota de verificação de IP para depuração e suporte a configuração de proxy para o navegador.
  • Respostas condicionais: Retorna diferentes códigos/respostas HTTP dependendo do resultado (sucesso, bloqueio, erro, não encontrado).

Ferramentas usadas

  • Selenium (Grid/Chrome): Controla um navegador Chrome remoto para navegação, injeção de cookies e captura de screenshots.
  • Google Search: Usado para localizar páginas relevantes no domínio alvo quando a URL direta não é fornecida.
  • OpenAI (modelos GPT-4o / gpt-4o-mini): Analisa imagens (screenshots) e gera respostas textuais que são pós-processadas para extrair informações estruturadas.
  • ip-api.com: Serviço usado para verificar o IP público visto pelo navegador para depuração de proxy/IP.
  • Extensão de coleta de cookies (opcional): Ferramenta opcional para recolher cookies de sessão no navegador e permitir scraping autenticado.
  • Provedor de proxies residenciais (ex.: GeoNode): Recomendado para reduzir bloqueios em escala e permitir requests a partir de IPs residenciais.
  • Docker / Docker Compose: Ambiente recomendado para implantar o container Selenium e demais serviços necessários.

Nós do n8n (12 tipos, 56 no total)

Origem e licença

Fluxo original de Zie619/n8n-workflows (licença MIT, Copyright (c) 2025 Zie619). Tradução, curadoria e limpeza: Convez.

Mais fluxos de inteligência artificial

Super AgenteInteligência artificial

Criador de Vídeos Automáticos

Fluxo que lê dados de histórias e cenas, gera prompts de IA, cria imagens e áudios, gera vídeos via API externa e registra os resultados em bases de dados.

83 nós 13 tiposExclusivo
Super AgenteInteligência artificial

Atendimento automatizado com IA e agenda

Fluxo de atendimento por WhatsApp que recebe mensagens via Webhook, identifica o tipo (texto ou áudio), consulta/cria contatos no banco, registra mensagens, transcreve áudios, utiliza IA para responder, mantém histórico de conversas e memória, gerencia envio de mensagens, e integra com Google Calendar para buscar/criar/deletar compromissos, além de processar documentos e embeddings para respostas baseadas em conteúdo.

55 nós 30 tiposExclusivo
Super AgenteInteligência artificial

Fluxo Vendedor IA

Fluxo de atendimento automatizado para vendedores, usando memória de conversa, modelo de linguagem, verificação de acesso, buffers de mensagens e encaminhamento para ADM quando necessário.

52 nós 19 tiposExclusivo
Super AgenteInteligência artificial

Fluxo Vendedor IA 02

Este fluxo gerencia conversas de atendimento de vendas com IA, incluindo memória de chat, envio de mensagens, bloqueio de bot, tratamento de mensagens, classificação de histórico e integração com o Supabase para follow-up.

51 nós 21 tiposExclusivo
Super AgenteInteligência artificial

Atendimento automatizado com IA

Este fluxo recebe mensagens de WhatsApp via webhook, verifica/gera leads, usa IA para decidir ações (agendamento, reagendamento ou cancelamento), gerencia memória de conversas, transcreve áudio e analisa imagens, e envia respostas em texto ou áudio.

48 nós 19 tiposExclusivo
Super AgenteInteligência artificial

Automação de Reels do Instagram para Carnaval

Fluxo que coleta reels, analisa métricas, cria scripts e captions, e registra resultados no Airtable, com integração via Telegram.

42 nós 19 tiposExclusivo