convez.ai

Scraper com Selenium e OpenAI

56 nós no fluxo · 12 tipos de nó · licença MIT

Fluxo que recebe requisições via webhook, localiza páginas relevantes, navega (com ou sem cookies de sessão), captura screenshots e usa modelos de IA para extrair os dados solicitados.

Desenho do fluxo

Desenho do fluxo n8n "Scraper com Selenium e OpenAI": 56 nós e as ligações entre eles
Só a forma do fluxo: os nós, os nomes e as ligações. Parâmetros, código e prompts vêm no JSON, para importar no seu n8n.

Baixar o fluxo

Verificando seu acesso…

O que faz

  • Recepção de requisição via webhook: Aceita payloads com assunto, URL alvo, dados a extrair e cookies de sessão.
  • Busca e identificação de URL relevante: Pesquisa no Google por páginas do domínio relacionadas ao assunto e extrai a melhor URL.
  • Criação e configuração de sessão de navegador: Inicia um container Selenium configurado (user-agent, argumentos anti-deteção) e ajusta tamanho da janela.
  • Limpeza de sinais de automação: Executa script para ocultar propriedades que identificariam Selenium (navigator.webdriver, plugins, languages, etc.).
  • Injeção de cookies de sessão: Converte atributos de sameSite e injeta cookies fornecidos para acessar áreas autenticadas quando necessário.
  • Navegação com/sem cookies: Abre a URL alvo ou a URL identificada pela busca, com fluxo diferenciado conforme presença de cookies.
  • Captura de screenshot e conversão: Tira screenshots do navegador, converte em arquivo/binário e prepara para análise.
  • Análise de imagem com IA: Envia a imagem para um modelo OpenAI para identificar se a página está bloqueada por WAF ou extrair informações visuais relevantes.
  • Extração estruturada de dados via IA: Usa prompts e extratores para mapear os campos solicitados pelo cliente em formato estruturado, com fallback para NA quando não encontrado.
  • Tratamento de erros e respostas: Diferencia respostas para sucesso, bloqueio, falta de URL ou erros de página, removendo sessões e retornando códigos HTTP apropriados.
  • Limpeza e encerramento de sessão: Remove sessões Selenium ao final ou em caso de erro para evitar vazamento de recursos.
  • Debug de IP/proxy: Navega para uma página de verificação de IP (ip-api.com) para validar o IP usado quando se emprega proxy.

Ferramentas usadas

  • Selenium (container): Motor de automação de navegador usado para abrir páginas, injetar cookies e capturar screenshots.
  • OpenAI (GPT-4/GPT-4o): Modelo de IA para analisar screenshots e extrair informações estruturadas a partir do conteúdo visual/textual.
  • Google Search: Motor de busca usado para localizar a URL mais relevante no domínio informado.
  • Serviço de proxy residencial (ex.: GeoNode): Recomendado para roteamento de tráfego e redução de bloqueios durante scraping em escala.
  • ip-api.com: Serviço usado para verificar o IP público visto pelo navegador (debug de proxy/IP).
  • Extensão de captura de cookies / Repositório GitHub associado: Ferramenta opcional para coletar cookies de sessão do navegador e permitir scraping em áreas autenticadas (implementação/documentação disponível no repositório do projeto).

Nós do n8n (12 tipos, 56 no total)

Origem e licença

Fluxo original de Zie619/n8n-workflows (licença MIT, Copyright (c) 2025 Zie619). Tradução, curadoria e limpeza: Convez.

Mais fluxos de inteligência artificial

Super AgenteInteligência artificial

Criador de Vídeos Automáticos

Fluxo que lê dados de histórias e cenas, gera prompts de IA, cria imagens e áudios, gera vídeos via API externa e registra os resultados em bases de dados.

83 nós 13 tiposExclusivo
Super AgenteInteligência artificial

Atendimento automatizado com IA e agenda

Fluxo de atendimento por WhatsApp que recebe mensagens via Webhook, identifica o tipo (texto ou áudio), consulta/cria contatos no banco, registra mensagens, transcreve áudios, utiliza IA para responder, mantém histórico de conversas e memória, gerencia envio de mensagens, e integra com Google Calendar para buscar/criar/deletar compromissos, além de processar documentos e embeddings para respostas baseadas em conteúdo.

55 nós 30 tiposExclusivo
Super AgenteInteligência artificial

Fluxo Vendedor IA

Fluxo de atendimento automatizado para vendedores, usando memória de conversa, modelo de linguagem, verificação de acesso, buffers de mensagens e encaminhamento para ADM quando necessário.

52 nós 19 tiposExclusivo
Super AgenteInteligência artificial

Fluxo Vendedor IA 02

Este fluxo gerencia conversas de atendimento de vendas com IA, incluindo memória de chat, envio de mensagens, bloqueio de bot, tratamento de mensagens, classificação de histórico e integração com o Supabase para follow-up.

51 nós 21 tiposExclusivo
Super AgenteInteligência artificial

Atendimento automatizado com IA

Este fluxo recebe mensagens de WhatsApp via webhook, verifica/gera leads, usa IA para decidir ações (agendamento, reagendamento ou cancelamento), gerencia memória de conversas, transcreve áudio e analisa imagens, e envia respostas em texto ou áudio.

48 nós 19 tiposExclusivo
Super AgenteInteligência artificial

Automação de Reels do Instagram para Carnaval

Fluxo que coleta reels, analisa métricas, cria scripts e captions, e registra resultados no Airtable, com integração via Telegram.

42 nós 19 tiposExclusivo