Raspa o site theswiftcodes.com para coletar nomes de bancos, códigos SWIFT, cidades e filiais por país, normaliza o país para código ISO e grava os registros em uma coleção MongoDB, usando cache local para as páginas HTML.
Desenho do fluxo
Só a forma do fluxo: os nós, os nomes e as ligações. Parâmetros, código e prompts vêm no JSON, para importar no seu n8n.
Baixar o fluxo
Verificando seu acesso…
O que faz
Inicialização e preparo: cria diretório de cache local para armazenar páginas HTML.
Extração da lista de países: busca a página de navegação por país e obtém os links de cada país.
Processamento em lotes de países: divide a lista de países em batches e processa um país por vez.
Normalização do nome do país: chama um serviço externo para converter o nome do país em código ISO.
Definição de página a raspar e geração de URL: determina a página atual a ser raspada e monta a URL completa.
Cache de páginas HTML: gera nome de arquivo baseado na URL e verifica se a página já está em cache para evitar downloads repetidos.
Download e escrita em cache: baixa a página HTML quando não existe em cache e a grava no diretório local.
Extração de dados da página: extrai nomes de bancos, códigos SWIFT, cidades, filiais e link para a próxima página a partir do HTML.
Paginação automática: detecta botão "next" e atualiza o fluxo para continuar raspando páginas subsequentes do mesmo país.
Preparação de documentos: monta documentos com iso_code, country, page, name, branch, city, swift_code e timestamps (createdAt, updatedAt).
Inserção em banco de dados: insere os documentos preparados em uma coleção do MongoDB.
Controle de ritmo: inclui pequenas esperas entre requisições para reduzir carga no site alvo.
Ferramentas usadas
theswiftcodes.com: site fonte que contém listas por país com tabelas de bancos e códigos SWIFT.
uProc (serviço de normalização de países): API externa usada para normalizar nomes de países e obter códigos ISO.
MongoDB: banco de dados que armazena os documentos resultantes com os dados extraídos.
Sistema de arquivos local: diretório de cache (/home/node/.cache/scrapper) usado para armazenar e reutilizar páginas HTML baixadas.
Este fluxo automatiza o envio de mensagens de follow-up para contatos de vendedor IA, lendo dados do Supabase, filtrando duplicatas, gerenciando o estado com Redis e enviando mensagens via GrowthLinks em ciclos programados.
Fluxo que consulta locais usando Google Maps API, filtra categorias, normaliza dados e registra resultados em uma planilha Google Sheets, com controle de retries e processamento por CEPs.
Fluxo que observa uma pasta do Google Drive em busca de novos PDFs, converte páginas em imagens, extrai texto, identifica o tipo de documento com IA (Invoice, Resume ou Shipping Label) e extrai dados estruturados, gravando-os nas planilhas Google correspondentes.
Automatiza cobranças lendo dados de clientes de uma planilha, valida pagamentos, gera cobranças via Woovi e envia mensagens com o código Pix ao cliente, atualizando a planilha conforme necessário.
Este fluxo extrai carrosséis de posts de um usuário no Instagram usando uma API de scraping, transforma os dados e os armazena no Baserow em duas tabelas, incluindo id do post, texto, usuário e URLs das imagens.