Config Paginator Crawler

Pagina qualquer endpoint a partir de um config JSON e salva todo o conteudo paginado em um arquivo JSON para download.

Config Paginator Crawler é uma ferramenta para desenvolvedores que pagina um endpoint HTTP definido por você e agrega toda a resposta paginada em um único arquivo JSON para download. Como funciona: 1. Abra a página de Opções e importe/cole um "config JSON" descrevendo o endpoint: URL com placeholders ({skip}, {take}, {timestamp} e variáveis), método, cabeçalhos, qual campo é a lista de itens (itemsPath) e quando parar. 2. O config fica salvo localmente (chrome.storage). No popup, cada variável do config vira um campo editável (ex.: termo de busca, página inicial, limite). 3. Clique em Iniciar: a extensão pagina automaticamente (incrementando o parâmetro de offset/skip) até a resposta vir vazia, repetida ou menor que o passo, e baixa o resultado agregado como um .json. Recursos: - Funciona com respostas JSON (caminho aninhado, ex.: data.results) ou HTML (extrai imagens, vídeos, links e atributos data-* de cada bloco). - Cabeçalhos e credenciais configuráveis por config. - Condições de parada ajustáveis. - Configs reaproveitáveis e exportáveis (veja os exemplos incluídos). Privacidade: todo o processamento é local. A extensão não envia nenhum dado ao desenvolvedor nem a terceiros; o resultado é baixado no seu próprio computador. O acesso a um site só é concedido quando você clica em Iniciar e autoriza a permissão para aquela origem específica. Use apenas em sites e conteúdos que você tenha autorização para acessar e baixar, respeitando os Termos de Uso de cada site e a legislação aplicável.