Automação SEO
Integrar Proxy Scraper ao GSA SER
Como eu automatizava a captura de proxies gratuitos e a importação deles no GSA SER, sem precisar mexer no arquivo na mão toda hora.
Esse vídeo é de 2016, época em que eu trabalhava bastante com automação de processos em SEO. Quem mexia com link building em escala precisava de proxies, e nem sempre dava pra investir num monte de proxy privado de uma vez. Então uma das automações que eu montava era capturar proxies gratuitos de forma contínua e importar tudo automaticamente no GSA SER.
A ideia central do vídeo é tirar o trabalho manual do caminho. Em vez de ficar procurando proxy e importando arquivo na mão toda hora, você configura o GSA Proxy Scraper pra buscar proxies de hora em hora, exportar pra uma pasta no Dropbox, e o GSA SER (ou qualquer outro programa) lê esse arquivo sozinho. Monta uma vez, esquece, e funciona.
Vou deixar o enquadramento: essas eram as ferramentas de automação que eu usava na época pra ganhar produtividade e economizar com proxies. O que fica de valioso, mesmo anos depois, é a mentalidade: identificar a tarefa repetitiva (buscar e importar proxy) e deixar a máquina cuidar dela em loop. Hoje a gente automatiza com IA, mas o princípio é exatamente esse.
Transcrição da aula
Nesse vídeo eu vou explicar um pouco sobre o programa GSA Proxy Scraper, as vantagens dele pra localizar proxies sem gastar nenhum centavo.
Pensa em quem trabalha com programas que exigem proxy — link building, por exemplo, realmente precisa. Se você tem poucos projetos e não tem como investir agora, ou simplesmente quer combinar alguns proxies dedicados com proxies gratuitos pra melhorar o desempenho das campanhas, esse programa resolve.
Eu vou passar as configurações que deixo no GSA Proxy Scraper e também um método legal pra exportar automaticamente todos os proxies e importar automaticamente em programas como o GSA SER.
Configurando o Proxy Scraper
Em settings, eu faço algumas alterações no padrão pra ele pegar um número maior de proxies.
Threads e janela
- Máximo de threads: ele vem com 10 ou 30. Eu deixo 100.
- Minimizar ao lado do reloginho: deixo marcado, porque o Proxy Scraper vai ficar rodando 24 horas e você não tem por que ficar olhando pra ele. Melhor deixar escondido.
Vou dar uma pincelada nas outras configurações, caso a sua instalação venha um pouco diferente. Nessa aba seguinte eu não mudo nada. Vou pular a parte de exportação, que é a última que eu explico.
Automatic Search
Aqui eu deixo marcado só anônimo e a flag do Google. Você pode marcar outras particularidades se quiser, mas pra mim o que importa é o proxy ser anônimo e eu conseguir diferenciar os que passaram pelo Google.
- Faço a busca de proxies a cada 60 minutos.
- Não coloco regra de "pare de buscar ao atingir X" nem "busque de novo se tiver menos que Y". Deixo só buscando de hora em hora.
- Marco pra ele retestar os proxies e desabilitar os que não funcionam há mais de 120 minutos.
Filtros
- Não aceitar proxies que não sejam anônimos (elite).
- Não aceitar proxies transparentes.
- Pular os proxies considerados suspeitos.
Aquela parte embaixo de filtrar por país e tipo de proxy eu não marco nada. Pego geral, de qualquer lugar.
A parte mais importante: a exportação automática
Agora a exportação. Aqui que é importante, é a dica legal pra você otimizar o uso dos proxies e poder usar em qualquer lugar.
Instala um Dropbox na máquina ou VPS onde o Proxy Scraper vai rodar. Aí você programa ele pra exportar sempre pra uma pasta do Dropbox. Daí você usa esses proxies em qualquer servidor ou computador seu.
Eu tenho mais de um VPS e deixo o Proxy Scraper rodando só em um. Quando preciso de proxy em outro software, no notebook, etc., eu já sei que está lá na pasta — é só importar.
Criando a primeira exportação (proxy geral)
Vem em exportação automática > Add e escolhe "salvar em arquivo".
- Nome do tipo de proxy: eu uso dois tipos de exportação (já vou explicar por quê). Vou colocar "proxy geral".
- Intervalo: 60 minutos, porque o programa busca de hora em hora.
- Filename: troco o nome, porque exporto dois tipos.
- Local: clica na setinha, escolhe a pasta. Eu uso uma pasta "Proxys" no Dropbox. Dentro dela eu trabalho com os meus proxies privados, os proxies gerais e os que eu chamo de "Web Proxys" (os que passaram pelo Google).
Confere se o caminho inteiro ficou correto. Às vezes a pessoa esquece de definir o local e depois não acha onde o arquivo foi parar.
- Exportação: deixo em Random e o tipo do arquivo como texto.
Dá OK e vem pra próxima tela, onde eu defino o que ele vai exportar:
- Marca a primeira opção, pra exportar só os proxies que funcionam.
- A única alteração: mínima velocidade. Eu uso o mínimo 2 no tempo de velocidade. Se a gente analisar um proxy privado, 2 é muito lento. Mas aqui estamos com proxy gratuito. Eu coloco 2 porque não quero trabalhar com proxy de 4 ou 5, muito lento, que deixaria meu programa de geração de link lerdo demais. Considero 2 um número razoável.
Os outros filtros eu não altero. Dá OK e a primeira exportação está cadastrada.
Criando a segunda exportação (proxy Google)
A segunda exportação é pra programas como Scrapebox e SEO Content Machine, ou qualquer outro que precise fazer busca no Google. A lista geral vai ser enorme e nem todos passam pelo Google. Só que, quando você precisa de um proxy só pra entrar num site e deixar um link, ele não precisa necessariamente passar pelo Google. Por isso eu gosto de criar duas listas.
A segunda lista segue basicamente a mesma regra:
- Add > salvar em arquivo, nome "proxy Google".
- Intervalo de 60 minutos, troco o nome do arquivo.
- Setinha pra escolher a pasta, salvo como "proxy Google" (mesmo local).
- Exportação em Random, tipo txt.
Ao dar OK, aqui eu faço configurações um pouquinho diferentes (essa é a forma como eu trabalho; você pode melhorar):
- Desmarco os dois tipos de SOCKS, deixo marcado só Web Connect.
- No tempo, deixo 1, porque quero trabalhar com proxies um pouco mais rápidos. Tem um programa que eu uso pra fazer interações e buscas em que quem está buscando sou eu — não é um robô deixando backlink sozinho. Como estou na frente do computador, não quero algo lento demais.
- Clico com o botão direito, "marcar nenhum", e deixo marcado só Google. (Dá pra excluir as outras tags em vez de desmarcar, dá no mesmo.)
- Países, deixo OK.
A diferença é que esses são os proxies que eu quero validados pelo Google e um pouco mais rápidos, até 1. Dá OK.
Quantos proxies ele captura
Feito isso, se você já usou o programa, sabe que ele sempre captura mais de 2 mil proxies. Desses 2 mil, a quantidade que é Google é menor — dá pra ver pelas cores das bandeirinhas. No meu caso, eu tenho só duas flags: a Google e a padrão "public". Desses proxies, 191 são do Google.
Aquela minha lista de proxies pra validar pelo Google vai ser bem menor. E mesmo assim, quando eu importo esse arquivo no SEO Content Machine ou no Scrapebox, eu coloco pra fazer a checagem, porque do tempo que ele validou até eu usar, alguns proxies vão queimar.
A gente está trabalhando com proxy gratuito. Então ele queima rapidinho. Por isso de hora em hora o programa busca novos e retesta.
Mas, como dá pra ver, ele pega bastante proxy bom. Eu considero esse programa excelente. Dá pra economizar um valor muito bom em relação a proxies dedicados.
Não que ele substitua tudo, claro. Eu hoje uso 30 proxies dedicados. Se você usar esse programa pra substituir 100 proxies privados, não vai ser a mesma coisa — proxy privado é muito mais rápido. Mas pra quem está com poucos projetos, ou quer combinar alguns privados com o resto público pra ter mais desempenho sem ter bolso pra muitos privados, esse programa é excelente. Eu uso muito ele junto com o GSA SER e roda tranquilo.
Importando automaticamente no GSA SER
Essa foi a parte da exportação. Agora a importação automática, pra você não ter que ficar achando o arquivo na mão.
Abre o GSA SER, vai em opções > proxies. Primeiro, na parte de opções dos proxies, confere o seguinte:
- Eu deixo uns 30 threads, porque ele só vai trabalhar com os proxies da minha lista. Isso é importante: se você deixar no padrão sem ajustar, ele vai tentar usar o que o Proxy Scraper está gerando E ainda tentar capturar por conta própria. É bom deixar o GSA SER só pra deixar link. Aqui ele só vai validar os proxies que importou.
- A cada 60 minutos ele busca novos, remove os que estiverem mortos há mais de 60 minutos e faz os testes.
- Desmarco a opção de "fazer busca se tiver menos de 100 proxies". O GSA SER não vai fazer busca nenhuma — ele só importa e valida a lista. Ele revalida porque, do tempo que o Proxy Scraper exportou até importar aqui, pode ter morrido algum.
- Deixo testar todos os proxies.
Adicionando a lista de proxies
Feita essa configuração, vem em lista:
- Vai em "adicionar e editar as listas de proxies". Por padrão vem muita lista marcada. Primeira coisa: clica com o botão direito e desmarca todas.
- Clica em adicionar > single.
- Pra não ficar ruim de achar a lista depois, coloca um zero na frente do nome e no URL coloca zero também. Aí coloca "proxy geral" — um nome mais humano, fácil de entender. Dá OK.
- Clica na opção de ser um arquivo, clica na setinha e localiza o teu "proxy geral". Se ele não mostrar de cara, vai onde você criou a pasta da primeira exportação. (Você já tem que ter exportado pelo menos uma vez — o programa exporta rapidinho na primeira.)
- Open. O caminho fica ali.
Se o proxy fosse privado, você marcaria a caixinha de privado. Como aqui é público, dá OK direto.
Agora, a cada 60 minutos, o GSA SER vai buscar nessa lista, carregar todos os proxies e validar.
Dica extra: protegendo os proxies privados
Outra dica que eu uso: eu também trabalho com proxies privados dedicados. E eu percebo que o GSA SER mata os privados e não ativa de volta. Eu tenho 30 proxies privados; se um fica um tempo sem funcionar, ele tira e não recoloca.
Então eu faço o seguinte:
- Crio mais uma lista, com o zerinho na frente (isso só se você tiver proxy privado).
- Importo o arquivo TXT dos meus privados. Todo mês, quando recebo, atualizo. Vou deixar na descrição o link do local onde pego os privados — na minha opinião, o melhor lugar, porque é muito raro queimar.
- Marco que eles são privados.
Aí, de 60 em 60 minutos, ele busca nesse arquivo também os meus privados, pra caso ele exclua algum.
Proxy privado que queima toda hora não presta. Se acontece, ou use o Proxy Scraper, ou troque de empresa.
Já aconteceu de, antes de eu fazer isso, eu ter 30 proxies e de repente olhar e ter 14. Porque o proxy caiu, mas volta — nem sempre que ele fica inativo é porque morreu de verdade. Às vezes dá só uma paradinha e volta, um delay. De 30 pra 14, perdi metade. O programa não recoloca sozinho se você não fizer essa lista.
Buscando sem esperar a hora
Caso você não queira esperar os 60 minutos pra carregar os proxies, clica em adicionar > procurar online mais e testar. Mas "online" aqui é só na lista que a gente criou — ele não vai pra internet, só procura nos arquivos. O único servidor que a gente colocou pra ele foi o arquivo de privados e o de proxies gerados pelo programa.
Funciona em outros programas também
Lembra que eu falei que a exportação pode alimentar qualquer programa? Se você usa o GSA Indexer, por exemplo, é a mesma coisa:
- Em URL redirect, vai em Configure Proxy.
- Nas opções, deixa as mesmas que estão no GSA SER. Confere e dá OK.
- Em adicionar, desmarca todos, clica em adicionar single, dá um nome com o zero na frente, OK.
- Muda pra arquivo lá em cima, clica na setinha, localiza o arquivo, abre e dá OK.
Ele já começa a trabalhar em cima dos proxies. Demora um pouquinho pra começar a busca dele.
Uma observação: se o programa já estiver rodando com aquelas listas padrão de busca de proxy, ele vai juntar o seu arquivo com os outros sites até terminar a primeira captura. Então, assim que você desmarcar todos os servidores e fizer essa configuração, aborta a busca atual, deleta os que foram criados e manda buscar de novo. Aí sim ele trabalha só nos seus arquivos de lista.
No GSA Indexer é a mesma lógica: você quer que ele trabalhe só indexando o arquivo, sem ficar gastando tempo indo na internet scrapeando e testando proxy. Com essa configuração, eu sempre tenho mais de 200, 300 proxies checados e funcionando, "verdinhos".
Fechando
Na minha opinião, esse programa é excelente. Espero que você consiga economizar com proxies e não se incomode mais com importação manual.
Esse foi o resgate da automação que eu montava na época. A lógica continua atual: identificar a tarefa repetitiva — buscar e importar proxy — e deixar a máquina cuidar dela em loop. Hoje a gente automatiza com IA, mas o princípio é exatamente esse. Um abraço.