PT
Começar

Glossário

Protocolos e autenticação

Proxy reverso

Um proxy que fica na frente de servidores em vez de clientes, tratando as requisições recebidas em nome deles, a direção oposta à dos proxies de encaminhamento usados para scraping.

Um proxy reverso é a imagem espelhada de tudo o mais neste glossário. Um proxy de encaminhamento fica na frente de VOCÊ e esconde a sua identidade dos servidores que você acessa. Um proxy reverso fica na frente dos SERVIDORES e atende às requisições em nome deles, então os visitantes conversam com ele, sem chegar às máquinas por trás. Mesma palavra, direção oposta, escolhida pelo outro lado.

As funções dele ficam todas do lado do servidor e são quase todas invisíveis: distribuir a carga entre um pool de backends, encerrar o TLS para que as máquinas de origem não precisem fazer isso, guardar respostas em cache, comprimi-las e manter os servidores de origem totalmente fora da internet pública. Se você já usou uma CDN, o nginx como front-end ou um balanceador de carga na nuvem, você já usou um.

Ele merece um verbete aqui por um motivo que vai além da terminologia, e é um motivo que vale entender se você faz scraping. Quando um site desafia você, bloqueia você ou serve um CAPTCHA, essa decisão muitas vezes é tomada pela camada de proxy reverso, sem passar pela aplicação por trás dela. O sistema antibot, o limite de requisições, as regras geográficas: tudo isso costuma ficar na borda, e é por isso que você pode ser recusado sem que a aplicação do site sequer veja a sua requisição.

Isso também explica um padrão que as pessoas acham estranho. Um site pode não responder nada a um endereço e funcionar perfeitamente para outro no mesmo segundo, sem lógica aparente. A borda está tomando uma decisão por requisição a partir de dados de reputação e regras, e a decisão não custa nada a ela porque nada por trás dela foi consultado.

A distinção prática para guardar: se você está configurando um host e uma porta no seu próprio cliente para mudar como você aparece, isso é um proxy de encaminhamento, e ele é seu. Se a infraestrutura de um site está decidindo se vai atender você, um proxy reverso faz parte do que decidiu. Você não compra um desses; você lida com um.

Perguntas frequentes

Uma CDN é um proxy reverso?

Essencialmente sim, um proxy reverso operando em escala geográfica. Ela fica na frente dos servidores de origem de um site, guarda em cache e serve o conteúdo a partir de locais perto dos visitantes, encerra o TLS e protege a origem do tráfego direto. Ela também costuma levar as regras antibot e de limite de requisições, e é por isso que uma CDN pode bloquear você antes de a própria aplicação do site saber que você existe.

Posso comprar um proxy reverso para fazer scraping?

Não, e a pergunta normalmente indica que os dois termos foram misturados. Um proxy reverso é uma infraestrutura que o operador de um site implanta na frente dos próprios servidores. O que você compra para scraping é um proxy de encaminhamento: residencial, datacenter, ISP ou móvel. Se um provedor vende a você algo descrito como proxy reverso para scraping, ele está usando a palavra de forma errada.

Por que um proxy reverso importa se eu faço scraping?

Porque normalmente é ele que bloqueia você. Limites de requisições, regras geográficas, checagens de reputação e desafios antibot em geral rodam na borda, longe da aplicação, então uma recusa muitas vezes acontece antes de o próprio site se envolver. Isso também explica por que o bloqueio pode parecer instantâneo e inconsistente: a decisão é barata e tomada por requisição.

Qual é a diferença entre um proxy reverso e um balanceador de carga?

Eles se sobrepõem bastante e muitas vezes são o mesmo software. O balanceamento de carga, distribuir requisições entre backends, é uma das funções que um proxy reverso executa, ao lado do encerramento de TLS, do cache e da filtragem. Um balanceador de carga dedicado pode fazer só a distribuição, enquanto um proxy reverso em geral faz mais.

Voltar ao glossário completo.

HProxy.

Não acredite só na nossa palavra. Meça você mesmo.

Verifique o protocolo de um proxyPegue proxies grátis para testar

Roda no seu navegador contra o endereço real. Sem cadastro, sem lista armazenada.

HProxy