Proxy residencial
Um proxy que encaminha seu tráfego por um endereço IP atribuído por um provedor de internet a uma conexão doméstica, para que as requisições pareçam de uma pessoa comum navegando.
Um proxy residencial passa o seu tráfego por um endereço IP que um provedor de internet de consumo atribuiu a uma conexão doméstica. Consulte esse endereço e o dono aparece como Comcast, Vodafone ou Deutsche Telekom, longe de qualquer empresa de hospedagem, e esse é o único fato sobre o qual o produto inteiro se apoia.
A confiança decorre do que um site consegue ou não fazer a respeito. Um proxy de datacenter fica em faixas de hospedagem que podem ser tratadas como suspeitas em bloco, porque nenhum cliente comum navega a partir de um rack. As faixas de ISPs de consumo não podem ser descartadas assim, porque é ali que estão os clientes de verdade. Um destino diante de um endereço residencial não tem um sinal categórico barato para agir, então precisa julgar a requisição pelo comportamento, e o comportamento é algo que você controla.
É por isso que o residencial é o padrão para tudo o que depende de geografia ou é sensível à automação: ler os preços que um morador local vê, conferir resultados de busca como aparecem em determinado país, coletar dados de sites que rejeitam máquinas óbvias. A velocidade fica de fora (ele é mais lento), o preço também (ele é mais caro); o motivo é que ele é o único tipo que não perde antes de a requisição ser examinada.
A limitação é que você está pegando emprestado algo que não é seu. As conexões domésticas pertencem a pessoas que desligam roteadores, trocam de provedor e saem de férias, então um endereço individual é temporário por natureza. Isso tem duas consequências que vale assimilar. Os pools são cobrados por tráfego em vez de por endereço, porque alugar um IP doméstico específico por mês é algo que ninguém consegue vender com honestidade. E o tamanho de pool anunciado descreve tudo o que já foi visto, muito além do que está acessível agora.
É aí que os compradores mais costumam ser enganados: no dimensionamento. Um número na casa das dezenas de milhões é um total histórico. O número que decide se o seu trabalho dá certo é quantos endereços distintos estão ativos no país de que você precisa no momento em que você roda, e esses dois números raramente ficam perto. Qualquer provedor pode citar o primeiro. O segundo é o que vale a pena perguntar.
Como os endereços são temporários, o jeito normal de consumi-los é como um proxy rotativo: um gateway, uma saída diferente por requisição. Quando uma tarefa precisa que um endereço persista, você segura um com uma sessão fixa ou passa para um proxy de ISP, que troca o lar emprestado por uma máquina de datacenter com registro residencial e que não some quando alguém desliga um roteador.
A segmentação é a última peça. Um pool só é útil se você puder pedir a ele um lugar específico, então o residencial normalmente é endereçado por país, e muitas vezes por cidade ou por ISP, pelas credenciais e sem endpoints separados.
Como a HProxy lida com isso
Verificamos de novo os endpoints residenciais continuamente em vez de confiar na contagem declarada por um fornecedor, exatamente pelo motivo acima: um número de pool e um número de ativos agora são coisas diferentes, e só um deles afeta o seu trabalho. A segmentação é expressa no nome de usuário em um único gateway, então um pedido de tráfego alemão saindo de Frankfurt é uma credencial como user-country-de-city-frankfurt, sem outro host para configurar.
Perguntas frequentes
Por que os proxies residenciais são cobrados por GB em vez de por IP?
Porque ninguém consegue alugar a você, com honestidade, um endereço doméstico específico por mês. As conexões são emprestadas e temporárias: a pessoa do outro lado pode trocar de provedor, reiniciar um roteador ou sair de férias, e o endereço vai junto. O tráfego é a única unidade que um provedor consegue realmente entregar, e é por isso que o preço por IP pertence aos proxies de ISP e de datacenter, onde uma máquina em um rack fica de fato reservada para você.
Qual é o tamanho do pool, e esse número importa?
Bem menos do que costuma sugerir. Um número de vitrine na casa das dezenas de milhões é uma contagem histórica de todos os endereços já observados, e a maioria deles não está acessível agora. O número que decide se o seu trabalho dá certo é quantos endereços distintos estão ativos no país de que você realmente precisa no momento em que você roda. Peça esse número, deixe o de marketing de lado, e entenda que um provedor que não consegue separar os dois está respondendo a outra pergunta.
Os proxies residenciais são mais rápidos que os de datacenter?
Não, e nem podem ser. Um proxy de datacenter roda em uma máquina ligada a rotas de backbone; um endereço residencial é a banda larga da casa de alguém, com a latência e a variação que isso implica. Você compra residencial pela confiança, e paga por ela em velocidade e preço. Se o seu alvo não filtra por tipo de rede, o residencial é o jeito mais caro de obter um resultado mais lento.
Usar proxies residenciais é legal?
Usar um proxy é uma prática comum de rede, e a pergunta na verdade é sobre o que você faz por ele e de onde vieram os endereços. A parte que merece escrutínio é a cadeia de fornecimento: se as pessoas cujas conexões levam o seu tráfego concordaram com isso sabendo do que se tratava. O que você faz com o endereço é regido pelos termos do alvo e pela lei local, e essa é uma pergunta para um advogado, que um glossário não responde.
Rotativo ou fixo, qual devo escolher?
Escolha pela tarefa, sem preferência pessoal. Uma coleta sem estado, de alto volume e só de leitura pede um proxy rotativo, porque espalhar as requisições por muitos endereços é o que mantém cada um abaixo de um limite de requisições. Tudo o que mantém um login ou um fluxo de várias etapas pede uma sessão fixa, porque um IP novo no meio do fluxo parece uma sessão roubada, longe de um visitante que voltou. Se a tarefa precisa de um endereço por semanas em vez de minutos, o que você quer é um proxy de ISP.
Um site consegue perceber que estou usando um proxy residencial?
Só pelo tipo de endereço, não, e esse é o objetivo. Ele ainda pode pegar você em todo o resto: uma impressão digital de navegador que contradiz o país que o IP declara, um handshake TLS típico de uma biblioteca de scripts, um ritmo de requisições que nenhuma pessoa produziria, ou um endereço doméstico de repente levando volume de escritório. O residencial remove o motivo mais barato para desconfiar de você e deixa todos os outros intactos.
Voltar ao glossário completo.

