Glossário
O glossário de proxies, sem enrolação.
141 termos de proxies, redes e web scraping, cada um definido em linguagem simples e, onde importa, com o detalhe do mundo real que decide como a coisa realmente se comporta. Nada de definições de dicionário.
Comece por aqui: o tipo de um proxy são quatro perguntas
A maior parte da confusão sobre proxies vem de tratar uma palavra como uma decisão. De quem é a rede a que o endereço pertence, se esse endereço muda, quem mais o está usando e qual protocolo você fala com ele são quatro perguntas independentes, e todo produto real responde às quatro ao mesmo tempo. Se uma página aqui parecer contradizer outra, geralmente é porque as duas estão respondendo a perguntas diferentes.
Se você quer o quadro completo de uma vez antes de mergulhar nas definições, o guia de todos os tipos de proxy passa pelas quatro e termina mostrando como escolher.
Tipos de proxy
As famílias às quais um proxy pode pertencer, e os eixos que as pessoas confundem entre si. De quem é a rede dona do endereço é uma pergunta, se ele muda é outra, e quem mais está nele é uma terceira. Todo produto real responde às três, e um provedor que nomeia só uma deixou as outras duas sem dizer.
Proxy anônimo
Um proxy que esconde seu endereço IP real, mas ainda se identifica como proxy para os sites que você visita.
Ler a definição
Compartilhamento de banda
O lado da oferta dos proxies residenciais: apps e SDKs pelos quais pessoas comuns emprestam a conexão de casa como saída, em troca de compensação ou sem saber.
Ler a definição
Proxy de cache
Um proxy de encaminhamento que guarda cópias das respostas e as serve de novo, feito para economizar banda em vez de para anonimato.
Ler a definição
Proxy de datacenter
Um proxy cujo endereço IP fica hospedado em um data center comercial em vez de ser atribuído a uma casa, o que o torna rápido e barato, mas fácil de identificar pelos sites como não residencial.
Ler a definição
Proxy dedicado
Um endereço IP de proxy atribuído a um único cliente, de modo que sua reputação reflete apenas o seu próprio tráfego.
Ler a definição
Proxy distorcedor
Um grau de anonimato que esconde o seu IP real, mas envia de propósito um falso no lugar dele, entre um proxy anônimo e um transparente.
Ler a definição
Proxy DNS
Um serviço que intervém na etapa de consulta de nomes em vez de carregar o seu tráfego, cobrindo desde o encaminhamento de DNS do roteador até o desbloqueio por smart DNS.
Ler a definição
Proxy elite
Um proxy que esconde seu IP real e não repassa nenhum cabeçalho admitindo que há um proxy no caminho, então a requisição chega ao site com cara de conexão direta.
Ler a definição
Proxy gateway
Um ponto de entrada único que roteia o seu tráfego para um pool inteiro de IPs de saída, então você se conecta a um endereço e alcança muitos.
Ler a definição
Proxy HTTP
Um proxy que entende o protocolo HTTP e encaminha requisições web, podendo ler e modificar cabeçalhos no caminho.
Ler a definição
Proxy ISP
Um proxy hospedado em um datacenter, mas registrado em um provedor de internet para consumidores, unindo a velocidade e a estabilidade do datacenter à confiança de uma rede residencial.
Ler a definição
Proxy móvel
Um proxy que encaminha o tráfego por um endereço IP atribuído por uma operadora móvel a um celular ou modem, com a confiança mais forte entre todos os tipos de proxy.
Ler a definição
Proxy aberto
Um proxy que aceita conexões de qualquer pessoa sem autenticação, que é o que quase todo endereço de uma lista de proxies gratuita realmente é.
Ler a definição
Proxy peer-to-peer
Uma rede residencial cujas saídas são dispositivos de outros usuários em vez de servidores gerenciados, que é como a maioria dos pools residenciais é de fato construída.
Ler a definição
Pool de proxies
O conjunto completo de endereços IP pelos quais um provedor pode rotear você, e o número por trás de um proxy rotativo.
Ler a definição
Proxy residencial
Um proxy que encaminha seu tráfego por um endereço IP atribuído por um provedor de internet a uma conexão doméstica, para que as requisições pareçam de uma pessoa comum navegando.
Ler a definição
Proxy rotativo
Uma configuração de proxy que atribui um endereço IP diferente a cada requisição ou em intervalos de tempo, espalhando o tráfego por um pool para que nenhum endereço chame atenção.
Ler a definição
Proxy semidedicado
Um nível intermediário em que um endereço é compartilhado entre um número pequeno e fixo de usuários em vez de uma pessoa só ou de uma multidão ilimitada.
Ler a definição
Proxy compartilhado
Um proxy cujo endereço IP é usado por mais de um cliente ao mesmo tempo, mais barato que um endereço dedicado, mas com uma reputação que você não controla por completo.
Ler a definição
Proxy para sneakers
Proxies vendidos para lançamentos limitados de tênis e streetwear, em que a real necessidade é ter muitos endereços confiáveis prontos em uma janela curta.
Ler a definição
Proxy SOCKS5
Um proxy que fala o protocolo SOCKS5, que encaminha qualquer tipo de tráfego TCP ou UDP sem inspecioná-lo, de requisições web a qualquer outro protocolo.
Ler a definição
Proxy estático
Um proxy que mantém o mesmo endereço IP para seu uso exclusivo por um período prolongado, sem rotacioná-lo entre requisições.
Ler a definição
Proxy transparente
Um proxy que repassa seu endereço IP real e muitas vezes intercepta o tráfego sem que você o configure, comum em redes, inútil para anonimato.
Ler a definição
Proxy virgem
Um rótulo de marketing para um IP de proxy vendido como nunca usado, uma afirmação que é em parte frescor verificável e em parte histórico impossível de verificar.
Ler a definição
Redes
A estrutura por baixo de todo o resto. O que um endereço realmente é, por que não há endereços suficientes, como blocos e redes carregam reputação como uma unidade, e onde as consultas acontecem. A maioria das surpresas com proxies acaba sendo um desses fatos aparecendo sem aviso.
Anycast
Um endereço IP anunciado de muitos lugares ao mesmo tempo. A rede entrega ao local que o roteamento dela prefere, então nenhuma localização única pertence ao endereço.
Ler a definição
ASN
Um número de sistema autônomo identifica a rede dona de um bloco de endereços IP, e é assim que os sites distinguem uma conexão doméstica de um datacenter.
Ler a definição
BGP
O protocolo que as redes usam para dizer umas às outras quais endereços IP conseguem alcançar. A rede que anuncia o endereço de um proxy é a que uma consulta de IP mostra.
Ler a definição
CDN
Uma rede de distribuição de conteúdo, a camada de cache distribuída geograficamente que serve a maioria dos grandes sites e decide na borda como tratar a sua requisição.
Ler a definição
CGNAT
NAT de nível de operadora, a técnica de colocar muitos assinantes atrás de um único endereço IP público compartilhado para economizar o escasso espaço IPv4.
Ler a definição
Sub-rede classe C
Um bloco de 256 endereços IPv4, escrito hoje como /24. As classes foram substituídas pelo CIDR em 1993, mas os vendedores de proxies ainda contam as suas sub-redes classe C.
Ler a definição
DHCP
O protocolo que entrega a um dispositivo um endereço por um tempo. O endereço é emprestado, e renová-lo geralmente devolve o mesmo.
Ler a definição
DNS
O sistema de nomes de domínio traduz nomes de host legíveis em endereços IP, e o lugar onde essa consulta acontece pode revelar a sua localização real sem que você perceba.
Ler a definição
Vazamento de DNS
Quando as suas consultas de DNS passam por fora do proxy e revelam a sua rede ou localização real, mesmo com o seu IP visível mascarado.
Ler a definição
Pilha dupla
Rodar IPv4 e IPv6 lado a lado. Um site com pilha dupla responde nos dois, e um dispositivo ou proxy com pilha dupla escolhe um para cada conexão, geralmente o IPv6.
Ler a definição
Endereço IP dinâmico
Um endereço IP público que um provedor de internet atribui a uma linha por tempo limitado, então ele pode mudar depois de uma reconexão, em um horário programado ou quando o empréstimo termina.
Ler a definição
Nó de saída
O último salto em uma cadeia de proxies, o endereço que o site de destino realmente vê, diferente do gateway ao qual você se conecta.
Ler a definição
Firewall
Uma barreira que permite ou bloqueia tráfego por regras, que é o que impede que um proxy em uma porta incomum seja alcançável em uma rede restritiva.
Ler a definição
Proxy de encaminhamento
Um proxy que fica na frente do cliente e encaminha as requisições de saída dele, o sentido comum da palavra proxy, diferente de um proxy reverso, que fica na frente de um servidor.
Ler a definição
Geofeed
Um arquivo em que uma rede diz onde estão os seus endereços IP, para os bancos de dados de localização lerem. Os registros apontam para ele, mas não verificam o que ele diz.
Ler a definição
Ponto de troca de tráfego
Uma rede compartilhada onde muitos operadores se encontram e passam tráfego diretamente uns aos outros, em vez de pagar uma terceira rede para levá-lo entre eles.
Ler a definição
Provedor de internet
A empresa que conecta uma casa ou uma empresa à internet e atribui o endereço IP cuja propriedade todo site verifica antes de confiar em uma requisição.
Ler a definição
Endereço IP
O rótulo numérico que identifica um dispositivo em uma rede e é o endereço que um proxy coloca no lugar do seu.
Ler a definição
Geolocalização de IP
A dedução da localização física a partir de um endereço IP, confiável no nível de país e muitas vezes errada no nível de cidade, e o mecanismo em que a segmentação geográfica de proxies se apoia.
Ler a definição
Aluguel de IPs
Alugar endereços IPv4 da rede que os detém, sem a conexão de internet que normalmente vem com eles. O detentor mantém o registro.
Ler a definição
Falsificação de IP
Enviar pacotes com o endereço de origem de outra pessoa. A resposta vai para esse endereço em vez de para quem enviou, então uma conexão falsificada não pode ser mantida aberta.
Ler a definição
IPv4
O esquema de endereçamento original da internet, com cerca de 4,3 bilhões de endereços possíveis, hoje tão escasso que os provedores racionam e compartilham esses endereços.
Ler a definição
IPv6
O esquema de endereçamento mais novo, com uma oferta de endereços praticamente ilimitada, adotado de forma desigual pelas redes do mundo.
Ler a definição
Vazamento de IPv6
Tráfego que sai por IPv6 fora de um túnel ou proxy que só carrega IPv4, então os sites veem o seu endereço IPv6 real. Nada falha, então nada avisa você.
Ler a definição
Prefixo IPv6
A parte de rede de um endereço IPv6, dimensionada pelo número depois da barra. Um /64 é uma rede local, e muitos sites contam um /64 como um visitante.
Ler a definição
Balanceador de carga
Infraestrutura que distribui as requisições recebidas por muitos servidores de backend, uma forma de proxy reverso que você encontra pelo lado de fora ao fazer scraping.
Ler a definição
Endereço MAC
O endereço que uma placa de rede carrega no seu próprio enlace. Ele não sobrevive a um roteador, com uma exceção que leva uma forma dele para cada requisição.
Ler a definição
NAT
Network address translation, a técnica que permite que muitos dispositivos compartilhem um endereço IP público reescrevendo o tráfego quando ele passa por um roteador.
Ler a definição
NAT64
Um tradutor que permite que dispositivos só IPv6 alcancem sites só IPv4. Ele compartilha um pool de endereços IPv4 entre muitos usuários, então esses sites veem o endereço da operadora.
Ler a definição
Porta
Um canal numerado em um endereço IP que direciona o tráfego para um serviço específico, como a porta em que o seu proxy escuta.
Ler a definição
Redirecionamento de portas
Uma regra que permite que tráfego de fora chegue a um dispositivo específico atrás de NAT, e o motivo de alguns proxies conseguirem aceitar conexões de entrada e outros não.
Ler a definição
Encadeamento de proxies
Rotear o tráfego por mais de um proxy em sequência, para que cada salto conheça só os vizinhos e o caminho inteiro fique oculto.
Ler a definição
Servidor proxy
Um servidor que fica entre você e a internet, fazendo requisições em seu nome para que o destino veja o endereço do servidor em vez do seu.
Ler a definição
Registro regional de internet
Uma das cinco organizações que distribuem endereços IP e números AS para uma região do mundo e mantêm o registro público de quem os detém.
Ler a definição
IP residencial
Um endereço IP público que um provedor de internet atribuiu a uma conexão doméstica, e que os bancos de dados de endereços por isso rotulam como residencial em vez de hospedagem.
Ler a definição
DNS reverso
A consulta que transforma um endereço IP de volta em um nome de host, muitas vezes o fato isolado mais revelador sobre quem opera um endereço.
Ler a definição
SLAAC
Como um dispositivo IPv6 dá a si mesmo um endereço: o roteador anuncia um prefixo, e o dispositivo escolhe a segunda metade sozinho.
Ler a definição
Endereço IP estático
Um endereço IP que não muda: fixo para um dispositivo dentro de uma rede, ou um endereço público que um provedor mantém para um cliente.
Ler a definição
Sub-rede
Um bloco contíguo de endereços IP gerenciado como uma unidade, muitas vezes com reputação compartilhada e tudo.
Ler a definição
TCP
O protocolo orientado a conexão que carrega quase todo o tráfego de proxy, oferecendo entrega ordenada e confiável ao custo de um handshake de abertura.
Ler a definição
Tor
A rede de anonimato mantida por voluntários que roteia o tráfego por três saltos criptografados, feita para privacidade em vez de para o trabalho para o qual proxies são comprados.
Ler a definição
Traceroute
Uma lista dos roteadores pelos quais um pacote passa, montada enviando pacotes que expiram de propósito. O meio da lista é menos confiável do que parece.
Ler a definição
UDP
O protocolo de transporte sem conexão por trás do DNS, do QUIC e do tráfego em tempo real, que a maioria dos proxies não consegue carregar e o SOCKS5 pode carregar opcionalmente.
Ler a definição
VPN
Uma rede privada virtual que criptografa e roteia todo o tráfego do seu dispositivo por um servidor, enquanto um proxy geralmente roteia um único app.
Ler a definição
Vazamento de WebRTC
Quando o recurso de comunicação em tempo real de um navegador expõe o seu endereço IP verdadeiro mesmo com o seu tráfego passando por um proxy.
Ler a definição
WHOIS
O sistema público de registros que diz quem detém um endereço IP ou um domínio, e a fonte bruta por trás de cada consulta de propriedade neste glossário.
Ler a definição
Protocolos e autenticação
Como o seu cliente e o proxy conversam, e o que essa conversa revela. É aqui que ficam os graus de anonimato, porque só um protocolo que entende a sua requisição consegue adicionar um cabeçalho que a descreve.
Cookie
Um pequeno pedaço de estado que um site guarda no seu cliente e lê de volta a cada requisição, o mecanismo por trás de logins, banners de consentimento e boa parte da pontuação de bots.
Ler a definição
HTTP CONNECT
O método HTTP que transforma um proxy em um túnel cego, que é como um proxy HTTP carrega tráfego HTTPS que não consegue ler.
Ler a definição
Cabeçalho HTTP
As linhas de nome e valor enviadas com cada requisição e resposta web, onde um cliente se descreve e onde os proxies deixam ou removem os seus rastros.
Ler a definição
Lista de IPs liberados
Autorizar um proxy aprovando antecipadamente os endereços IP que podem usá-lo, em vez de enviar um nome de usuário e uma senha.
Ler a definição
Arquivo PAC
Um arquivo de configuração automática de proxy: uma função JavaScript que decide, por requisição, se o tráfego vai direto ou por qual proxy.
Ler a definição
Autenticação de proxy
Como um proxy verifica que você tem permissão para usá-lo, mais comumente por nome de usuário e senha ou liberando IPs de origem específicos.
Ler a definição
QUIC
O transporte por trás do HTTP/3, construído sobre UDP para corrigir os atrasos do TCP, e o motivo de um navegador com proxy voltar silenciosamente a protocolos mais antigos.
Ler a definição
Proxy reverso
Um proxy que fica na frente de servidores em vez de clientes, tratando as requisições recebidas em nome deles, a direção oposta à dos proxies de encaminhamento usados para scraping.
Ler a definição
SNI
O campo em um handshake TLS que nomeia o site ao qual você está se conectando, enviado em texto claro e legível por qualquer um no caminho, incluindo um proxy.
Ler a definição
Proxy SOCKS4
Uma versão mais antiga do protocolo SOCKS que retransmite tráfego TCP, mas não tem autenticação, suporte a UDP nem DNS remoto.
Ler a definição
Sessão fixa
Um recurso de proxy rotativo que mantém você no mesmo IP de saída por um tempo definido, para que uma tarefa de várias etapas termine sem o endereço mudar no meio.
Ler a definição
TLS / SSL
A criptografia que protege o tráfego HTTPS, que um proxy atravessa em túnel intacta, sem ler.
Ler a definição
WebSocket
Um protocolo que transforma uma requisição HTTP em uma conexão persistente de mão dupla, usada para feeds de dados ao vivo, e um caso especial para os proxies carregarem.
Ler a definição
WPAD
Web Proxy Auto-Discovery, o mecanismo por trás da caixa Detectar configurações automaticamente, que permite que uma rede entregue à sua máquina a configuração de proxy dela.
Ler a definição
Scraping e automação
O vocabulário de trabalho da coleta de dados em escala: o que limita você, o que identifica você e o que as defesas realmente medem. Quase nada disso tem a ver com o endereço.
Navegador antidetect
Um navegador feito para rodar muitos perfis isolados, cada um com a sua própria impressão digital consistente, cookies e proxy, para que uma máquina opere várias identidades plausíveis.
Ler a definição
Scraping de API
Coletar dados chamando os endpoints JSON que uma página usa em vez de processar o HTML dela, geralmente o caminho mais rápido, barato e confiável quando existe.
Ler a definição
Impressão digital do navegador
Identificar um visitante pela combinação de traços sutis do navegador e do dispositivo, uma camada de detecção que sobrevive à troca de IP.
Ler a definição
CAPTCHA
Um desafio feito para distinguir humanos de bots, disparado muito mais vezes por uma reputação de rede suspeita do que por qualquer requisição isolada.
Ler a definição
Resolvedor de CAPTCHA
Um serviço que devolve uma resposta para um desafio, por trabalhadores humanos ou por automação, tratando o sintoma de uma pontuação de confiança baixa em vez da causa.
Ler a definição
Seletor CSS
A sintaxe de padrões inventada para estilizar páginas, emprestada pelos scrapers como o jeito do dia a dia de selecionar os elementos que valem a pena extrair.
Ler a definição
Processamento de dados
Transformar uma resposta buscada em dados estruturados, a metade do scraping que acontece depois da rede e quebra por motivos totalmente diferentes.
Ler a definição
Bloqueio geográfico
Restringir ou mudar o que um site mostra com base no país deduzido do visitante, o que um proxy no país-alvo serve para contornar.
Ler a definição
Segmentação geográfica
Escolher de propósito um proxy em um país, região ou cidade específicos para que o seu tráfego saia exatamente de onde você precisa.
Ler a definição
Navegador headless
Um navegador real rodando sem janela visível, usado para renderizar páginas pesadas em JavaScript na automação.
Ler a definição
Rotação de IP
A prática de alternar entre muitos endereços IP ao longo de um trabalho para que nenhum acumule uma contagem de requisições suspeita.
Ler a definição
Renderização de JavaScript
O processo pelo qual as páginas montam o conteúdo no navegador depois de carregar, que decide se buscar o HTML traz dados ou uma casca vazia.
Ler a definição
Paginação
Como um site divide uma lista longa em muitas páginas ou carregamentos, e a parte de um scraping com mais chance de perder dados sem aviso ou de prender um crawler.
Ler a definição
Limitação de taxa
O teto de um site para quantas requisições uma origem pode fazer em uma janela de tempo, o obstáculo mais comum que um scraper encontra.
Ler a definição
Lógica de novas tentativas
Como um scraper lida com requisições que falham, o que, feito mal, desperdiça banda e agrava os bloqueios, e feito bem resgata silenciosamente a maioria das falhas passageiras.
Ler a definição
robots.txt
Um arquivo na raiz de um site que diz aos crawlers quais caminhos ele prefere que evitem, uma convenção sem nenhuma barreira que a imponha.
Ler a definição
API de scraping
Um serviço que recebe uma URL alvo e retorna os dados da página, resolvendo proxies, renderização, novas tentativas e a fricção antibot por trás de um único endpoint.
Ler a definição
SERP
Uma página de resultados de um buscador, o tipo de página mais sensível à localização e mais defendido da web, e a matéria-prima do setor de SEO.
Ler a definição
User agent
O texto que um cliente envia para identificar o navegador e o sistema operacional, um dos sinais mais simples que um site compara com o seu IP.
Ler a definição
Navegador virtual
Um navegador que roda em infraestrutura remota e é controlado pela rede, alugado por sessão em vez de rodar nas suas próprias máquinas.
Ler a definição
Web crawler
Um programa que segue links de página em página para descobrir e buscar conteúdo, o motor de navegação por baixo do scraping em grande escala.
Ler a definição
Web scraping
A coleta automatizada de dados de sites, o motivo mais comum para as pessoas usarem proxies em escala.
Ler a definição
XPath
Uma linguagem de consulta para localizar partes de um documento HTML ou XML, a mais poderosa das duas formas de os scrapers apontarem para os dados dentro de uma página.
Ler a definição
Detecção e reputação
Como um site decide se confia em você. A detecção é uma pontuação montada a partir de muitos sinais fracos em vez de um sim ou não, e é por isso que a mesma configuração passa na segunda-feira e é desafiada na quinta.
Akamai Bot Manager
A defesa empresarial contra bots integrada à CDN da Akamai, conhecida pela telemetria que o script do lado do cliente coleta e pelo cookie de rastreamento que emite.
Ler a definição
Sistema antibot
Uma defesa em camadas, verificações de rede, impressão digital e comportamento combinadas, que os sites usam para separar a automação dos usuários reais.
Ler a definição
Análise comportamental
Detecção que pontua como você interage em vez do que você envia, pegando a automação pelo ritmo, pelo movimento e pela navegação, que um endereço limpo não consegue corrigir.
Ler a definição
Botnet
Uma rede de dispositivos comprometidos controlada sem o conhecimento dos donos, a ponta criminosa de onde pode vir a oferta de proxies e de residenciais.
Ler a definição
Impressão digital por canvas
Uma técnica de impressão digital que faz o seu navegador desenhar uma imagem e lê de volta as pequenas diferenças específicas do hardware na forma como ela foi renderizada.
Ler a definição
IP limpo
Um endereço sem nenhum registro negativo que um site possa consultar: fora de todas as listas de bloqueio, sem histórico de abuso, pertencente a um provedor de internet para consumidores e avaliado como de baixo risco por um motor antifraude.
Ler a definição
Cloudflare
Uma camada de CDN e segurança que fica na frente de uma grande parte da web e inclui alguns dos desafios antibot mais comuns que os scrapers encontram.
Ler a definição
Cloudflare Turnstile
O substituto de CAPTCHA do próprio Cloudflare, que verifica visitantes por verificações do navegador em segundo plano em vez de quebra-cabeças e geralmente mostra só uma caixa de seleção ou nada.
Ler a definição
DataDome
Um serviço de proteção contra bots em tempo real que pontua cada requisição em milissegundos a partir de sinais de dispositivo, rede e comportamento, comum em e-commerce e classificados.
Ler a definição
Impressão digital do dispositivo
A identidade construída a partir dos traços de hardware e de sistema de um dispositivo, mais estável que uma impressão digital do navegador e mais difícil de mudar porque reflete a máquina física.
Ler a definição
Pontuação de fraude
Um número único que serviços de detecção de fraude atribuem a um endereço IP para resumir o quanto o tráfego vindo dele parece arriscado.
Ler a definição
FunCaptcha (Arkose Labs)
Um sistema de desafios da Arkose Labs baseado em quebra-cabeças interativos que mudam, feito para impor custo aos atacantes, além de separar humanos de bots.
Ler a definição
hCaptcha
Um CAPTCHA posicionado pela privacidade que paga os sites que o usam, mais conhecido por ter sido o padrão anterior do Cloudflare e pelos desafios de classificação de imagens.
Ler a definição
Honeypot
Uma armadilha plantada para automação, um link ou campo invisível para humanos, que sinaliza como bot qualquer coisa que interaja com ele.
Ler a definição
Imperva (Incapsula)
Uma plataforma de segurança empresarial já estabelecida que combina uma CDN, um firewall de aplicação web e gestão de bots, antes com a marca Incapsula.
Ler a definição
Lista de bloqueio de IPs
Uma lista publicada de endereços IP sinalizados por abuso, que sites e servidores de e-mail consultam para recusar o tráfego de cara.
Ler a definição
Reputação de IP
A pontuação de confiança acumulada que um site ou serviço de terceiros atribui a um endereço IP com base na rede, no histórico e no comportamento dele.
Ler a definição
Kasada
Uma defesa agressiva contra bots que obriga os clientes a resolver um desafio computacional oculto e que, além de bloquear, atrapalha ativamente a automação.
Ler a definição
PerimeterX (HUMAN)
Uma defesa comportamental contra bots, hoje parte da HUMAN Security, que se apoia em um sensor do lado do cliente e em verificações de integridade de código, além da reputação de rede.
Ler a definição
Varredura de portas
Testar um endereço em muitas portas para encontrar serviços que respondem, que é como a maioria das listas públicas de proxies é montada.
Ler a definição
Detecção de proxy
O conjunto de técnicas que os sites usam para decidir se um visitante está atrás de um proxy, de consultas de rede a análise de comportamento.
Ler a definição
reCAPTCHA
O sistema de desafios do Google, hoje sobretudo uma pontuação invisível de 0,0 a 1,0 em vez de um quebra-cabeça, apoiado nos sinais que uma presença do tamanho do Google consegue ver.
Ler a definição
Impressão digital TCP
Ler o sistema operacional de quem envia a partir do handshake TCP: o limite de saltos, o tamanho do segmento, a janela e a ordem das opções.
Ler a definição
Impressão digital TLS
Um identificador construído a partir de como um cliente negocia a criptografia, usado para identificar automação mesmo por trás de um IP limpo.
Ler a definição
Firewall de aplicação web
Um filtro que inspeciona requisições web recebidas com base em regras e bloqueia as que parecem maliciosas, uma camada diferente da gestão de bots a que os scrapers geralmente se referem.
Ler a definição
X-Forwarded-For
Um cabeçalho HTTP que um proxy pode adicionar para informar o IP do cliente original, e o maior indício que separa um proxy anônimo de um transparente.
Ler a definição
Desempenho
O que você está comprando e como saber se recebeu. Disponibilidade, latência, banda e taxa de sucesso medem coisas diferentes, e a que é anunciada mais alto raramente é a que decide se o seu trabalho termina.
Banda
O volume de dados que um proxy consegue transferir, e a unidade pela qual proxies residenciais e móveis costumam ser cobrados.
Ler a definição
Simultaneidade
Quantas requisições você roda ao mesmo tempo, a principal alavanca do desempenho de scraping e um limite oculto comum.
Ler a definição
Latência
O atraso entre enviar uma requisição por um proxy e receber uma resposta, determinado em grande parte pela distância física até a saída.
Ler a definição
Perda de pacotes
Quando pacotes de dados não chegam e precisam ser reenviados, uma causa silenciosa de conexões de proxy lentas e instáveis que a latência sozinha não revela.
Ler a definição
QPS
Consultas por segundo, a taxa com que você envia requisições, que precisa ser equilibrada com os limites do alvo e com o teto de simultaneidade do proxy.
Ler a definição
Taxa de sucesso
A parcela de requisições que voltam com os dados que você queria, a métrica que realmente mede o valor de um proxy.
Ler a definição
Tempo até o primeiro byte
O atraso entre enviar uma requisição e a chegada do primeiro byte da resposta, o número de desempenho que isola o caminho do proxy do tamanho do download.
Ler a definição
Uptime
A parcela do tempo em que um proxy está de fato alcançável e funcionando, que para pools residenciais é uma medição ao vivo, sem garantia.
Ler a definição

