PT
Começar

Glossário

Detecção e reputação

Akamai Bot Manager

A defesa empresarial contra bots integrada à CDN da Akamai, conhecida pela telemetria que o script do lado do cliente coleta e pelo cookie de rastreamento que emite.

A Akamai opera uma das maiores redes de distribuição de conteúdo da internet, e o Bot Manager dela é uma defesa tecida nessa borda, e essa é a primeira coisa a entender sobre ele: em um site atrás da Akamai, a proteção é a mesma infraestrutura que já está servindo a página, longe de ser um serviço separado que a requisição alcança. Ela fica na frente de bancos, companhias aéreas, grandes varejistas e outras empresas, então é o sistema que você encontra exatamente nos alvos de alto valor que mais justificam uma defesa séria.

A marca dela é a profundidade da telemetria do lado do cliente que ela coleta. Um script embutido na página reúne um registro extenso do ambiente e da interação, características do navegador e do dispositivo e o tempo minucioso de como um usuário real percorre uma página, e codifica isso em dados de sensor enviados de volta para pontuação. O resultado aparece como um cookie de rastreamento, amplamente reconhecido pelo nome, que leva o veredito, e uma requisição que chega sem um cookie válido, ou com um que não bate com o comportamento declarado, é tratada de acordo.

Essa arquitetura faz dela um tipo específico de difícil. Os dados de sensor esperam descrever uma sessão de navegação real, então um cliente ingênuo que nunca executou o script, ou o executou sem produzir uma telemetria humana plausível, é identificável pela ausência ou pela implausibilidade do registro inteiro, sem depender de nenhum valor isolado. Reaproveitar um cookie capturado falha, porque o cookie deve corresponder a um comportamento vivo e contínuo, sem funcionar como um token estático.

Na estratégia, isso coloca a Akamai firmemente entre os sistemas em que o comportamento e a integridade do cliente dominam e o endereço é um coadjuvante. Uma saída residencial confiável resolve a entrada de reputação de rede e deixa o problema dos dados de sensor totalmente intocado, de longe o problema maior. Rodar a página de verdade em um navegador real, com interação real, trata a telemetria que o sensor foi feito para ler, com o custo e a detectabilidade que pilotar um navegador traz.

A conclusão pragmática bate com a dos outros sistemas corporativos: contra um alvo da Akamai configurado com seriedade, os caminhos realistas são uma abordagem com navegador real mantida com cuidado, um endpoint especializado que a mantém por você, ou uma API oficial onde os dados são oferecidos diretamente. Um endereço sozinho nunca seria a resposta aqui.

Perguntas frequentes

Por que é tão difícil fazer scraping na Akamai?

Porque a defesa dela lê uma telemetria profunda do lado do cliente, muito além do seu endereço. Um script embutido registra características do dispositivo e o tempo minucioso da interação real, codifica tudo como dados de sensor e emite um cookie ligado a esse comportamento. Um cliente que não produziu uma telemetria humana plausível é identificável por mais limpo que seja o IP, e é por isso que correções de rede sozinhas quase não mexem nela.

Posso simplesmente reaproveitar o cookie da Akamai?

Não, e essa é a primeira tentativa comum. O cookie de rastreamento deve corresponder a um comportamento vivo e contínuo, sem funcionar como um passe estático, então um cookie reaproveitado falha contra um sistema que espera que os dados de sensor continuem batendo com o que você faz. O cookie é um sintoma de uma sessão válida; tirá-lo de uma sessão não dá a você a chave dela.

Os proxies ajudam contra o Akamai Bot Manager?

Eles resolvem uma entrada e deixam a difícil de pé. Um endereço residencial confiável satisfaz a checagem de reputação de rede, enquanto a análise de dados de sensor e de comportamento, a maior parte do veredito, fica intocada pelo IP de onde você chega. Necessários para a camada de rede, irrelevantes para a camada de telemetria.

Como sei se um site está atrás da Akamai?

O cookie de rastreamento que ela define tem um nome característico e amplamente documentado, e os endereços do site resolvendo para a rede da Akamai são uma forte pista, já que a defesa contra bots viaja na mesma CDN. Entre o cookie e a propriedade da rede, confirmar a Akamai costuma ser simples, e isso diz para você planejar para um problema de telemetria, bem mais que para um problema puro de endereço.

Voltar ao glossário completo.

HProxy.

Não acredite só na nossa palavra. Meça você mesmo.

Roda no seu navegador contra o endereço real. Sem cadastro, sem lista armazenada.

HProxy