Hoje em dia a maioria de nós aceitaram que serão regularmente monitorados como nós vamos sobre nossas vidas diárias. Praticamente tudo o que fazemos em dispositivos digitais, especialmente quando estamos conectados à internet, é seguido por alguém em algum lugar. De fato, se não tomarmos medidas específicas para impedir que outras pessoas fazê-lo, É um dado que será seguido, não importa o que estamos fazendo.
Sendo rastreado é nada de novo. Enquanto a internet tem sido em torno, sites têm sido capazes de monitorar seus usuários. Contudo, a gama de técnicas disponíveis hoje é verdadeiramente alucinante. fingerprinting, análise de agente de utilizador, endereço de IP rastreamento de localização e muitos mais são usados para nos perfil e bisbilhotar sobre o que fazemos quando estamos on-line.
De fato, há algo de um paradoxo em jogo aqui. usuários de internet genuínos estão agora sujeitos a escrutínio muito maior do que antes, em grande parte por causa do aumento dos bots e outros utilizadores da Internet não-humanos.
Você pode entender por que tantos serviços online e sites quer evitar usuários não-humanos tenham acesso a eles. Cada usuário representa um custo em recursos, Não importa quão pequeno. Para sites que atraem um grande volume de tráfego, Estes geralmente visitas de baixo custo pode ser muito significativa. Em alguns casos, impedindo que os utilizadores automatizados e bots de acessar um serviço pode reduzir significativamente a tensão se encontra sob.
Por que isso está acontecendo?
Apesar do fato de que há um esforço concertado para remover bots de muitas plataformas on-line, eles continuaram a aumentar a um ritmo notável. Qualquer um que usa a mídia social muito provavelmente encontrará bots na plataforma, se ele percebe ou não. E mesmo se você não visitar meios de comunicação social plataformas, há apenas alguns sites e serviços online que não estão sendo acessados por bots de alguma forma ou de outra.
Por exemplo, sites que oferecem comparações de preços ou agregação de conteúdos vai precisar usar bots para raspar outros sites, a fim de obter os dados que eles apresentam para seus usuários. sem bots, motores de busca como o Google não seria capaz de funcionar. Contudo, o termo bot adquiriu uma série de conotações negativas nos últimos anos, em grande parte porque eles foram usados para espalhar propaganda russa durante o 2016 eleições nos EUA.
Porque bots são agora sob tal controlo, e não há como um esforço concentrado para impedi-los de acessar serviços on-line, desenvolvedores de bot tiveram que ser muito mais esperto quando se tenta evitar a detecção. Há um número de desenvolvedores técnicas bot pode usar para fazer suas criações mais difíceis de detectar.
Detectando Bots
bots mais velhos e menos sofisticados são bastante fáceis de detectar on-line. De fato, muitos deles não empregam qualquer uma das técnicas básicas que os desenvolvedores de bot agora usar para evitar a detecção. Contudo, ido são os dias em que simplesmente olhar para um endereço IP seria suficiente para dizer se um usuário era humano ou não. Bots empregam hoje muito táticas mais sofisticadas do que os seus antecessores tinham sido capaz de fazer.
Não só moderno bots disfarçar seus endereços IP; eles também sabem como falsificar seus agentes de usuário, jogar fora todos os esforços fingerprinting, e eles respondem aos cookies da mesma maneira um usuário humano faria. Todas essas técnicas fazem bots muito mais difícil de detectar.
Para agora, desenvolvedores de bots continuar a enganar a maioria dos serviços online. historicamente, eles têm sido bons em ficar com um golo etapa da competição. Mas isso não impede que sites de empregar muito mais rigorosas e métodos de detecção mais completas, que em última análise significa que eles acabam recolha de mais informações a partir de cada utilizador - se são ou não humano.
Caught in the Crossfire
Como desenvolvedores de bots tornaram mais sofisticados e encontrar novas maneiras de evitar as medidas de detecção, temos na prática, os sites estão se tornando muito mais agressivo em seus esforços para desmascarar e evitar bots de usar suas plataformas. Infelizmente, Esta monitorização mais agressiva também é aplicada a usuários regulares que não têm nada mal feito.
Enquanto a maioria de nós espera bots a ser uma parte da web, e que os sites têm o direito de impedir que bots de acessar a sua plataforma, se optar por isso, ainda há uma pergunta muito importante sobre o consentimento informado. Sites são rotineiramente nos rastreamento de formas que eles nunca fez antes, e alguns desses métodos podem infringir a nossa privacidade.
Em geral, não há nenhuma maneira de descobrir exatamente que tipo de defesas um site tem sem primeiro visitá-lo. Isso torna impossível para ver de antemão o que os métodos de detecção que utiliza e, em seguida, decidir se estamos felizes de ser submetido a eles ou não.
Sobre o autor: ele Kernel
Ebbe Kernel é o sueco analista de coleta de dados e consultor. Ele tem trabalhado na área de inteligência de dados há mais de dez anos e tem aconselhado centenas de provedores de dados e grandes empresas em soluções de aquisição de dados in-house. Leia mais sobre mim em cima da ebbekernel.com.
