Hoy en día la mayoría de nosotros hemos aceptado que regularmente se realizará un seguimiento a medida que avanzamos en nuestra vida diaria. Prácticamente todo lo que hacemos en los dispositivos digitales, especialmente cuando estamos conectados a internet, es seguido por alguien en alguna parte. De hecho, si no se toman medidas específicas para evitar que otras personas lo hagan, Es un hecho que se realizará un seguimiento sin importar lo que estamos haciendo.
Siendo rastreado es nada nuevo. Mientras que el Internet ha sido de alrededor, sitios web han sido capaces de controlar sus usuarios. Sin embargo, la gama de técnicas disponibles en la actualidad es verdaderamente alucinante. toma de huellas dactilares, análisis agente de usuario, Dirección IP seguimiento de la ubicación y muchos más se utilizan para perfilar nosotros y husmear en lo que hacemos cuando estamos en línea.
De hecho, hay algo de una paradoja en el juego aquí. usuarios genuinos de Internet están ahora sujetos a un escrutinio mucho mayor que antes, en gran parte debido a la subida de los robots y otros usuarios de Internet no humanos.
Se puede entender por qué tantos servicios en línea y sitios web quieren evitar que los usuarios no humanos tengan acceso a ellos. Cada usuario representa un costo en recursos, no importa que tan pequeño. Para los sitios web que atraen a un gran volumen de tráfico, Estos por lo general las visitas de bajo costo pueden ser muy significativos. En algunos casos, evitando que los usuarios automatizados y los robots de acceso a un servicio puede reducir significativamente la tensión que se encuentra bajo.
Por qué está pasando esto?
A pesar del hecho de que hay un esfuerzo concertado para eliminar los robots de muchas plataformas en línea, que han seguido aumentando a un ritmo notable. Cualquier persona que utiliza los medios sociales muy probablemente se encontrará con los robots en la plataforma, si se da cuenta o no. E incluso si usted no visita Medio social plataformas, sólo hay unos pocos sitios web y servicios en línea que no se tiene acceso por los robots de alguna forma u otra.
Por ejemplo, sitios web que ofrecen comparaciones de precios o agregación de contenidos tendrán que utilizar los robots para raspar otros sitios web con el fin de obtener los datos que se presentan a sus usuarios. sin los robots, Los motores de búsqueda como Google no sería capaz de funcionar. Sin embargo, el término bot ha adquirido una serie de connotaciones negativas en los últimos años, en gran parte debido a que se utilizaron para difundir la propaganda rusa durante la 2016 elecciones en Estados Unidos.
Debido a que los robots están ahora bajo un escrutinio, y no es tal un esfuerzo concentrado para impedirles el acceso a servicios en línea, bot desarrolladores han tenido que ser mucho más inteligente cuando se trata de evadir la detección. Hay un número de desarrolladores técnicas bot puede utilizar para hacer sus creaciones más difícil de detectar.
Detección de Motores de búsqueda
los robots más antiguos y menos sofisticados son bastante fáciles de detectar en línea. De hecho, muchos de ellos no emplear cualquiera de las técnicas básicas que los desarrolladores bot ahora utilizan para evitar ser detectados. Sin embargo, se han ido los días en que simplemente mirando a una dirección IP sería suficiente para saber si un usuario es o no humano. Robots de hoy emplean tácticas mucho más sofisticados que sus predecesores había sido capaz de hacer.
No sólo moderna robots de disfrazar sus direcciones IP; también saben cómo falsificar sus agentes de usuario, deshacerse de cualquier esfuerzo de huellas dactilares, y responden a las cookies de la misma manera un usuario humano haría. Todas estas técnicas hacen los robots mucho más difíciles de detectar.
Por ahora, bot desarrolladores siguen más listo que la mayoría de los servicios en línea. Históricamente, que han sido buenos en ir un paso por delante de la competencia. Pero eso no impide que los sitios web de emplear mucho más estrictas y los métodos de detección más exhaustivas, que en última instancia significa que terminan reunir más información de cada usuario - ya sean humanos o no.
Atrapados en una encrucijada
Como desarrolladores de bots se vuelven más sofisticados y encontrar nuevas maneras de evitar las medidas de detección, tenemos en la práctica, los sitios web son cada vez más agresivos en sus esfuerzos para desenmascarar y prevenir los robots el uso de sus plataformas. Desafortunadamente, este monitoreo más agresivo también se aplica a los usuarios regulares que no tienen nada mal hecho.
Mientras que la mayoría de nosotros esperamos bots para ser parte de la web, y que los sitios web tienen el derecho a impedir que los robots tengan acceso a su plataforma si así lo desean, todavía hay una pregunta muy importante sobre el consentimiento informado. Sitios web que nos están siguiendo rutinariamente en formas que antes no lo hacían, y algunos de estos métodos pueden violar nuestra privacidad.
En general, no hay manera de saber exactamente qué tipo de defensas tiene un sitio web sin antes de acceder a él. Esto hace que sea imposible ver de antemano lo que los métodos de detección que utiliza y luego decidir si estamos felices de ser sometido a ellos o no.
Sobre el Autor: El Kernel
Ebbe Kernel es analista de recopilación de datos de Suecia y consultor. Él ha estado trabajando en el campo de la inteligencia de datos durante más de diez años y han aconsejado a cientos de proveedores de datos y las grandes empresas en las soluciones de adquisición de datos in-house. Leer más acerca de mí encima en ebbekernel.com.
