今日、私たちのほとんどは、私たちが日常生活を送るときに定期的に追跡されることを受け入れています. 私たちがデジタルデバイスで行う事実上すべて, 特にインターネットに接続しているとき, どこかに誰かが続く. 実際には, 他の人がそうするのを防ぐために特別な措置をとらない限り, 私たちが何をしていても追跡されるのは当然のことです.
追跡されることは新しいことではありません. インターネットが存在する限り, ウェブサイトはユーザーを監視することができました. でも, 今日利用できる技術の範囲は本当に驚異的です. 指紋, ユーザーエージェント分析, IPアドレス 位置追跡 そして、私たちのプロファイルを作成し、オンラインのときに私たちが何をしているのかをスヌープするために、さらに多くのことが使用されています.
実際には, ここではパラドックスのようなものがあります. 現在、本物のインターネットユーザーは、以前よりもはるかに厳しい監視の対象となっています。, 主にボットやその他の人間以外のインターネットユーザーの増加によるものです.
非常に多くのオンラインサービスやWebサイトが、人間以外のユーザーがそれらにアクセスするのを防ぎたい理由を理解できます。. すべてのユーザーはリソースのコストを表します, どんなんに小さくても. 大量のトラフィックを引き付けるWebサイトの場合, これらの通常は低コストの訪問は非常に重要になる可能性があります. ある場合には, 自動化されたユーザーの防止 また、ボットがサービスにアクセスすることで、サービスにかかる負担を大幅に軽減できます。.
なぜこうなった?
多くのオンラインプラットフォームからボットを削除するための協調的な取り組みがあるにもかかわらず, 彼らは驚くべき速度で増加し続けています. ソーシャルメディアを多用する人は、おそらくプラットフォーム上でボットに遭遇するでしょう, 彼がそれを実現するかどうか. そして、あなたが訪問しなくても ソーシャルメディア プラットフォーム, 何らかの形でボットがアクセスしていないWebサイトやオンラインサービスはごくわずかです。.
例えば, 価格比較またはコンテンツの集約を提供するWebサイトは、ボットを使用して他のWebサイトをスクレイピングし、ユーザーに提示するデータを取得する必要があります。. ボットなし, グーグルのような検索エンジンは機能することができないでしょう. でも, ボットという用語は、近年、多くの否定的な意味合いを獲得しています, 主な理由は、ロシアのプロパガンダを広めるために使用されたためです。 2016 米国の選挙.
ボットは現在そのような監視下にあるため, そして、彼らがオンラインサービスにアクセスするのを防ぐためのそのような集中的な努力があります, ボット開発者は、検出を回避しようとするときに、はるかに賢くなければなりませんでした. ボット開発者が自分の作品を見つけにくくするために使用できるテクニックはたくさんあります.
ボットの検出
古くて洗練されていないボットは、オンラインで簡単に検出できます. 実際には, それらの多くは、ボット開発者が検出を回避するために現在使用している基本的な手法を採用していません. でも, ユーザーが人間であるかどうかを判断するには、IPアドレスを見るだけで十分だった時代は終わりました。. 今日のボットは、前任者が実行できたよりもはるかに洗練された戦術を採用しています.
現代だけでなく ボットはIPアドレスを偽装します; また、ユーザーエージェントをスプーフィングする方法も知っています, 指紋認証の努力を捨てる, 人間のユーザーと同じようにCookieに応答します. これらの手法はすべて、ボットの検出を非常に困難にします.
今のところ, ボット開発者は、ほとんどのオンラインサービスを凌駕し続けています. 歴史的に, 彼らは競争の一歩先を行くことに長けています. しかし、それはWebサイトがはるかに厳密でより徹底的な検出方法を採用することを妨げるものではありません, つまり、最終的には、人間であるかどうかに関係なく、各ユーザーからより多くの情報を収集することになります。.
クロスファイアに巻き込まれた
ボット開発者がより洗練され、検出手段を回避するための新しい方法を見つけるにつれて, 私たちは実際に持っています, Webサイトは、ボットがプラットフォームを使用するのをマスク解除して防止するための取り組みにおいて、はるかに積極的になっています。. 不運にも, このより積極的な監視は、何も悪いことをしていない通常のユーザーにも適用されます.
私たちのほとんどはボットがウェブの一部であることを期待していますが, また、そのWebサイトには、ボットがプラットフォームにアクセスするのを防ぐ権利があります。, インフォームドコンセントについてはまだ1つの非常に重要な質問があります. ウェブサイトは、これまでにない方法で定期的に私たちを追跡しています, これらの方法のいくつかは私たちのプライバシーを侵害する可能性があります.
一般に, Webサイトに最初にアクセスしなければ、Webサイトがどのような防御を行っているかを正確に知る方法はありません。. これにより、どの検出方法が使用されているかを事前に確認し、それらに対応できるかどうかを判断することができなくなります。.
著者について: Ebbeカーネル
Ebbe Kernelは、スウェーデンのデータ収集アナリストおよびコンサルタントです。. 彼はデータインテリジェンスの分野で10年以上働いており、社内のデータ取得ソリューションについて何百ものデータプロバイダーや大企業にアドバイスを提供してきました。. ebbekernel.comで私についてもっと読む.