Back to Question Center
0

ウェブサイトのデータスクレイピングに関するSemaltの専門家 - 良いと悪いボット

1 answers:

Webスクレイピングは長い間行われてきたものであり、フリーランサー、プログラマー、非プログラマー、マーケティング研究者、学者、ソーシャルメディアの専門家などが含まれます。ボットには、良いボットと悪いボットの2種類があります。良いボットは、検索エンジンがウェブコンテンツを索引付けすることを可能にし、市場の専門家とデジタルマーケターによって高い優先度が与えられる。一方、悪質なボットは役に立たず、サイトの検索エンジンランキングを損なうことを目指しています。ウェブスクレイピングの合法性は、あなたが使ったボットの種類によって異なります。

違法な使用を意図して別のWebページからコンテンツを取得する悪質なボットを使用している場合、Webスクレイピングは有害な可能性があります。しかし、あなたが良いボットを利用し、サービス拒否攻撃、オンライン詐欺、競合データマイニング戦略、データ盗難、アカウントハイジャック、不正脆弱性スキャン、デジタル広告詐欺、知的財産権の盗みなどの有害な活動を避けた場合、インターネットを利用してビジネスを成長させるためには、ウェブスクレイピング手順が有効であり、役立ちます。残念なことに、残念なことに、フリーランサーや新興企業のほとんどは、パートナーシップを必要とせずにデータを収集するための安価で強力で包括的な方法であるため、悪いボットを愛しています。しかし、大手企業は法的なウェブスクレイパーを利用して利益を得ており、違法ウェブスクレイパーでインターネット上の評判を傷つけたくない。ここ数カ月で、連邦裁判所のシステムがますます違法なウェブスクレイピング戦略を打ち破っていることが明らかになったため、ウェブスクレイピングの合法性に関する一般的な意見は重要ではないようです。

2000年にボットやスパイダーを使ってウェブサイトを傷つけることはナンセンスと見なされ、違法なプロセスとしてウェブスクレイピングが始まりました。.eBayは、Bidder's Edgeに対して、Webサイト上でのボットの使用がChattelsの法律違反に違反したと主張して、最初に予備的な差し止め命令を提出しました。裁判所は、ユーザーがサイトの利用規約に同意しなければならず、eBayのコンピュータマシンにとって破壊的な可能性があるため、多数のボットが無効にされたため、差し止め命令をすぐに認めた。訴訟はすぐに裁判所から解決され、eBayは彼らが良いか悪いかにかかわらず、すべての人がウェブの掻き取りのためにボットを使用するのを止めた。

2001年に、旅行会社は有害なクモと悪いボットの助けを借りてウェブサイトからコンテンツを盗んだ競争相手を訴えた。裁判官は再び犯罪対策を講じ、犠牲者を支持し、ウェブスクレイピングとボットの使用がさまざまなオンラインビジネスに害を及ぼす可能性があると言った。

今日、学問的、私的および情報の集約のために、多くの人々が公平なウェブスクレイピング手順に頼っており、この点に関して多くの(25個の)ウェブスクレイピングツールが開発されている。職員は、これらのツールのすべてが信頼できるわけではないが、有料版やプレミアム版のものは、無料のWebスクレイパーよりも優れていると言っている。議会は、2016年に、悪いボットを標的にし、良いボットを好むために、最初の法律を可決した

より良いオンラインチケット販売(BOTS)法が制定され、ウェブサイトをターゲットにし、検索エンジンのランクを損なうことができ、ビジネスを破壊する違法ソフトウェアの使用を禁止した。公正さの問題があります。たとえば、LinkedInは悪いボットをブロックまたは排除し、良いボットを奨励するツールに多くのお金を費やしています。裁判所がウェブスクレイピングの合法性を判断しようとしているので、企業はデータを盗んでいる。

December 7, 2017
ウェブサイトのデータスクレイピングに関するSemaltの専門家 - 良いと悪いボット
Reply