AIクローラーに立ち向かう開発者たちのユーモアと機知が生んだプロジェクト「アヌビス」の真相

Contents

概要

AIウェブクローリングボットはインターネットの「ゴキブリ」と呼ばれ、多くの開発者がその影響を受けており、特にオープンソースプロジェクトは不当な影響を強く受けている。

これらのボットは、ロボット排除プロトコルであるrobot.txtを無視し、サイトのダウンを引き起こすこともあるため、開発者たちはさまざまな対策を講じている。

FOSS開発者であるXe Iasoは、ボットによるDDoS攻撃に直面し、逆プロキシのツール「Anubis」を開発。このツールはユーザーリクエストを確認し、人間のブラウザは通過させる一方、ボットをブロックする。

Anubisはエジプト神話に基づく名前で、FOSSコミュニティで瞬く間に人気を集め、ボット対策の一環として支持を得た。

他の開発者も、ボットに対抗するための独自のアイデアを持っており、例えば、ウェブサイトを騙すコンテンツを提供する方法や、Cloudflareによる新しいツールも登場した。

FOSSプロジェクトにおけるボットの影響は深刻であり、一部の開発者は国全体を遮断せざるを得ない状況に直面している。

これらの開発者たちは、ユーモアを交えて巧妙にボットに立ち向かおうとしている。