Perplexity AIは、スクレイピングを望まないサイトからコンテンツを削除していることで再び注目を集めています。これは一回限りのことではありません。Cloudflareは、同社がボットの侵入を防ぐためのウェブ制限を積極的に回避していると非難しました。技術レポートによると、Perplexityのクローラーは、通常のブラウザを装い、マスクされたIPアドレスを巡回することで、標準プロトコルを回避します。

これは、Perplexityが公に述べたことと真っ向から矛盾しています。同社はRobots Exclusion Protocol（ロボット排除プロトコル）を遵守していると主張していますが、Cloudflareのデータはそれと異なる事実を物語っています。Perplexityはこれらのルールを無視しているだけでなく、それを回避するために偽装しているとさえ言われています。

Cloudflareは、Perplexityがシステムを悪用していると述べている

サイトがボットに退去命令を出した場合、ボットはそれに従う義務があります。Robots Exclusion Protocol（ROP）は法的拘束力はありませんが、広く尊重されています。Cloudflareは、Perplexityの公式クローラーをブロックした後もトラフィックが継続していることを発見しました。今回は「Perplexity」というラベルの付いたクローラーからのトラフィックではなく、Chromeの通常のユーザーを装い、検出を回避するためにネットワーク間を行き来するIPアドレスからのトラフィックでした。

Cloudflareは、数千のウェブサイトと毎日数百万件のリクエストにわたってこの行動を照合しました。それは微妙なものではなく、体系的なものでした。そして、その痕跡はPerplexityへと繋がりました。

情報検索を基盤とする企業にとって、ここが難題となる。パープレキシティはルールを尊重すると言い張るかもしれないが、ルールを直接回避する戦術を展開しているのであれば、それはグレーゾーンではなく、回避行為に当たる。

出版社は『パープレキシティ』を盗作だと非難している

これは単にクローリングの問題ではありません。Perplexityが入手したコンテンツをどう扱うかという点も重要です。Wired、Forbes、The New York Timesといったメディアは、Perplexityが適切なクレジット表記なしに記事を要約、言い換え、さらには歪曲して伝えていると非難しています。あるケースでは、PerplexityのAIがカリフォルニア州の警察官が犯罪を犯したと誤って報告しました。これは実際には起こっていませんが、その発言は警鐘を鳴らすほど説得力のあるものでした。

CEOのアラヴィンド・スリニヴァス氏は、こうした結果はツールの限界を試すために設計された特定のプロンプトから生じたものだと反論した。また、秘密保持契約（NDA）で保護されている匿名のサードパーティ製クローラーに責任を転嫁した。これらのパートナーに対し、ブロックされたサイトのスクレイピングをやめるよう指示したかどうかという質問に対し、スリニヴァス氏は「複雑な問題です」と答えた。

そんなに複雑なことではありません。サイトが「スクレイピングしないでください」と警告しているにもかかわらず、あなたが直接、あるいは誰かに依頼してスクレイピングを行った場合、責任はあなたにあります。

Perplexityは、ユーザーがAI生成記事を作成できる「Pages」機能を通じて盗用されたコンテンツについても批判を浴びています。Forbesは、同社の独占記事をクレジットなしでコピーしたコンテンツを発見しました。Perplexityは、その記事をAIナレーションのポッドキャストに仕立て上げました。指摘を受けた同社は、より正確な出典表記を含むよう機能を修正しました。しかし、修正は被害発生後に行われました。

Appleにとってこれが本当に意味するもの

ここで事態は急転する。AppleがPerplexityの買収を検討しているとの報道がある。これはいくつかの難しい疑問を提起する。

Appleは長年、ルールを遵守する企業としての地位を確立してきました。ユーザーのプライバシー保護を推進し、データの不正利用と闘い、デジタル倫理における道徳的優位性を主張しています。しかし、広範囲にわたるスクレイピングや虚偽表示で非難されているスタートアップ企業を買収すれば、Appleの評判は大きく傷つくでしょう。

簡単に説明すると、AppleはPerplexityの技術に価値を見出し、それがAppleを内部から改善できると考えている、ということになる。確かにその通りかもしれない。しかし、Perplexityがここまで成長した経緯はこれでは覆らない。Perplexityは、必ずしも無料で提供されるわけではないコンテンツを集め、適切なクレジット表記をせずに提供することで成長してきたのだ。

Appleが前進すれば、倫理観の明確な維持よりもAI競争に勝つことが重要だということを示すことになる。そしてそれは、AI分野で単にゆっくりと前進するよりも危険な妥協となる。