インターネットの集合的記憶の侵食

デジタル検索の危機

ウェブにおける情報の検索は、決定論的なポインタのシステムから、確率的な推測のシステムへと移行しつつあります。この移行は、基本的な事実の正確性を損ない、一次ソースをますます発見しにくくしています。

GoogleのAI生成サマリー（AI Overviews）の統合は、一般的な検索において重大な事実誤認を導入しました。例えば、ユーザーはAIが日没時間を捏造し、その結果イベントへの参加を逃したと報告しています。この変化は、検索エンジンがユーザーをソースへと導く「中立的なゲートウェイ」モデルから、エンジンが情報を自身の言葉で書き換える編集モデルへと移行していることを示しています。この変化はすでに法的帰結を招いています。ドイツの裁判所は最近、GoogleのAI overview機能が、出版社を詐欺的なビジネス慣行に関連付けて誤った記述をしたことに対し、Googleの責任を認めました。

デジタル・コーパスの崩壊

インターネットの集合的記憶を保存するインフラストラクチャは、企業の利益、技術的な劣化、そしてAI主導のトラフィックの変化が組み合わさることで崩壊しつつあります。

企業の消去とリンク切れ

デジタルコンテンツは加速的なペースで削除されています。顕著な例は、Walt Disney Companyが、FiveThirtyEightが収益を生む資産ではなくなった後、そのアーカイブのほぼすべてを削除すると決定したことです。これは、デジタルアーカイブが文化的記録ではなく、負債やコストセンターとして扱われる傾向を示しています。

Wikipediaのパラドックス

世界で最も重要な公共知識リソースの一つであるWikipediaは、システム的な脅威に直面しています。AIシステムは現在、Wikipediaのコンテンツをスクレイピングして取り込み、直接的な回答を提供するため、ユーザーが元のページをクリックして遷移する必要がなくなっています。これは負のフィードバックループを生み出します。トラフィックの減少は、百科事典の運営を維持するために必要な注目度や寄付を減少させます。

Internet Archiveの法的闘争

Internet ArchiveとそのWayback Machineは、ウェブの最も近いフェイルセーフなバックアップとして、深刻な圧力にさらされています。ウェブをインデックスするためのエンジニアリング上の負担に加え、この組織はデジタル貸出プログラムを巡る高額な訴訟に直面しています。さらに、ニュース組織は、AI企業がアーカイブされたページを著作権物の間接的なソースとして利用することを防ぐため、Wayback Machineのクローラーをますますブロックしています。

コミュニティの視点による統合

この侵食に関する技術的な議論は、いくつかの重要な緊張関係を浮き彫りにしています。

「AI Ouroboros（ウロボロス）」効果: ユーザーや開発者は、AIがAIによって生成された「slop（低品質なコンテンツ）」で学習されるという、負のフィードバックループについて警告しています。これは時間の経過とともにモデルの品質を低下させます。あるユーザーは、AIが別のAIのハルシネーション（幻覚）を事実として引用できるようになったと指摘しています。
ドキュメンテーションの死: 開発者は、技術的なリファレンス・ドキュメンテーションが従来の検索を通じて見つけにくくなっていると報告しており、APIの詳細を捏造する可能性のあるAIへの依存を強いてています。
広告モデルの失敗: 批判的な人々は、Googleの優先順位がユーザーから広告主へとシフトし、検索の質が収益化とAI主導のエンゲージメントのために犠牲にされている「優先順位の逆転」が起きていると主張しています。
キュレーションへの回帰: 公共のウェブにおける「slopの沼」への反応として、個人のウェブサイト、キュレーションされたニュースレター、プライベートなアーカイブへと向かう動きが高まっています。

"We're building the world's largest library and then locking the doors, we're letting the bots photocopy everything before the lights go out。"

デジタル主権に向けて

集合的記憶の完全な喪失を防ぐため、情報を検索する仕組みを、消費者サービスではなく戦略的な公共資産として扱うべきだという動きがあります。

国家的な代替案

一部の政府は、すでにBig Techプラットフォームに代わるものを提供しています。フランスは、シリコンバレーへの依存を減らすため、ヨーロッパでホストされているプライバシー保護型検索エンジンであるQwant、および国産のメッセージングアプリであるTchapを採用しています。同様に、欧州委員会は、独立したソーシャルサイトであるW Socialに加わっています。

公共利益のためのアーキテクチャ

政府が道路や国家安全保障を管理するように、公共利益のためのデジタル・インフラストラクチャの構築という議論が強まっています。これには、Library and Archives CanadaやInternet Archive Canadaのような機関をサポートすることを含みます。これは、歴史的記憶が、収益性があるからではなく、公共の利益であるからこそ保存されることを確実にするためです。