世界を動かす技術を、日本語で。

TIMEが提供するAIボットは、広告を組み込んだ異なるウェブサイトです

概要

  • TIME がAIと人間で異なるウェブサイトを提供
  • AIクローラー にはマークダウン形式の軽量ページを返却
  • 広告 が人間には見えずAI向けページでのみ表示
  • Mobian というアドテク企業が配信と計測を担当
  • AI向けコンテンツ の存在に人間読者は気づかない現状

TIMEがAI向けに分岐サイトを提供する仕組み

  • TIME.com はアクセス元の User-Agent によって返すページを切り替え
  • ChromeやSafari、Googlebot には通常のHTMLページ(約303KB)を返却
  • ClaudeBot、PerplexityBot、OAI-SearchBot 等のAIクローラーには マークダウン形式 (約13KB)の簡素なページを返す
  • GPTBotやChatGPT-User406エラー でブロック
  • OAI-SearchBot はマークダウンページにアクセス可能
  • 同一URL でも人間とAIで全く異なる内容・形式

AI専用ページの特徴と広告の仕組み

  • content-type: text/markdown; charset=utf-8 ヘッダーでマークダウンを明示
  • cache-control: no-store で毎回新しいリクエストとカウント
  • x-mobian-impression (UUID)で個別リクエストを識別
  • x-mobian-tokens でAIモデルに供給されたトークン数を計測
  • Mobian タグ付きのコメントでページ開始
  • AI向けページ には スポンサー広告 (例:Ally Bank FAQやProject Management InstituteのPR)が挿入
    • FAQやJSON-LD、トラッキングリンク含む
    • 人間向けHTML には一切表示されない

広告の表示と隠れたオーディエンス分断

  • AI用の広告 は「Sponsored」と明記されているが、人間には見えない
  • Googlebot は通常HTMLを受け取るため、検索ランキングには影響しない
  • アシスタント系クローラー のみが広告付きマークダウンを受信
  • AIモデル がFAQ形式で広告情報を学習・回答する可能性
  • TIME は既にAIからのトラフィックが人間を上回る日が多いと公言

今後のウェブの変化と懸念

  • AIモデル向けコンテンツ が人間とは異なる情報を持つウェブの出現
  • AIが主な読者 となる時代の到来予兆
  • 人間読者 がAI向けに何が語られているか把握できない不透明性
  • 広告主やパブリッシャー がAI向けコンテンツを個別最適化する新たな潮流

サービス紹介と筆者の活動

  • Delegate tasksVroni.com など、AIを活用した業務効率化サービスの紹介
  • GitHub連携 で仕様やバグ報告から自動でコード作成・PRまで完結
  • プライバシー尊重・簡単な退会 を強調

Hackerたちの意見

なんか、AIが銀行のおすすめを求められたときに「アイデア」を提供するための長期的なコンテキストを作る意図があるのかな?ちょっとアドホックでターゲットが定まってない気もするけど、高額なサービスには価値があるかもしれないね。

政治家が嘘をつく最良の方法は、誰かにその嘘の真実を信じ込ませて、その人をカメラの前に立たせることだね。そうすれば、ボディランゲージや他の何かで嘘だとバレることがない。嘘の意味とその人間的な文脈が調和してるから。これ、なんか思い出すな。LLMは本質的に信じやすいんだ。アメリカの首都みたいなことには簡単に流されないように訓練できるけど、一般的には読んだことを信じる傾向がある。彼らが読むものが基本的に彼らの宇宙だからね。生の事実をしっかりと重みに固定するためのデータには限りがある。彼らが入力された周辺的な事実を信じない唯一の方法は、同じセッション内でそれに反する何かを読んでいる可能性があることだよ… でも、世界の大半はその周辺的な事実で、客観的なもの、例えば首都名みたいなものは少ないからね。だから、ある半関連のトピックについて自信を持った発言をLLMの入力に組み込めれば、それがLLMにとっての真実になる。で、その真実をもとにLLMはかなり自信を持って詳しく話すことになる。もちろん、現在のクエリに関係ないとあまり効果はないだろうけど。広告はいつも数字のゲームだからね。科学に関する質問でも、同じセッション内で銀行に関する質問に転じる可能性はあるし。会話を一つのトピックに厳密に分けるのは、これを防ぐためじゃなくて、コンテキストウィンドウの効果を最大化するためにいい考えだと思う。でも、会話を使い回して、広範囲なトピックをカバーする人もたくさんいるだろうね。いいニュースでもあり、悪いニュースでもあるのは、Googleがこれを黙って見過ごすわけがないってこと。もし検索エンジンのボックスをLLMに置き換えるなら、みんなが使ってるのと同じLLMを使ってるはずだし、もしかしたら彼らがやってる仕事のために少し安いものかもしれない。だから、あのボットはGoogleの広告を出すべきで、Timeの広告じゃない!これらの生意気なコンテンツクリエイターは一体何様だと思ってるんだ?だから、LLMに提供される広告ブロックの分野での作業は確実に進むだろうね。

なんか、普通のプロンプトインジェクションみたいだね。最近のChatGPTは、トピックを調べるときに50ページくらい見てるかもしれない。最終的な答えがそんな広告に影響される可能性は十分ありそう。

彼らは長時間のチャットセッションのコンテキストに入り込もうとしてるのかもね。

これ、SEOの初期の頃を思い出すな。まだ合意された指標がないから、いろんな蛇油を売れるんだよね。実際、いくつかは効果があるかもしれないし!

これ、マーケティング会社がAlly Bankとか顧客に報告するインプレッション数を人工的に(あ、ああ)膨らませようとしてるのかな。

https://claw-guard.org/adnet

オリジナルじゃなくて、シンプルなマークダウンコピーを読みたいな。いつもそう思ってる。

かつて、たくさんのウェブサイトがWAP(https://en.wikipedia.org/wiki/Wireless_Application_Protocol)版を持っていて、同時に「通常のウェブサイト」も運営してた黄金時代があったんだ。WAP版は通常のウェブサイトの1/100のサイズだったしね。それでも「通常のウェブサイト」は今に比べればミニマルだったけど、モデムの時代にはそれでも遅かった。しばらくの間、私のブラウジングの大半は、許可されたインターネットアクセスの2日に1回の1時間の間に訪れたウェブサイトのWAP版だった。今、LLM用に似たようなものが出てくるかもしれないけど、私たちのように無駄を減らしたい人には、より良い閲覧/読書の選択肢になるかも。広がるといいな :)

Safariにはすごく使いやすいリーダーモードがあって、完全なマークダウンではないけど、プレゼンテーションを標準化して、気が散る要素を取り除くことで、かなりの体験を提供してくれるよ。特定のウェブサイトで記事を検出したら、自動的にリーダーモードに切り替える設定もできるんだ。

GDPRが施行されたとき、https://npr.orgはhttps://text.npr.orgにリダイレクトするようになって、まるでそれがイライラさせるための事実のように説明してたけど、正直言って後者の方が優れてると思う。特にCSSの行がいくつか追加された今はね。

NetNewsWireの「リーダービュー」は本当に素晴らしい機能だよね。 https://netnewswire.com/help/mac/5.1/en/reader-view.html

Hacker Newsで議論の続きを見る