4 ポイント 投稿者 GN⁺ 2023-07-23 | 1件のコメント | WhatsAppで共有
  • World of Warcraftコミュニティが、存在しないGlorboアップデートをわざとでっち上げたところ、Redditの投稿を自動再加工していたzleague.ggがそれを実際のニュースのように掲載した
  • zleague.ggはRedditスレッドをAIで要約し、「key takeaways」や定型化された段落で長文記事を作り、Google検索での露出を狙う形で運営されていた
  • r/WoWの利用者たちは、1994年のHearthstone示唆、Klikclac、Halfhill Market、Klaxxiのプレイアブル種族化といった虚構や歪曲を混ぜ、ボットが引っかかるように仕向けた
  • 自動生成された記事は「World of Warcraft Players Excited For Glorbo’s Introduction」というタイトルで公開された後に削除され、現在はアーカイブミラーが残っている
  • Redditを出典として付けていても、コミュニティ投稿をAIに投入してそのままコンテンツ化する構造には、監督とブレーキがほとんどないことが明らかになった

Glorbo偽アップデートに釣られたAIスクレイピングサイト

  • World of Warcraftのサブレディットr/WoWの利用者たちは、zleague.ggがReddit投稿を収集してAIで要約し、ブログ記事として公開していることに気づいた
  • zleague.ggはゲームアプリを主事業としつつ、付随するブログでRedditスレッドをもとに記事を作っていた
  • 利用者たちはボットをだますため、Glorboがゲームに導入されるという長いスレッドを書いた
    • Glorboは実際のWorld of Warcraftの機能ではない
    • 投稿には「Hearthstoneで1994年から示唆されていた」といった偽の文脈が含まれていた
    • Dragonflight、Chen Stormstout、Karazhanといった実在のゲーム関連名を混ぜ、もっともらしく見えるように構成していた

自動記事に含まれた虚構と運営上の問題

  • zleague.ggは偽スレッドをもとに、「World of Warcraft Players Excited For Glorbo’s Introduction」という記事を自動公開した
  • 掲載された記事の要約には、事実と異なる項目が含まれていた
    • プレイヤーたちがGlorboの導入とゲームへの影響を期待しているという内容
    • 必須アイテムKlikclacがカジュアルプレイヤーに影響を与えうるという内容
    • Stormsong ValleyがHalfhill Marketと農業シミュレーションのミニゲームの新たな舞台になるといううわさ
    • Klaxxiがプレイアブル種族として追加されたような過去の変化に対する好意的な反応
  • その記事はしばらくオンラインに残った後に削除され、アーカイブミラーで確認できる
  • サイトの著者名はすべて偽名に見え、運営全体はほとんど監督のない状態にあるようだった
  • Reddit投稿を引用し、投稿者名を表示していたとしても、コミュニティ投稿をAIに自動投入して生成結果をそのまま公開するやり方は、別の問題を生み出す
  • この種のサイトはGoogle検索トラフィックを狙っており、GoogleがAIベースのサイトを低評価にするか禁止しない限り、止めるのは難しい

1件のコメント

 
GN⁺ 2023-07-23
Hacker News の意見
  • ゲームはほとんどしないし、持っている機器も Nintendo Switch だけなのだが、新しい Zelda で詰まると検索することになる。
    検索結果の上位10件くらいのサイトがほぼ同じ形式の記事を出していて、回答の間違いまで同じように共有しているのを見た。
    Zelda のヒントや FAQ サイトの大半は独自の内容ではなく、互いを AI で反すうしたゴミのようなウェブリングに見える。
    せめて広告ブロッカーと JavaScript ブロックを使っているので、広告収益は渡していない。

    • ゲーム Wiki や攻略サイトはしばらくの間、検索エンジン最適化のゴミ捨て場になっていた。
      広告収益があるからなのだろう。
      Google がどのサイトにドメイン権威を与えるべきか判断するデータを持っていないとは考えにくいが、検索エンジン最適化スパムと検索エンジンのあいだの敵対的で継続的な戦いだという点は理解できる。
    • ChatGPT がゲームの質問に答えるときも、奇妙なほど冗長で、簡単な質問に答える前に驚くほど長い導入段落を付けるのが笑える。
      答えにたどり着くまでやたら時間のかかる妙な導入文の塊を付ける広告サイトとかなり似ている。
    • 少し話はそれるが関連はある。ToTK はアクセシビリティ、特に認知・感覚面で本当にひどい。
      望まないのに ZD TotK の地図をよく使うことになる: https://www.zeldadungeon.net/tears-of-the-kingdom-interactiv...
      特定の敵がどこにいるかを覚えるのはまったく楽しくない。これを面白いと思う人がいるのだろうか? 図鑑は、ブラッドムーンごとに敵が再生成されるのに、戦った敵の位置を記録してくれない。
      Savage Lynel Bow がもう1つ必要なのに、Silver Lynel をどこで見たのか思い出せない。すでにほとんど真上に来たときにしか鳴らない Purah Pad センサーの曖昧な反応だけを頼りに、マップ全体を探し回りたくはない。別途メモまで取るべきなのかと思ってしまう。
      記録機能のアイデアは良いが、抜け落ちているものが多い。クエスト説明は不十分なことが多く、マーカーはしばしばクエストをくれた人の位置なので、あまり役に立たない。
      字幕はありがたいが、なぜこんなに多くの部分が音声なしで進むのか分からない。
      PC でやっているので個人的には関係ないが、なぜボタンマッピングがないのかも疑問だ。
      内部 FSR と AA を切って、ときどきにじんだジャガイモみたいな画質に落ちるのを防いでも、どこを見るべきかが明確でないと、視力が良くても物体を見つけにくいことがある。Ultrahand の光は助けにはなるが、ひどい解決策だ。
      色覚異常設定もない。いったい何をしているのかと思う。
      この素晴らしいゲームをはるかにアクセシブルにする機会を、あまりにも多く逃している。Nintendo はアクセシビリティに関心がないことをはっきり示したし、アクセシビリティはすべての人にとってより良い体験を作るという点で、本当に残念だ。
    • Kagi ではそういうゴミサイトは比較的見え見えなので、そのままブロックしている。
      この分野でまだ信頼できるのは GameFAQs と IGN、それからゲーム雑誌系だった。
    • 本当に悲劇的だ。子どもの頃は GameFAQs が事実上唯一の情報源で、よく行っていたし、Google でもその攻略がよく見つかった。
      サイト自体はまだ残っているが、今の Google は5分ぶんの区間攻略を見るために、リスト記事のように新しいページを延々クリックさせる広告まみれのサイトを20件も先に見せてくる。
  • Haha、https://meat-gpt.sonnet.io を作った。ひどい AI スタートアップをからかう形で作ったサイトだが、どういう仕組みかはネタバレしない。
    最近の私の主なトラフィック源の一つは、ときには70〜80%にもなるのだが、しょぼい AI アプリカタログたちだ。私の MeatGPT を掲載するだけでなく、どんなサービスなのかについて見事なまでに間抜けな説明まで幻覚ででっち上げてくれる。
    正直、これ以上うまく機能することはないと思う。私のサイトの肉汁したたる肉塊を持っていって、自分の顔を殴り続けながら「もっとください」と叫んでいるようなものだ。
    生成アートは好きだし、自前の中世風コンテンツファームも作ったが[1]、これは複数のサイトをまたいで、ただ勝手に記事が書かれていく。
    [1] https://tidings.potato.horse

    • これでアラインメント問題があることを完全に確信した
  • 核心はこの一文です:

    But again, there’s nothing to stop this. These subreddits can’t only fill themselves with joke articles to screw up a site like this, even if this one specific example is good for a laugh.
    ほとんどのスレッドは普通の会話だろうし、Reddit のような議論サイトはニュースを「無料」で要約・生成するための手軽なソースになり得ます。
    HN も技術ニュースのソースとして使えるのではないかと思います。対象の記事を要約し、スレッドの上位コメントの要約と雰囲気を添えればよいのです。
    自分がやるという話ではありませんが、自分が思いつくくらいなら、すでに誰かがずっと先を行って試している可能性は高いです。

    • HN や現実世界でこういう話をよく聞きますが、記者の立場からすると、取材の価値を見落としていて、やや的外れだと思います。
      一部のニュースは Reddit のスレッドのようなものをスクレイピングするだけで作れるかもしれませんが、まともなジャーナリズムの多くは、信頼できる情報源から新しい情報を引き出す取材を含みます。
      取材がないとしても、記事を書いて世界の知識の蓄積に何かを加えられないなら、消費者にも広告主にも価値はありません。SEO スパムの世界でも同じです。競合と区別しようとする努力があってこそ、上位結果を取れるのです。
      Reddit のスレッドは、このような方法ですでに作られたニュースに対する感情的な反応であふれていることが多いです。どこかの時点で、人間が外に出て別の人間と話し、新しい角度や論点を作り、問いを追い、まだ誰もつなげていない点と点を結びます。それがニュースであって、既存の態度の要約ではありません。
    • こういう仕組みで動くウェブサイトを作りました。400票以上の HN 投稿を選び、タイトル一覧を集めたうえで、AI に技術と無関係な項目(ベイエリアの話題、政治など)を除外させ、選ばれた記事をスクレイピングして要約を書かせ、静的ウェブサイトとして公開します。
      ほかのソースとしては、Reddit のサブレディット、RSS フィード、公式言語ブログ、GitHub のリリースページを使っています。
      AI はかなり簡単にだまされます。より多くの文脈を与え、編集ルールが守られているか確認するレビュー段階を入れれば避けられます。
      もう一つ検討しているのは、より安いモデル(gpt-turbo-3.5)に記事を書かせ、より精巧なモデル(gpt4)にレビューさせる方式です。
    • コメントをそのまま要約したくないとしても、たいていの記事のコメント欄は、そのテーマに関するクラウドソーシング調査と見なせます。
      そこで興味深い議論を読んだ後には、関連する記事や本などの短いリストと、しばしば当事者から直接出た生々しい解説まで、簡単に手に入ります。
    • 匿名で書きます。こういうことをしているスタートアップは実際にあり、詳しくは言えません。
      情報は自由になりたがるものです。今は DOM を読んでタグ付けできるブラウザプラグインで、その人間の作業が学習システムに入っています。
      アイデアは、Twitter のコミュニティノートを独立したブラウザプラグインにするところから始まり、その後、ユーザーがウェブを閲覧しながら DOM を読むように見えるモデルの学習へと広がりました。
      API を叩いているわけではないので、手数料もかからないのでは?インタラクションを選んでいるのはユーザーです。
      doom scrollingのように見えるよう学習された AI を防ぐ手段は、レート制限くらいしかなさそうです。
    • そういう記事だけを投稿することはできないでしょうが、AI 執筆者を人間のように見せかける人に恥をかかせることはできます。
      少なくとも、その記事が AI によって書かれたものだと何らかの形で示すべきでしょう。そうでなければ、人間の執筆者だと思われていた人に恥をかかせるために、このだまし討ちが使われかねません。
  • こうしたことは、このサイト一つに限らず、多くのゲームニュースサイトで起きています。
    Google News フィードで Reddit スレッドを要約した記事を定期的に見かけますが、報道の正確性は疑わしく、明らかに AI が生成した記事です。
    それでも、うまく機能しているときはかなり有用でタイムリーです。
    まともな生成系テキスト AI が登場するのを見てから1年ほどたつと、いつか端末でインターネットに接続せず、AI 音声に電話して、緊急のメールがあるか、あるいは自分が本当に気にするニュース要約だけを聞く日を想像するようになります。
    ウェブは、心から愛していたものから、日常に深く食い込みすぎて断ち切れない虐待的な関係になってしまいました。
    SEO スパム、釣りタイトル、無意味なコメントを代わりに読んで苦労したうえで、自分に重要なものだけを有用に合成してくれる AI 仲介者は歓迎します。

    • AI エージェントなしでオンラインに接続することは、COVID のときにマスクなしで出歩くことに近くなるでしょう。
  • 興味深いです。80年代のハッカーとして経験したカウンターカルチャー的体験にかなり似て見えます。
    「The Man」に立ち向かっていた感覚が、今度は「The AI」を相手に続いていくのかもしれません。ゲームオタクたち、よくやりました。

    • こういうことは結局、そのモノの作り手たち、今回は AI の作り手たちが、一般の人々に悪用される可能性をどれほど軽視していたかを明らかにするのだと思います。
      一般の人々は、開発者がそれをどう使ってほしいかなど気にしません。自分たちがそれに何をさせられるかに関心があるのです。
      ホットロッド、オーバークロック、そのほか無数の例を見ればわかります。
    • 新しく十分に強力な道具が出るたびに、こういうことが繰り返されるように思います。
      階層構造にあまり縛られていない人たちは素早く動けますし、実際にそうします。大きな変化が来ると、その隙間に入り込んでかなり大きな被害を与えることができ、巨大組織は遅れて追いつき、自分たちが欠陥だと見なすもの、たいていは何らかのシステムや接続部品に対する統制を弱めるあらゆるものを補強するためにリソースを回します。
      これからさらに速く、さらに混乱していくことを望みます。最高の結果は、権限を得た人々が金ではなく愛情のために荒々しく飛び込むときに生まれます。
  • トラフィックを切実に必要としていそうなスパムサイトが、今やバイラルになった投稿を削除するのは少し奇妙な動きです。

    • その通りです。ただ一方で、これは**広告用コンテンツ(MFA)**です。
      ここで最悪なのは悪名ではなく、Google やプログラマティック広告市場のブラックリストに載ることです。前者はトラフィックを吹き飛ばし、後者は収益化能力を吹き飛ばします。
      皮肉なことに、ゴミのような AI コンテンツとの戦いは、顧客が無価値な広告在庫に金を無駄遣いしていないともっともらしく主張しなければならない広告技術企業が担うことになりそうです。
    • どんな方法で収益を上げているにせよ、こういう文脈で訪れた人たちはコンバージョンする可能性が低いです。
      記事を下げることは、少なくとも評判へのダメージも少し減らします。
  • 昨日 Linux で動画安定化オプションを探していたら、ffmpeg の「作者たち」がメンテナンスしているというツールを、非常に自信たっぷりに説明している記事を見て驚いた。
    そこで検索してみたが見つからず、名前を引用符で囲んで検索すると、同じ会社が書いた3本の記事でしか言及されていなかった。

    • 実際に起こり始めている。幻覚で埋め尽くされた LLM 生成コンテンツがウェブを覆い尽くしている。
      S/N比が急落して、もみ殻と実をより分けることが事実上不可能になれば、インターネットはまもなく完全に役に立たなくなるだろう。
      あの AI Transformer 論文は本当にパンドラの箱だった。
  • Warcraft の開発者たちには、今後実際に追加される要素の一つを Glorbo と呼んでほしい。

    • Blizzard がまだエイプリルフールネタをやるなら、来年の題材はもう用意できたようなものだ。
  • 今ここで予言する。Glorbo は次のパッチに入る。

  • この記事も、不満を言っている AI 投稿と文字どおり同じゴミだ。
    reddit スレッドをネタに書いた新聞記事にすぎない。