中国インターネット初期の情報がほぼ10年分失われる

 (chinamediaproject.org)
2 ポイント 投稿者 GN⁺ 2024-06-03 | 1件のコメント | WhatsAppで共有
  • モバイルインターネット以前の中国語ウェブの記録が大規模に消失したことを扱うWeChat投稿が公開直後に削除され、中国のオンライン記憶保存の問題があらためて浮き彫りになった
  • He Jiayanは、Baidu、Google、BingでJack Ma、Lei Junなどの人物名を期間指定で検索しても、過去のニュース・議論・講演・企業資料がほとんど出てこないことを確認した
  • NetEase、Sohu、Campus BBS、Tianya Forum、Sina blogs、Baidu Postといった初期の主要サイトの記録は、ある時点以前から消えているか、ほとんどアクセスできない状態にあるようだ
  • コンテンツ消失には、個人ウェブサイトやブログプラットフォームの退場、収益性の低い旧プラットフォームの閉鎖、Internet Archiveのような保存資源の不在が影響しており、中国共産党の歴史・世論統制も決定的要因として指摘されている
  • 21世紀最初の20年のオンライン一次資料が空白化するにつれ、中国インターネット史が歴史記録の空白として残ってしまう危険が高まっている

削除されたWeChat投稿と急速な拡散

  • 中国のWeChatに投稿されたHe Jiayanの文章は、中国インターネット初期のコンテンツが大規模に消失している現実を扱っていた
  • 文章は5月22日水曜日に公開され、翌日にWeChatから削除された
    • 削除後には「このコンテンツは規定違反のため閲覧できません」という404メッセージが表示された
  • 削除された文章はすぐにアーカイブされ、中国当局の管理圏外にあるプラットフォームにも拡散した
  • China Media Projectはこの事例を中国指導部による集団記憶の操作と結びつけている

He Jiayanの検索実験

  • He Jiayanは2018年から活動しているインターネットインフルエンサーで、1990年代末から2000年代半ばまでのエンターテインメント・文化分野の人物に関する検索を幅広く行った
  • Baiduで「Jack Ma」を1998年5月22日から2005年5月22日までに限定して検索したところ、有効な結果は事実上出てこなかった
    • 検索結果には2024年5月22日付と表示された項目が1件あったが、実際には2021年に投稿された文章で、指定期間とは一致していなかった
    • この検索だけでは、当時のJack Maに関する報道、公開の議論、講演、会社の発展過程を把握できる資料が0件ということになる
  • BingとGoogleでも結果はBaiduと大差なく、有効な情報は一桁台にとどまった
    • 期間に合わない結果が誤って引き出されるケースも再び確認された

消えたサイトとコンテンツの範囲

  • これはJack Maだけの問題ではなく、Pony Ma、Lei Jun、Ren Zhengfei、Luo Yonghao、Sister Fu Rong、Jay Chou、Li Yuchunといった人物の検索でも同様の結果が出た
  • 複数のウェブサイト、人物名、期間を試した結果、当時人気だった中国のウェブサイトは、ある日付以前のコンテンツを失っているか、サイトごと消えてしまっているように見える
    • NetEase、Sohu、Campus BBS、Xici Hutong、Kaidi Maoyan、Tianya Forum、SchoolNet、Sina blogs、Baidu Post、大規模な個人ウェブサイトが例として挙げられている
  • Sina.comは10年以上前の情報の一部をなお見つけられる例外のように見えたが、残っている量はごくわずかだった
  • He Jiayanは、当時のコンテンツの99.9999%以上が消えたと表現している

記録が消えた原因

  • 技術変化に伴い、個人ウェブサイトやブログプラットフォームは段階的に退場した
  • 商業プラットフォームは収益性の低い古いサービスを閉鎖し、アーカイブを維持する商業的インセンティブもなかった
  • 中国には、米国のInternet Archiveのような保存主体を担える社会的資源が不足しているという問題がある
  • 中国のファイアウォール外の論評では、中国共産党の政治・イデオロギー統制がコンテンツ消失とアーカイブ不在の最も決定的な要因として指摘されている

金魚の記憶になった中国語ウェブ

  • He Jiayanは、中国語インターネットは急速に崩壊しており、モバイルインターネット登場以前の中国語インターネットのコンテンツはほぼすべて消えたとみている
  • かつてはインターネットには記憶があると信じていたが、実際には金魚の記憶のようなものだったと表現している
  • 社会の重要人物を調べる過程で、この2年間にオンラインの一次資料が崖のように減っていくのを実感したという
    • 以前は見つけられた元の報道、講演、文章、動画インタビュー、討論資料が、次第に探しにくくなっている
  • 今後、インターネット時代の人々が21世紀最初の20年を振り返るとき、その期間は歴史記録から抜け落ちた20年になりかねない
  • 現在の中国インターネットで見られる古い情報は「沈みゆく太陽の最後の光」に近いと表現し、残された記録の希少さを強調している

関連記事

1件のコメント

 
GN⁺ 2024-06-03
Hacker News のコメント

  • 意図的かどうかは別として、これはまさに 1984 の核心に触れている。過去の記録を書き換えたり消したりして、歴史認識を変えることだ。
    ただし記事に出てくる事例の多くは、ブロガーが新しい技術へ移行する中でブログが閉鎖され、ソーシャルメディア企業が消えたり古いコンテンツを保存しなかったりする、典型的な現象にも見える。
    西側でもこうしたことは多く起こり得る。以前は読めた “The Feynman Letters” のような本を思い浮かべると、今では事実上不可能だ。
    メールも同じだ。人が亡くなり、ノートPCが壊れたり廃棄されたりすれば、すべて消えてしまう。昔は手紙という物理的な形が残ったが、今ではこうした書簡はすべて消えていく。
    Facebook も同様で、有名人が自分のデータをエクスポートしていて、そのファイルがまだ動作するノートPCに残っており、さらにログインパスワードまである場合にようやく可能になる。私たちがコミュニケーションに使う各システムで、この問題は繰り返される。
    ノートPCのような例外を除けば、こうした情報はすべて失われる。私たちは歴史的な細部の ブラックホール の中で生きており、いつかは LLM が幻覚で作り出した捏造された歴史に置き換えられるかもしれない。
    歴史的理解を愛する人なら、本当に心配すべきだ。

    • 「He の文章は翌日 WeChat から削除され、『このコンテンツは規定に違反しているため表示できません』という 404 メッセージが出た」という部分が核心だ。
      インターネットの自然な エントロピー について語ったからといって、コメントが検閲されるわけではない。検閲者の目を引けば検閲される。
      西側の有機的な人間行動と、中国の中央権力による意図的な濫用を同じものとして扱う 偽の同等視 には本当にうんざりする。西側でも歴史をもっとよく保存すべきだが、すでに祖先が夢にも思わなかったほど、個人あたりはるかに多くのデータを保存している。誰かが亡くなってメールが消えることと、中央の検閲機関が党の物語を変えやすくするために古いコンテンツを積極的に消すことは、比較の対象ではない。
    • これも別の偽の同等視だ。ここでは「意図的かどうか」が実際に非常に重要だ。デジタル以前の時代でも記録の保存には努力が必要だったし、デジタル時代でも記録の保存には努力が必要だ。物理的な手紙も多くが失われ、腐り、燃えてなくなった。
      これは記録保存の失敗ではなく、粛清 だ。文化大革命の時に知識人の記録や手紙を実際に焼いたのと似ている。
    • 「昔は手紙の物理性が残った」という話には懐疑的だ。歴史的に見て、物理的な手紙も現在のデジタルな手紙と同じくらい消えていた可能性が高い。そうでなければ、世界は過去の文書ゴミであふれていたはずだ。
      人間は常に、保存したものより捨てたものの方が多かった。別のやり方で運用するには、エネルギーコストに見合わない。幸い、歴史は単一のデータポイントの連続ではなく、互いに重なり合う複数の 記録集合 として残る。
    • 横道にそれるが、ここで言う “The Feynman Letters” が何なのか気になる。彼の手紙を集めた本は知っているが、検閲や消失に関係するものは知らない。
    • 最近は Google が古いページをあまり表示しない。10年ほど前に亡くなり、以前はウェブ上でかなり存在感のあった人物を探していたら、DDG と Yandex まで調べて、ようやくいくつかのリンクを見つけた。

  • 「He の文章は翌日 WeChat から削除され、『このコンテンツは規定に違反しているため表示できません』という 404 メッセージが出た」という部分が印象的だ。

  • 中国の LLM と AI にはほぼ無限のデータベースがあると思われているのに、なぜデータ確保であれほど苦戦しているのかをかなり説明している。放置、検閲、閉じた庭、アプリ内に閉じ込められたコンテンツの消滅、萎縮効果のために、予想よりはるかに多くのデータが単に消えてしまったのだ。
    もはや存在しないもの、あるいはそもそも書かれなかったものは、スクレイピングできない。

    • 大企業は今でも、ほぼ無限のデータベースを 閉じた庭 の中に持っている可能性が高い。ただし、それは別の話だ。検閲されたコンテンツも、ほぼ確実にソフト削除されているだろう。
      より大きな問題は、Tianya のような比較的独立したサイトだ。https://en.wikipedia.org/wiki/Tianya_Club#cite_note-4
      古い BBS やニュースグループを思い浮かべればいい。こうした記録のほぼすべてが消えたのだとしたら、本当に悲しいことだ。

  • このスレッドには、西側のインターネットと露骨な 偽の同等視 をするコメントがいくつかある。この記事の要点は、中国の主要検索エンジンで期間を 1998〜2005年に設定し、議論の余地のない有名人を検索しても、実際にその時期に公開されたコンテンツが 0 件と出るということだ。
    初期ウェブが、ウェブホスティング事業者の保存失敗や閉じた庭への移行のために消えていったことは痛ましく悲劇的だが、このような露骨な 検閲 と似ているわけでも、機能的に同等なわけでもまったくない。

    • その通り。2006年以前の資料で Bill Gates を検索したのに、何も出てこないような状況に近い。
    • その通り。たまに archive.org にだけ残っていて、それすら他の検索エンジンでは見つからないので、そこで直接検索しなければならない。

  • 中国のインターネットでは自己分離が進んでいる
    Great Firewall のため、中国国内から一部の外部ウェブサイトにアクセスできず、Wikipedia は2019年に完全にブロックされた
    逆方向もある。中国国外からは一部の中国国内ウェブサイトにアクセスできない
    中国のアプリやウェブサイトの大半は、法律上、個人の身元と結び付けられていなければならない。そのため携帯電話番号で登録する必要があり、中国では1人＝1電話番号だ。中国の電話番号がないと、中国のアプリやウェブサイトの大半はそもそも利用を拒否する
    中国の携帯電話カード販売店に直接行って身分証を提示しない限り、電話番号を取得する方法はない
    実際、最近は外国人が中国を訪れることも難しくなっている。電話番号がないと中国のアプリでは何もできないが、電話番号を取得するにはパスポートと有効なビザを提示しなければならない
    外国の地図アプリは通常、中国ではまともに動作しない
    中国側からすれば、中国国内に物理的にいない外国人は単なる厄介者だ。中国人に外国アプリを使ってほしくないだけでなく、外国人に中国アプリを使ってほしくもない
    数か月前に QQ アカウントを作ろうとしたが、「International」版はもうメンテナンスされていなかった。それでも最後に動作していたバージョンを試すとエラーが出るだけで、「domestic」版は携帯電話が中国国内に物理的にないと動作せず、いずれにせよ中国の電話番号も必要だった
    約2週間前には、Zhihu もアカウントなしでは長い回答を展開して読めないようにしているのを見た。もちろんアカウントを作るには、忌々しい電話番号が必要だ。まだ米国の電話番号は受け付ける
    哲学的には、中国式の安全保障思考の復活のように見える。内部と外部の接触は基本的にすべて禁止し、必要なものはどうせ国内にすべてあるという態度だ
    「わが王朝の壮大なる徳は天下のすべての国々に及び、各国の王たちは陸路と海路で高価な朝貢品を献上してきた。貴国の使節も自ら見るように、われわれはすべてを備えている。私は珍奇な物や精巧な物に価値を置かず、貴国の製造品も役に立たない。」— 1793年、乾隆帝が George III に送った書簡

  • 検索エンジンが歴史データを正確に返すと、なぜ期待すべきなのか分からない。現代の検索エンジンには検索エンジン最適化への対応や最新データの返却といった課題が多く、2005年のような古い履歴を保存するインセンティブはない。その時期のページは、より関連性の高い記事に置き換えられた可能性が高い
    歴史保存は archive.org のような場所に任せるべきで、検索エンジンはその役割に適していない

    • 記事は読んだ？

  • 中国は政治的意思による歴史の書き換えを示すには、あまりにも分かりやすい例だ
    北朝鮮では飢饉や飢えに言及することが違法だ
    フロリダ州では州の文書で気候変動に言及することが違法だ

    • 「フロリダ州では州の文書で気候変動に言及することが違法」という主張には出典が必要だ。1つ見つけた: https://www.miamiherald.com/news/state/florida/article12983720.html（https://archive.is/P9k4m）
      DEP の関係者が公式コミュニケーション、メール、報告書で「climate change」や「global warming」という用語を使わないよう指示されていたという内容だ
      これを違法とまで見なせるかは分からないが、少なくともキャリアに傷が付く行為にはしていた。誰かがこれを根拠に不当解雇訴訟を起こしたら興味深そうだ

  • Baidu で「1998年5月22日〜2005年5月22日」の期間に「Jack Ma」を検索すると、肯定的な結果が1件だけで、日付は2024年5月22日と出る。しかしクリックしてみると、2021年に投稿された記事だ
    米国の Google では約2,580,000件出る
    かなり驚くべき歴史洗浄だ