Googleランキングで急上昇した「Hacker News」
(jonathanpagel.com)Hacker NewsのGoogleランキング急上昇
- 「Hacker News」はGoogle検索結果でよく訪問されるフォーラムにもかかわらず、以前はGoogleで見つけられなかった。
- Googleの「Hidden Gems(隠れた宝石)アップデート」により、有用な個人的な洞察や経験を優先するランキング方式に変更され、特にフォーラムが注目されるようになった。
- RedditとQuoraはこのアップデートで多くのトラフィックを獲得したと報じられている。
Hacker Newsの可視性変化
- 英国ではHacker Newsの可視性が162%上昇し、米国では75%増加したことを、SistrixやSemrushなどのツールで確認した。
- Hacker Newsは英語コンテンツしかないため、英国と米国の順位を調査した。
Hacker Newsが高順位を獲得している内容
- 「GTAはどこで作られたのか」というコメントが、最上位結果として表示された。
- 「モナコをイタリア語でどう言うか」という質問について、desdivのコメントが1位を獲得した。
- GRAHAM PANTHERの記事は「私の人生を台無しにした」のような複数のキーワードでうまく順位を獲得している。
- Hacker Newsはブランド関連キーワードでもよく表示され、たとえばYouTube TVの費用に関するすべての質問でGoogleはthunderbongの投稿を優先している。
- 「libgen mirror」や「4chan」のような特定キーワードでも、Hacker Newsの投稿が高い順位を獲得している。
Hacker Newsの非技術的な順位
- Hacker Newsが技術関連でない多様なトピックで順位を獲得していることに驚きを持っている。
Hacker Newsのトラフィックとキーワード順位
- 英語が主要言語でない国において、トラフィックとキーワード順位から、Hacker Newsの成長が米国よりもはるかに速いことが確認された。
注目されることのデメリット
- GoogleのHidden Gemsアップデートにより、多くのサイトが急激なスパムの増加を経験した。
- SEO専門家は、Redditのアカウント、コメント、投票を購入して自分のサイトを宣伝できるようになっている。
- このアップデートで再び目立つようになったGoogleグループは、ほとんどが無料スピンに関する記事を扱っており、LinkedInをはじめとする他のソーシャルプラットフォームもSEOスパマーからの攻撃を受けている。
- この新たな可視性がHacker Newsに過度な影響を与えないことを望む。
GN⁺の意見
- Hacker NewsのGoogle順位の上昇は、ユーザーに有用な情報を提供するフォーラムやコミュニティの重要性を示している。
- Googleのランキング変更は、情報の質を高め、ユーザー体験を改善しようとする取り組みの一環と見ることができる。
- このような変化はSEO戦略にも影響を与え、コンテンツの真実性と価値を重視する方向へSEOが進化する必要性を示唆している。
1件のコメント
Hacker News の意見
Google はいま、LLM 生成の投稿をふるい落とすための検証戦略として、強いモデレーションポリシーを持つサイトをより信頼し始めたのかもしれないと思う。
もしかすると 2022年11月は、ウェブ全体にとって新しい種類の Eternal September になったのかもしれない
かなり有効な LLM 生成コンテンツ検出器を作れないなら、私たちは、まだ「知っている」とはどういう意味かについて合意できているうちに、インターネットから人間が作ったと分かっているコンテンツを掘り出さなければならないという厄介な問題に直面していることになる。
https://en.wikipedia.org/wiki/Low-background_steel と興味深い類似性がある
優れたオープンソースやサードパーティクライアントに対する人々の好みを過小評価してはいけない
例えば RefinedWeb の論文は、除外されたわずか12のウェブサイトの1つとして HN を挙げている。理解した限りでは、HN は最終データセットに検証なしで入っていたため除外されたようで、RefinedWeb は Falcon モデルに使われた。
https://arxiv.org/pdf/2306.01116.pdf
おそらく大半よりはましだろうが、2024年には人間が書いたように見える文章を LLM で作って投稿するのがあまりにも簡単だ。2022年11月以前のインターネットの大部分は AI 生成ではなく、Seychelles Anon や SubredditSimGPT2 のような一回限りの例外がある程度だった
Brave をダウンロードしたあと検索欄に「news」と入力したら、自動的にここへ来て HN を使い始めた。
記事の多様性と議論の質にすぐ魅了され、予想よりずっと長く居着いたが、Reddit や Xitter と同じく HN もいつかは人気ソーシャルメディアの運命をたどるだろうし、それほど時間はかからないかもしれない。
核心は社会的コントロールであり、独占できなければ勝てない。Dang にはできるだけ長く持ちこたえてほしいだけで、HN はインターネットのマサダになる気がする。もちろん 4chan も残ってはいるし、4chan はほかのすべてのソーシャルメディアが死んだあとも長く残りそうだ
つまり、ボットが HN を乗っ取って、自分たちが順位を上げたいものを投稿し、サイトの価値を壊すという説なのか? 防御策は何だろう?
外部リンクをすべて
nofollowに設定して Google に無視させれば、検索最適化の観点では魅力が下がると思うあるいは HN をアクティブな分岐とアーカイブ分岐に分け、後者は推薦数の基準を超えた投稿だけ Google に公開する方式もあり得る
すぐ dead 扱いにはなるが、過去より速いペースで入ってきているのかどうかはよく分からない
robots.txtを変えて Google のクロールを止められる。コピーレフト寄りの友人の中にも、Google/Bing のインデックスを防ぐために自分のブログやサイトでそうしている人が多い
Kagi では、自分が望んだから HN の検索順位を上げてほかのサイトを下げられたのであって、Google 検索チームの社員が HN についてのスライドデッキを作ったからではなかった。
https://help.kagi.com/kagi/features/website-info-personalize...
毎月払う10ドルの中でいちばん満足度が高い
検索でウェブサイトを固定したりブロックしたりできるなんて、今となっては当然に思えるが本当に素晴らしい
ここで気になるのは、Google が任意のコメントをスニペットの出典として使おうとする姿勢でもある。
平均的な HN コメント投稿者が、ほかのインターネットユーザーよりコメントと真実性に手間をかけているのは分かるが、それでも問題だ。
私の場合、イタリア語で Monaco を検索すると、最上部の「結果」は Collins Dictionary 付きの Google 翻訳ウィジェットで、上位3つのリンクは Wikipedia と Quora だった。HN はそれより4〜5リンク下にある。
そしてスパマーたちが dang を圧倒しないことを願う
検索するときは、たいていまず HN で探し、次に Google 経由で Reddit を探し、最後に古くて悲しい Google を使うことになる
Google が登場したときは、誰もが切実に待ち望んでいた答えであり、私たちが欲しかったほぼすべてで、しかも「evil」ですらなかった
今では、Google の人たちは会社に何が起ころうと関係なく、年間ボーナスの資格を満たすことだけを気にしているように感じる
今後 1〜3 年以内に、かつての Google のように検索市場を奪う別の会社が出てくると思う。それでも Google は心配しなくていい。その会社も「ただの検索会社」だろうから
Google へ:私たちが検索語に
site:reddit.comやsite:news.ycombinator.comを付けていたのは、SEO の悪ふざけ連中に操作されていない意見にたどり着くためだった。では今の代替手段は何だ?site:reddit.comは今でも有用だGoogle がなぜ Reddit を買収しなかったのか分からない。モデレーションの問題はあるだろうが、AMZN は Twitch でそれをやり遂げた
age:1yearみたいなものが必要だ。技術関連の検索をするとき、ほぼ毎回 2014 年の StackOverflow の投稿は欲しくない商品や購入できる何かを検索するときの変わりようについては、話し出したくもない。EC サイトのページに行くには 4 回くらいクリックしなければならず、新しいタブで開くやり方もまったく効かない
今では単純なクエリでも、目に見える検索エンジンスパムの山を日常的に返す
そこに、Google が一部の検索語では最初の検索結果ページのほぼ全体をスポンサー付きコンテンツで埋める状況まで重なり、有用性は一桁倍に落ちた。この数字は私が綿密に計算したものだ
そしてこの品質低下は、ChatGPT が登場したまさにその時期に起きた。個人的にも、Google を完全に飛ばして ChatGPT を使うことがますます増えている。同じ人がどれほどいるのか、Big G 側に切迫感の匂いがあるのかも気になる
例えばこのチャンネルは素晴らしい: https://www.youtube.com/channel/UC2rzsm1Qi6N1X-wuOg_p0Ng
@dang Google からの注目が高まると、マーケターたちが HN の影響力と検索順位を利用して影響工作を行い、HN の品質に下向きの圧力がかかるのではないかと思う
robots.txtでサイトをインデックス対象外にする可能性を検討する意向があるのか気になるHN は実験です。原則として、コミュニティサイトは人気が出ると品質が低下します。私たちの仮説は、これは必然ではないというものです。意識的に低下に抵抗すれば、そうならないようにできます。- https://news.ycombinator.com/newswelcome.html
pg が15年以上前に書いた文章。私はたかだか10年ほど、私たちはインターネットのエントロピーの矢を食い止めようとしている、と言い続けてきた: https://hn.algolia.com/?dateRange=all&page=0&prefix=true&que... – 永遠には無理だろうが、十分なエネルギーを注げばしばらくは可能だ
これまでの経験では、その方法は、献身的なコミュニティ、ソフトウェアにできることをやってくれるソフトウェア、そしてシステムを失敗モードから押し戻すモデレーションの組み合わせだ
外の世界から隠れることは、たいてい答えではない。pg は時々 Erlang Day のようなトリックを使ったが、それを主要戦略にするのは、感染を避けるために決して外に出ないようにするのと似ている。可能なら、強固な免疫システムを持つほうがはるかに良い。抵抗できる病原体を避けることばかりしていると免疫システムは弱くなるし、HN を新規ユーザーから隠す道は老衰につながる。私には後者のほうが大きな脅威に思えるし、既存ユーザーはあまりにも簡単にそれを過小評価する
スパムやコンテンツマーケティングのような近縁種は、規模が何桁も大きくなれば HN を殺すこともあり得るが、私の見方では HN で最も難しい問題ではない。そうしたものにフラグを立て、すり抜けてきたら通報し、品質に敏感な献身的コミュニティがあるからだ。そんなコミュニティがなければ、HN はとっくに死んでいただろう
はるかに難しい問題は低品質なコメントだ。悪意あるユーザーのことを言っているのではない。それはコミュニティがうまくフラグを立て、通報してくれる。問題は、本来はまともなユーザーが、意図も自覚もなく書く、つまらない、あるいは意地の悪いコメントだ。そうしたコメントと投票システムの間には不吉なダイナミクスがあり、悪いコメントが良いコメントより多く支持を集めることがかなり頻繁に起こり、結果としてスレッドが雑草に塞がれる。これが最大の要素であり、私がより心配している部分だ。Cassandra E Oakley とその取引システムだとか、最近のスタートアップ投票組織だとかではない。そういうものがいつか最大の要素になるなら私たちは終わりかもしれないが、調整できる程度には前もって気づけるはずだ
追伸: @dang は機能しない。これはたまたま見ただけだ。実際には偶然ではなく、スレッドの一番上に上がっていたからだ
ただしこれをやるなら、すべてのAI ボットと検索エンジンも IP アドレスレベルでブロックしなければならない
実際、この投稿のように可視性を遮断し妨げようとする考え方を持たない人が増えれば、全体的な感情としては純プラスになり得る
リンク先のブログ記事は実のところ「HN がクールになった」という話ではなく、Google が広告主導のゴミにはまり込んでいて、品質を許容範囲に保つには手作業で選ばれた外部構造に頼らざるを得ない、という内容を説明している
監視資本主義の時代に HN を見るのは安心感がある
追記: HN は Google Tag Manager と Analytics、Amplitude、branch.io を使っている
HN が検索結果に出てこないのは、いつも不思議だと思っていた
ここのコンテンツは信号対雑音比が非常に高く、Google の検索最適化項目をすべて満たしているように見えた。だから表示されないのは意図的だと思っていて、dang がわざとインデックスから外し、ボットをブロックしているのだと推測していた
今になって見えるようになり始めると、以前に戻ってほしいと思う。私が HN をよく読む唯一の理由は、高い信頼を置けるからだ。ほとんどのコメント投稿者を知らなくても、コンテンツを簡単に判断し、出典を探し、驚くようなツールを発見し、創業者から直接読むことができる
本当に、本当に、トップページが今や広告なのかどうか心配したくない
ドメイン名を見てもそうだし
HN が現在の姿を超えて大きくなったらどうなるのだろう。今でもトップページはかなり速く流れていき、投稿はすぐ埋もれてしまう
時々、興味深い投稿やコメントを見つけて、後で時間があるときに戻ってきたいと思うが、その頃にはトップページから数ページ後ろへ押し流されている
HN の他のあらゆるものはおおむね線形に増えているが、投稿数はそうではない