1 ポイント 投稿者 GN⁺ 2024-07-27 | 1件のコメント | WhatsAppで共有

40 million embeddings to find who knows what on Hacker News

プロジェクトの背景

  • 以前の投稿で、Hacker Newsの4,000万件の投稿とコメントを埋め込み、コミュニティの意味マップを作成した
  • コミュニティがプロジェクトを支持し、提案した内容を通じて、世界中の人々が実際の関係へと素早く収束していくことを発見した
  • Robert(ロバート)との会話を通じて、2008年に社会的意味アルゴリズムを構築した彼の取り組みについて議論した
  • 16年が経った今でも、Hacker Newsのようなソーシャルネットワークが、トピックごとに信頼できる声を計算して表示していないことに驚いた

主な問い

  • なぜ、特定のトピックについて最もよく知っている人々を発見し、探索することが難しいのか?
  • 彼らの知識の範囲や、似た考えを持つ人々との関係はどうなっているのか?

新しいアプリ機能

  • 新しいアプリを通じて、Hacker Newsの意味マップを探索し、インタラクティブに操作できる(hn2.wilsonl.in)

発見した興味深い点

  • ユーザーの意味的な組織化: コミュニティの意味をユーザーから出発して整理し、類似するユーザーとともにHNでの貢献を意味的に示す
    • 例: robgの新しいプロフィールを確認
  • 意味検索: 誰が何を知っているかに基づいて、HNの意味を検索できる
    • クエリ例: スタートアップ、Go vs Rustプログラミング、神経科学と睡眠、メールマーケティング
  • コミュニティのマッピング: 誰が何を知っているかに関連する意味に基づいて、コミュニティをマップ化できる
    • 知識は均一ではないため、コミュニティの地形を通じて人々と彼らが知っていることを強調できる

技術の可能性

  • 意味を組織化し、検索し、コミュニティをマップ化する3つの機能を組み合わせることで、言葉の背後にいる人々を示せる
  • 世界の情報を整理する代わりに、世界の人々を整理できる
  • さまざまな社会的知識の課題について考えさせられる
  • プロジェクトをさらに前進させながら一緒に探索したい人には、ウェイティングリストへの登録を勧めている

GN⁺の要約

  • このプロジェクトは、Hacker Newsコミュニティの意味マップを通じて、特定のトピックに関する専門家を見つけて探索する方法を提示している
  • ユーザーの貢献を意味的に分析し、類似するユーザーとの関係を可視化している
  • 検索機能を通じて、特定のトピックに関する知識を持つ人々を簡単に見つけられる
  • コミュニティの地形を通じて、人々と彼らが知っていることを強調している
  • このプロジェクトは、人々をつなぎ、知識を共有する新しい方法を提供している

1件のコメント

 
GN⁺ 2024-07-27
Hacker Newsのコメント
  • HNが個々のユーザーよりもコンテンツと議論に重点を置いている点がよい

    • 専門家をフォローしたいなら、MastodonのようなソーシャルネットワークやRSSフィードを使うだろう
    • このツールは、知識のある専門家というより、活発にコメントを書く人を選ぶ傾向がある
    • それでも素晴らしいプロジェクトだ
  • 私のユーザー名は『Zen and the Art of Motorcycle Maintenance』の語り手のもう一つの自我に由来する

    • 分析のナイフを使うPhædrusの能力を反映している
    • "part, system, level, language, article, object" などのキーワードをよく使う
  • Optimizing Toilet Lid Designの第一人者として紹介されている

  • プロフィール文から私のメールアドレスを抽出して、mailto:リンクにしたようだ

    • スパマーがメール収集しやすくなってありがたい、という皮肉だ
  • "Risk of COVID from pianos" という項目がマップの下部に含まれている

    • その出典が気になる
  • HNのいちばん良い点は、コメントに一時的なものという感覚があることだ

    • 同意なく分析されて公開されるのは不快だ
    • すべてを分析する必要はないし、競争する必要もない
    • コンテンツに集中している点がよい
    • そのせいでバイオからTwitterハンドルを削除することになった
  • 最近の関連プロジェクト:

    • "Show HN: Exploring HN by mapping and analyzing 40M posts and comments for fun"(2024年5月、159コメント)
  • 数年前に物議を醸したツールがあった

    • テキスト分析と文体から似たユーザーを見つけるツールだった
    • とても正確だったと聞いている
    • このツールがその用途に再利用できるのか気になる
    • "Explore More Users" が類似性で並んでいるのかは明確ではない
  • 活動の少ないユーザーとして、このツールは不正確だと感じる

    • 自分が最もよく知らないjpeg xlについての質問に集中しているようだ
    • もっと一般的なトピックに偏っている可能性がある
  • 自分のユーザー名を深掘りするのは難しかった

    • マップ上に多くの点が散らばっていること以外、あまり情報が得られない
    • クラスター全体が何なのか理解しようとしているところだ
    • ほとんどがandroid/apple/google関連だ