世界を動かす技術を、日本語で。

Hacker Newsの投稿の65%はネガティブな感情を持ち、パフォーマンスが優れている

概要

  • Hacker News でネガティブな投稿は平均より高いスコアを獲得
  • ネガティブ投稿は 全体平均より27%高いポイント
  • 32,000件以上の投稿と340,000件以上のコメントを分析
  • 様々な AIモデル で一貫した傾向を確認
  • 研究成果や今後の公開予定についても言及

Hacker Newsにおけるネガティブ投稿のパフォーマンス分析

  • Hacker News 上でネガティブな感情を持つ投稿は平均 35.6ポイント を獲得
  • 全体の投稿平均は 28ポイント であり、ネガティブ投稿は 27%のパフォーマンスプレミアム
  • 分析は HNの注目度ダイナミクス を対象
    • データ減衰カーブ
    • 優先的アタッチメント
    • 生存確率
    • 早期エンゲージメント予測
  • 研究の プレプリント はSSRNで公開中

データセットとモデルの詳細

  • 対象データは 32,000件の投稿340,000件のコメント
  • 65%がネガティブ と判定
    • 分類器のネガティブ判定バイアスの可能性も考慮
    • 6種類のモデルで一貫した傾向を確認
      • Transformer系: DistilBERT, BERT Multi, RoBERTa
      • LLM系: Llama 3.1 8B, Mistral 3.1 24B, Gemma 3 12B
    • 分布は異なるが ネガティブ傾向は共通
    • ダッシュボードには DistilBERT を採用(Cloudflare環境で効率的に稼働)

ネガティブとは何か

  • ネガティブ の定義
    • 技術批判
    • 発表への懐疑
    • 業界慣習への不満
    • APIへのフラストレーション
  • HNのネガティブ投稿は 建設的批判が中心 であり、 個人攻撃や毒性 とは異なる性質

ネガティブとエンゲージメントの関係

  • ネガティブな投稿が エンゲージメントを生むのか
  • もしくは 議論を呼ぶ投稿がネガティブになりやすいのか
  • おそらく 両方の要素 が影響

今後の公開予定と連絡手段

  • 研究の コード・データセット・ダッシュボード を近日公開予定
  • 最新情報の取得方法
    • RSSフィード の購読
    • Bluesky でのアップデート受信
    • 直接のアップデート希望も受付

Hackerたちの意見

ネガティブな投稿の方が、中立的やポジティブな投稿よりも反応が良いことが多いんだよね。タイトルが「最もアップボートされる可能性が高い」って判断する分類器を持ってて、「Richard Stallman is Dead」がその最適なタイトルなんだ。もう一つは「コメント/投票比率が0.5を超える可能性が高い」って判断するやつなんだけど、最初のはROCの観点から見るとイマイチ、二つ目は結構良くて、クリックベイトや男女の戦い、そして不思議なことに車に関するものを好むんだ。でも、35って平均スコアが最初は信じられなかった。だって、中央値のHN投稿は投票がゼロだし、前に見たときは平均が8くらいだったから。彼は何をサンプリングしてるんだろう? [1] コメント/投票 = 0.5は平均に近いね。

こんにちは、コメントありがとう!サンプリングは過去35日間のすべての投稿/コメントからで、APIを通じてアクセスしたよ(https://github.com/philippdubach/hn-archiver)。高評価の投稿が優先的にサンプリングされる可能性があるから(つまり、ボリュームが多い投稿やコメントはゼロのアップボートだとデータベースに入らない)、そのせいで高い比率になってるのかもしれないね。論文を発表する前に、必ず調べてみるよ。これがまさに事前印刷を公開する際に期待していたフィードバックだから、指摘してくれてありがとう!言及された分類器も見てみたいな。時間があれば、ページのメールかブルースカイで連絡してね。

「最もアップボートされる可能性が高い」ための「リチャード・ストールマンは死んでいる」というのが最適なタイトル これめっちゃ面白いね。「フランシスコ・フランコ将軍はまだ死んでいる」という有名な新聞の見出しを思い出すよ。もちろん、この記事を書いてる時点ではRMSはまだ生きてるし、最適な見出しは嘘なんだけどね。

文句を言うのは簡単だよね。文句を言っても、誰かが別の視点をコメントしてくれることがあって、それは必ずしも叱責として受け取られるわけじゃない。でも、ポジティブなことを投稿してコメントで叩かれるのは、ちょっと落ち込むよね。だから、ポジティブな投稿のハードルが高く感じるんだ。

ほとんどのHNのネガティブさは、有害というよりも実質的だ。これはOPの投稿でも触れられている。私がHNで出会う「ネガティブさ」の大半は、批判や有害さではなく、技術的な批評なんだ。HNはおそらく最も有害でないコミュニティの一つだと思う。

最近気づき始めたもう一つの問題は、レディットでアカウントが曖昧なポジティブコメントを投稿してカラムを稼いだり、アカウントをリアルに見せたり、同じアカウントからの他のAI投稿をカバーしたりすること。記事にもっとポジティブなコメントが増える世界が見たいけど、投稿のポジティブさが弱い(でも増えている)スパム指標になりつつあるよね!

ナット・フリードマンが「悲観主義者は賢く聞こえ、楽観主義者はお金を稼ぐ」と言ったと思う。皮肉やネガティブな見解を持つ方が、アイデアをどうやって実現するかを考えるよりもずっと簡単だよね。それに、ネガティブな人は賢いと見なされることが多い! https://www.sciencedirect.com/science/article/abs/pii/002210...

あなたはただの苦情を言っただけで、それは事実だよね。「苦情は悪い、わかった?」という文脈で、これについてどう感じてる?

コメントでも同じことを見たことがあるよ(ネガティブな感情や短いコメント)。短くて皮肉なネガティブコメント [0] は、理論的で長いコメントよりもずっと良い反応を得ることが多い。HNではカラムなんて関係ないけど、頑張って書いた長いコメントが無視されて、短くてキレのあるコメントがたくさんアップボートされるのを見ると、がっかりするよ。質問した元の人から返事すらもらえなかった詳細なコメントに1時間以上かけたこともあるし、考えなしにサッと書いたコメントが「バズる」こともある。良いコンテンツが必ずしも評価されないのはフラストレーションだよね。[0] これは自分もやっちゃってることだな。

長いコンテンツが必ずしも良いわけじゃない。簡潔さには意味があるんだ。誰でも2000語でポイントを伝えることはできるけど、同じポイントを20語で伝えて同じインパクトを持たせるには、文章力と編集スキルが必要なんだよね。

一般的にソーシャルメディアに対しても同じように感じてるよ。リソースを管理することが大事なんだ。この場合は時間だね。ここで試していることの一つは、誰かが同じくらい長いかそれ以上のコメントを書いてくれるような、小さなコメントを書くことなんだ。もしその暗黙の招待を受け入れてくれたら、もっと長い会話ができる。そこそこ成功してるよ。

「より良いコンテンツが常に評価されるわけではないのがもどかしい」 そうだね。もしかしたら、努力してもより良いコンテンツを作れないだけかもしれないし。フラストレーションは、エンゲージメントの欠如から来てるのかも。努力が誰にも気づかれずに消えてしまったり… でも、注目されることがコンテンツの良さを評価する基準の一つかもしれないね。自分が良いと思うコンテンツを作らずに、パフォーマンスが良くなることもあるし。より良いものを評価してくれるオーディエンスを引きつけることもね。こっちは見えてるのに、向こうは見えてない。ブログやってる?楽しそうだね。

Hacker Newsで議論の続きを見る