世界を動かす技術を、日本語で。

次のトークン予測は私たちをどこに導くのか?

概要

  • AI最大主義者 による「solved」「cooked」という表現の問題提起
  • AIの進化 が労働や創造性の価値を奪うことへの懸念
  • 資本主義 とAIの関係、格差拡大の危険性
  • 人間の経済的価値 の喪失とその社会的影響
  • AI開発の裏側 と倫理的・社会的課題の指摘

AI最大主義者と「solved」「cooked」カルチャー

  • AI最大主義者 が「solved」「cooked」という言葉を使い、産業や職業の終焉を喜ぶ風潮
  • LLM(大規模言語モデル) を「next-token predictor」や「stochastic parrot」と呼ぶことへの反発
  • 産業や職業の消滅 を中立的進歩ではなく、勝ち誇った態度で語る傾向
  • 議論の過激化、まるで政治的対立のような部族主義の発生
  • 暗号通貨やArch Linuxユーザー など過去の技術コミュニティとも比較されるが、AIの部族主義はより極端

AI進化と経済的影響

  • AIの進化 が人間の創造性や労働価値を脅かす現実
  • 経済的クッション や社会的セーフティネットを持つ一部の人々による楽観視
  • 世界の半数以上 はそのようなセーフティネットを持たない現実
  • 教育や社会的地位 がAIの果実を享受するための前提条件
  • 社会保障や税制 の脆弱さ、労働を切り捨てる企業への課税困難

資本主義とAIの融合

  • AIによる生産手段の集中、富裕層や企業への権力集中
  • AI利用のコスト (高額なサブスクリプションやGPU)、一般人の参入障壁上昇
  • 「with AI, not by AI」 という労働者の自己防衛的スローガン
  • 労働のトークン化、人間が単なるノード化される危険性
  • 企業によるAI活用 で労働者の価値がさらに下落

AIと人間の価値の再定義

  • 経済的有用性を失う人間、資本主義のルーレットから排除される危険
  • 学歴やスキル の価値低下、AIによる知識とスキルの民主化
  • 企業の最終目標 は「トークンコストのみ」での生産、労働者の完全排除
  • 労働の交渉チップ がAIに置き換えられ、NvidiaやTSMCなどの企業に依存

AI開発の裏側と倫理的課題

  • データ収集の問題、あらゆるウェブ・書籍・写真・動画がデフォルトでAI学習に利用
  • ラベリングやデータセット最適化 に低賃金労働者が従事
  • データセンター建設 による社会的コストや環境負荷
  • AI開発の名目 で国家安全保障や防衛利用が正当化
  • AnthropicやOpenAI のCEOによる過激な発言や社会的影響
  • AIの軍事利用、科学者やエンジニアの倫理的ジレンマ

AI時代の人間の立ち位置

  • 個人情報や会話データ の収集・利用、プライバシーの危機
  • AI開発競争 のためにユーザーのデータが利用される現状
  • 人間の創造性や労働の喜び が奪われる自己完結的なループ
  • 成果の恩恵から排除される大多数、収穫のない囲い込み状態
  • AIによる「次のトークン予測」 がもたらす、個人にとって居心地の悪い未来

参考

  • r/singularity コミュニティの議論
  • データセンター建設と社会的コスト(EESI記事)

Hackerたちの意見

最近、これって単に階級の問題なんじゃないかって考えてるんだ。今、彼らが与えている衝撃的な打撃を和らげるクッションを持ってる人たちの集団だと思う。彼らは、ある程度機能している政府や、あらゆる生活の中で目にする社会的安全網の恩恵を受けているのかもしれない。でも、世界の半分以上はそうじゃない。科学や技術は、底辺の人々の苦境に対して常に無関心な気がする。私が見たデータによると、アメリカやヨーロッパの国々は、中国や発展途上国よりもAIに対してネガティブな見方をしている。経済的な安定を持っている人だけがAIを支持するという前提に反しているんじゃないかな?

その態度は1対1で比較できるわけじゃないよね。中国は社会経済的発展において勝ち続けていて、AIは社会契約の文脈では単なる新しい技術として見られていると思う。アメリカは逆の方向に進んでいて、ここではAIを寡頭制の視点から見ることが多い。実際に経済的に安定していても、多くの人が楽観的に感じているとは言えないと思う。

もしかしたら、そういう国々のブルーカラーとホワイトカラーの仕事の割合に関係があるのかな?それに、失業した労働者のための安全網が強いのかも気になる。興味深いね。私の経験では、「安全」だと感じている人は中立か賛成派が多い。そうじゃない人はネガティブだね。

経済のクラシックな進行は、資源 → 製造 → 知識だよね。AIはこの流れを知識を資源の問題にすることで円に変えてしまう。自然資源や製造業が豊富な中国のような発展途上の経済は、知識ベースの経済が強いヨーロッパよりもリスクが少ないんだ。

私が見たデータによると、アメリカやヨーロッパの国々は、中国や発展途上国よりもAIに対してネガティブな見方をしている。これは、これらの経済の相対的な状態や進展の速度を示すサインだと思う。発展途上国では、人々は進展を自分たちの生活を改善するものと見ているけど、発展した経済では、現状を乱すものとして見ていて、それを止めなければならないと考えているんだ。

中国の人たちは、全体的に物事に対してもっとポジティブな気持ちを持ってるのかもね。ヨーロッパの多くの国やアメリカは、ここ数年ずっと衰退してるし。

これの大きな部分は、アメリカやヨーロッパのAI企業のトップやビジネスリーダーたちが、AIが仕事を奪って「低価値の人材」を置き換えるってずっと言ってる一方で、AIデータセンターが建設されている地域では電力不足やエネルギー料金の高騰が見られることだよね。一方、中国の第15次五カ年計画は、AIを経済全体に統合しつつ、職業訓練プログラムを拡充し、新しい再生可能エネルギーインフラを構築してデータセンターに電力を供給することを含んでいる。中国の人事省は、AIが短期的に600万から1000万の新しい仕事を生み出すと期待していて、中国政府は長期的には人口の不足から生じる労働力のギャップを埋めるためにそれを利用する計画を立てている。これが、中国の人たちが西側よりもAIに対してポジティブな見方を持つ大きな理由だと思う。彼らのリーダーたちは、AI導入の負の外部性を軽減するための明確な計画を持っているけど、私たちのリーダーたちはそうじゃないから。

これは、中国の経済が強く成長しているという事実から派生しているように思う。強い国家権力があるから、インフラの改善が見られるんだよね。アメリカやヨーロッパの政府は、一般的に後ろ向きで、シンプソンズで描かれた1970年代のフィクション的な世界を目指している人々の意見を反映している。その結果、中国の人たちは原子力や太陽光、風力エネルギー、AI、造船、宇宙プログラム、電車、電気自動車などに熱心で、これらを得るためにスモッグのある都市でも気にしない。対照的に、西側諸国は自分たちが持っているものに満足していて、何も変わらないことを望んでいるか、もし変わるなら過去の世界に近づくような変化を望んでいる一方で、きれいな空気や水を楽しんでいる。個人的には、石炭採掘が過去に大きな発展をもたらしたから、またそれが発展につながると期待するのと似ていると思う。

All In Podcastの億万長者の一人が、アメリカと中国がAIを規制する際に取り組むべきことの一つとして、「顧客を知る」コントロールを挙げていた。最初はホストの一人が言ったとき、あまり気にしなかったけど、後でその二次的な影響について考え始めた。なぜそれがそんなに重要な懸念になるの?彼は危険な人々がAIを使って悪いことをする例を挙げたけど、実際のところ、その裏にはもっと複雑な事情があると思う。少なくとも所有者の視点からはね。これもOpenAIの元々のアイデアに関係している。つまり、一般の人々がどのモデルの能力にも平等にアクセスできるべきだということ。でも、所有者クラスはそれを持てない。別の投稿で、誰かがライセンスについて良い指摘をしていて、これは法制度のようなものにも拡張できる。結局のところ、個人的な人間関係が、モデルが計算した結果よりもずっと重要なことを決めるから。だから、裕福なクラス内での権力や秩序を維持するために、情報に依存している部分が多い。法的な例を使うと、弁護士を雇うとき、ほとんどは情報とアクセスに対してお金を払っている。今、既存の情報と競争する権力者たちは、こうした破壊的な技術で現状を維持するために、アクセスの側面をもっと重要にしなければならない。そして、これは、アメリカ政府が好まないアメリカ市民がアメリカ製のモデルを使って制限を回避しようとする場合、中国のモデルを劣化させる必要があるということの別の側面でもある。つまり、KYCは情報を得るためにお金が必要だった歴史的な側面を復活させることだ。そして、そういう見方をすると、階級闘争の側面がある。

「正しく聞こえる」ことや、パターンや情報を繰り返すこと、即時的な実利を重視する教育システムや文化は、批判的思考の強い伝統を持つ文化よりもAIを好むようだ。AIを愛する文化は、安くて早く何かを作って売る傾向がある。逆にあまり好まれない文化は、正しくしっかりと物を作ることに投資し、長期的な思考を重視する。即時的な利益を重視する考え方の人たちはAIが大好きだ。 > https://www.visualcapitalist.com/survey-how-21-countries-vie... 汚職レベルのグラフも、最初のリンクの価値観をほぼ反映しているだろう。国が汚職しているほど、一般の人々はAIを愛している。AIへの熱狂は、真実の一般的な侵食とほぼ直接的に相関している。同様に、正確さや安定性を重視する人たち、例えばHaskellやAgda、または型理論に関わる人たちは、ボイラープレートやスニペットをコピー&ペーストして、迅速で実用的なリアクトアプリを作る人たちほどAIに熱心ではない。

著者はあまり情報を持ってないみたい。D.O.WはAnthropicのファンじゃないからね…

今はそうじゃないけど、彼らの製品が欲しかったから強引に迫ったこともあったよ。

でも、実際には「すっぱいぶどう」ってやつだよね。彼らはまだアンソロピックのぶどうを欲しがってるだろうけど。

彼らはダリオのファンではないけど、クロードの大ファンみたいだね!

コードを一行も書いたことがない非技術系の中間管理職が、今や自分と偉大さの間にあった最大の障害が取り除かれたと感じている。これが、君が言ってたAIが提供する「民主化」に近いのが面白いね。AIは特定の技術的能力を「民主化」するけど、ある意味ではその「民主化」が悪影響を及ぼすこともある。この「民主化」が人々を完全に同じものとして扱うシステムに押しやってしまい、個々の交渉能力を失わせるから。非技術系の中間管理職にこの能力を「民主化」することで、ジュニアのソフトウェアエンジニアは自分のユニークな貢献を失い、その結果、投票権も失ってしまう。以前、できるだけAIをボイコットしようという話を読んだけど、実際にそうしたいと思ってる。でも、この問題を考えると、それが本当に効果的なのか疑問に思う。もし目標が自分のユニークな貢献をすべて取り除くことなら、ボイコットで何を取り上げられるんだろう?

「民主化」って言葉が大嫌い。全然尊敬されるべきじゃないものに、尊敬できる顔をつけてるだけだよね。インターネットの時代では、コーディングや他のクリエイティブなスキルは、学ぶ気がある人には大体民主化されてる。AIによって「民主化」されるものなんて何もないよ。ただ、実際のスキルの価値をゼロにしようとしてるだけで、スキルがない人やバカが金で平凡さを買えるようにしてるだけ。スキルを身につけるために努力した人にお金を渡すわけでもないし、そんなの全然「民主的」じゃないよ。

技術的じゃない中間管理職が、開発者たちの最大の障害を避けるためにエージェントを使うのと、自宅でコンセントを取り付ける人との間に似たような点を考えてる。コンセントを取り付けるのはそんなに難しくないけど、いろいろと問題が起こる可能性があるから、普通は電気工事士を呼ぶよね。ある地域では、ライセンスなしで取り付けることができないし、ライセンスがないと自分のためだけにしか取り付けられない場合もあるし、終わったら検査官を呼んでチェックしてもらう必要がある。別の地域では、本当に何でもできて、全てのリスクは自分にかかってくる。電気工事士はある程度代替可能だけど、誰にやってもらうかはあまり気にしないことが多いから、職業として存在していて、彼らは生活費を稼いでる。少なくとも一部の地域では、顧客データを保存したり、支払いを処理するウェブサイトを更新するのに、ライセンスを持ったソフトウェア開発者でないと法的に許可されない日が来るまで、どれくらいの時間がかかるんだろう? そのルールが採用されれば、私たちの職業はどう変わるんだろう。

この「民主化」が、私たちを完全に代替可能なシステムに押しやって、個々の交渉能力を失わせる方向に進んでいる。力織機が手織り職人を職を奪ったのは、これが初めてじゃないよね?

コーディングはずっと「民主化」されてた。学ぶ努力をすればよかっただけ。無料のリソースを見つけるのはすごく簡単だし。AIはその学びや理解を簡単にするわけじゃなくて、ただ人々がそれをスキップできるようにしてるだけ。それは全然民主化じゃないよ。

非技術的な中間管理職にこの能力を民主化する 逆もあるよ。今やジュニアエンジニアがAIを使って、昔の中間管理職がやってたことの多くをこなせるようになってる。正直、中間管理職はほとんどの人よりももっと心配すべきだと思う。

個人の交渉能力 「個人の交渉能力」が社会全体にとって特に有用なものだと思うことが、今のホッブズ的な混乱に私たちを導いている一因だね。

人々は軍事サービスを通じて交渉力を持ってる。もしその仕事すらAIに奪われたら、残された人々には本当に手段がなくなるよね。これはユヴァル・ノア・ハラリの考えだね。

みんな押し出されてる崖だよね。あなたはどうかわからないけど、私はパラシュートをつけるのに苦労してるよ!!!

どこでパラシュート見つけたの?

もっと暗い考えがあるんだ。階級も関係してると思うけど、驚くほど多くの人がこのことの影響を考えるための批判的思考スキルを欠いてるんじゃないかって疑い始めてる。管理職の人たちに会ってきたけど、彼らは自分たちが支払わなきゃいけない面倒な人たちを置き換えると思ってるみたい。でも、自分たちがその対象になるとは思ってないんだよね。なんか、全体的に「自分が主人公」みたいな感覚があって、機械が他の仕事を全部置き換えられると思ってる人が多いのに、人間の知識を全部取り込んでも「専門知識」を持った人には勝てないって思ってるのが不思議。皮肉なことに、自分の富が守ってくれると思ってる人たちも、失業率が50%以上になったら社会が安定するなんて思ってるのかな?この終末的なシナリオが現実になるとは思わないけど、応援してる人たちは本当に何を応援してるのか考え直すべきだと思う。

でも、わかってる人もいるよね。クロードが最終的に私を置き換えるかもって冗談を言ったら、マネージャーが明らかに動揺して、「まず自分が置き換えられるだろう」って言ってた。数ヶ月前よりは気持ちが楽になったけど、まだ何かが欠けてる気がする。それを実現するのは難しそうだな。人間はまだしばらく必要だと思う。

これは逆の形のゲルマンアムネジアかもしれない。みんなAIを自分の専門分野には不正確だと思ってるけど、他のあまり知らない分野には全然問題ないって感じで。

社会が安定していて、安全だと思ってるの?これって、過去20年間の人種差別の増加と関係があると思うんだ。歴史的に見ても、反ユダヤ主義はエリートたちによって利用されて、下層階級の敵意をそらすために使われてきた。「ほら、君たちを搾取してるのは俺たちじゃなくてユダヤ人だ!」ってね。今の西洋でも同じことが起きてると思う。エリートたちはどんどん国の富を搾り取って、政府を空っぽの家賃源に変えてる一方で、私たちの苦しみは(違法な)移民のせいだと言ってる腐敗した政治家を支持してる。 > それを応援してる人たちは、本当に何を応援してるのか考え直すべきだね。確かに。AI技術の使用に反対する理由が一つあるとしたら、それは政治的なことだと思う。残念ながら、SWEクラス(そう呼べるのか分からないけど)は、地球上の大多数の人々よりも恵まれているから、クラス問題や不平等にあまり関心がないみたい。自己利益からかもしれないけど。でも君が言ったように、機械は彼らにもやってくるから、いつ来るかの問題であって、来ないわけじゃない。

クラスだけの問題じゃないと思うよ。特別な才能があるって自分に言い聞かせてる人たちにたくさん会ったし、ソフトウェアの世界でもそういう人がいる!医者や配管工のように守られている人たちも、第二次的な影響からリスクがあることに気づいていない。顧客の半分が破産したらどうなる?その可能性は誇張じゃないよ。みんなが一晩で再スキルを身につけても、住宅ローンのデフォルトは'08年の金融危機よりも大きな規模になるだろう。それはただの一つの壊滅的な結果に過ぎない。もっとたくさんの結果があるし、なぜか誰もそれについて話していない。

もし間違ってたら教えてほしいんだけど、ローマ市民の最大40%が「福祉」を受けてたって聞いたことがある。これが示すのは、政治活動だけで構成される社会が機能することは不可能ではないってことだよね。

富は運によって大きく分配されるけど、過去30年ほどでより集中してきたよね。ほとんどの裕福な人は、知的な意味で特に賢いわけじゃないけど、自分が賢いと思い込んでる。だって、他にどう説明すればいいの? 自分が特別に努力したり才能があったわけじゃなくて、ただ運が良かったって認めるのは、ほとんどの人がやりたがらないことだよね。私の経験では、自分の持っているものを運のおかげだと本当に考えている人にはほとんど会ったことがない。> くそ、富が自分を守ってくれると思ってる皮肉屋たちも、失業率が50%以上になったら、社会が安定して自分たちが安全だと思ってるのを無視してるんじゃない? ほとんどの人は二歩先を見られないし、主流のナラティブを信じて、自分が他の人を出し抜いてると思ってる。トランプのツイートが何度も嘘だと証明されてもまだ通用するのを見てみなよ。こういう人たちは、完全に空っぽになるまで今まで通りのことを続けるだろうね。

あなたが指摘しているのは、私たちの文明を腐らせている階級意識の欠如だと思う。みんなが自分は他の誰よりも賢いと思っていて、競争で勝ち抜けると思っているなら、AIの移行をスムーズにするために必要な集団行動を組織する人がいなくなっちゃうよね。

タイトルはちょっと誤解を招くかも。次のトークン予測の最終状態を示唆してるように聞こえるけど、実際は「生産手段」や「階級闘争」の話なんだよね。それが来るかもしれないけど、これが最も可能性の高い結果とは言えないし、ただ最も悲観的なものだと思う。著者は「人類の終わり」ってことも含めておけばよかったんじゃないかな。未来の状態に達したら、他の選択肢が見当たらないから。

もう擬似的な階級戦争に入ってると思う。テクノロジーの世界にいる私たちは今のところ孤立してるけど、中産階級は世界中で消えていって、富の格差は広がってる。ほとんどのプロパガンダは、性別や人種、性的指向の境界での分断を増やすことに集中していて、内部での争いが人々が上を見上げるのを妨げてる。まあ、私がちょっと過激になりすぎてるだけかもしれないけど。

ごめんね。タイトルは皮肉のつもりだったんだけど、特にHNの人たちには誤解を招くよね。

その結果があまり可能性が高くないと思う理由を詳しく教えてくれる?

LLMは、私たちがすでに深く認識している重要な真実を明らかにしている。この認知のオフロードによって、私たちを動かす興味が意味を失う。摩擦が消えれば、欲望や喜び、憧れ、障害、需要がなくなる。これは怠惰で、無関心という名前で呼ばれる。理想にすら達していないのに、すべての約束がある!もしかしたら、この理想が貧弱になっているだけなのかもしれない。「AIは私たちを愚かにする」というのが一般的な見解だから、実際にそれを使えるのが裕福な人だけなら、良いことだと思われている。 deprivation、恥、死、そしてそれに対するポジティブな側面を経験した後に、私たちがエントロピーを克服できないとは思えない。私たちは適応するだろう、それが私たちが知っていることだから。努力なしに与えられるものは変わらない。

まさにその気持ち、わかるよ。昔から学ぶのが好きで、色々掘り下げたり、デバッグしたり、創造するのが楽しかった。でも今は何かが奪われて、価値がないように感じる。無気力と無関心を感じてる。うちの会社のCEOは、コードの品質なんてどうでもいいって明言してるし、早く出荷して繰り返すことが大事だって。ほんとに悲しいし、何かを失ってる気がする。昔みたいにやっても、時間を無駄にしてるってプレッシャーを感じる。

これらのことは生物学的/神経的に引き起こされている。私たちの祖先の環境でうまくいった適応(努力→報酬=満足、ストレス=努力)が、今では逆に適応障害になってる可能性がある。こういう移行を経験するのは私たちだけじゃないし、残念ながら他の生物もそうなるだろう。心配なのは、これが自然選択を通じて大きな遺伝的変化を引き起こしたり、特定の環境から生物が排除されたりすることが多いってことだ(例えば、都市近くのホタルみたいに)。

こんなにたくさんの約束があるのに、理想には全然届いてない!もしかして、この理想が貧しくなってきてるだけなのかな?どんな理想? > 「AIは私たちを愚かにする」というのが一般的な見方だから、富裕層だけが使えるようになるのはむしろいいことだって?それがいいことになるの? > それは疑わしいな [..] エントロピーを乗り越えられないなんてことはないと思うけど。これってどういう意味? > 努力なしに与えられるものは変わらない。愛情深い親がいる子供たちは、その影響を絶対に受けるよね。たとえ無条件の愛が与えられていて、自己意識を持つ前からあったとしても。私たちも、太陽の光があるこの惑星で生きていることで大きく変わるし、そのために太陽を点ける必要はなかった。使わない筋肉は萎縮するのは本当だけど、それには脳や「心」も含まれる。でも、人生で一番素晴らしいものは無料だってことも事実だよね。

AIはもうたくさんの労働者を置き換えてるけど、AIが管理するビジネスはまだ存在しないよね、終末的なPRは別として。お金についての誤解があると思う。お金は価値のベクトルで、価値は人々の働きから生まれる。働ける人が減れば、デフレにつながるし、資本主義者はそれを避けたいはず。でもAIはハードウェアとエネルギーで、もっと多くの労働者が必要なんだ。トークンの価格は電気代やハードウェアのGPUを支払うためのもので、AIの研究にはほんの少ししか使われてない。確かに、開発者はコードを書く猿よりも建築家のようであるべきだけど、それが悪いことかどうかはわからない。あと、LLM技術は今後停滞するっていう逆張りの見方もある。AGIへの道ではないと思う。彼らの動作を見れば、革新ができないことがわかる。モデルはインターネットの知識を圧縮したものみたいで、それを吐き出してるだけ。もうそれなりに良いけど、LLMで次の飛躍的な革新はすぐには見られないと思う。結局、OpenAIは偶然生まれたものだし、未来には私たち全員が今日の最前線のAIをノートパソコンで使って生活を自動化することになるよ。まだまだ発明すべきことはたくさんあるし、LLMは競争相手というよりも、むしろ助けてくれる存在だと思う。

AIの基本的な理念、「私たちをあらゆる困難から救う」っていうのは、急速に崩れつつある。いや、それはただのマーケティングスローガンだよ。AIの基本的な理念は、報酬モデルに従って次のトークンを最適にマッチさせることだ。