IBMみたいなソフトウェアやプラットフォームの市場（みんなこれ使ってる！良いに違いない！）はまだ飽和してないみたいだね。

以前はこのプラットフォームの大ファンだったんだ。2020年/2021年の頃は、データプラットフォームを作るのにAWS/Azure/Snowflakeと比べて本当に唯一の合理的な選択肢だったから。今は機能が増えすぎて、ピボットや買収が多すぎて苦しんでる。機能の名前がめちゃくちゃ下手なのも助けになってない。

本当に大反対だわ。Hadoopから来た身としては、Databricksはユートピアだよ。安定してるし、速いし、大規模なデータセットがあればスケールもすごくいい。唯一の不満は、めちゃくちゃ高いこと。

クッキーを無効にすると真っ白なウェブサイトが出てきて、これは大きな赤信号だし、即座に「ノー」って感じ。ウェブサイトを作れない人が良い（デジタル）製品を提供できるとは思えない。

Databricksは2013年に始まったんだけど、その頃Sparkはクソだった（今もだけど）。彼らはそれをより良く、速くしようとしてる（実際にやってる）。製品はまだSparkを中心にしてるけど、ほとんどの企業はSparkを必要としてないし、IcebergとDuckDBの組み合わせで95%の企業には十分だよ。安いし、同じくらい速いかそれ以上だし、理解するのもずっと簡単。Definiteではその前提でデータプラットフォームを構築してるんだ。[0] データを始めるために必要なもの（ETL、BI、データレイク）が全部揃ってるよ。0 - https://www.definite.app/

ホスティングスパークってそんなに画期的なの？それに、スパークって企業のデータ処理の90%にはちょっと複雑すぎるんじゃない？この会社の評価が理解できないんだけど、なんでこんなに高いの？

Databricksはデータを扱うためのJiraみたいなもんだね。誰も使いたがらないし、クソだし、全てのユーザーに合わせようとしすぎて機能が多すぎるけど、どれも特に良くない。今は昔よりもずっといい選択肢があるよ。自分は絶対に選んで使うことはないね。

サーバーレスをめっちゃ推してるけど、制限や驚きの落とし穴がめっちゃ多いんだよね。ほんとにイライラするわ。

正直、ほんとに退屈だよ。2010年代後半に戻るしかない。あの頃、信頼できるセルフホステッドのSparkインスタンスを企業環境で見つけるより、レプラコーンを見つける方がマシだった。ほとんどの企業ITチームにはそれが無理だったからね。ハイパースケーラーのファーストパーティの提供は比較的質素だった。Databricksの独自のノートブック形式はJupyterとの微妙な互換性の問題を引き起こして、イライラさせる「抱きしめて、拡張して、消す」スタイルのクソだったけど、オンプレミスクラスタの不安定さでジョブが毎日クラッシュするのはもっとイライラした。あの頃、企業は分析チームを加速させるためにプレミアムを払うことに喜んでいた。2010年代には、Databricksはしっかりした10億ドルのビジネスを持ってた。でも、Spark-as-a-Serviceだけではユニコーンアイデアにはならなかった。AWS EMRは背景でじわじわと差を詰めてきた巨大な亀だった。現状は続かないし、誰もがユニコーンになりたいと思うよね。だから、彼らは製品を膨らませて、オフブランドのグロースハッカーのクールエイドを飲んで、左海岸から出てくる最も意味不明なバズワードサラダを吐き出し始めた。データ、レイク、ハウスをすべてのものの末尾に貼り付けて、まるでDiddyパーティーのベビーオイルみたいに。今、2025年にここにいて、エンシティフィケーションの終末的な衰退の真っ只中で、彼らはただ腐っていくのを待ってる。リアルなクソ野郎、ラリー・エリソンが彼らを拾って地獄に連れて行くのを。フロリダ州、でもビッグデータ企業のために。今日、誰がグリーンフィールドプロジェクトのためにDatabricksを選ぶのかは私にも謎だけど、5年以上前の企業は今やしっかりとロックインされてる。彼らはそのクジラを搾り取って、数年は金の卵を産むけど、市場シェアは徐々に減っていく。これが生命のサイクル。エントロピーは常に勝つ。最終的には死神ラリーが私たち全員を迎えに来る。彼らをあまり嫌うつもりはないよ。彼らはかなりの成功を収めたから。