世界を動かす技術を、日本語で。

Vision Proの最もクールな使い方

概要

  • Vision Pro を活用した住宅設計体験の革新
  • 3Dモデリング と現実感覚の向上方法
  • 家具や素材の 3Dモデル活用術
  • 独自アプリ開発 によるVR体験の強化
  • 未来の住宅設計プロセスの一端を紹介

Vision Proで実現する理想の家づくり体験

  • Vision Pro を使い、住宅設計の仮想体験を実現
  • 紙の図面 では得られないスケール感や空間把握の難しさを解消
  • 高解像度ディスプレイ と多彩なセンサーで、没入感あるバーチャルウォークスルー
  • 住宅市場の高騰 を背景に、空間の有効活用が重要課題
  • 設計士 の力を借りつつ、最終判断は自分たちで行う責任感

3Dモデリングの始め方とおすすめツール

  • Fusion 360 を活用し、2D図面から3Dモデルを作成
  • 初心者向けプロジェクト として最適、YouTubeやAIで学習可能
  • Fiverr など外部サービスで3D化を依頼する選択肢も存在

空間にリアリティを与える工夫

  • 家具や家電の3Dモデル を配置し、実際の生活感を再現
    • IKEA の家具3DモデルをTampermonkeyスクリプトでダウンロード
    • glbファイルobjファイル へ変換しFusion 360で利用
  • 3D Warehouse から多様なアイテムを取得
    • USDZファイル をiOS経由で取得し、必要に応じて変換
  • テクスチャ追加 で空間の奥行きや質感を演出
    • Fusion 360の「A」キーで外観パネルを開き、木材や石などをドラッグ&ドロップ

Vision Proでの3D体験の強化

  • USDZ形式 でエクスポートし、Vision Proで直接閲覧
  • 現実世界との干渉 を避けるための工夫が必要
  • Prospector という自作アプリで機能拡張
    • コントローラー対応 でゲームのような移動体験
    • スカイボックス で外観もリアルに
    • 地形追従飛行モード で上下階や敷地全体を自由に探索
    • 現実世界との切り替え で安全性も確保
    • 高速移動モード で広い敷地も効率的に移動

Prospectorの導入方法と使い方

  • GitHub でソースを公開、XcodeでUSDZファイル名を変更して使用
  • コントローラー をVision Proにペアリングし、プロジェクトを実行
  • スカイボックス のカスタマイズも可能(Poly Haven推奨)
  • 未完成・実験的 なコードであることに留意

未来の住宅設計とVRの可能性

  • Revit による3Dウォークスルーも体験済み
  • Vision Pro での没入型体験の方が、空間把握の実感が圧倒的
  • 3D空間での設計確認 が、今後の住宅設計の標準になる可能性
  • ハードウェアがあれば、未来の設計体験が今すぐ可能

Hackerたちの意見

これは、VRヘッドセットの歴史の中でリリースされたどのVRヘッドセットにも標準的に備わっている機能だよ。3Dの世界を作って、その中を歩く。何か見落としてる?

機能とその機能のアプリケーションの違いを見落としてるよ。

「ああ、そんなに難しくないでしょ?」と自信満々に彼は言う。 > 何か見落としてる? たくさん。 > これは、VRヘッドセットの歴史の中でリリースされたどのVRヘッドセットにも標準的に備わっている機能だよ。この記事は「ルームスケールポジショニング」について説明してるんだ。これを最初に提供した消費者向けヘッドセットは2016年にリリースされた。消費者としてしか知らない人には永遠に存在しているように感じるかもしれないけど、ルームスケールで3D空間を探索するのは、最近になってようやく消費者向けヘッドセットで可能になったんだ。80年代や90年代(そして00年代)の多くは、ヘッドトラッキングだけだった。リアルタイムのポジショニングや移動には、はるかに高価なポジショニングハードウェアが必要だったし、ほとんど常に特定のスペース制限があった。確かに、ある程度は存在してたけど、高価で複雑なトレッドミルを使う方が経済的だと見なされることが多かった。実際、Viveが出る前には、ルームスケールポジショニングを提供する「プロフェッショナル」なソリューションすらなかったと思う。以前のものは、4 x 4フィートのエリアのような特定の制限があったり、大学の地下で特定のデモを行うために存在していた巨大な技術デモだったりして、90年代には実用的ではなかった。 > 3Dの世界を作って、その中を歩く。まず、部屋をどうマッピングするの? ライトハウスを設置するの? 低遅延のポジショニング? 記事にあることをするには、大きなスペースとそれをマッピングする能力が必要だよ。最近になって「インサイドアウト」トラッキングが実現可能になったんだ。前の世代にはそれがなかったし、大規模なVR展開にはほぼ必須の要件だよ。たとえば、複数の部屋を探索する場合ね。次に、「3Dの世界」をどう作るの? 簡単に見えるかもしれないけど、VRヘッドセットはグラフィック計算が2倍以上必要なんだ。それは、世界のジオメトリやグラフィックスがヘッドセットの計算予算内である必要があるってこと。記事の中の人が、Fusionから直接USDCをエクスポートして、計算予算の制限に引っかからずにレンダリングできたのはすごいことで、AVPのグラフィックパワーを物語ってるよ。最後に、ステッチング、3Dソリューション、合成、そして現実世界は非常に難しい問題なんだ。また、技術があったように感じるかもしれないけど、実際には小型パッケージの高速カメラソリューションや、それを消費者向けソリューションに近い形で処理するための計算能力がなかったんだ。AVPがUSDZファイルを使って、現実世界に合成し、照明情報を適用することをするには、以前は大きくて高価な機械の艦隊が必要だったんだ。それに、透明性や現実世界の照明や反射の属性をUSDZファイルに適用することも含まれていないから、並列処理が難しいタスクだよ。

一つはおもちゃ。もう一つは、何十万ドルもかける前にミスを見つけること。

家のリモデルをやったときは、ARでやったから大きな違いがあったよ。バーチャルな変更が現実とどこで合ってるかを体験できるのは、すごく大きな違いだね。

そうそう、15年くらい前にこのコンセプトで古いOculus Rift DK1を使ってハッカソンやったことがあるよ。

それは面白いね。作ったら、もっとクールな使い方は、今住んでる家の壁の中の配線や配管をトレースすることだと思う。Revitモデルにはそのデータが含まれてるか、少なくともプランはあるはず。状況は変わるからね。:) でも、特に古い家では、イーサネットの配線を即興でやらなきゃならないから、これが特に役立つよ。普段は4K HDRメディアを楽しむために使ってるけどね。ユーティリティプレイヤーとしては期待外れだけど、メディア配信にはかなり優れてるから、まあまあかな。

ここで言ってることは、ARKitを使えばどのiPhoneでもできることのように思える。もちろんヘッドセットの方が良いけど、3500ドルも出す価値があるとは思えない。この記事には奇妙に触れられていないから、ちょっと言ってみたかったんだ。引っ越しの時に似たような技術を使ったことがあるよ - iPhoneでアパートをスキャンして、その後引っ越し前や最中にスペースを測ったり計画したりするための3Dモデルを作ったんだ。家具の計画をする時にすごく助かるし、引っ越し前に古い場所をスキャンしておいたから、いつでも仮想的にその中に入れるんだ。iPhoneのFinder/プレビューは、3DモデルをARで表示するのも簡単にできるよ。

Arkitが最初に思いついたもので、アドレス可能な市場がはるかに広いよ。

実際にどうやってそれをやったの?フルパイプラインについて教えてほしいな。例えば、アパートをスキャンするのにどのアプリを使ったの?それをどんな3Dモデルに変換したの?それから、新しいスペースの計画はどうやってやったの?どのツールやソフトウェアを使ったの?詳しく聞きたいのは、私も似たようなことを試みたけど、あまり良い結果が出なかったから。以前使ってた「3Dスキャナーアプリ」はまあまあ良かったんだけど、今は売られててあまりおすすめできないみたい。それで、結構 decent なモデルは作れたけど、やっぱり lidar に基づいてて、あんまり正確じゃなかったと思う。実際の間取りとその3Dモデルをどうやってうまく調整するかも分からなかったし、3Dモデルにエラーがあったら、知ってる通り100インチの壁はそのまま100インチじゃないとダメなんだよね。家具の計画には1インチの差が結構重要だから。だから、正確な寸法の3Dモデルをどうやって作るかで詰まってしまったんだ。後で家具の3Dモデルを入れられるようにしたいんだけど。何か情報あれば教えて!

いろんなARアプリを使って、物が物理的なスペースにどうフィットするかを見てきたよ。イケアがやってたやつみたいにね。それに、車の内装のVRプロジェクトにも関わったことがある。VRだと、ARのスマホで推測するよりも、スケールやスペースの感覚が本当に分かるんだよね。人がVRヘッドセットを外したとき、小さな部屋に戻ったことに驚いてるのが好きだったな。君が言ったように、将来のためにいくつかのスペースをスキャンしたいと思ってた。前回見たときは、そういうアプリはあまり簡単に見つからなかったし、使いにくかった。

これはどの現代のVRヘッドセットでもできるけど、それでもかなりクールだね。乾杯!

Hacker Newsで議論の続きを見る