Vision Proでのコーディング
(willem.com)Apple Vision Pro体験記
- AppleのVision Proは、音楽を聴く高品質イヤホンに似ているが、目のための製品である。
- この製品を装着すると、現実世界とデジタル世界が混在した環境を見ることができ、実世界を選択的に遮断したり許可したりできる。
- Vision Proは高度なチップ、センサー、カメラを使って、仮想オブジェクトを実世界に投影し、希望の場所に固定しておくことができる。
空間コンピューティングの探究
- AppleのVisionOSソフトウェアは、単なるウェアラブル・プロジェクターではなく、インタラクティブなデバイスである。
- 内蔵カメラがユーザーの瞳の位置を追跡してデジタル世界とインタラクションできるようにし、指先で軽くタップする動作も検知する。
- 標準のBluetoothキーボードとトラックパッドを接続して使用することができ、Vision Pro自体がコンピュータとして機能する。
結論
- Vision Proを通じてデジタルで3次元を実際に見る体験は非常に自然で、タッチスクリーンを初めて体験したときと同じ感覚を与える。
- この技術は、ユーザーがデジタル環境内を実際に歩き回れるようにし、仮想環境で現実の物体にぶつかる危険がある場合に警告してくれる。
GN⁺の意見
- Apple Vision Proは、現実と仮想を混ぜ合わせた新しい形態のコンピューティング体験を提供することで、ユーザーに新しい作業環境とエンターテインメントをもたらすと考えられる。
- 空間コンピューティング技術は、ユーザーが物理的な制約を受けることなくさまざまな環境で作業できるようにし、特に集中を要する作業に役立つと予想される。
- この技術はユーザーインターフェースの未来を示し、タッチスクリーンがもたらした変化に匹敵する新たなインタラクション方式を導入する可能性を秘めている。
1件のコメント
Hacker News のコメント
ヘッドセットの使用レポートを読むときは、購入後3か月以内の評価は割り引いて見るようにしている
最初の数十回の使用は目新しく、ヘッドセットに合わせて生活が完全に変わったと共有する楽しさや、ソーシャルメディアでの閲覧数もついてくる
数か月たつと、高価なブレンダーのように棚でほこりをかぶるだけになることが多い。AVP がこの点でどれだけ持ちこたえるか見てみる必要がある
Apple 製品の中では、自宅で使っている Apple Studio Display を毎日10時間使っているが、正直不満はなく、毎日使うテクノロジー製品の中では最高に近い
派手ではなく、スペック上の競争も激しく、発売当時はテックメディアで酷評もされたが、スピーカーは素晴らしく、Webカメラも使えるレベルで、トラッキング機能の新鮮さも完全には消えておらず、サイズとピクセル密度も良い
こんな退屈なデバイスを褒めるのは奇妙だが、毎日身の回りで使う小さなテクノロジーが背景に溶け込み、静かに自分の役割を見事に果たしていることを思い出させてくれる
重さのせいで首や背中にひどい痛みが出ないようにリクライニングチェアに座る必要があり、それ自体は悪いコーディング環境ではないものの、目の疲れもかなりあった
結局返品した。アプリのエコシステムなどを作るために必要な 1.0 製品ではあるが、フルタイム利用にはまったく準備ができていないと思う
自分が持っている Meta Quest 2 と PSVR 2 はどちらも最初は確かに「おお」と思わせるものがあったが、数週間たつと目新しさは消えがちだった
Quest 2 は2023年初め以降使っていない気がするし、PSVR 2 は Pavlov というゲームが最後だった。ゲーム自体は本当に驚くほど素晴らしかったのに、ヘッドセットを装着する手間が問題だった
ちゃんとゲームをするときは Xbox や PS5 でソファに座ってやり、コンピューター作業は結局普通にコンピューターに戻る。PSVR 2 で何かもっとやろうとしても、今ではほこりがたまりすぎて全体の掃除が必要なほどで、手が伸びない
家やオフィスにいるなら AVP は棚の上にあり、ユーザーは従来のワークステーションの前に座ることになるだろう
理論上は AR 機器でコードに囲まれるようにできるとしても、実際に集中できるウィンドウは一度に1つだけで、従来のモニターはその体験を提供するために長い時間をかけて改良されてきた
それでも、その半分くらい良い体験をバックパックに簡単に入れて移動中に使えるなら、かなり魅力的だろう。Apple 製品はもう買うつもりはないが、AVP が促す競争には期待している
これまでのところ、頭上の重量バランスについての評価は大きく分かれている。暗視ゴーグルのような装備を使うときは、快適に使うためにヘルメットの後ろにカウンターウェイトを付ける必要があるが、AVP にはそうしたカウンターウェイトがないようだ
Vision Pro を仕事で使おうとしたが、自分の目の問題なのかはわからないものの、その中でコードを見るのは本当に疲れる体験だった
外した後、普通のモニターを改めて好きになった
「山頂で働いているが、実際にはガレージにいる」デバイスとして潜在力を発揮してほしいが、解像度が既存のモニター水準に達するまでは、ほとんどの用途で単に劣ると感じる
Zoom 通話は良かったが、誰も Persona を真剣に受け止められなかった
数日たつと目の疲れがますますひどくなり、昨日は頭痛があまりにひどくなったので、ここまでだと判断した
実際に高速に回っている現場でエンジニアとして働く人たちが、これを装着して生産性が上がったと言うのがいつも不思議だ
一日中メールや Slack メッセージを読むだけ、あるいは Zoom で話すだけなら可能かもしれないが、自分はそういう働き方ではない
重く、特定のいくつかの箇所にかなり圧力がかかり、滑りやすいバッテリーにケーブルがぶら下がっていて、一日中挿しっぱなしにする必要があり、パススルーも粗かった
何より重すぎたし、Mac と Vision Pro の接続もときどき不安定になった。第2世代と第3世代には大きな期待をしているが、もっと時間が必要だ
数日続けて装着すると眼鏡のように慣れるのだが、ここにも似たようなことがあるのか気になる
視覚はあらゆるもの、特にバランスに大きく依存しているので、普段の知覚との差が一種の疲労を生む可能性がある。数日使い続ければ体が適応するかもしれないが、AVP では当然ほとんど不可能だ
ソフトウェア側で、現実感を少し犠牲にしてでも、テキストを実際のピクセル単位に合わせて整列するよう強制すべきだと思う
オプションとして、ユーザーがかなり大きな角度で動くまでは仮想画面を完全に固定する方式が最適かもしれない。もちろん、眼精疲労とはまったく関係ない可能性もある
「目のためのアクティブノイズキャンセリング」という表現が見事だ
自分も macOS + visionOS のマルチウィンドウ設定で、Mount Hood 環境を昼間に設定して使っている
昨日、友人たちが夕食に来る前に外したのだが、Mount Hood では太陽が出ていたので、頭の中ではまだ昼のように感じていて、実際の外が暗くなっていてかなり驚いた。少なくとも1時間は暗いオフィスに座っていた
これは私の目標でもあり期待でもあるが、現状を基準に原文の長所に少しバランスを加えてみる
2月5日月曜日にAVPを受け取り、注文受付が始まった未明に起きて注文した。私はエディタ、ターミナル、ブラウザウィンドウで構成されたマルチ画面環境を使うプログラマーで、AVPが固定モニター一式を置き換え、事実上無限の画面空間を提供してくれることを期待していた
AVPはモニターより角解像度が低く、平均34 PPDで、モニターは64 PPDだ。詳しくはiFixitの記事 [1] にある
これは画面を目に非常に近く配置することによる必然的な結果だ。AVPの優れたディスプレイ技術がこれを緩和し、私にとって初期VRヘッドセットの問題だったスクリーンドア効果は完全になくしてくれるが、物理法則には勝てない
したがって、腕の長さほど離れた27インチモニター2台分の、読みやすいテキスト密度は得られない。同じ量のテキストがAVPでは視野内でより大きな空間を占める
理解できる点ではあるが、AVPに本当に問題があり、改善してほしい部分はウィンドウ管理だ
アプリ／ウィンドウ管理の観点では、AVPは顔にiPadを貼り付けたようなものだという冗談があったが、同意する
Linuxのタイル型ウィンドウマネージャーやmacOSのSizeUp、Moomでウィンドウを移動・リサイズすることに慣れている立場からすると、AVPのウィンドウ管理は本当にぎこちない。エディタを大きく中央に置いてからターミナルへ切り替えたり、参考資料を横に置くためにサイズを調整したりするには、ハンドジェスチャーが魔法のように感じられても、ウィンドウの移動とリサイズを何度も行う必要がある
それでもこれはソフトウェアのユーザー体験の問題であり、Appleが時間をかけて直してくれる方に賭けている
[1] https://www.ifixit.com/News/90409/vision-pro-teardown-part-2...
この用途には完璧に見えるのに、存在しないのが惜しい
あまり大したものに見えないなら、私も同意する。まだAVPで本当に印象的なARは体験していない。それでも初期段階なので期待はしている
発売日前にApple本社でVision Proのデモを何度か試した。1つはセキュリティ中心、もう1つは医療アプリケーション中心だった
セキュリティプロファイルは本当に退屈で、ネットワーク上ではiPadのように見える
医療アプリケーションは教育用途としてはかなり素晴らしく、いつか他の用途も可能になるかもしれない
私にとって魅力的に見えるのは出張中の使い勝手だ。飛行機で前の人が座席を倒してノートPCの画面が壊れる心配をしなくてよく、誰かが肩越しに見ているかも気にしなくていい。さらに、また別の退屈なホテルの部屋からも抜け出せる
問題は、多くの会議でノートPCがかろうじて許可されるか、まったく許可されない場合があることだ。だから結局ノートPCは持って行かなければならず、そうなるとバックパックはさらに重くなる。すでに複数のセキュリティポリシーのせいで、複数のデバイスを持ち歩いている
この手間にそれだけの価値があるのか？ 自腹ではとても買えない。ARデバイスの開発にも関わったが、会社が買ってくれるなら喜んで使う。AppleCareとアクセサリまで加えると、ほぼ5,000ドルだ
49 PPDなのでAVPと同程度だ
ニュージーランドは今夏なので、AVPを着けて日差しの下、屋外でコーディングしている。モニターの反射がなく、屋内に閉じこもらなくていいのが良い
一番よかったのは、完全没入モードに入り、人々が話していない間に高山の湖に降る雨音を聞くことだった
夜中によく目が覚めて仕事をしたくなるが、オフィスが主寝室にあるのでできなかった。今はソファに座って猫背にならなくてもよくなった
子犬をドッグパークに連れて行き、画面の反射なしに大きな仮想ディスプレイで仕事をしたこともある。月面で映画を見るのもかなり素晴らしい
ノートPCと比べたり、ノートPCと一緒に使ったりするとき、晴れた日に屋外でどれほど良いか考えたこともなかった
最初は変だろうと思っていたが、数分たつとすべてがとても自然に感じられ、知らないうちに深い作業没入に入っていた
そのとき感じた驚きをこのブログ記事に込めようとした
私の経験では、ウィンドウの「現実世界」での大きさは重要ではなく、角解像度が成否を分ける
Apple StoreでVision Proのデモを体験して、宗教的体験をしたような気分で出てきた。没入デモで感情がこみ上げ、赤ちゃんサイたちは本当に衝撃的に印象深かった
近いうちにまた味わうため予約するつもりだ。この技術が好きで未来を望んでいるが買うことはできないので、私のような消費者にも手の届く価格になることを本当に願っている
完璧な製品ではまったくない。問題は、Apple が自ら行き止まりに入り込んでしまったのかどうかだ
バッテリー持続時間や視野角、解像度、重量を改善できるのか？ 私の考えでは、どれについても Apple には技術的な改善の道筋がある
欠点はあるものの、本当に素晴らしい。今も Mac 仮想ディスプレイで使っているが、もちろん少しぼやける。それでも、これをどうやって返品できるというのか？
Apple が作った製品の中で最も印象的で、実際に役に立つ。決して高価な目新しいおもちゃではなく、すごい成果だ
Vision Pro は、既存の VR エコシステムを捨てた VR ヘッドセットになろうとしている。VR コントローラーもなく、Beat Saber もなく、Oculus Link もなく、PC VR もない
同時に生産性マシンになろうとしているが、自分自身でコードをコンパイルできず、iPadOS のようなソフトウェア上の制約がある
飛行機用のモバイルコンピューターとして見るなら、普通のノート PC よりバックパックに入れにくく、バッテリー持続時間は10分の1だ。同じ価格なら United Airlines の Economy Plus サブスクリプションを7年分買って、飛行機では普通にノート PC を使える
Apple がこれらすべてを直す道筋を持っていることには同意するが、その道を進むことには同意しない。iPad のような Apple 製品は、Apple が制約されたビジョンを超えさせないため停滞しているように見える
Apple は絶対に、囲い込まれた庭の外からアプリケーションをインストールさせないだろうし、Vision Pro 上でコードをコンパイルさせることもないだろう
500ドルの Quest 3 のようなエンターテインメント機器ならそれでいいが、3,500ドルの「空間コンピューター」なら話は別だ
ただし xreal や rokid の AR グラスも検討してみるとよい。価格はずっと安く、遅延はより少なく、バッテリーの心配もない
携帯性もはるかに良い。AVP を主に外部ディスプレイとして使うのは、とてつもない無駄だと思う
こうやって使える人たちがいて本当に良かったし、うらやましい。私にはコードがぼやけすぎていたし [0]、鮮明なモニターが3台あるのに、ぼやけた画面1枚に制限されるのが嫌だった
結局返品したが、いつか制限されている感じなしにその中で働けるようになるのを待っている。AVP が私のモニターを上回る未来は簡単に想像できるし、その時が楽しみだ
[0] https://joshstrange.com/2024/02/04/apple-vision-pro-writing-...
Apple Vision Pro の中で Xcode を使い、メッセージングやブラウジングなどの複数の作業には visionOS の空間ウィンドウを使って、かなり仕事をしている
自分の処方に合わせた ZEISS インサート を入れると、テキストはものすごく鮮明だ。目の前の仮想ディスプレイが実際のモニターではないことを、しょっちゅう忘れるほどだ
人によるようだが、初日には ZEISS の処方レンズがなく、前後の両方を経験したので、自分の視力が思ったより悪いことに気づいていない人がどれほど多いのか、あるいは眼鏡なしで使っても違いはないと思っている人がどれほど多いのか、本当に気になる。実際にはものすごい差がある
装着感については Apple Store に行かなかったので少し時間がかかったが、ある時点でコツがつかめて、快適に使う方法が分かった。また、悪い姿勢にはより寛容ではない
だから装着方法を試す時間を与える必要があり、その価値はある。今では快適に感じており、昨日も数時間使っていた