macOS Sequoiaプレビュー: Siri AIとApple Intelligenceの拡張

 (apple.com)
1 ポイント 投稿者 GN⁺ 2024-06-12 | 1件のコメント | WhatsAppで共有
  • 今秋予定のmacOS 27 Golden Gateは、Macの利用体験全体にSiri AI、次世代Apple Intelligence、Visual Intelligence、デザイン・性能改善をまとめて適用する
  • Siri AIは自然言語での対話、個人コンテキスト検索、アプリ内作業の実行、オンライン情報の参照を組み合わせ、MacのAIアシスタントとしての役割を広げる
  • Safari、Passwords、Photos、ShortcutsにはApple Intelligenceが組み込まれ、タブ整理、ページ変化の通知、パスワード管理、画像編集、自動化を支援する
  • 子ども向け保護機能はWebアクセス承認、コミュニケーションの安全性、カテゴリ別の利用時間、曜日・時間帯別のアプリ許可によって管理範囲を広げる
  • 対応範囲はApple silicon搭載Macが中心で、Siri AIとVisual Intelligenceの一部機能は言語・地域・デバイス条件によって異なる

macOS 27 Golden Gateのリリース方針

  • macOS 27 Golden Gateは今秋リリース予定
  • Siri AIは今年末に英語で先行提供予定
  • 今回のアップデートは次の領域に注力している
    • 新しいSiri AI
    • Siriとの対話
    • 次世代Apple Intelligence
    • MacのVisual Intelligence
    • Liquid Glassベースのデザイン改善
    • 主要領域全体の性能改善

Macで拡張されるSiri AI

  • Siri AIはApple Intelligenceベースの対話型AIアシスタントで、より充実した回答と自然な会話、専用アプリをMacに提供する
  • ユーザーは自由形式の質問をしたり、業務・創作プロジェクトのアイデアをブレインストーミングしたり、往復の会話を続けたりできる
  • Spotlight検索では上部の結果として「Ask Siri」を選択できる
  • 個人コンテキスト理解機能は、古い写真、受信ボックスに埋もれたメール、Macに保存したメモをユーザーの依頼だけで見つけ出す
  • Messages、Music、Remindersなどのアプリでは現在の作業コンテキストに基づいて動作を実行する
    • たった今送信したメッセージをすばやく編集できる
    • 視聴中の番組の曲をワークアウト用プレイリストに追加できる
  • オンライン情報を参照し、多様なトピックの最新インサイトも提供できる
  • 専用のSiriアプリはすべての会話を1か所にまとめ、Macで質問したあとiPhoneで続けて使えるようにする
    • 会話を固定したり、新しい会話を開始したりできる
  • Visual Intelligence with Siriは、画面上の画像やPDFなどの内容をスクリーンショットとしてキャプチャし、質問、検索、作業実行に活用する
  • ライティング機能は、ほぼすべての入力箇所で下書き生成や文章へのフィードバックを支援する
    • MessagesとMailではユーザーの文体、句読点、トーンに合わせられる
  • Siriの音声は声を選んだうえで、表現力と速度を調整できる

Apple Intelligenceが組み込まれる標準アプリ

  • Safariはタブを自動でトピック別グループにまとめ、関連ページをより見つけやすくする
  • Safari Notify Meは価格変更や再入荷などのページ変化を監視し、行動すべきタイミングで通知を送る
  • Passwordsアプリは弱い、または漏えいしたパスワードを知らせ、ユーザーに代わって更新できる
  • Photosは、撮影後に写真を再構図するSpatial Reframing、写真拡張用のExtendツール、より大きなオブジェクトを除去する強化版Clean Upツールを提供する
  • Image Playgroundは、プロジェクトに合った高品質な画像をさまざまなスタイルで作成でき、写実的なスタイルも含む
  • Shortcutsは、ユーザーが必要な作業を説明すると複数アプリの動作をつなぎ、日常作業を自動化する

子ども向け保護と安全管理

  • Appleは子どもたちにとって安全で信頼できるプラットフォームを目指し、新しい保護者向け機能と拡張機能を追加する
  • Ask to Browseは、子どもが新しいWebサイトにアクセスする前に許可を求めるようにする
    • 保護者はMessagesでリクエストをより詳しく確認したうえで承認できる
  • Communication Safetyは、Messages、FaceTimeなどで子どもが裸体画像を見たり共有したりしないよう支援し、共有画像や動画の流血・暴力コンテンツを見る前にも介入する
  • Time Allowancesは、Entertainment、Games、Social Mediaなどカテゴリ別の利用時間を設定できるようにする
    • 推奨設定は子どもの年齢に基づき、臨床・児童発達の専門家とともに開発された
    • 保護者は子どもに合わせて制限を調整できる
  • Schedulesは、曜日や時間帯ごとに子どもが使えるアプリを選択できるようにする
  • System Settingsの保護者コントロールは新デザインに変わり、子どものMac利用状況をひと目で示し、アクセス権をワンクリックで調整できるようにする

デザインと性能の変化

  • Liquid Glassアップデートは、より均一な屈折、改善されたコントラスト、高い可読性を提供する
  • 統一されたツールバー、画面端まで続くサイドバー、更新されたウインドウ形状とメニューバーアイコンにより、デザインが整理される
  • 新しいスライダーでLiquid Glassの外観をultraclearから完全なティントまで調整できる
  • 性能改善により、AirDrop転送、ネットワークファイル参照、Safariスタートページのコンテンツ読み込みがより高速になる
  • Mail検索は新しいランキングシステムにより、最も関連性の高い結果を上位に配置する
    • 受信ボックスの奥深くに埋もれた項目もより早く見つけられる

アプリ別の追加機能

  • Accessibilityは、VoiceOverの画面コンテンツ理解機能を拡張し、より豊かな画像説明を提供する
  • 新しい字幕機能は、視聴中のすべての動画に同期した字幕を自動生成し、既存字幕を他言語に翻訳できる
  • Calendarは説明だけでイベントを追加・編集できる
    • ランチミーティングの説明をコーヒーでの会話に変えると、Calendarアプリが詳細を調整する
  • ウルトラワイドディスプレイは、5K 120Hzのようなより高い解像度に対応する
    • ディスプレイ配列は再接続しても以前の状態を維持する
  • iCloud Shared Albumsは、AndroidやWindowsユーザーがiCloud.comでより簡単に参加し、写真を追加できるようにする
    • フル解像度共有、写真のフィルタリングとリアクション、アルバム招待方法も追加される
  • MessagesとMailは会話コンテキストに基づき、カレンダーイベント追加や写真検索などのクイックアクション提案を提供する
    • 英語で提供予定
  • Call Contextは、企業との通話時にMailの確認コードのようなアプリ全体の関連情報を事前に表示できる
    • 英語で提供予定
  • MapsのFlyoverは、航空画像とVisual Intelligenceモデルを組み合わせ、建築要素や個々の樹木の形状までより鮮明にレンダリングする
  • Safari、Mail、News、Podcasts、Calendarなどのアプリでは、下にスワイプして最新情報に更新できる
  • Macのビデオポッドキャスト体験は、視聴と視聴から聴取への切り替えをよりスムーズにする

対応デバイスと機能提供条件

  • macOS 27は次のデバイスと互換性がある
    • MacBook Neo 2026
    • Apple silicon搭載MacBook Air 2020年以降
    • Apple silicon搭載MacBook Pro 2020年以降
    • Apple silicon搭載iMac 2021年以降
    • Apple silicon搭載Mac mini 2020年以降
    • Mac Studio 2022年以降
    • Apple silicon搭載Mac Pro 2023
  • Siri AIは今年末にベータ版として提供され、Apple Intelligence対応デバイスと対応言語設定が必要
    • 開始言語は英語
    • iOS、iPadOS、watchOSではEUで初期提供されない
  • Apple IntelligenceはiOS 27、iPadOS 27、macOS 27、watchOS 27、visionOS 27で、対応デバイスと対応言語設定が必要
    • 対応言語には韓国語が含まれる
    • 一部機能はすべての地域や言語で提供されない場合がある
  • Visual Intelligence機能は、互換性のあるiPhone、iPad、Mac、Apple Vision Proで、対応する英語バリエーションにデバイス言語を設定する必要がある
  • Siri音声カスタマイズは、iPhone 17 Pro、iPhone 17 Pro Max、iPhone Air、M4以降のiPadかつ12GB以上のユニファイドメモリ、M3以降のMacかつ12GB以上のユニファイドメモリ、Apple Vision Pro M5で提供される
  • Ask to Browseは、Screen Timeアップグレード後のiOS 27、iPadOS 27、macOS 27のSafariおよびその他のWebKitブラウザで提供される
    • watchOSとvisionOSでは承認済みWebサイトのみ表示する
  • 新しい連絡先に対するMessagesベースの保護者承認はiPhone、iPad、Macでサポートされる
  • 機能は変更される場合があり、一部機能・アプリ・サービスはすべての地域や言語で提供されない場合がある

関連記事

1件のコメント

 
GN⁺ 2024-06-12
Hacker Newsの意見

  • macOSにタイル型ウィンドウ管理が入る日を見ることになるとは思わなかった
    Stage Managerとどう相互作用するのか、あるいはまったく相互作用しないのか気になる

    • タイル型ウィンドウマネージャーの魅力があまりよく分からなかった
      ウィンドウが重なっていて、必要な部分だけが背後から少し見えているやり方に慣れてしまった。たとえば、実行中のプログラムのエディタの背後にログの末尾が見えるようにしておき、必要なら前面に持ってきて前の行を見たりスクロールしたりする
      タイル型ウィンドウマネージャーで同じことをしようとするとログパネルを拡大する必要があるはずで、自分はレイアウトの変化が少ないやり方のほうを好むようだ。Slackもメッセージがあることだけ分かるように少し見える位置に置き、中身は見えないようにして、準備ができるまで無視している
      タイル型ウィンドウマネージャーがより合う状況があるのか気になる。大きな画面のようにすべてのタイルが実用的な場合なのか、それとも小さな画面のように全画面化が自然な場合なのか
    • ついに！ Macに来るとは本当に思っていなかった
      あとはクリップボード履歴マネージャー、cmd+tabをWindowsのalt+tabのように動作させる方法、ステータスバーからマイクをミュートする方法、トラックパッドとマウスホイールの方向を別々に設定する機能さえあれば、基本機能のためにランダムなアプリを入れなくて済む
    • まだその日を見たわけではなさそう
      macOSは依然としてフローティングウィンドウマネージャーだけを提供していて、そこにウィンドウスナップ機能が少し付いた程度。新しいウィンドウがデフォルトで画面全体をタイルで埋めるように配置されるモードやウィンドウマネージャーが、macOSに内蔵されたわけではない
    • ずっと前からBetterSnapToolを使っていて、とても満足している
      今回の標準機能がこれを置き換えられるほど十分に良くなるのか気になる
    • あとはマウスなしで、フォーカス中のウィンドウを次の作業スペースへ送れるようにしてくれればいい

  • 会社のデスクトップがiMac Pro 2018なのだが、しばらくの間、VFX予算級に行かずにRetina級デスクトップを得る最良の方法だった
    Apple製品のスケジュール上、一回限りのtrash can Mac Proは古く、後継機はまだ出ていないという微妙な時期でもあった。会社はたいてい海外で大量購入できるパネルを支給するが、運のいい時期にはiMac Proを注文して、特別な裏技なしに良い画面を受け取れた
    Sequoiaが2019年以降のiMacしかサポートしないと見て一瞬ひやっとしたが、2017年以降のiMac Proをサポートすると知って安心した。Appleがいつまでアップデートを出してくれるのか、会社のIT部門がいつiMac Proを電子廃棄物に分類するのか気になる
    Target Display Modeをもう提供していないのは本当に残念だ。このiMacたちのパネルは6年経った今でも最上級だ。Studio Displayは実質的に、Target Display ModeにApple Siliconを入れたiMac Proに近い。いつかこれらの機器が旧式になったら、モニターに変えてくれるLinuxディストリビューションが出るかもしれないのかも気になる

    • 「最上級パネル」なら、これをスタンドアロンディスプレイに変える方法を見つけた人たちがいる
      これを小さな事業にするには現実的に難しいのが惜しい
    • ちゃんと動くApple製の電子廃棄物が多すぎる
      Late 2014 Mac miniはMonterey macOS 12に縛られ、Late 2014 Retina iMacはBig Sur macOS 11に縛られている。iPhone 7はiOS 15に縛られている。そのiMacのディスプレイは今でも個人的には最高だと思う
      これらのコンピュータは自分に必要なことをすべてこなせるが、ソフトウェアサポートは過去に固定されている。サードパーティ開発者たちも、以前のmacOSバージョンのサポートにあまりに冷淡だ。常に最新版を使っていると仮定し、古いOSのサポートを意図的に削除しているように見える
      1世代目のiPadでさえ、買った日と同じように完璧に動くが、内蔵ソフトウェアの大半はもう動作せず、App Storeは事実上空っぽだ。本当にやるせない状態だ
    • 境界線はT2チップで引かれたようだ
      IntelはiMac Proに入っているチップのサポートを終了しており、これはそのチップに対するセキュリティサポートがもうないという意味だ
      だからiMac Proが次のアップデートを受け取るかどうかは確信しにくい。ただしAppleがセキュリティ問題を緩和する方法を見つけた可能性もある
      この話題について見つけた最も良い記事は以下。iMac Proがサポート対象から外れた後も、OSはその後2年間セキュリティアップデートを受けるという点も参考になる
      今日の発表で、少なくとも2027年10月ごろまではセキュリティサポートが保証されたことになる
      自分もiMac Proを持っているので、今日はかなりうれしい驚きだった。Intelのサポート終了のせいで終わるのではないかと心配していた
      https://arstechnica.com/gadgets/2023/07/with-macos-sonoma-in...
    • 会社で使っていた2018 iMac Proのあの魔法のような窓が本当に好きだった
      Studio Displayは到底正当化できそうにない
    • 完璧な解決策ではないが、iMacをAirPlayディスプレイとして使うことはできる

  • 「iPhoneとMacの間でファイル、写真、動画をシームレスにドラッグ＆ドロップ」がどう動作するのか気になる
    今はPhotosアプリを経由せずに写真や動画の元ファイルだけを取り出すには、20年以上前からあるようで、管理もされていないように見える Image Capture が最善なのだが、かなり頻繁に不安定なエラーが出る
    Finderでスマートフォンの写真をファイルシステムへ直接引き出せるようなものを、本当にスムーズに導入してくれるといい

    • iPhoneとMacの間では、よく AirDrop でやり取りしている
      Androidから乗り換えて一番よかった点がこれで、デバイス間でのテキストのペースト、たとえばIBANやパスワードなども便利
    • すでにかなり前から動いていた機能
      iOSとmacOSの 共有クリップボード は2年以上前から写真と動画に対応してきたし、ドラッグ＆ドロップも同じ仕組みで動くのだと思う
    • それがAirDropの用途だと思っていた
      AndroidでもWindowsへファイルをドラッグ＆ドロップできる
    • 複数のMac間の Universal Control は入力デバイスの共有だけでなく、ファイルを相互にドラッグ＆ドロップすることもでき、かなりシームレスに動作する
      ここでも同じメカニズムが使われる気がする
    • 「友人のノートPCで開くために自分自身へファイルをメールで送るたび、Tim Berners-Leeが涙を一滴流す」
      https://xkcd.com/949/

  • iPhoneミラーリング が一番興味深い発表で、リークもされていなかったように思う
    ただ、遅延が大きそうなので緊急時にしか役に立たなさそう

    • 遅延が大きいという根拠が何なのかわからない
      今でも AirPlayミラーリング は優秀で、これはそこに逆方向のデータが追加される程度のもの。現在のWi-Fiは双方向の音声・映像には十分で、タッチやキー入力イベントを追加するのは段階的な拡張にすぎない
    • 遅延がひどいなら、Appleは iPhoneミラーリング をリリースしないはず
      遅延の基準が低かったなら、10年前にすでに出していただろう。AppleのHuman Interface Guidelinesはインターフェイス遅延の正確なミリ秒単位の上限を定めてはいないが、応答性を重視し、ユーザーインターフェイスが即座で滑らかに感じられるべきだと推奨している
      一般的な目標は、遅延をできるだけ低くして、操作が即時的で自然に感じられるようにすること
    • 飛行機の中で、スマートフォンより大きい画面で NetflixやHulu を見たいときに使いたい
      iPadを持ち歩くことを強いられずに済むし
      Appleが単に各社に対して、iPhone/iPadアプリをApple Siliconで有効にするよう強制してくれればいいのにと思う。それでもスマートフォンの映像を15インチのノートPC画面に出せるなら、ほぼそれに近いくらい良さそう
    • MacBookからiPadへ使う Sidecar/ディスプレイミラーリング は遅延がかなり低い
      おそらく似た技術スタックをベースにしているのだと思う
    • 母がスマートフォンをノートPCに共有し、自分がそのノートPCで画面共有に入り、スマートフォンの問題を解決できるようになってほしい
      それにOktaの2要素認証リクエストを承認するときにもよく使いそう

  • macOSの 通知センター が嫌い
    通知がiPhoneとMacの両方に出る必要がなぜあるのかわからないし、ただ面倒。むしろ通知なしで、天気、時計、カレンダーのようなウィジェットだけが常に見えていればいい
    昔のmacOSのwidget Dashboardも懐かしい。新しいウィジェット技術で復活させてほしい

    • もしかすると誤解しているだけかもしれないが、Sonomaではウィジェットを デスクトップに固定 できる
      もう通知センターの中に隠しておく必要はなく、自分の2台目のモニターの下半分は大きなウィジェットダッシュボードのように使っている
    • 自分もあまり好きではないが、主な理由は キーボードだけで操作 しにくいから
      ただし実装次第では、今回の機能には期待している。モバイルアプリでしか2要素認証を提供しないシステム、つまりプッシュ型のワンタイムパスワードを使わなければならない場合があり、仕事中にスマートフォンへ手を伸ばすのは生産性や流れにかなり悪い
      1Passwordが処理してくれるTOTPのほうをずっと好む

  • 名前は Sherlock と呼ぶべきだった。複数のアプリをSherlockingしているように見える
    たとえば自分はイベントと一緒にリマインダーを見られるのでFantasticalだけを使っているが、多くの人も有料のパスワードマネージャーからこれへ移行しそう

    • Passwordsの新規ユーザーは、他のパスワードマネージャーから移ってくる人より、そもそも パスワードマネージャー を使っていなかった人のほうがはるかに多いだろうし、Appleもそう見込んでいるように思う
      自分はBitwardenにお金を払っていて、移行が面倒なのでおそらく使い続けると思う
    • Math Notes は明らかにSoulver/Numiの領域に踏み込んでいるように見える
      個人的にはSoulverがとても好きだが、この機能がAppleのユーザー全体にどれほど魅力的なのかはわからず、少し驚いた
    • Passwordsアプリは本質的には、既存のOS機能をアプリとして切り出したものではないかと思う
      Windowsアプリができること以外に、新機能も追加されるのか気になる
    • 1Passwordから移るつもりはあまりない
      Appleのパスワード自動入力がSafari以外のブラウザやLinuxでネイティブに動くとは思えないし、自分はその両方を使っているから。それに 1Password mini もかなり便利
    • 新しいパスワードアプリで任意のアカウントを使えるのか気になる
      スクリーンショットにはそうした表示がなく、Web版もなさそうだった
      Keychainの大きな悩みの一つは、ログインしている Apple ID にひも付く点だった。今もそうなら、すでにお金を払って完全な製品を使っている人にとって大きな魅力はなさそう
      スマートフォンが壊れて、近くの友人のスマートフォンを借りて急いで約束をキャンセルし、問題を処理する時間を稼がなければならない状況を想像すればよい。パスワードマネージャーサービスなら、そういう状況を優雅に処理できるべき

  • Windows では生産性は高いものの、Microsoft が最近 Edge のダークパターンや広告を Windows に押し込んでくる様子と、macOS のウィンドウ管理の改善を見て、もう一度使ってみたくなった

    • これまで Windows はゲーム用、macOS は MacOS/iOS 開発用としてだけ使ってきた
      でも今の Windows には AI／アドウェア的な不要機能があふれていて、数か月ごとにさらに追加されている
      Linux のゲームと Nvidia 対応は大きく進歩していて、一部のゲームではベンチマーク上 Windows を上回ることさえある
      Apple の過去10年間の App Store ポリシーのせいで会社で問題が多くなりすぎ、すべて Web アプリに移行中
      だから今年は Windows+macOS+Linux の組み合わせから、来年には Linux だけを使う方向に行きそう
      個人用コンピュータには KDE か Cosmic のデスクトップ環境を、開発用コンピュータには NixOS を考えている。変更をテストしてロールバックできるし、コンピュータが死んでも締め切り前に1時間以内でまた作業できる状態にできるから
    • その状況はとてもよく分かる
      まだ Windows でも開発をかなりしているが、メインのコンピュータは Mac。ハードウェアは素晴らしく、ソフトウェアは使っていて楽しい
      Windows 11 は、私が長年防いできたウイルスやアドウェアのように、ますます振る舞うようになっている
    • Kubuntu に移ったばかり
      Steam 経由のゲームを含め、自分が欲しいもの・必要なものは今やすべて完璧に動いている
      Microsoft に戻ったり Apple に行ったりする理由が見当たらない
    • Windows で マルチディスプレイを使うと、どう設定しても髪をかきむしることになる
      TV を拡張ディスプレイモードにして Playnite を使おうとすると、本当に気が狂いそうになる
    • Windows 11 は「概要モード」でウィンドウを一つの画面から別の画面へ移すことすらできない
      個人プロジェクトでも簡単にできることなのに、まったく使い物にならない。いっそ Gnome を使う

  • スクリーンショットで見えた興味深い点は、Apple Pay が他のブラウザにも開放されるということ
    この機能が動作するには WebKit ベースである必要があるのかは不明だが、Orion 対応に期待している

    • macOS の主要ブラウザは独自の WebKit ビルドを持っているか、別のエンジンを使っているので、システム WebKit 専用ならほとんど虚偽広告に近いだろう
      だからどうかそうでないことを願う
      この機能には本当に期待している。Apple Pay はとても好きだが、Safari に移って未ログイン購入のカートを作り直すつもりはない。実際、そういう状況でこそ Apple Pay が最も役に立つ

  • 小さく見えるかもしれないが、ついに Passwords アプリが出る
    これは本当にうれしい
    1Password はサブスク一本に振り切るまでは恵みのような存在だったし、Bitwarden には多くの長所があるが、ネイティブアプリの GUI とユーザー体験は正直かなりひどい
    Passwords アプリは、ユーザー体験と機能の面で両者の良いところを合わせたものに見える

    • 新しい Passwords アプリを Safari 以外のブラウザにも統合する方法があることを本当に願っている
      まだ 1Password を使っている唯一の理由は、自動入力のための Firefox 拡張機能だから
    • セキュリティに詳しい人たちが、新しい Apple/iCloud Passwords 構成が SIM スワップ攻撃にどれほど脆弱になり得ると見ているのか気になる。下の逸話のように
      「Apple が今日 1Password を sherlock したので、Apple ID のセキュリティは通信事業者と同じ程度にしか安全ではないことを思い出してほしい。2FA を有効にした状態で SIM スワップに遭うと、攻撃者があなたを永久にアカウントから締め出すことができる。先月、私に起きたことだ。あなたには起きないようにしてほしい」
      [1] https://x.com/blader/status/1800263787746066646
    • 詳細は見ていないが、パスワード一覧を簡単に インポートする方法があることを願っている
      1Password を設定したばかりなので、パスワードを一つずつ再入力しなければならないなら嫌だと思う

  • iPhone ミラーリングと、他人のデバイスの画面を操作できる関連機能は、個人的にはかなり役に立ちそう
    ただし画面操作機能は、詐欺師が誰かを説得して許可させたうえで詐欺を働く脅威にもなり得る。実際に使ってみて、どれほどうまく動くのか見てみたい

    • 詐欺師が操作機能を悪用するのは難しい気がする
      おそらく2台の Apple デバイスが物理的に近くにある必要が高そうだから