Apple Intelligenceで何ができるのか？

TL;DR

Apple Intelligenceは、端末内の個人データと画面上の文脈を活用し、Siri、文章編集、画像生成、写真整理を日常の操作に統合する仕組みです。処理は原則オンデバイスで行い、能力が足りない場合は必要な情報だけをプライベートクラウドへ送り、ChatGPTは補助的に利用します。

Transcript

本研究所どです今回はパーソナルAI自体 がいよいよ到来Apple インテリジェンス7つの注目ポイント対し てお届けしますAppleの大型イベント WWDC2024がいよいよスタートし ましたこの中で2時間ぐらいにわたる貴重 公演が早速YouTubeで公開されて おりましてえこちらの動画ですねこの再生 回数がですね えこちらえ600万回になっているまこれ が本編になるわけなんですけれどもこちら を見まして注目のポイントをッと共有して いきたいと思います7つの注目ポイント ですねで個人的にどこが注目だったかと 言うとこの7つになりますパーソナル データ活用オデバイスとパーソナル クラウドSiriでの会話AI利用手軽に 文書生成構成何でも画像生成ジ文字写真 映像がもっと楽しくそして気になる チャッ... Read More

Key Insights

• Apple Intelligenceは、メール、写真、カレンダー、メッセージなど端末内の情報を横断し、個人の予定や人間関係を踏まえて処理するパーソナルAIである。
• オンスクリーンアウェアネスは、表示中の内容をAIが読み取り、メッセージ内の住所を相手の連絡先へ保存するような操作を会話だけで実行する機能である。
• AI処理の多くはオンデバイスで完結し、端末の能力が不足する処理だけ、必要な情報をプライベートクラウドへ送る構成として発表された。
• プライベートクラウドは、送られた情報をリクエストの処理だけに使い、サーバーには保存しないことでプライバシーを守る仕組みだと説明された。
• 新しいSiriは、言い間違いに対応しながら会話の文脈を保持し、カレンダー、メッセージ、地図、交通情報を横断して必要な情報を提示する。
• 文章支援機能は、メールやメモだけでなくサードパーティー製アプリでも利用でき、校正、要約、文体変更、元データからの文章作成を標準機能として提供する。
• 画像機能は、指示に応じた独自絵文字や、端末内で認識されている友人や家族に似せたイラストを生成し、個人的な文脈に沿う表現を可能にする。
• ChatGPT連携は、Apple独自のAIを置き換えるものではなく、Siriが回答できない場合や追加の文章生成が必要な場合に呼び出す補助的な位置付けである。
• 🎬 このチャンネルの他の動画:
  • GPTsでスマホ仕事を効率化する方法
  • スマホで生成AIを仕事に活用する方法
  • 初心者がZapierで定型業務を自動化する方法
• 📺 このチャンネル: いけともch

Questions & Answers

Q: Apple Intelligenceとは何ですか？

Apple Intelligenceは、iPhone、Mac、iPadにあるメール、写真、カレンダー、メッセージなどを活用し、個人の文脈に合わせて支援するAIの仕組みです。文章の校正や要約、Siriとの会話、画像生成、写真検索などを端末の標準的な操作へ組み込み、複数のアプリを手作業で移動する負担を減らします。

Q: Apple Intelligenceは個人データをどう活用しますか？

Apple Intelligenceは、端末内の予定、メッセージ、写真、連絡先などを横断し、質問や依頼に関係する情報を探して利用します。紹介された例では、母親との待ち合わせ時刻をカレンダーから、ランチの場所をメッセージから確認し、地図と交通情報を使って出発時刻まで案内します。

Q: Apple Intelligenceはプライバシーをどう守りますか？

Apple Intelligenceは、多くの処理をオンデバイスで行い、端末の能力だけでは足りない場合にプライベートクラウドを利用します。説明では、クラウドへ送るのは処理に必要な情報だけで、サーバーには保存せず結果を返す仕組みとされました。ただし動画内では、詳細な設計や仕様までは示されていません。

Q: 新しいSiriでは何ができるようになりますか？

新しいSiriは、言い間違いを含む自然な発話を理解し、直前までの会話の文脈を保ちながら応答します。たとえば東京の天気を尋ねた後に「そこではどんな服装がよいか」と聞けば、「そこ」が東京を指すと理解します。予定、メッセージ、地図などを横断する案内も例示されました。

Q: Apple Intelligenceで文章を作成・編集する方法は？

文章を入力できる場所から支援機能を呼び出し、校正、要約、書き換え、文体変更、元データに基づく文章作成を依頼します。特定の生成AIアプリへ文章を移す必要はなく、メール、メモ、サードパーティー製アプリでも利用できる点が特徴です。ChatGPTによる文章作成は、追加の選択肢として一段奥に配置された例が紹介されています。

Q: Apple Intelligenceではどのような画像を生成できますか？

Apple Intelligenceでは、言葉で指定した独自の絵文字や、友人、子ども、配偶者などに似せたイラスト調・アニメ調の画像を生成できます。端末内で人物を識別しているため、送る相手や共有するグループの思い出に合わせた表現を作れると説明されました。講演者は、日常のコミュニケーションを楽しくする用途に期待しています。

Q: Apple Intelligenceは写真や映像をどう整理しますか？

Apple Intelligenceは、自然な文章で条件を伝えると、該当する写真を探し、ストーリーに合う素材と音楽を選んでムービーを自動作成します。紹介されたのは「息子と釣りに行った」といった内容から思い出をまとめる例です。既存の自動整理を発展させ、利用者が作ってほしい内容を具体的に依頼できる機能として説明されました。

Q: Apple IntelligenceとChatGPTはどのように連携しますか？

ChatGPTは、Siriが回答できない質問への相談や、追加の文章生成を行う補助機能として連携します。無料でも利用でき、有料アカウントを持つ利用者は接続して有料版を使えると説明されました。一方、デモではAppleの機能が前面に置かれ、ChatGPTは追加操作の先に表示されており、講演者は利用が限定的になる可能性があると推測しています。

Summary & Key Takeaways

• Apple Intelligenceの中心は、メール、写真、カレンダー、メッセージなど、端末にある個人情報を横断して利用するパーソナルAIである。将来提供予定とされた画面認識機能では、表示中の住所を読み取り、会話相手の連絡先へ保存するようSiriに頼む例が示された。個人の状況に沿った支援が期待できる一方、必要な情報を正確に探し出せるかが実用性を左右する。

• 処理の多くはオンデバイスで完結し、端末の能力を超える場合だけプライベートクラウドを使う構成と説明された。クラウドには処理に必要な情報だけを送り、サーバーへ保存せず結果を返すことで、個人データを保護する考え方である。ただし高い処理性能が必要なため、当時発表された対応対象はiPhone 15 Proや一定世代以降のMac、iPadに限られていた。

• 利用機能は、文脈を保ったSiriとの会話、アプリを問わない文章の校正・要約・書き換え、独自絵文字や画像の生成、自然文による写真検索とムービー作成に及ぶ。ChatGPTはSiriが答えられない場合や文章作成機能の一部から呼び出す補助的な位置付けと紹介された。米国英語で夏に試験利用、秋にベータ版を公開し、その他の言語は翌年から順次対応する予定と説明された。