Geminiアプリの新機能を活用する方法

TL;DR

Geminiアプリでは、カメラやスマホ画面を共有したリアルタイム対話、定期タスクの自動実行、動画の要約・文字起こしが利用できる。さらに、Gemへ資料を追加したり、ディープリサーチの長いレポートを日本語の対談音声に変換したりできる。

Transcript

はいこんにちはケイトですこのチャンネル は生成最新情報や活用事例を紹介してます 是非チャンネル登録などお願いいたします そして今回のテーマはジェミニのアプリ版 が色々な進化を遂げていましたのでそちら を紹介していきたいと思いますそして早速 なんですけどまず1つ目の進化 はジェミニラブですこれがですね結構進化 してましたえ今までジェミニライブって 音声だけでのやり取りっていうのはえ全 ユーザーできていましたはい私 iPhoneを使ってるんですけど私の iPhoneでもえ音声のやり取りはでき てましたえただ今回の進化によって音声 以外にもリアルタイムで撮影している映像 と共に会話をしたりさらに画面上に映っ てるものを撮影しながら会話をした りっていう機能が追加されてましたでこれ がですね結構すご... Read More

Key Insights

• Gemini Liveは、音声会話に加えてカメラのリアルタイム映像を共有し、映っている機器、書籍、ソフトなどについて、その場で質問を重ねられる機能である。
• 画面共有機能は、スマホに表示中のアプリや文章をGemini Liveに認識させ、操作方法の質問、デザインレビュー、外国語の翻訳と音声読み上げに利用できる。
• スケジュールタスクは、毎日、毎週、指定曜日などの条件と依頼内容を自然文で伝えるだけで、同じ処理を繰り返し実行し、結果を通知させられる機能である。
• 登録済みのスケジュールタスクは、元の会話履歴または右上のアイコンにある「時間指定アクション」から確認でき、オンとオフを切り替えて一時停止できる。
• Web版Geminiの動画アップロードは、手元の動画ファイルから内容の要約や文字起こしを作れるため、公開前の動画を確認して説明文などを準備する用途にも使える。
• Gemの知識機能は、PDF、テキスト、スプレッドシートなどのファイルを独自チャットボットへ追加し、事前プロンプトだけの場合より複雑なタスクへ対応させる仕組みである。
• ディープリサーチは、インターネット上のブログ記事やYouTube動画など複数の情報源を調べ、仕組み、活用法、競合、セキュリティなどを長いレポートに整理できる。
• 音声概要は、ディープリサーチのレポートを男女によるポッドキャスト風の日本語対話へ変換し、長文を読む代わりに耳から内容を把握しやすくする機能である。

Questions & Answers

Q: Gemini Liveでカメラ映像について質問する方法は？

Geminiアプリで相談画面の右側にあるLive用アイコンをタップし、会話画面で左端のカメラマークを選ぶと映像共有を開始できる。映している物について音声で尋ねると回答が返り、実演ではOBS、カメラ、三脚、本、ヘッドホンについて説明を得ている。

Q: Gemini Liveでスマホ画面を共有する方法は？

Gemini Liveでブロードキャスト機能をオンにすると、スマホ画面を共有したまま音声で質問できる。共有開始後は別の画面へ戻っても会話を続けられ、表示されているアプリの確認、アプリ操作の相談、画面上のデザインに対するレビューなどに利用できる。

Q: Gemini Liveで英語の文章を翻訳して読み上げる方法は？

ブロードキャストで英語の文章が表示された画面を共有し、日本語にして素早く読み上げるよう音声で依頼する。紹介された実演では、Gemini Liveが画面上の英文を日本語へ翻訳してその場で読み上げ、利用者の停止指示にも応じて読み上げを終了した。

Q: Geminiで定期ニュース収集を自動化する方法は？

スマホ版Geminiのチャットで、実行する曜日、対象期間、件数、要約方法、URLの有無を自然文で指定し、タスクへの登録を依頼する。実演では、毎週月曜日に注目の生成AIニュースを1週間分、最大10件まで要約し、URLも書き出す条件で登録している。

Q: Geminiのスケジュールタスクを停止する方法は？

対象タスクを登録した会話を履歴から開くか、画面右上のアイコンをタップして「時間指定アクション」を選ぶ。そこに登録済みのスケジュールが表示されるため、該当項目のオンとオフを切り替えれば一時停止や再開ができる。動画内ではスマホアプリのみの対応として紹介されている。

Q: Geminiで動画を要約・文字起こしする方法は？

Web版Geminiへ手元の動画ファイルをアップロードし、要約または完全な文字起こしを自然文で依頼する。Geminiは動画内の情報を把握して要約し、文字情報として書き出せる。公開前の動画をアップロードし、内容に合う説明文の作成を依頼する活用例も示されている。

Q: GeminiのGemに独自資料を追加する方法は？

Gemの設定にある「知識」から対応するファイルをアップロードし、事前に埋め込むプロンプトと組み合わせる。動画内ではPDF、テキスト、スプレッドシートなどを知識として追加できる一方、この知識欄には動画をアップロードできないと説明されている。

Q: ディープリサーチのレポートを音声で聞く方法は？

ディープリサーチでレポートを作成した後、画面右上の「作成」から音声概要を選ぶ。レポートの内容が、男性と女性が会話するポッドキャスト風の日本語音声に変換される。長い調査結果を最初から読む負担を減らし、対談形式で内容を把握したい場合に利用できる。

Summary & Key Takeaways

• Gemini Liveは、音声だけでなく、スマホのカメラが捉えた映像や画面共有の内容を基に会話できる。紹介された実演では、OBSを表示したMacBook、カメラ、三脚、本、ヘッドホンを認識し、製品や用途を回答した。画面共有では、表示中のアプリを確認するほか、英語の文章を日本語へ翻訳して読み上げる使い方、アプリ操作の質問、デザインレビューなどが例示された。

• スケジュールタスクは、毎日、毎週、指定曜日などの時刻に処理を繰り返す機能である。スマホアプリのチャットに、毎週月曜日に注目の生成AIニュースを1週間分、最大10件まで要約し、URLも付けるよう自然文で依頼すると登録できる。登録済みタスクは、履歴から対象の会話を探すか、右上のアイコンにある「時間指定アクション」を開き、オンとオフを切り替えて管理する。

• Web版Geminiは動画ファイルのアップロードに対応し、内容の要約や文字起こしが可能になった。Gemでは、PDF、テキスト、スプレッドシートなどを知識として追加し、事前設定したプロンプトと組み合わせたチャットボットを作成できる。ディープリサーチでは、ブログ記事やYouTube動画などを参照して作成した長いレポートを、男女が対話するポッドキャスト風の日本語音声概要へ変換できる。