GadgetDrop
AI注目

GoogleのAIカーソル「Magic Pointer」がGemini in Chromeにも展開へ——指すだけでAIが理解

GadgetDrop 編集部6
GoogleのAIカーソル「Magic Pointer」がGemini in Chromeにも展開へ——指すだけでAIが理解

Googleが新たに発表したAI搭載のカーソル体験「Magic Pointer」が、Chromebook向けだけでなくGemini in Chromeにも展開され始めていることが、Android Authorityの報道で明らかになりました。マウスで指した対象をGeminiが理解し、複雑なプロンプトを書かずに操作を依頼できるのが特徴とされています。

なお、ソース記事のタイトル・キーワードには「Googlebooks」という表記が用いられていますが、文脈上は「Chromebooks」を指していると解釈するのが自然です。本記事では原文の表記揺れに留意しつつ、内容としてはGoogle製ノートPCおよびGemini in Chromeでの展開として整理します。

Magic PointerはGemini in Chromeにも拡張

Googleは、新発表のAIカーソル「Magic Pointer」について、Google製ノートPC(ソース表記では「Googlebooks」)に限定せず、Gemini in Chromeにも展開していくと説明しています。これにより、Chromeユーザーは画面上のテキスト・画像・コードブロックなどをカーソルで指すだけで、Geminiにその対象に関する操作を依頼できるようになると報じられています。

Android Authorityによれば、Geminiの文脈理解能力をマウスポインタ操作と組み合わせることで、ユーザーの作業の流れを妨げない直感的なAI体験を目指す方針が示されているとされています。

「指して、頼む」だけで完結する操作体験

従来のように長文プロンプトを書いたり、テキストをGeminiにコピー&ペーストする必要がなくなる点が大きな変化です。ユースケースとしては、以下のような例が挙げられているとAndroid Authorityは伝えています。

  • ページ上のいくつかの商品を選択し、比較を依頼する
  • リビングルームの画像内で、新しいソファを置きたい場所を指して視覚化を依頼する
  • 単語・段落・画像の一部・コードブロックを指して「これを修正して」「これはどういう意味?」と尋ねる

AIとのやり取りを、短い指示と「指し示す」という物理的なジェスチャーを組み合わせて意図を伝える、より会話的な体験へと近づける狙いがあると報じられています。

Chromebookとの機能差

Android Authorityの報道によれば、より高度な機能はGoogle製ノートPC側に搭載され、Chrome側では比較や視覚化といった基本的な機能の提供にとどまる見込みとされています。両者の機能差は明確に分けられているようです。

展開範囲は不明、現時点では限定的な提供の可能性

注意点として、GoogleはGemini in ChromeにおけるMagic Pointerの提供地域や対象ユーザーを明らかにしていません。Android Authorityが実際にGemini in Chromeで確認したところ、現時点ではMagic Pointer機能にアクセスできなかったとされており、展開は限定的または段階的に進む可能性があると報じられています。

現時点では「使えるユーザーが順次拡大していく機能」と捉えるのが妥当でしょう。Chromeで実際に利用できるようになるまでには時間がかかる可能性があるため、続報を待つのが現実的な判断です。

DeepMindが語るMagic Pointerの設計思想

Magic Pointerの技術的背景については、Google DeepMindと共同開発されたことが明らかになっています。DeepMindは、マウスポインタが「半世紀以上ほとんど進化していない」と指摘し、Gemini駆動の文脈理解によってこれを変えたいと説明しています。

「ピクセルを操作可能なエンティティに」

Googleが強調する興味深いアイデアの1つが、「ピクセルを操作可能なエンティティに変える」というものです。Geminiが画面上のオブジェクト、日付、場所などのコンテンツを直接認識し、ユーザーが即座にやり取りできるようにするとされています。

処理アーキテクチャも特徴的で、Magic Pointerの提案はオンデバイス処理によって素早く行われ、画像生成のような最終アクションはクラウドにオフロードされる仕組みです。なおDeepMindはAI Studio上でAI対応ポインタのデモを公開しており、開発者は実際に体験できるようになっています。

Googlebookの位置づけとChromebookの今後

Magic Pointerが象徴するハードウェア「Googlebook」の全体像も明らかになっています。GoogleはAcer、ASUS、Dell、HP、Lenovoといったパートナーと協業し、初代Googlebookを今秋に発売する予定です。

項目内容
OS基盤Aluminium OS(Android 17ベース)
識別マーク筐体に「Glowbar」搭載
発売時期今秋

内部的に「Aluminium OS」と呼ばれるAndroid 17ベースのデスクトッププラットフォーム上で動作するとされています。外観面では各機種に識別用の「Glowbar」が搭載されます。

気になるChromebookの今後については、GoogleはGooglebookがChromebookを置き換えるものではなく、Chromebookは引き続き教育機関や法人向けを対象にすると説明しています。一方でAxiosの取材に対し、Googleは多くのChromebookが新体験へ移行可能になる見込みだと回答しています。

Q&A

Q. Magic PointerはChromebookでしか使えないのですか? いいえ、Gemini in Chromeにも展開が始まっていると報じられています。ただし、より高度な機能はGoogle製ノートPC側に搭載される見込みで、Chrome側では商品比較や視覚化といった基本機能が中心になるとされています。

Q. 日本でも今すぐ使えますか? Googleは提供地域や対象ユーザーについて公表していません。Android Authorityの編集部が試した時点でもMagic Pointerにはアクセスできなかったとのことで、展開は限定的・段階的に進む可能性があります。

Q. どんな操作ができますか? ウェブページ上の商品を複数選んで比較を依頼したり、画像内の場所を指して家具配置を視覚化したり、テキストや画像の一部、コードブロックを指して「修正して」「これは何?」と尋ねるといった操作が想定されています。

出典

ポストLINEで送るはてブ
GD

GadgetDrop 編集部

スマホ・PC・AI・XRなど幅広いテクノロジーを、スペックの行間まで読む視点で解説します。速報から深掘り分析まで、テック選びと業界理解に役立つ情報をお届けしています。