マイクロソフトのCopilot Visionが一部のユーザー向けにウェブサーフィンに登場

マイクロソフトの新しい機能「Copilot Vision」は、インターネットを閲覧中に「見ているものを見て、聞いているものを聞く」ことができるが、米国の限られた数のCopilot Pro加入者のみが利用できるようになった。

Microsoftのブログ投稿によると、 「本日から、ユーザーの許可を得て、Copilotがオンラインでの行動のコンテキストを完全に理解できるエクスペリエンスを導入します。Copilot Visionを有効にすると、Copilot Visionがユーザーが閲覧しているページを認識し、ユーザーと一緒に読み上げ、直面している問題について一緒に話し合うことができます。」

この機能は、ChatGPTのAdvanced Voice ModeとGoogleのGemini Liveに対するMicrosoftの回答であるCopilot Voiceのデビューと同時に10月に初めて公開されました。現在、 Copilot Labsを通じてProサブスクリプションのサブスクリプションメンバー向けにプレビュー版が提供されており、MicrosoftのEdgeブラウザでのみ利用可能です。

ユーザーの懸念を軽減するため (そして、この新機能を同社の問題となったリコールのリリースから遠ざけるため)、Vision はユーザーが使用したいときはいつでも明示的にアクティブ化する必要があり、ユーザーがこの機能をオフにするまで (Web カメラのオン ライトに似た) 永続的なアイコンが表示されます。

AIアシスタントは起動中、「見たものをスキャン、分析し、それに基づいて洞察を提供します」。システムは、次のステップを提案したり、表示されたコンテンツに関する質問に答えたり、サイトの他の部分に移動したり、さまざまなオンラインタスクを支援したりすることができます。

Copilotによるウェブ閲覧支援は、MicrosoftのAIアシスタント計画のほんの始まりに過ぎません。1月には、Microsoftは次世代AIエージェントの第一弾をリリースする予定です。このエージェントは、利用可能なデータを自律的に分析し、ユーザーに代わってタスクを実行します。

「Copilotは最終的にあなたに代わって行動し、人生の複雑な状況をスムーズにし、あなたにとって大切なことに集中する時間を増やすでしょう」と、Microsoft AI担当エグゼクティブバイスプレジデント兼CEOのムスタファ・スレイマン氏は10月に記しています。「Copilotは人生の多くの重要な瞬間にあなたの代弁者となるでしょう。医者の診察にも同行し、メモを取り、適切なタイミングでフォローアップしてくれます。お子様の誕生日パーティーの計画や準備の負担も分担してくれます。そして、一日の終わりには、人生における難しい決断をじっくり考えるのを助けてくれるでしょう。」