OpenAIの高度な音声モードでは、画面を認識し、ビデオを分析できるようになりました

OpenAIの「12 Days of OpenAI」は水曜日も勢いよく続き、開発チームはChatGPTのAdvanced Voice Mode（AVM）の新しい季節限定音声と、会話型AI機能の新しいビデオおよび画面共有機能を発表しました。

OpenAIが「サンタモード」と呼ぶこの機能は、AVMの季節限定機能で、サンタクロースの優しい声をプリセット音声オプションとして提供します。本日より、PlusおよびPro加入者向けにウェブサイト、モバイルアプリ、デスクトップアプリを通じて提供開始され、1月上旬まで利用可能です。この期間限定機能にアクセスするには、まずPlusまたはProアカウントにサインインし、テキストプロンプトウィンドウの横にある雪の結晶アイコンをクリックしてください。

ポップアップメニューからサンタの声を選択し、選択を確定してチャットを始めましょう。私自身、架空の宗教的人物を装った大規模な言語モデルと会話したい理由、ましてやその特権に20ドルも払う理由が全く理解できませんが、OpenAIはそれに価値があると考えているようです。なお、サンタとのチャットはシステムによって記録されず、チャット履歴にも保存されず、ChatGPTのメモリにも影響を与えません。

ホリデーシーズンに間に合うように、ChatGPT モバイル アプリの Advanced Voice でビデオと画面共有が展開され始めました。pic.twitter.com/HFHX2E33S8

— OpenAI (@OpenAI) 2024 年 12 月 12 日

同社はまた、待望の新機能として、モバイルAVMインターフェースを介してビデオや画面共有を分析する機能をAdvanced Voice Modeに導入します。この機能により、ChatGPTと画面やビデオフィードを共有し、リアルタイムの会話をしたり、周囲の状況を説明したり写真をアップロードしたりすることなく、ChatGPTに見えているものに関する質問に答えてもらうことができます。

同社によると、この新機能は「ほとんどの国」のPlusおよびPro加入者と、すべてのTeamsユーザーに展開される。厳格なプライバシー法のため、EU、スイス、アイスランド、ノルウェー、リヒテンシュタインではこの機能のリリースが遅れているが、同社はこれらの地域のPlusおよびPro加入者には「まもなく」提供開始したいと考えている。EnterpriseおよびEduユーザーは、1月まで試用を待つ必要がある。アクセス権がある場合は、音声モードを開き、左下にあるビデオカメラアイコンをタップすることで新機能を起動できる。画面共有を起動するには、3点メニューをタップし、「画面を共有」を選択する。

水曜日の発表は、OpenAIのライブストリームイベント4日目となる。同社は既に、完全機能のO1推論モデル、Sora動画生成モデル、月額200ドルのProサブスクリプションプラン、そしてChatGPT Canvasのアップデートを発表している。