Latest evidence-based health information
Iphone

マイクロソフトのCopilot VisionとShoppingは素晴らしいが、他の機能は期待外れ

マイクロソフトのCopilot VisionとShoppingは素晴らしいが、他の機能は期待外れ
マイクロソフトのCopilot VisionとShoppingは素晴らしいが、他の機能は期待外れ

マイクロソフトは先週、レドモンドで開催された創立50周年記念イベントで、AIの新機能を多数発表しました。私もその多くを試すことができました。消費者にとって最も大きな可能性を秘めているのはCopilot Visionですが、ショッピング機能もそれに劣らず魅力的です。

Copilot の新しいメモリとパーソナリティ特性について心配されている方もいらっしゃるかもしれませんが、私は心配していません。最終的な結果がどうなるかはまだ予想しにくいように思います。これは、Microsoft の 50 周年記念イベントで展示された新しい Copilot のデモのほとんどを試した私の印象です。

Microsoftは、ユーザーに代わって買い物をしたり、技術的な問題をステップバイステップで案内してくれる、親しみやすいCopilotのビジョンについて語りました。そして、Copilotには、ディープリサーチ、AI生成ポッドキャスト、Copilot Searchといった特定のリサーチツールが追加される予定です。

これらの機能を実際に使ってみて、いくつか違った印象を受けました。私のトップ3は、Copilot Vision(Windows版)、Copilot Shopping、そしてCopilot Searchです。他の機能については、私には少し物足りなさを感じました。

コパイロットビジョン:これは大きな可能性を秘めている

マイクロソフトは、Copilot Visionのデモを見るために、いくつかの異なるシナリオの選択肢を提供してくれました。Photoshopの操作方法に感銘を受けていたからです。メニューにゲームデモがあったので、それをお願いしました。

残念ながら、Blender CAD アプリを操作するといったまったく新しいものではなく、Microsoft が以前参照していた Copilot Vision でプレイされている Minecraft のバージョンを見ることになってしまいました。

副操縦士ビジョン マインクラフト 1
Copilot は、プレイヤーがMinecraft をプレイしているときに、エメラルドと革の鎧 (およびそれらの用途) を正しく識別しました(奇妙な照明要素によって写真が二分されています)。

マーク・ハックマン / ファウンドリー

現在、Copilot VisionはCopilotアプリケーションから起動します。Copilotはユーザーがどのアプリケーションを見ているかを「認識」していますが、アクセスを許可するスイッチをオンにするまでは結果を積極的に解釈しません。このデモでは、Copilot VisionはMinecraftまたはClipchampのいずれかを見ることができます。私たちはMinecraftを選択しました。

デモはかなり短かった。コパイロット・ビジョンは宝箱の中身を見て、鎧とエメラルドが入っていることを判別し、それらの用途を説明しました。次に、ビジョンは野菜を見て、それが何であるかを判別し、クリックすることで収穫できることを説明しました。

マイクロソフトの従業員はClipchampを開き、動画のトランジションをスムーズにする方法について質問しました。ただし、彼女は「これらのクリップ間をよりシームレスにブレンドする」という表現を使っていました。Copilot Visionはこれを「よりスムーズなトランジションを求める」と解釈しました。そこで従業員はCopilotに「ハイライト」するように指示しました。しばらく沈黙した後、Copilot Visionは適切なコントロールの周りにハロー(光輪)またはハイライトを作成しました。

副操縦士ビジョン マインクラフト 2
ここで、Copilot は画面に表示された「野菜」を識別しました。

マーク・ハックマン / ファウンドリー

Microsoft は、Copilot Vision が Windows Insider プレビュー プログラムの一部として、まもなく、約 1 週間以内にリリースされる予定であると述べています。

Copilotのショッピング機能には、予想以上に感銘を受けました。Microsoftの当初の資料では、この機能は特定のパートナーに限定されると記載されていたからです。ChatGPTは2年前にOpenTableなどのベンダーと共同でこの機能を発表しましたが、延期されたようです。OpenAIは1月にこのエージェント機能をOperatorとして再発表しましたが、現在はリサーチプレビュー段階です。

Copilotの実装は簡単です。必要な情報を入力するだけで、Copilotが検索を開始します。今のところ、Copilotのメイン画面には、様々なホームページや商品ページのスナップショットが表示され、Copilotの動作状況が確認できます。また、サイドバーにはCopilotの現在の動作と、現在地や動作の概要が表示されます。

Copilot 検索サイドパネル

マーク・ハックマン / ファウンドリー

ショッピング機能は実に興味深いものでした。デモ参加者が特定のサイトから赤いバラ2ダースを注文すると、Copilotが探し回りました。その後、よりシンプルで一般的な注文をすると、Copilotは複数のサイトを検索しました。(もちろん、CopilotがMicrosoftのパートナーを優遇するかどうかは疑問です。)

ショッピング機能は、複数のタスクを連携して実行できるように設計されています。例えば、特定の日にニューヨークへの旅行を予約したいとします。Copilot Shopping は、期待通りに動作すれ、誰が旅行に行くのか、どのような好みがあるのか​​を把握した上でフライトを予約し、その日にホテルを予約し、さらに、参加者数と好みを把握した上でレストランの空き状況を確認できるはずです。

Microsoft Copilot ショッピングローズ
副操縦士はウェブを閲覧し、オファーをチェックしました。

マーク・ハックマン / ファウンドリー

ショッピング機能は、MicrosoftがCopilotに組み込もうとしている「記憶」とパーソナライゼーションというコンセプトの重要な部分を占めており、まもなく展開される予定です。

Copilot Search: 従来の検索に独自の工夫を加えたもの

Copilot Searchはプレビューではなく、すでに公開されています。試してみる価値は十分にあります。AnthropicはAI検索を採用しており、Googleも以前はAI検索を採用していましたが、現在は撤退しています。

必要なコンテキストを集めるためにウェブページを閲覧するのは時間の無駄だとは思いますが、Copilot Searchはまさにその通りです。検索範囲を広げるために、検索内容を「書き換える」機能も備えています。例えば、「Windowsのベストバージョンは?」という質問は、「最も信頼性の高いWindowsのバージョン」や「最も機能が多いWindowsのバージョン」と解釈できます。(答えは? Windows 7ですが、これは私のランキングとは少し異なります。)

AIが私たちの専門知識をリアルタイムで置き換えようとしているのは恐ろしいことです。MicrosoftがCopilot SearchをCopilotの機能ではなく、Bingの一部だと考えているのも興味深い点です。AI検索が将来どのようなものになるかは分かりませんが、興味深い方向性であることは確かです。

Copilotの機能の中にはそれほど印象的ではないものもある

副操縦士ページ

マーク・ハックマン / ファウンドリー

Google GeminiのDeep Researchには大変感銘を受けました。数十ものウェブページからデータをサンプリングし、その結果を統合する機能です。CopilotのDeep Researchのデモでは、そこまで詳細な分析はできないようですが?

Copilotがどのような情報源から情報を取得し、最終的な出力にどれだけのトークンや単語が含まれるのか、はっきりとは分かりませんでした。AIは結果を要約するのは簡単ですが、長く、情報源が明確で、一貫性のある文章を提示するのは難しいです。これはAIの出力が優れている証拠です。

「パーソナライズされたAI」というコンセプト自体も、弱いスイングでファウルチップしたボールをミットに叩き込んだようなものだ。私はCopilotに、私の趣味(私の場合は野球のピッチャー)とその他の関連情報について話すように言われた。理想的には、Microsoftはそれを使って私の好き嫌いのプロファイルを作成し、さらに(例えば)私が子供を持っていることや、涼しい気候が好きなので太平洋岸北西部への旅行を楽しんでいることなども知るだろうと言われた。

しかし、その証拠はまったくなく、私は信じられない思いですべてを売りつけました。

コパイロットAIゲーミング

マーク・ハックマン / ファウンドリー

マイクロソフトは、AI生成の「ビデオゲーム」を披露しました。PCの名作ゲーム「Quake」をベースに、AIが1秒あたり数フレームの映像を断続的に生成するゲームです。これはマイクロソフトが披露した成功例の一つと考えても問題ないでしょう。コンセプトを除けば、実にひどい出来です。もしよければ、ご自身で試してみてはいかがでしょうか。ただ、 Quakeの風景を寄せ集めただけの、統一感もまとまりもないゲームです。おそらく数秒で飽きてしまうでしょう。

AIはあなたのPCに導入されるかもしれませんが、すべてが成功するわけではありません。開発者の皆さん、仕事はまだあります。

Otpoo

Health writer and researcher with expertise in evidence-based medicine and healthcare information.