マイクロソフトは最近、Windows InsidersにCopilot Visionの新しいアップデートをリリースしました。このAIツールにはより強力な視覚認識能力が追加されました。以前は、Copilot Visionは2つのアプリケーションを同時に表示し、それらの間で情報を関連付けたり分析したりすることができました。しかし現在では、ユーザーはこの新機能を使って、デスクトップ全体や特定のブラウザーやアプリケーションウィンドウを表示させることができるようになり、実用性が大幅に向上しています。

image.png

Copilot Visionを使用する際には、Copilotアプリ内のメガネのアイコンをクリックし、共有したいデスクトップを選択するだけで、Copilot Visionは作業を開始します。これはビデオ通話での画面共有機能に似ており、ユーザーはいつでもAIにどのコンテンツを表示させるかを自由に選ぶことができます。

マイクロソフトによると、Copilot Visionは表示されている内容を分析し、ターゲットに合わせた洞察や質問への回答を提供できます。クリエイティブプロジェクトの改善、個人履歴書の最適化、新しいゲームで指導を求めたい場合など、さまざまなシナリオで、音声を通じてユーザーにアドバイスや支援を提供できます。

昨年からマイクロソフトはCopilot Visionのテストを始め、Edgeブラウザー内で補助ツールとして提供し、ウェブページを閲覧する際のサポートを向上させています。さらに、Copilot Visionはスマートフォンのカメラを活用し、ユーザーが見ている現実世界に関する質問に即座に答えられます。

この技術の登場は、マイクロソフトがAIアシスタント分野でまた一つ重要な進展を遂げたことを示しており、ユーザーとコンピューターとの相互作用体験をさらに強化しています。今後、Copilot Visionが継続的に改善され、広く普及していくにつれて、ユーザーはより知的で使い勝手の良い作業、学習、娯楽の体験を享受できるようになるでしょう。

ポイント:

1. 🖥️ Copilot Visionはデスクトップ全体や特定のアプリケーションを表示でき、視覚認識能力が向上しています。

2. 🎤 スクリーン共有機能を通じてAIとインタラクティブにやり取りし、ターゲットに合わせたアドバイスや指導を得ることができます。

3. 📱 この機能はスマートフォンのカメラもサポートしており、リアルタイムでユーザーの質問に答えることができます。