در ماه اکتبر گذشته، مایکروسافت از Copilot Vision برای وب رونمایی کرد. این ویژگی به کاربران اجازه می‌دهد محتوای وبی که در حال مشاهده آن هستند را با Copilot به اشتراک بگذارند و فقط با صحبت کردن، پاسخ سوالات مرتبط با آن محتوا را دریافت کنند. Copilot Vision مثل این است که یک متخصص کنار شما نشسته، به صفحه نمایش شما نگاه می‌کند و در طول مسیر به شما کمک می‌کند.
تا به امروز، Copilot Vision فقط برای مشترکین Copilot Pro در دسترس بود. امروز، مایکروسافت اعلام کرد که Copilot Vision اکنون برای همه کاربران Microsoft Edge به صورت رایگان در دسترس است. لازم به ذکر است که Copilot Vision فقط با وب‌سایت‌های خاصی از جمله Amazon.com، Target.com، Wikipedia و Tripadvisor کار می‌کند. به طور مشخص، این قابلیت روی وب‌سایت‌هایی که دارای پیش‌پرداخت یا محتوای حساس هستند، کار نخواهد کرد.
Copilot Vision یک ویژگی کاملاً اختیاری است و مایکروسافت هیچ داده‌ای از Copilot Vision - چه صوت، تصویر، متن یا مکالمات - را برای آموزش مدل ذخیره یا استفاده نمی‌کند.
اوایل این ماه، مایکروسافت گسترش Copilot Vision به اپلیکیشن‌های موبایل و ویندوز خود را اعلام کرد. با استفاده از اپلیکیشن موبایل Copilot، کاربران می‌توانند دوربین تلفن خود را به سمت محیط اطراف بگیرند و درخواست اطلاعات، راهنمایی یا ایده کنند. Copilot می‌تواند هم ویدیوی زنده از دوربین و هم عکس‌های ذخیره شده در گالری تلفن را تحلیل کند.
اپلیکیشن جدید بومی Copilot برای ویندوز نیز از Copilot Vision پشتیبانی می‌کند و این ویژگی در حال حاضر برای Windows Insiders در دسترس است. مایکروسافت بر اساس بازخورد کاربران، قصد دارد دسترسی را به کاربران بیشتری گسترش دهد. زمانی که این ویژگی به طور گسترده در دسترس قرار گیرد، کاربران قادر خواهند بود هر پنجره مرورگر یا اپلیکیشن را با Copilot به اشتراک بگذارند و پاسخ سوالات خود را دریافت کنند.
برای استفاده از Copilot Vision در ویندوز، کاربران می‌توانند روی آیکون عینک در نوار ابزار اپلیکیشن Copilot کلیک کنند، پنجره مرورگر یا اپلیکیشنی را که می‌خواهند به اشتراک بگذارند انتخاب کنند و هر سوالی که دارند را از Copilot بپرسند.