هوش مصنوعی مایکروسافت اکنون می تواند صفحه نمایش شما را بخواند - یا بهتر است بگوییم، وب سایت هایی که در حال مرور آن هستید.

در روز پنجشنبه، این شرکت شروع به ارائه یک پیش‌نمایش محدود و مختص ایالات متحده از Copilot Vision کرد، ابزاری که می‌تواند سؤالات مربوط به سایت‌هایی را که با استفاده از Microsoft Edge بازدید می‌کنید، درک کند و به آنها پاسخ دهد. Copilot Vision که در پشت Copilot Labs، یک برنامه انتخابی برای قابلیت‌های آزمایشی هوش مصنوعی است، می‌تواند متن و تصاویر را در صفحات وب تجزیه و تحلیل کند تا به سؤالاتی مانند «دستور این لازانیا چیست؟» پاسخ دهد.

توجه داشته باشید که Copilot Labs به اشتراک برنامه Copilot Pro مایکروسافت نیاز دارد که هزینه آن 20 دلار در ماه است.

فراتر از پاسخ دادن به سؤالات، Copilot Vision می‌تواند متن را خلاصه و ترجمه کند و کارهایی مانند برجسته کردن محصولات تخفیف‌خورده را در کاتالوگ فروشگاه انجام دهد. همچنین می تواند به عنوان دستیار بازی عمل کند، به عنوان مثال در Chess.com در طول مسابقات نشانگر ارائه می دهد.

مایکروسافت در یک پست وبلاگی که با TechCrunch به اشتراک گذاشته شده است، نوشت: «وقتی انتخاب می‌کنید که Copilot Vision را فعال کنید، صفحه‌ای که در آن هستید را می‌بیند، همراه شما می‌خواند، و می‌توانید با هم درباره مشکلی که با آن مواجه هستید صحبت کنید. "این یک راه جدید برای دعوت از هوش مصنوعی همراه با شما در حین حرکت در وب است، هر زمان که می خواهید کمک بخواهید، به طور مرتب در پایین مرورگر Edge قرار می گیرد."

بدون شک مایکروسافت که مشتاق است از فشارهای بد بیشتر ناشی از حریم خصوصی هوش مصنوعی جلوگیری کند، تأکید می کند که Copilot Vision داده ها را پس از هر جلسه حذف می کند. این شرکت او میگوید صدا، تصاویر یا متن پردازش‌شده ذخیره یا برای آموزش مدل‌ها استفاده نمی‌شوند – حداقل در این نسخه پیش‌نمایش.

Copilot Vision همچنین در انواع وب سایت هایی که می تواند مشاهده کند محدود است. در حال حاضر، مایکروسافت این ویژگی را از کار بر روی محتوای paywalled و "حساس" مسدود کرده است، و Vision را به فهرست از پیش تایید شده سایت های "محبوب" محدود می کند.

"حساس" دقیقا مستلزم چیست؟ پورنو؟ خشونت گرافیکی؟ مایکروسافت نمی گوید.

رویکرد محتاطانه مایکروسافت تا حدی محصول اختلافات حقوقی با رسانه‌های خبری است. نیویورک تایمز در یکی از پرونده‌های جاری ادعا می‌کند که مایکروسافت به کاربران اجازه می‌دهد با ارائه مقالات نیویورک تایمز از طریق ربات چت Copilot در بینگ، دیوار پرداخت خود را دور بزنند.

بسیاری از ناشران بزرگ، نه تنها به دلیل ترس از استفاده بدون مجوز از داده‌هایشان، بلکه برای جلوگیری از افزایش هزینه‌های سرورشان توسط این ابزارها، مسدود کردن ابزارهای هوش مصنوعی را از ترال کردن وب‌سایت‌هایشان مسدود کرده‌اند. مایکروسافت بيان کرد که Copilot Vision به «کنترل‌های ماشین‌خوان روی هوش مصنوعی» سایت‌ها احترام می‌گذارد، مانند قوانینی که ربات‌ها را از خراش دادن داده‌ها برای آموزش هوش مصنوعی منع می‌کند. با این حال، این شرکت دقیقاً نگفته است که Vision به کدام کنترل ها احترام می گذارد. چندین مورد استفاده وجود دارد

اگر روند فعلی ادامه داشته باشد، Copilot Vision ممکن است در برخی از سایت های خبری برتر وب کار نکند. اما مایکروسافت بيان کرد که متعهد به "بازخورد گرفتن" برای رفع نگرانی ناشران است.

این شرکت در وبلاگ نوشت: "برخی از کسانی که با آنها همکاری کرده‌ایم، ناشران شخص ثالث هستند، که به ما کمک می‌کنند تا بفهمیم چگونه می‌توان از Vision برای کمک به افراد در تعامل بهتر و تصمیم‌گیری در صفحاتشان استفاده کرد. " «این ورودی‌ها به ما کمک می‌کنند تا Vision را طراحی کنیم تا در نحوه تعامل با صفحات وب مفیدتر باشد.»

خبرکاو