Copilot від Microsoft тепер може переглядати веб-сторінки замість користувача

За словами Microsoft, Copilot тепер може виконувати дії на «більшості веб-сайтів», що дозволяє бронювати квитки, бронювати ресторани тощо. 

Бот отримав можливість запам’ятовувати конкретні речі про вас, подібно до ChatGPT OpenAI , наприклад вашу улюблену їжу та фільми. Тепер він може аналізувати відео в режимі реального часу з вашого телефону, відповідаючи на запитання в контексті того, що він «бачить».

Оновлення відбулися в той момент, коли Microsoft, як повідомляється, обдумує оновити Copilot, який історично базувався на моделях штучного інтелекту від OpenAI, з більшою кількістю власних технологій. Copilot часто відставав від конкурентів ChatGPT і Gemini від Google , які за останні місяці лише прискорили темп розгортання функцій.

Починаючи з п’ятниці, Copilot може виконувати завдання в Інтернеті відповідно до того, як це роблять «агентні» інструменти, такі як Operator OpenAI . Microsoft каже, що співпрацює з 1-800-Flowers.com, Booking.com, Expedia, Kayak, OpenTable, Priceline, Tripadvisor, Skyscanner, Viator і Vrbo для забезпечення сумісності з першого дня. Введіть підказку — наприклад, «надішліть букет моєму партнеру» — і Copilot спробує відзначити цей конкретний пункт справ у вашому списку.

Взявши сторінку з книги пошукової системи Perplexity , Copilot тепер також може відстежувати онлайн-угоди замість вас. Скажіть боту шукати падіння цін і розпродажі на товар, і він сповістить вас, коли це станеться, і надасть вам посилання для покупки.

Незрозуміло, наскільки добре Copilot виконує різноманітні завдання. Корпорація Майкрософт надала кілька подробиць про те, як працює ця можливість, і, на відміну від деяких своїх конкурентів, не опублікувала дані про те, де Copilot може мати проблеми або потребуватиме втручання людини.

Імовірно, веб-сайти також можуть блокувати Copilot, так само як вони можуть блокувати оператора OpenAI. Компанія може зробити це , наприклад, якщо вона хвилюється, що менше людей, які безпосередньо відвідують її додаток, може вплинути на її доходи від реклами.

На щастя, інші нові функції Copilot менш туманні та потенційно сповнені суперечок.

Покращений Copilot може генерувати «подкасти», подібні до аудіооглядів у Google NotebookLM . За наявності веб-сайту, дослідження чи іншого джерела Copilot створить зворотний діалог між двома синтетичними хостами. Як і у випадку з аудіооглядами, ви можете будь-коли перервати ведучих, щоб поставити запитання, і вони підтвердять це та дадуть відповідь.

На Android та iOS Copilot тепер може бачити, що знаходиться в полі зору камери вашого телефону або у вашій фотогалереї, і відповідати на запитання про це (наприклад, «Що це за дивна квітка?»). А в Windows оновлена ​​програма Copilot може переглядати те, що є на екрані робочого столу, здійснювати пошук, змінювати налаштування, упорядковувати файли тощо. На початку наступного тижня його розгорнуть для учасників програми Windows Insider.

Цей репортер сподівається, що існують розумні запобіжні заходи, щоб Copilot не міг читати приватні файли або робити помилки, пов’язані зі зломом робочого столу. Але до моменту преси отримати інформацію було важко.

Крім того, Copilot має нову функцію консолідації сторінок проєкту, яка черпає натхнення з ChatGPT Canvas та інструменту Claude Artifacts від Anthropic . Pages поміщає нотатки та дослідження на полотно, яке Copilot може допомогти організувати та перетворити на документ.

На додаток до сторінок нова функція Deep Research від Copilot знаходить, аналізує та поєднує інформацію з онлайн-джерел, документів і зображень, щоб відповідати на складніші запити, подібно до глибоких досліджень ChatGPT і Gemini Deep Research .

Нарешті, як згадувалося раніше, Copilot тепер може запам’ятати більше про вас. Microsoft каже, що бот відзначатиме ваші вподобання під час взаємодії з ним, пропонуючи «індивідуальні рішення», «проактивні пропозиції» та нагадування.

Якщо перспектива того, що чат-бот запам’ятає інтимні подробиці ваших минулих розмов, вас турбує, є спосіб видалити окремі «спогади» або повністю відмовитися, зазначає Microsoft.

«Copilot [дає] вам контроль через інформаційну панель користувача та можливість вибрати, які типи інформації він запам’ятовує про вас, або повністю відмовитися», — написала Microsoft у блозі, наданому TechCrunch. «Ти залишаєшся під контролем».