Copilot теперь может просматривать веб-страницы и выполнять действия за вас
К своему 50-летию компания Microsoft обучает своего чат-бота Copilot на базе искусственного интеллекта нескольким новым трюкам.
По словам Microsoft, Copilot теперь может выполнять действия на «большинстве веб-сайтов», что позволяет ему бронировать билеты, столики в ресторанах и многое другое. Бот получил возможность запоминать определенные вещи о вас, подобно ChatGPT от OpenAI, например, вашу любимую еду и фильмы. И теперь он может анализировать видео в реальном времени с вашего телефона, отвечая на вопросы в контексте того, что он «видит».
Обновления происходят, когда Microsoft, как сообщается, обдумывает обновление Copilot, который исторически работал на моделях ИИ от OpenAI, с большим количеством собственных внутренних технологий. Copilot часто отставал от конкурентов ChatGPT и Gemini от Google, которые в последние месяцы только наращивали темпы развертывания функций.
С пятницы Copilot может выполнять задачи в Интернете по принципу того, как это делают «агентские» инструменты, такие как Operator от OpenAI. Microsoft заявляет, что сотрудничает с 1-800-Flowers.com, Booking.com, Expedia, Kayak, OpenTable, Priceline, Tripadvisor, Skyscanner, Viator и Vrbo для обеспечения совместимости с первого дня. Введите запрос — например, «отправить букет моему партнеру» — и Copilot попытается отметить этот конкретный пункт из вашего списка дел.
Взяв за основу книгу поисковой системы Perplexity, Copilot теперь может также отслеживать онлайн-предложения для вас. Попросите бота искать скидки и распродажи на товар, и он уведомит вас, когда они произойдут, — и предоставит вам ссылку для покупки.
Неясно, насколько хорошо Copilot справляется с различными задачами. Microsoft предоставила мало подробностей о том, как работает эта возможность, и, в отличие от некоторых своих конкурентов, не опубликовала данные о тех областях, где Copilot может испытывать трудности или нуждаться во вмешательстве человека.
Предположительно, веб-сайты также могут блокировать Copilot, как они могут блокировать Operator от OpenAI. Компания может сделать это, если она обеспокоена, например, тем, что меньшее количество людей, посещающих ее приложение напрямую, может нанести ущерб ее доходам от рекламы.
К счастью, другие новые функции Copilot не столь туманны и потенциально противоречивы.
Улучшенный Copilot может генерировать «подкасты», похожие на аудиообзоры в NotebookLM от Google. При наличии веб-сайта, исследования или какого-либо другого источника Copilot создаст двусторонний диалог между двумя синтетическими хостами. Как и в случае с аудиообзорами, вы можете прервать хостов в любой момент, чтобы задать вопрос, и они подтвердят это и ответят.
На Android и iOS Copilot теперь может видеть то, что находится в поле зрения камеры вашего телефона или в вашей фотогалерее, и отвечать на вопросы об этом (например, «Что это за странный цветок?»). А на Windows обновленное приложение Copilot может просматривать то, что находится на экране вашего рабочего стола, для поиска, изменения настроек, организации файлов и многого другого. Сначала оно будет развернуто для участников программы Windows Insider, начиная со следующей недели.
Этот репортер надеется, что существуют разумные меры безопасности, которые не позволят Copilot читать личные файлы или совершать ошибки, нарушающие работу рабочего стола. Но информацию было трудно получить до времени публикации.
В другом месте Copilot имеет новую функцию Pages для объединения проектов, которая черпает вдохновение из ChatGPT Canvas и инструмента Claude Artifacts от Anthropic. Pages помещает заметки и исследования в холст, который Copilot может помочь организовать и превратить в документ.
В дополнение к страницам новая функция глубокого исследования Copilot находит, анализирует и объединяет информацию из онлайн-источников, документов и изображений для ответа на более сложные запросы, во многом подобно глубоким исследованиям ChatGPT и глубоким исследованиям Gemini.
Наконец, как упоминалось ранее, Copilot теперь может больше помнить о вас. Microsoft утверждает, что бот будет отмечать ваши предпочтения, когда вы взаимодействуете с ним, предлагая «индивидуальные решения», «проактивные предложения» и напоминания.
Если вас беспокоит перспектива того, что чат-бот запомнит интимные подробности ваших прошлых разговоров, есть способ удалить отдельные «воспоминания» или полностью отказаться от этой функции, отмечает Microsoft.
«Copilot [дает] вам контроль через панель управления пользователя и возможность выбирать, какие типы информации он будет помнить о вас, или полностью отказаться от этого», — написала Microsoft в сообщении в блоге, предоставленном TechCrunch. «Вы остаетесь под контролем».