Компанія Google представила спеціалізовану модель штучного інтелекту, здатну самостійно виконувати завдання в інтернеті, система аналізує екран і виконує дії, які зазвичай робить користувач: клікає по посиланнях, заповнює форми і впорядковує дані. Принцип роботи технології нагадує роботу асистента, отримавши завдання, модель вивчає поточний стан інтерфейсу, визначає потрібну дію і виконує її, а після цього вона знову оцінює оновлену картинку на екрані, щоб зробити наступний крок. Такий цикл повторюється до повного завершення завдання.
На практиці це дозволяє автоматизувати безліч рутинних операцій, адже система може самостійно перенести інформацію з однієї бази даних в іншу, організувати нотатки на віртуальній дошці або записатися на якийсь прийом, пройшовши авторизацію на сайті.
Розробники підкреслюють, що для операцій з підвищеними ризиками, таких як фінансові транзакції, система буде запитувати підтвердження у користувача, також в неї вбудовані захисні механізми, покликані запобігти зловживанням. В даний час модель заточена на роботу з браузерами, але в перспективі вона зможе виконувати і завдання всередині операційної системи. Ознайомитися з її можливостями розробники можуть через спеціальні API-інструменти.
Паралельно з цим Google масштабно розширює мовну підтримку свого інтелектуального пошуку (AI Mode). Тепер він розуміє і генерує відповіді на майже півсотні мов і доступний більш ніж у 200 країнах. За заявою компанії, це стало можливим завдяки адаптації моделі Gemini, яка навчилася враховувати лінгвістичні тонкощі і культурні особливості кожної мови.
Цей крок остаточно стирає мовні бар'єри для мільйонів користувачів, виводячи технологію за межі англомовної аудиторії, однак для власників сайтів і онлайн-видавців це, ймовірно, стане новим викликом. Як показують дослідження, детальні відповіді ШІ прямо в пошуковій видачі знижують ймовірність переходу користувачів на сторонні ресурси, що може в подальшому вплинути на веб-трафік.
Чёт даже игра вспомнилась, где надо ~999 версий капчи пройти))