Компанія Google оголосила про розширення можливостей свого експериментального режиму AI Mode , що тепер включає мультимодальний пошук. Ця функція дозволяє користувачам задавати запитання про зображення, які вони завантажили або зняли за допомогою камери. Нова функціональність аналізу зображень у AI Mode використовує можливості Google Lens, що дозволяє розуміти весь контекст сцени на зображенні, включаючи взаємозв’язок об’єктів, їх матеріали, кольори, форми та розташування.
AI Mode застосовує техніку «fan-out», яка дозволяє ставити декілька запитань щодо зображення та об’єктів на ньому, надаючи більш детальну інформацію, ніж традиційний пошук Google. Наприклад, користувач може сфотографувати свою книжкову полицю та запитати: «Якщо мені сподобалися ці книги, які ще подібні книги мають високу оцінку?». AI Mode визначить кожну книгу та надасть список рекомендованих книг з посиланнями для подальшого ознайомлення чи покупки.
Нова функція вже доступна для користувачів додатка Google на Android та iOS. Вона дозволяє не лише отримувати відповіді на питання про вміст зображення, але й уточнювати запити, наприклад, про те, яка з рекомендованих книг є найкоротшою. За словами представників Google, розширення доступу до AI Mode дозволить мільйонам користувачів, які підписані на Labs, скористатися новими можливостями без необхідності мати підписку на Google One AI Premium.
За місяць тестування AI Mode користувачі відзначили його зручний дизайн, швидкий час відгуку та здатність розуміти складні й нюансовані запитання. Кількість запитів у AI Mode в середньому вдвічі перевищує традиційні запити в Google Search, що свідчить про його використання для більш складних завдань, таких як порівняння продуктів, планування подорожей та інші дослідницькі запити.
