
Google Gemini начинает понимать изображения по-настоящему
Новое обновление Gemini позволяет точно указывать, куда смотреть на картинках, делая работу с изображениями проще и нагляднее.
Основные идеи
Мнение автора
Google постепенно раскрывает новые возможности Gemini, добавляя разметку и анализ изображений прямо в приложение и веб-версию. Эта функция позволяет пользователям направлять внимание ИИ на конкретные области изображения, что делает работу с фото более точной и интерактивной. Несмотря на пока ограниченное распространение, инструмент уже показывает впечатляющую способность понимать, на что именно указывает пользователь.
В течение последних нескольких месяцев Google работала над внедрением инструментов разметки изображений в Gemini. Помимо следов кода, найденных в приложении, мы также видели утечки в интернете, демонстрирующие эту функцию. Теперь эти инструменты начинают появляться у пользователей Gemini, поддерживая как редактирование, так и анализ изображений.
Благодаря наводке от пользователя, мы запустили Gemini для проверки и можем подтвердить, что возможность разметки (рисования поверх фото) присутствует как в приложении Gemini, так и в веб-версии в Chrome. При первом прикреплении изображения в Gemini на Android приложение сообщит вам о новой возможности.

Мы уже встречали это приветственное уведомление, связанное с редактированием. Но не волнуйтесь, это не единственное применение инструмента: как мы и предполагали изначально, он также позволяет направлять внимание Gemini на определенные области изображения.
Как видно на примерах редактирования и анализа, Gemini легко понимает, какая часть изображения нас интересует, когда мы выделяем её и вводим запрос.
Возможно, пример с редактированием выглядит удачнее. И хотя при анализе справа Gemini промахнулся, он явно понял, что мы спрашивали именно о крайнем левом человеке из троих.
На данный момент мы не можем сказать, насколько широко распространено это тестирование и начала ли Google полномасштабное внедрение. Надеемся, что более точная информация о доступности появится после выходных, но проверьте свои устройства уже сейчас — возможно, вы уже можете пользоваться этими инструментами.















