Google сможет искать одновременно по изображению и тексту
Google анонсировал новые функции поисковика. Скоро сервис визуального поиска Google Lens сможет искать одновременно по изображению и тексту.
Например, если пользователь сделает снимок рубашки с рисунком енота, то, чтобы найти другие предметы с таким же рисунком в интернете, необходимо лишь добавить команду. Например, "носки с этим рисунком".
Это также сработает, если пользователю нужно руководство по починке велосипеда. Он может навести камеру приложения Google на поломанную деталь, названия которой он, может быть, даже не знает. Lens его распознает и предложит уточнить запрос текстом. Google Lens поймет контекст и покажет тематические видео по ремонту.
Также компания запустила новую функцию "режим объектива" в своем мобильном приложении поиска и десктопном браузере Chrome. Она позволяет выполнять поиск похожих по стилю картин и предметов.
В основе этих обновлений лежит инструмент, который Google представила в мае на конференции I/O. Это модель машинного обучения. Изначально она разрабатывалась для распознавания вариантов названия вакцин от коронавируса на разных языках. И с задачей, которая должна была занять несколько недель, нейросеть справилась за секунды, поскольку не ограничивалась при поиске языком запроса.
Возможности нейросети применили и в Google Lens, пытаясь расширить функции визуального поиска.