Это улучшает результаты в случаях, когда текст противоречит изображению, и особенно полезно при поиске товаров, техники, автомобилей и других объектов, где часто путают похожие модели. После внедрения обновления количество релевантных изображений в верхней части поисковой выдачи заметно выросло, пишет ТАСС.
Как работает новая технология
В основе обновления лежит мультимодальная технология. Инженеры сначала обучили большую модель, а затем создали на её основе несколько компактных моделей для разных этапов обработки. Самые ресурсоёмкие вычисления выполняются заранее, поэтому технология работает в реальном времени без увеличения времени ответа поиска.
Где особенно заметно улучшение
Обновление особенно полезно при поиске товаров, автомобилей, техники, одежды, мебели и других объектов, которые внешне похожи друг на друга. Например, если на странице опубликована фотография одной модели телефона, а в тексте упоминается другая, поиск с большей вероятностью распознает правильную модель. Это помогает пользователям находить нужную картинку без дополнительных уточняющих запросов.
Почему это важно для пользователей и бизнеса
Раньше Поиск анализировал изображение и текст отдельно, что могло приводить к ошибкам при расхождении информации. Теперь совместный анализ позволяет точнее определять содержание изображений и показывать более релевантные результаты. Для владельцев сайтов и интернет-магазинов это означает, что их товары с большей вероятностью будут правильно идентифицированы и показаны в поиске, даже если в текстовом описании допущены неточности. Это делает визуальный поиск более надёжным инструментом для коммерции и повседневных задач пользователей.
Яндекс внедрил мультимодальную технологию в поиск по картинкам, позволяющую одновременно анализировать изображение и текст. Это повышает точность поиска, особенно при несовпадении описания и фото, и сокращает необходимость в дополнительных уточняющих запросах. Обновление особенно актуально при поиске товаров, техники и автомобилей.
Андрей Лапин, ТКС.РУ
Общение: 