Что такое визуальный поиск
Покупатель видит вещь — на улице, в соцсети, у знакомых — и не знает, как она называется. Текстовый запрос «бежевое пальто с поясом» даст сотни неточных результатов, а фото сразу задаёт точку отсчёта. Визуальный поиск принимает изображение вместо слов и возвращает товары каталога, похожие на него внешне.
Как это работает
- Детекция. Модель находит на снимке товар и вырезает его — например, кресло, а не всю комнату.
- Эмбеддинг. Изображение переводится в вектор — эмбеддинг, который описывает форму, цвет и фактуру.
- Поиск соседей. Система ищет в каталоге изображения с ближайшими векторами — так же, как семантический поиск ищет по смыслу текста.
- Фильтрация и ранжирование. Из выдачи убираются товары не в наличии, результаты уточняются по категории, цене, размеру.
Мультимодальные модели добавляют ещё один шаг: покупатель может дополнить фото текстом — «такое же, но синее».
Где это уже работает
| Сервис | Что умеет |
|---|---|
| Google Lens | Почти 20 млрд визуальных поисков в месяц (данные Google, октябрь 2024); для товаров показывает отзывы, цены у разных продавцов и где купить |
| «Умная камера» Яндекса | В приложении Яндекс режим «Товары» распознаёт предмет и показывает, где его купить |
| Ozon | Поиск по фото в приложении и на сайте; чаще всего так ищут одежду и обувь |
| Lamoda, Wildberries, Яндекс Маркет, Мегамаркет | Поиск по фото: у Lamoda — с 2017 года, у Wildberries — с 2019-го (обновлён в сентябре 2025), у Маркета и Мегамаркета — с 2023-го |
Где визуальный поиск окупается
- Одежда, обувь, аксессуары — вещь проще показать, чем описать.
- Мебель и декор — стиль, форма, цвет обивки.
- DIY и запчасти — опознать деталь, не зная названия или артикула.
- Электроника и продукты — пользы меньше: там выбирают по модели и характеристикам.
Визуальный поиск хорошо работает в связке с похожими товарами и «Дополни образ»: товар, найденный по фото, становится стартом для рекомендаций.
Что проверить в каталоге перед запуском
- Фото: товар целиком, нейтральный фон, без надписей и логотипов поверх, несколько ракурсов.
- Разрешение: ориентир — требования маркетплейсов, у Ozon это от 1000×1000 пикселей.
- Атрибуты: цвет, материал, категория — чтобы отсечь визуально похожие, но неподходящие товары.
- Наличие: выдача из отсутствующих товаров хуже, чем честное «ничего не нашли».
- Метрики: доля поисковых сессий по фото, CTR выдачи и конверсия в покупку в сравнении с текстовым поиском.