Фото в каталоге теперь подбирает искусственный интеллект

Когда клиент ищет мастера в каталоге Barb.ua, он в первую очередь смотрит на фото. На странице «Маникюр» он хочет видеть ногти, на странице «Массаж» — массаж, а не случайную подборку из портфолио. Мы давно знали, что релевантные фото в карточке дают больше обращений, но заставить это работать в масштабе всего каталога удалось только сейчас.

Почему ручное тегирование не сработало

Сначала мы предложили мастерам и салонам размечать фото тегами вручную: скопировать тег со страницы рубрики, зайти в портфолио, проставить его нужным фотографиям, сохранить, дождаться модерации. Мы искренне надеялись, что это заработает, и параллельно наши модераторы размечали фотографии вручную для анкет с наибольшим количеством фото, чтобы повысить качество наших категорий.

Но результат не оправдал наших ожиданий.

Подавляющее большинство мастеров не пользовались разметкой. Многие из тех, кто пользовался, ставили один и тот же список тегов для всех фотографий (например, на фото с женской стрижкой и вечерней прической мог быть проставлен тег “стрижка кроп”).

Разметка фото модераторами занимала много времени - примерно 30 мин. на 50 фотографий. Если снимки, на которые было потрачено время модератора, удалялись, проделанная работа становилась бесполезной. Всего за полтора года модераторы разметили около 180 тыс. фото, пользователи - около 4200. В общей сложности релевантные фото выводились примерно в 2 тыс. анкет.

В итоге в карточках каталога по-прежнему показывались первые фотографии из портфолио, которые нередко не имели отношения к рубрике. Две тысячи тщательно размеченных анкет не меняли картину каталога, в котором более 15 тыс. активных профилей.

Мы сделали вывод: правильный результат должны получать все анкеты сразу, без каких-либо действий со стороны владельца. А тот, кто хочет, должен иметь возможность исправить результат вручную за минуту, а не за полчаса.

Масштаб задачи

В портфолио мастеров и салонов на Barb.ua более полумиллиона фотографий. Каталог насчитывает более тысячи рубрик: от широких («Окрашивание волос») до очень узких («Вуальное мелирование», «Эпиляция верхней губы»). Кроме того, одна анкета обычно присутствует сразу в десятках рубрик: косметолог с 50  услугами в прайсе — в 50  рубриках плюс специальность.

То есть нужно было не просто «распознать, что на фото», а для каждой из пятнадцати тысяч анкет и каждой ее рубрики подобрать четыре лучших фотографии именно по этой теме — и делать это заново каждый раз, когда мастер добавляет или удаляет фото.

Мы обработали весь архив портфолио и запустили ежедневную обработку новых фотографий. Фото, загруженное сегодня, завтра уже участвует в подборе.

Как это работает

Мы не раскрываем технические детали — это наша разработка, в которую вложено много месяцев работы. Но общую логику стоит объяснить, чтобы было понятно, почему результат получается именно таким.

Шаг 1. О чем фото. Каждую фотографию искусственный интеллект относит к одной из нескольких десятков визуальных тем: маникюр, тату, стрижка и т. д. Отдельно распознаются фотографии, которые не являются работами: интерьеры салонов, портреты мастеров, сертификаты и дипломы.

Шаг 2. Подходит ли фото для карточки. Здесь по определенным критериям отбираются только качественные фотографии, которые переходят на следующий этап.

Шаг 3. Что именно на фото. Внутри каждой темы фотография получает детальные признаки — то, что отличает «сложное окрашивание» от «однотонного», «ламинирование бровей» от «коррекции» и т. д. Мы составили и согласовали несколько сотен таких признаков отдельно для каждого направления каталога, и каждый из них описан так, как он выглядит на фотографии, а не как называется в прайсе: бренд косметики или тип кислоты на снимке не виден, и мы этого не угадываем.

Шаг 4. Подбор для каждой рубрики. Далее работает уже не распознавание, а наш алгоритм подбора. Он знает структуру каталога и для каждой рубрики подбирает соответствующие фотографии.

Вся обработка выполняется автоматически, сразу для всего архива. Ни один человек не просматривал эти полмиллиона фотографий вручную — это было бы физически невозможно.

Что это дает мастерам и салонам

Ничего делать не нужно. Релевантные фото во всех рубриках получили все анкеты, на любом тарифе, автоматически. Теги больше проставлять не нужно, кнопка «#Теги» в портфолио на подбор не влияет.

Выбор владельца анкеты всегда важнее. Если выбор ИИ в какой-либо рубрике мастера не устраивает, он может выбрать фотографии сам в специальном разделе кабинета. Пошаговая инструкция — в статье «Как настроить фото анкеты для каждой рубрики каталога».

Старые теги не пропали. Все, что мастера успели разметить вручную, перенесено в новый раздел как их собственный выбор.

Что дальше

Распознавание уже работает по всему каталогу, но мы продолжаем его совершенствовать: уточняем признаки для направлений, где их пока недостаточно, и следим за рубриками, которые чаще всего остаются неполными. Если вы видите в своей карточке фото, которое явно не соответствует теме рубрики, — исправьте его в разделе «Фото в категориях» или напишите нам на namaste@barb.ua: такие примеры помогают нам улучшать алгоритм.

А если в вашем портфолио до сих пор нет фото для рубрик, в которых показывается ваша анкета, — сейчас самое время их добавить.