Фото у каталозі тепер підбирає штучний інтелект

Коли клієнт шукає майстра у каталозі Barb.ua, він насамперед дивиться на фото. На сторінці «Манікюр» він хоче бачити нігті, на сторінці «Масаж» — масаж, а не випадкову підбірку з портфоліо. Ми давно знали, що релевантні фото у картці дають більше звернень, але змусити це працювати в масштабі всього каталогу вдалося лише зараз.

Чому ручне тегування не спрацювало

Спочатку ми запропонували майстрам і салонам розмічати фото тегами вручну: скопіювати тег зі сторінки рубрики, зайти у портфоліо, проставити його потрібним фото, зберегти, дочекатися модерації. Ми чесно сподівалися, що це запрацює, і паралельно наші модератори розмічали фото вручну для анкет з найбільшою кількістю фото, щоб підвищити якість наших категорій.

Але результат не виправдав наших очікувань.

Переважна більшість майстрів не користувався розміткою. Багато з тих, хто користувався, ставили один і той самий список тегів для всіх фото (наприклад, у фото з жіночою стрижкою та вечірньою зачіскою міг бути проставлений тег “стрижка кроп”).

Розмітка фото модераторами займала багато часу - приблизно 30 хв. на 50 фото. Якщо світлини, на який було витрачено час модератора, видалялись, проведена робота ставала марною. Всього за півтора року модератори розмітили близько 180 тис. фото, користувачі - близько 4200. Загалом релевантні фото виводилися у близько 2 тис. анкет.

У підсумку у картках у каталозі й далі показувались перші фото з портфоліо, які нерідко не мали стосунку до рубрики. Дві тисячі ретельно розмічених анкет не змінювали картину каталогу, у якому понад 15 тис. активних профілів.

Ми зробили висновок: правильний результат мають отримувати всі анкети одразу, без жодних дій з боку власника. А хто хоче — має мати змогу поправити результат руками за хвилину, не за пів години.

Масштаб задачі

У портфоліо майстрів і салонів на Barb.ua більше півмільйона фотографій. Каталог налічує понад тисячу рубрик: від широких («Фарбування волосся») до дуже вузьких («Вуальне мелірування», «Епіляція верхньої губи»). До того ж одна анкета зазвичай присутня у десятках рубрик одночасно: косметолог зі 50  послугами у прайсі — у 50  рубриках плюс спеціальність.

Отже, потрібно було не просто «розпізнати, що на фото», а для кожної з п’ятнадцяти тисяч анкет і кожної з її рубрик підібрати чотири найкращі фото саме на цю тему — і робити це наново щоразу, коли майстер додає або видаляє фото.

Ми обробили весь архів портфоліо і запустили щоденну обробку нових. Фото, завантажене сьогодні, завтра вже бере участь у підборі.

Як це працює

Ми не розкриваємо технічні деталі — це наша розробка, у яку вкладено багато місяців роботи. Але загальну логіку пояснити варто, щоб було зрозуміло, чому результат саме такий.

Крок 1. Про що фото. Кожне фото штучний інтелект відносить до однієї з кількох десятків візуальних тем: манікюр, тату, стрижка тощо. Окремо розпізнаються фото, які не є роботами: інтер'єри салонів, портрети майстрів, сертифікати й дипломи.

Крок 2. Чи годиться фото для картки. Тут за певними критеріями вибираються тільки якісні фото, які підуть на наступний етап.

Крок 3. Що саме на фото. Усередині кожної теми фото отримує детальні ознаки — те, що відрізняє «складне фарбування» від «однотонного», «ламінування брів» від «корекції» тощо. Ми склали й узгодили кілька сотень таких ознак, окремо для кожного напряму каталогу, і кожна з них описана так, як вона виглядає на фото, а не як називається у прайсі: бренд косметики чи тип кислоти на знімку не видно, і ми цього не вгадуємо.

Крок 4. Підбір для кожної рубрики. Далі працює вже не розпізнавання, а наш алгоритм підбору. Він знає структуру каталогу і для кожної рубрики пібрирає відповідні фото.

Уся обробка виконується автоматично, одразу для всього архіву. Жодна людина не переглядала ці пів мільйона фото вручну — це було б фізично неможливо.

Що це дає майстрам і салонам

Нічого робити не потрібно. Релевантні фото в усіх рубриках отримали всі анкети, на будь-якому тарифі, автоматично. Теги проставляти більше не треба, кнопка «#Теги» у портфоліо на підбір не впливає.

Вибір власника анкети завжди важливіший. Якщо вибір ШІ у якійсь рубриці майстра не влаштовує, він може обрати фото сам у спеціальному розділі кабінету. Покрокова інструкція — у статті «Як налаштувати фото анкети для кожної рубрики каталогу».

Старі теги не пропали. Усе, що майстри встигли розмітити вручну, перенесено у новий розділ як їхній власний вибір.

Що далі

Розпізнавання вже працює на всьому каталозі, але ми продовжуємо його вдосконалювати: уточнюємо ознаки для напрямів, де їх поки замало, і стежимо за рубриками, які найчастіше лишаються неповними. Якщо ви бачите у своїй картці фото, яке явно не на тему рубрики, — поправте його у розділі «Фото в категоріях» або напишіть нам на namaste@barb.ua: такі приклади допомагають нам покращувати алгоритм.

А якщо у вашому портфоліо досі немає фото для рубрик, у яких показується ваша анкета, — зараз найкращий момент їх додати.