Чат-бот для банка Хлынов: автоматическая генерация изображений через нейросеть

«Хлынов» — универсальный банк с 33-летней историей и широким спектром услуг для частных лиц и бизнеса. Впервые сотрудничали с клиентом в 2020 году при разработке маркетплейса сервисов для бизнеса «Деловые решения». Кейс можно прочитать здесь.  

Затем, компания поручила нам создание своего официального сайта.

Сделать интересный развлекательный сервис для повышения лояльности к бренду, используя нейросети.

Команда «Инфинити» разрабатывала чат-бот, связанный с нейросетью, команда банка продумывала и создавала промты для запросов. После месяца совместной работы бот был протестирован и готов к запуску.

В первой версии бота можно увидеть несколько киновселенных: «Marvel», «DC» и «Гарри Поттер», их выбрали как самые известные, чтобы персонажи были знакомы большей части аудитории.

Создавая промты, мы добивались четкого портретного сходства с фотографией пользователя бота, идеальной генерации костюма и окружения. Оценивали полученные результаты по фотореалистичности, высокой детализации и атмосферности.

Нейросеть, которую мы использовали не дополняет загруженный исходник, а перерисовывает с нуля, поэтому портретное сходство зависит от яркости черт лица, ракурса, деталей одежды и фона. Зачастую смешивались внешность реального человека и киногероя.

По итогу один и тот же текст промта, выверенный и протестированный на большом количестве фотографий срабатывал по-разному. Так, при поиске универсальных параметров, вывели некоторые требования к загружаемым фото.

Пока бот использовался только на мероприятиях, алгоритм простой: выбираешь вселенную и героя, отправляешь фото и получаешь иллюстрацию-гибрид.

При первом запуске за 1 час мы получили 72 заявки.

Каждый запрос из Telegram попадал в административную панель сайта, где менеджер сам загружал фото в нейросеть, скачивал готовый результат и загружал обратно. Затем иллюстрации автоматически отправлялись обратно в чат с пользователем.

Нейросеть, которая создает иллюстрации по описаниям, еще не выпустила официальное API, в связи с этим мы столкнулись со сложностями при настройке автоматической генерации.

Сервис для нейросети не приветствует автоматизацию и использование роботов, поэтому стояла задача воспроизвести реальное поведение человека. Пользователь отправляет запросы в хаотичном порядке, а вот роботы так не умеют, поэтому, мы протестировали несколько вариантов работы кода. 

При отправке запросов раз в 3 минуты, нейросеть начинала высылать капчу, при увеличении частоты запросов был риск получить блокировку аккаунта.

Затем промежуток отправки увеличили до 5 минут, так, за это время обрабатывалось 3 заявки. Капча уже не высылалась, блокировки не было, но это слишком маленькая проходимость для чат-бота.

Мы создали еще один аккаунт и распределяли заявки между ними. На второй учетной записи стали уменьшать время повторных запросов и отправлять их рандомно между 2 и 4 минутами. Так, у нас получилось уменьшить время обработки каждой заявки до порядка 3 минут и увеличить их поток, так как было задействовано сразу два аккаунта. 

Бот можно включать и выключать, а также настраивать модерацию. Изначально была ручная и автоматическая. Мы добавили новый режим — премодерация. Включая его, менеджер может контролировать заявку и отсматривать фото пользователей на предмет цензуры. На этот случай, бот высылает в чат специальное сообщение о замене снимка. 

Основной функционал был добавлен еще при ручном режиме работы, менеджер может изменять текст промтов и добавлять новых героев прямо на сайте. Все это будет уходить в нейросеть и появляться в боте. 

Историей переписки можно также управлять из административной панели, чтобы соблюдать все правила цензуры. Функционал полностью связан с ботом и после сохранения, все изменения отобразятся в нем. 

Пользователи смогли стать не только супергероями и персонажами фильма, но и музыкальными звездами.

В этот раз бот запускали на масштабном «ХлыновФесте» в День молодежи.

Автоматическая генерация изображений в чат-боте, которая позволяет не модерировать процесс постоянно, а просто включать сервис во время событий. Всего через чат-бот обработано 1670 запросов.