Распознавание изображений

Представляем вам наше долгожданное обновление— РАСПОЗНАВАНИЕ ИЗОБРАЖЕНИЙ с полным пониманием контекста! Сейчас Chatterfy умеет работать с изображениями, прекрасно понимать что на них изображено, давать нужный контекст, шутить с мемов, спрашивать зачем лид прислал бесполезное фото и тд, но самое главное - сейчас ИИ может выполнять ЗАДАЧИ и делать ФУНКЦИИ.

Как это было раньше?

ИИ вел диалог, объяснял детали, а затем… лид присылал скриншот с просьбой разобраться. В этот момент разговор передавался оператору, а это значило ожидание в несколько часов.

Теперь же всё изменилось.


Что теперь умеет ИИ?

Самые крутые фишки ИИ распознавания 👇

Теперь ИИ не просто видит изображения — он их ПОНИМАЕТ! И неважно, что именно отправил клиент:

  • умение распознавать ID пользователя — полезно для тех, кто работает с продуктами 1xbet group.

  • умение определять бренды и продукты - например, ИИ сразу поймет, что на скриншоте 1win

  • умение распознавать суть изображения и правильно реагировать на это - например, если отправил скрин из онлайн-банкинга, ИИ разберет, что за банк, какой баланс и ответит в правильном контексте.

  • обработка "странных" изображений - скриншоты, фото, мемы, необычные картинки.

  • распознавание текста на изображениях

  • ну и CАМОЕ КРУТОЕ — вы сами можете задавать ИИ, что искать на изображении и как с этим работать!

Для настройки распознавания изображений вам необходимо перейти в Bot Settings (Настройки бота)

  1. Откройте Bot Settings. В навигации выберите Bot Recognition Settings (Настройки распознавания бота)

  1. Выберите тип распознования В поле вам необходимо выбрать действие: 1) Recognition - распознование голосовых сообщений в диалогах 2)Manual - перевод клиента в мануал после получения голосового сообщения в диалоге 3)Skip - пропуск голосового сообщения (ИИ в диалоге не обратит на него внимания и не будет учитывать в контексте при генерации ответа)

  1. Далее вам необходимо заполнять поля ниже:

  • Задачи (Instructions)

Для создания задачи нажимаем Создать Задачу (Add task)

Далее в поле задач (Task Instruction) нам необходимо прописать промпт, что именно ИИ нужно найти и на что обратить внимание.

Пример: - Find user ID from Exnova - Find product name, usually on logo or footer - Find country of user's account on 1Win

В данном примере мы прописываем: "Find user ID from Exnova" (P.S Вы можете добавлять несколько полей задач)

  • Переходим к созданию Функций (Add Function):

Нажимаем добавить функцию (Add function)

Далее вам необходимо заполнить 4 появившихся поля, а именно:

  • Action - действие, которое выполняет эта функция (для записи в кастомные филды информации со скриншта необходимо выбрать "Записть"-Write)

  • Field - кастомное поле, куда ИИ будем записывать найденную информацию.

Кастомные поля создаются в настройках бота (Bot Settings) - 👉 Ссылка на инструкцию 👈

  • Value - значение (категория информации, которую ИИ должен искать)

Пример: ID, Country, Currency, Logo, Brand name, Customer's name, Deposit amount и т.д.

  • Prompt - промптовая инструкция что конкретно ИИ должен распознать на скриншоте

На данном примере:

Задача (Task Instruction): Find user ID from Exnova

Действие (Action): Записать (Write)

Кастомное поле (Field): Exnova ID

Значение (Value): ID

Промпт (Prompt): User ID from Exnova

Таким образом, мы создали задачу для ИИ и благодаря настроенным функциям, ИИ сможет обнаружить конкретную часть информации со скриншота и автоматически самостоятельно записать обнаруженные данные в кастомные поля.

Вашим менеджерам больше не нужно вручную искать и вносить ID — ИИ сделает все сам при получении изображения! (в последующих обновлениях и просто общение в тексте сможет выполнять функции)

Итого, теперь ИИ умеет: ✅ Передавать данные в Ai Summary и Ai Reply ✅ Автоматически записывать ID в карточку клиента

Last updated