Аудиобейджи и сервис речевой аналитики

Идея

Продавец в магазине носит небольшой бейдж с микрофоном. В конце дня ставит его на докстанцию — запись разговоров автоматически выгружается и обрабатывается. Руководитель получает аналитику: как работал продавец, соответствовал ли скриптам, каково было настроение покупателей.

Проект коммерческий, разрабатывается на продажу. Интерес со стороны рынка уже есть.

Железо

Бейдж построен на Arduino с микрофоном — очень компактный корпус, разработанный и напечатанный на 3D-принтере. Запись ведётся на SD-карту отрезками по 1 минуте (для надёжности). Итерации по корпусу: чтобы добиться нужного размера и точной подгонки, напечатали несколько версий.

Докстанция — зарядка через пого-пины. В планах: передача записей тоже через докстанцию, чтобы убрать из бейджа WiFi-модуль и снизить себестоимость.

Конвейер обработки

После выгрузки записи проходят цепочку обработки:

1. Склейка — минутные фрагменты объединяются в единую запись рабочего дня
2. Транскрибация — Whisper переводит аудио в текст
3. Детекция диалогов — LLM определяет границы разговоров с покупателями
4. Вырезка — каждый диалог извлекается из исходной записи отдельным файлом с транскрипцией
5. Разделение ролей — LLM определяет кто продавец, кто покупатель
6. Оценка по скриптам — LLM анализирует работу продавца и выдаёт результат

Что анализируется

По каждому диалогу система выдаёт:

• Соответствие скриптам продаж
• Вежливость продавца
• Настроение покупателя
• Общая тональность диалога
• Наличие нецензурной лексики
• Итог сделки: продажа / допродажа / отказ

Веб-приложение

Под аналитику разработано веб-приложение — руководитель видит сводку по каждому продавцу, может прослушать конкретный диалог и прочитать его транскрипцию.

Статус

Проект в активной разработке. Железо собрано, конвейер обработки работает, идёт доработка веб-приложения и итерации по корпусу.