Sber Salute Speech
Об инструменте
Sber Salute Speech даёт агенту распознавание и синтез речи от Сбера. С ним агент понимает голосовые сообщения, аудиозаписи и звуковую дорожку видеофайлов: получает текстовую расшифровку и дальше работает с ней как с обычным сообщением. Синтез речи превращает текст ответа в аудио.
Действия
Действие | Что делает |
Распознавание речи (Speech To Text) | Преобразует аудио, голосовые сообщения и звуковую дорожку видео в текст |
В контекст агента попадает только расшифровка — сам аудио- или видеофайл модель не видит.
Подключение
Авторизация не нужна: подключите инструмент агенту в разделе Инструменты, как это сделать — в разделе Как добавить инструменты в агента. К шаблонам Маркетплейса, где инструмент предусмотрен, он подключается автоматически. Чтобы пользователи могли прикреплять записи, у агента должна быть включена настройка Загрузка файлов — без неё тип «Аудио» и «Видео» в чате не предлагается.
Что приложить
Аудио: mp3, wav, ogg, opus, flac, m4a, aac — до 150 МБ на файл. Голосовые сообщения из Telegram и MAX обрабатываются как обычные аудиофайлы.
Видео: mp4, mov, mkv, webm, avi — до 200 МБ на файл. Платформа извлекает звуковую дорожку сразу при загрузке и отправляет на распознавание только её; видеоряд не обрабатывается. Видеосообщения-кружки Telegram принимаются так же.
До 20 файлов за одну загрузку.
По ссылке, в виджете и через API аудиофайл можно не прикладывать, а дать на него прямую http(s)-ссылку. Видео принимается только скрепкой.
Лимит 200 МБ покрывает часовую запись в сжатом виде — например, облачную запись созвона в 480–720p. Исходники с камеры и записи 1080p не проходят.
Ограничения мессенджеров
В Telegram и MAX действует лимит самого мессенджера, и итоговый предел — меньший из двух: лимита инструмента и лимита канала.
Канал | Аудио | Видео |
Ссылка, виджет, API | 150 МБ | 200 МБ |
MAX | 150 МБ; запись не длиннее 60 минут — ограничение мессенджера | 200 МБ; формат avi MAX не поддерживает — такой файл он отклонит сам |
Telegram | 20 МБ | 20 МБ |
Один и тот же агент в двух мессенджерах имеет разный предельный размер файла — часовая запись, которая пройдёт в MAX, в Telegram не пройдёт. Если файл укладывается в лимит инструмента, но превышает лимит канала, вы увидите ошибку.
Ограничения
Из видео используется только звук: мимику, жесты, слайды и демонстрацию экрана агент не анализирует.
Разметка реплик по говорящим не выполняется.
Если что-то пошло не так
Что увидите | Что делать |
«Размер файла превышает 150 МБ»/ «…200 МБ» | Замените аудио- или видеофайл на меньший |
«Формат файла не поддерживается» | Проверьте расширение — см. список форматов выше |
«В файле нет звуковой дорожки. Загрузите запись со звуком» | В видео нет аудио — распознавать нечего |
«Не удалось прочитать видеофайл. Повторите попытку или замените файл» | Файл повреждён или докачан не полностью |
«Не удалось обработать запись. Попробуйте ещё раз или загрузите файл меньшего размера» | Извлечение звука не уложилось в отведённое время; кредиты не списаны |
«Запись слишком длинная для распознавания» | Извлечённая дорожка больше 150 МБ — разделите запись; кредиты не списаны |