«Сбер» учит ИИ слушать и говорить одновременно — Full Duplex…

«Сбер» учит ИИ слушать и говорить одновременно — Full Duplex вместо игры в рацию

«Сбер» развивает направление Full Duplex-моделей. Идея в том, чтобы ассистент не ждал, пока человек договорит, а слушал и параллельно формировал ответ — ровно так, как это делают люди в живом разговоре.

Сегодняшние голосовые помощники работают по принципу рации: сначала вы говорите, потом система распознаёт речь, потом думает, потом отвечает. Отсюда неловкие паузы, невозможность перебить и ощущение, что общаешься с автоответчиком. Full Duplex ломает эту очередь: обработка идёт непрерывно, ассистент может отреагировать на середине фразы или уступить, если его перебили.

Как области применения называют умные колонки, роботов и цифровых аватаров. Для колонок это убирает главное раздражение — необходимость дожидаться своей очереди. Для роботов важнее другое: машина, которая не может прервать действие по голосовой команде на полуслове, в быту небезопасна.

Технически задача непростая: система должна одновременно распознавать входящий поток, генерировать ответ и решать, когда вступать, а когда молчать. Ошибётся в последнем — и получится собеседник, который постоянно перебивает.