Представления, основанные на ожиданиях и акустических нейронных сетях, улучшают распознавание музыки по активности мозга.

arXiv:2603.03190v2 Тип объявления: замена-кросс Аннотация: Во время прослушивания музыки кортикальная активность кодирует как акустическую информацию, так и информацию, связанную с ожиданиями. Предыдущие работы показали, что представления ИНС напоминают кортикальные представления и могут служить в качестве сигналов-контролеров для распознавания ЭЭГ. Здесь мы показываем, что различение акустических и связанных с ожиданиями представлений ИНС в качестве целевых значений улучшает идентификацию музыки на основе ЭЭГ. Модели, предварительно обученные предсказывать любое из этих представлений, превосходят необученные базовые модели, а их комбинирование дает взаимодополняющие преимущества, превосходящие сильные ансамбли, сформированные путем изменения случайных инициализаций. Эти результаты показывают, что тип представления учителя влияет на последующую производительность и что обучение представлений может управляться нейронным кодированием. Эта работа указывает на перспективы развития предсказательного музыкального познания и нейронного декодирования. Наше представление ожиданий, вычисленное непосредственно из необработанных сигналов без ручной разметки, отражает предсказательную структуру, выходящую за рамки начала или высоты звука, что позволяет исследовать многослойное предсказательное кодирование для различных стимулов. Возможность масштабирования до больших и разнообразных наборов данных дополнительно указывает на потенциал для разработки универсальных моделей ЭЭГ, основанных на принципах кортикального кодирования.

Источник: arxiv.org