Распознавание внутренней речи — перспективная технология, которую можно применять для разработки интерфейсов мозг-компьютер и помогать людям, страдающим нейродегенеративными заболеваниями. Внутреннее произношение можно восстановить по данным электроэнцефалограммы, поскольку она позволяет регистрировать специфическую активность, связанную с этим процессом.
Теперь исследователи разработали алгоритм извлечения признаков и классификации русских фонем по электроэнцефалограмме, записанной во время внутреннего произношения. Такие работы активно ведутся в других странах, но в открытых источниках нет информации о результатах для фонем русского языка.
«Мы провели эксперименты по классификации фонем русского языка при внутреннем проговаривании на основе данных электроэнцефалограммы (ЭЭГ) и получили результаты, сравнимые с результатами в зарубежных исследованиях, — объясняет программист из МГУ Евгений Ильюшин. — Главным результатом стала продемонстрированная возможность распознавания фонем русского языка по данным ЭЭГ. Это шаг к решению задачи распознавания слов и предложений, что фактически позволит „читать мысли“ человека».
Конечная цель исследований — создание полноценного устройства, которое могло бы помочь людям с нарушениями речи. Чтобы его разработать нужно улучшить способ сбора данных — разместить большее количество электродов в области интереса, а также улучшить алгоритмы обработки.
Другой проблемой при создании такого устройства остаются артефакты записи. Например, если человек двигается или даже моргает, это сказывается на записи и классификация фонем становится невозможной. Решением этой проблемы может стать одновременный сбор данных с нескольких различных устройств.