Схема эксперимента Брайана Пэйсли. Электроды на поверхности коры (красные точки справа) записывают сигнал от нейронов в то время, когда человек слушает речь в динамиках (образец вверху слева). Изменение потенциала во времени (внизу справа) накладывается на модель реконструкции звука (внизу в центре). В результате компьютер выдаёт восстановленную спектрограмму (внизу слева). Она показывает распределение мощности акустического сигнала (отражено цветом на диаграмме) в зависимости от частоты (шкала по вертикали, кГц) и времени (по горизонтали, секунды). Затем, используя эту информацию, алгоритм синтезирует слова на основе анализа сигнала от групп нейронов, когда испытуемый не говорит вслух, а только представляет мысленно, что слышит слова, которые хотел бы произнести.
Комментарии