Биологи научились считывать чириканье и трели с птичьего мозга и воспроизводить их с помощью нейросети
Учёные надеются, что изобретение поможет создать качественные голосовые протезы для людей.
Схема устройства, которое считывает песню птицы с её мозга Изображение Калифорнийского университета
Специалисты Калифорнийского университета создали устройство, которое считывает мозговую активность птицы и воспроизводит её «мысленную» песню с помощью нейросети. Об этом учёные сообщили в журнале Cell.
Сначала учёные получили «рисунок» мозговой активности птиц (они использовали зебровых амадин) с помощью кремниевых электродов, имплантированных в сенсомоторную область. Эта область управляет мышцами голосового аппарата птицы. Полученные данные исследователи загрузили в нейронную сеть — она разбила записанные птичьи песни на мелкие паттерны и связала их с паттернами мозговой активности птиц.
В результате устройство смогло полностью «заменить» голосовой аппарат птицы, воспроизводя её трели по одной только мозговой активности. Причём точность воспроизведения оказалась очень высокой — устройство смогло распознать мельчайшие детали птичьего вокала, вплоть до высоты, тембра и объёмности звуков.
Сравнение точности настоящей песни птицы и считанной с её мозга Изображение Калифорнийского университета
У созданного устройства есть один минус — оно не может работать в режиме реального времени, потому что птицы при пении постоянно меняют вокальный рисунок трелей, подстраиваясь под окружающие условия. Но учёные надеются решить эту проблему, и тогда устройство можно будет использовать для создания качественных голосовых протезов, которые будут считывать активность мозга немого человека и переводить её в естественную речь.
#биология #нейросети #новости