Вчені придумали, як можна озвучити людські думки

Дослідники розробили нейронний декодер – механізм, який може перетворити діяльність мозку на прості речення. Це відкриття може привести до появи нових інструментів для людей, які не мають змоги говорити.

AliExpress WW
AliExpress WW
AliExpress WW
AliExpress WW
AliExpress WW

Про це йдеться у статті, опублікованій в журналі Nature.

Команда з Каліфорнійського університету в Сан-Франциско, до якої увійшли нейрохірург Едвард Чанг, вчений-комп’ютерник Гопала Ануманчіпаллі і аспірант Джош Шартьє, пояснила, як вони створили «нейронний декодер».

«Наша головна мета полягала у створенні «штучного голосового каналу». Не справжнього фізичного, а комп’ютерного, який може генерувати повні речення, а не просто слова. Наша мета – допомогти тим, хто не може говорити», – сказав Шартьє.

Команда працювала з п’ятьма добровольцями в Центрі епілепсії UCSF, яким імплантували електроди на поверхню їх мозку при підготовці до нейрохірургії для контролю над нападами. Вони вголос читають сотні речень, у той час як дослідники стежать за активністю в мовних центрах мозку, які контролюють здатність людей говорити. Наступним кроком було декодування мозкових сигналів.

Вчені придумали, як можна озвучити людські думки

Watsons UA

Вчені змогли перетворити сигнали мозку, отримані за допомогою цієї сітки електродів, встановленої прямо на головний мозок і призначеної для запису активності мозку, на людську мову

Watsons UA

За словами Шартьє, дослідники використовували машинне навчання для імітації рухів голосового каналу людини на основі сигналів, отриманих від мозку добровольців, і перетворили ці змодельовані руху на синтезовану мову.

Потім дослідники підготували кілька типових речень і попросили тестувальників, використовуючи Amazon Mechanical Turk, ідентифікувати окремі слова і транскрибувати повні речення. Прості згенеровані речення виявилися зрозумілими для тестувальників, але більш складні фрази було важко зрозуміти.

«Це дійсно важливий крок, але попереду ще довгий шлях, щоб синтезоване мовлення стало легко зрозумілим», – сказав Марк Слуцькі, невролог з Північно-Західного університету.

Хостинг від HyperHost
Хостинг от HyperHost

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *

Top