
px.here
Ученые-инженеры из Колумбии создали систему, которая способна переводить мысли в понятную, узнаваемую речь. Анализируя мозговую деятельность, технология может реконструировать слова, которые можно слышать с беспрецедентной четкостью.
Инновационная технология, которая использует синтезаторы речи и искусственный интеллект, может привести к новым способам взаимодействия компьютера с мозгом. По мнению ученых, это первый шаг, сделанный на пути помощи людям, не способным говорить, например, страдающим от амиотрофического латерального склероза или выздоравливающим после инсульта.
Результаты научной работы, возглавляемой доктором Нима Месгарани из Института нейробиологии и поведения им. Мортимера Б. Цукермана при Колумбийском университете, были опубликованы в Scientific Reports.
Десятилетия исследований показали, что, когда люди говорят или даже о чем-то думают, в их мозгу возникает характерная активность. Определенная (но узнаваемая) схема сигналов также возникает, когда мы слушаем, как кто-то говорит, или воображаем, что слушаем. Эксперты, пытаясь записать и расшифровать эти сигналы, считают, что в будущем мысли не должны оставаться скрытыми внутри мозга. Вместо этого, при желании, они могут быть переведены в устную речь.
Однако совершить этот прорыв оказалось непросто. Ранние попытки доктора Месгарани расшифровать сигналы мозга были сосредоточены на простых компьютерных моделях, которые анализировали спектрограммы, являющиеся визуальным представлением звуковых частот.
Но из-за того, что этот подход не дал ничего похожего на понятную речь, команда ученых решила использовать вокодер, компьютерный алгоритм, который может синтезировать речь после обучения.
«Это та же технология, которая используется Amazon Echo и Apple Siri для устного ответа на наши вопросы», - пояснил исследователь.
Во время работы ученые попросили пациентов, страдающих эпилепсией, уже перенесших операцию на головном мозге, выслушать предложения разных людей, в то время как они фиксировали их мозговую активность.
Затем исследователи попросили тех же пациентов прослушать записи с воспроизведением цифр от 0 до 9. В ходе этого эксперимента были получены сигналы мозга, которые затем можно было бы пропустить через вокодер. Звук, производимый вокодером в ответ на эти сигналы, анализировался и очищался с помощью нейронных сетей, вроде искусственного интеллекта, который имитирует структуру нейронов в биологическом мозге.
Конечным результатом был роботизированный голос, повторяющий последовательность чисел. Чтобы проверить точность записи, доктор Месгарани и его команда поручили людям прослушать запись и сообщить, что они услышали.
«Мы обнаружили, что люди могут понимать и повторять звуки примерно в 75% случаев, что значительно превосходит любые предыдущие результаты», - сказал Месгарани. Улучшение разборчивости было особенно очевидным при сравнении новых записей с более ранними попытками, основанными на спектрограмме.
Теперь ученый и его команда планируют протестировать более сложные слова и предложения и выполнить те же тесты для сигналов мозга, возникающих, когда человек говорит или думает.
«Так, если человек думает, например, “Мне нужен стакан воды”, наша система может воспринимать сигналы мозга, генерируемые этой мыслью, и превращать их в синтезированную словесную речь», - пояснил Месгарани. «Это изменило бы правила игры. Любой, кто потерял способность говорить из-за травмы или болезни, смог бы получить новый шанс слиться с окружающим миром», - заключил он.
Материал подготовила Татьяна Артюхова
Больше новостей и ближе к сути? Заходите на ленту в Телеграм!
Добавляйте CСб в свои источники ЯНДЕКС.НОВОСТИ.
ЧИТАЙТЕ ТАКЖЕ:
//Партнер Гнездо.ру
Картина дня

Собянин: на подлете к Москве сбили еще два беспилотника
Кремль ожидает на параде Победы 29 иностранных лидеров

Губернатор Филимонов теперь взялся за вейпы и никотин

Кадыров снова заговорил о своей отставке и сказал, что часто думает о преемнике

В работе операторов связи в Москве начались сбои в связи с предстоящими празднованиями

Мария Шукшина о судах с сестрой: "Кто чем наполнен, тот то и выплескивает"

Ксения Собчак: "За Урганта тоже просили, но не получилось вернуть его в эфир, как Козловского"

//Новости giraff.io
Наши публикации

Кадыров заявил, что его слова о желании уйти в отставку многие неправильно поняли
Казахстан закрыл въезд ряду российских политиков, чиновников и общественных деятелей

Азербайджан потребовал объяснений в связи с отказом своему депутату во въезде в Россию

Трамп снова не исключил использования военной силы для аннексии Гренландии

Лингвистическая препарация Дональда Трампа

«Известия»: силовики считают, что раскрыли схему хищений при закупках в Китае липовых "глушилок" для дронов

В Белоруссии по просьбе США освободили из колонии Зенковича, планировавшего физическое устранение Лукашенко

Слухи, скандалы, сплетни
Мария Шукшина о судах с сестрой: "Кто чем наполнен, тот то и выплескивает"

Избранница Тимати перестала скрывать беременность

Бывшая жена Ромы Жукова о браке с ним: "Я была как пленница, как птица в клетке"

Агата Муцениеце выходит замуж

Шоубиз
Shaman решил зарегистрировать товарный знак «Я русский» в том числе для производства алкоголя

Бывшая жена Сердюкова впервые высказалась о его романе с Ксенией Бородиной

Наука
«Яндекс» планирует заняться созданием человекоподобных роботов

Корабль Blue Origin с Кэтти Перри и невестой Безоса совершил полет в космос

Застрявшие на МКС астронавты вылетели на Землю после 9 месяцев в космосе

SpaceX второй раз с начала года провела неудачный пуск корабля Starship

Хайтек
В ФСБ рекомендовали откаться от использования российского браузера "Спутник"

Ъ: В российских кнопочных телефонах обнаружили уязвимость, которая позволяет управлять телефоном посторонним

Нидерландская Yandex N.V. вышла из состава акционеров "Яндекса"

Дмитрий Песков: блокировать YouTube не планируется

Туризм
Песков: В Кремле не видят новизны в заявлениях Трампа

За поездки за рубеж предложили ввести сбор

Болгария внесла изменения в список документов на получение визы

Пакистан отменил плату за визы для россиян

Спорт
Дегтярев уверен, что МОК восстановит Олимпийский комитет России в ближайшее время

Александр Емельяненко рассказал, что пока не может ходить после операции на позвоночнике

34-летнего хоккеиста «Ак Барса» и «Спартака» Федора Малыхина нашли мертвым в его квартире

Артем Дзюба вызван в сборную России впервые с 2021 года

Ирина Винер объявила об уходе с поста главного тренера сборной РФ по художественной гимнастике

На борту разбившегося в Вашингтоне самолета находились представители российской школы фигурного катания

Вкусный раздел
Юлия Дианова: Не просто завтрак

Дарья Близнюк: «Заготовки от Даши. Вкусно, как ни «крути»!

Анна Аксёнова: Муссовые торты. Легче легкого!

Софи Дюпюи-Голье: Мир хлеба. 100 лучших рецептов домашнего хлеба со всего мира
