
px.here
Ученые-инженеры из Колумбии создали систему, которая способна переводить мысли в понятную, узнаваемую речь. Анализируя мозговую деятельность, технология может реконструировать слова, которые можно слышать с беспрецедентной четкостью.
Инновационная технология, которая использует синтезаторы речи и искусственный интеллект, может привести к новым способам взаимодействия компьютера с мозгом. По мнению ученых, это первый шаг, сделанный на пути помощи людям, не способным говорить, например, страдающим от амиотрофического латерального склероза или выздоравливающим после инсульта.
Результаты научной работы, возглавляемой доктором Нима Месгарани из Института нейробиологии и поведения им. Мортимера Б. Цукермана при Колумбийском университете, были опубликованы в Scientific Reports.
Десятилетия исследований показали, что, когда люди говорят или даже о чем-то думают, в их мозгу возникает характерная активность. Определенная (но узнаваемая) схема сигналов также возникает, когда мы слушаем, как кто-то говорит, или воображаем, что слушаем. Эксперты, пытаясь записать и расшифровать эти сигналы, считают, что в будущем мысли не должны оставаться скрытыми внутри мозга. Вместо этого, при желании, они могут быть переведены в устную речь.
Однако совершить этот прорыв оказалось непросто. Ранние попытки доктора Месгарани расшифровать сигналы мозга были сосредоточены на простых компьютерных моделях, которые анализировали спектрограммы, являющиеся визуальным представлением звуковых частот.
Но из-за того, что этот подход не дал ничего похожего на понятную речь, команда ученых решила использовать вокодер, компьютерный алгоритм, который может синтезировать речь после обучения.
«Это та же технология, которая используется Amazon Echo и Apple Siri для устного ответа на наши вопросы», - пояснил исследователь.
Во время работы ученые попросили пациентов, страдающих эпилепсией, уже перенесших операцию на головном мозге, выслушать предложения разных людей, в то время как они фиксировали их мозговую активность.
Затем исследователи попросили тех же пациентов прослушать записи с воспроизведением цифр от 0 до 9. В ходе этого эксперимента были получены сигналы мозга, которые затем можно было бы пропустить через вокодер. Звук, производимый вокодером в ответ на эти сигналы, анализировался и очищался с помощью нейронных сетей, вроде искусственного интеллекта, который имитирует структуру нейронов в биологическом мозге.
Конечным результатом был роботизированный голос, повторяющий последовательность чисел. Чтобы проверить точность записи, доктор Месгарани и его команда поручили людям прослушать запись и сообщить, что они услышали.
«Мы обнаружили, что люди могут понимать и повторять звуки примерно в 75% случаев, что значительно превосходит любые предыдущие результаты», - сказал Месгарани. Улучшение разборчивости было особенно очевидным при сравнении новых записей с более ранними попытками, основанными на спектрограмме.
Теперь ученый и его команда планируют протестировать более сложные слова и предложения и выполнить те же тесты для сигналов мозга, возникающих, когда человек говорит или думает.
«Так, если человек думает, например, “Мне нужен стакан воды”, наша система может воспринимать сигналы мозга, генерируемые этой мыслью, и превращать их в синтезированную словесную речь», - пояснил Месгарани. «Это изменило бы правила игры. Любой, кто потерял способность говорить из-за травмы или болезни, смог бы получить новый шанс слиться с окружающим миром», - заключил он.
Материал подготовила Татьяна Артюхова
Больше новостей и ближе к сути? Заходите на ленту в Телеграм!
Добавляйте CСб в свои источники ЯНДЕКС.НОВОСТИ.
ЧИТАЙТЕ ТАКЖЕ:
//Партнер Гнездо.ру
Картина дня

«Разочарованный Трамп» сокращает срок своего ультиматума до 10-12 дней начиная с сегодня
Губернатор Красноярского края объясняет отключение мобильного интернета "усилением мер безопасности"

Депутат Боярский назвал "сомнительным вбросом" сообщения о блокировке WhatsApp в России с 1 августа

В Астрахани обрушился подъезд жилого дома

Прапорщик, который вел «пораженческие разговоры» с подчиненными, оштрафован на 2,5 млн и отправится на СВО

Муж Леры Кудрявцевой обратился к критикам: "Убогие, идите варите борщ на трехметровой кухне!"

Прилучный проиграл Агате Муцениеце в суде по вопросу о месте проживания сына, но тяжба будет продолжаться

//Новости giraff.io
Наши публикации

Россиян предупредили о перспективе стать фигурантом дела о терроризме даже при покупке овощей в палатке
Минцифры и операторы обсуждают возможность сохранения доступа к критически важным сайтам во время ограничений мобильного интернета

Власти Петербурга удалили свое сообщение об отмене парада на День ВФМ - не они организаторы, не им и сообщать

С августа переходят на четырехдневную рабочую неделю КАМАЗ и ГАЗ, ВАЗ присоединится к ним в сентябре

Новый глава «Домодедово» признал, что реквизированный аэропорт по факту обанкротился, но «банкротства мы не допустим»

В Европе готовятся запустить новую систему пограничного контроля - контроль за пребыванием ужесточится

Baza: долго болевший и умерший вчера депутат Тарасенко в день своей кончины проголосовал 11 раз

Слухи, скандалы, сплетни
Муж Леры Кудрявцевой обратился к критикам: "Убогие, идите варите борщ на трехметровой кухне!"

Блогеру Subo заочно предъявлено обвинение в уклонении от уплаты налогов

Адвокат Прилучного заявила, что против Агаты Муцениеце возбуждено уголовное дело

Прилучный проиграл Агате Муцениеце в суде по вопросу о месте проживания сына, но тяжба будет продолжаться

Шоубиз
Ксения Бородина вышла замуж за Николая Сердюкова

Виктория Боня о своем восхождении на Эверест: "Удивило молчание коллег по шоу-бизнесу"

Наука
Роскосмос сообщил об устранении утечки воздуха на модуле "Звезда" МКС, о которой известно с 2019 года

«Яндекс» планирует заняться созданием человекоподобных роботов

Корабль Blue Origin с Кэтти Перри и невестой Безоса совершил полет в космос

Застрявшие на МКС астронавты вылетели на Землю после 9 месяцев в космосе

Хайтек
В сеть утекли 16 млрд паролей от аккаунтов Apple, Google и других сервисов

Разработчики ПО для российской ОС «Аврора» подали заявление о банкротстве

В ФСБ рекомендовали откаться от использования российского браузера "Спутник"

Ъ: В российских кнопочных телефонах обнаружили уязвимость, которая позволяет управлять телефоном посторонним

Туризм
В Европе готовятся запустить новую систему пограничного контроля - контроль за пребыванием ужесточится

Песков: В Кремле не видят новизны в заявлениях Трампа

За поездки за рубеж предложили ввести сбор

Болгария внесла изменения в список документов на получение визы

Спорт
«Оренбург» сыграет вместо исключенного «Торпедо» в новом сезоне РПЛ

МВД назвало размер взятки арбитру за помощь «Торпедо» в решающем матче

«Торпедо» исключили из числа участников РПЛ, но клуб «будет жить»

ФК «Торпедо» будет распущен, если его исключат из РПЛ? Что происходит вокруг клуба

Футболист Диогу Жота погиб в автокатастрофе

Совладельцу и директору ФК «Торпедо» предъявлены обвинения в подкупе судей

Вкусный раздел
Юлия Дианова: Не просто завтрак

Дарья Близнюк: «Заготовки от Даши. Вкусно, как ни «крути»!

Анна Аксёнова: Муссовые торты. Легче легкого!

Софи Дюпюи-Голье: Мир хлеба. 100 лучших рецептов домашнего хлеба со всего мира
