
px.here
Ученые-инженеры из Колумбии создали систему, которая способна переводить мысли в понятную, узнаваемую речь. Анализируя мозговую деятельность, технология может реконструировать слова, которые можно слышать с беспрецедентной четкостью.
Инновационная технология, которая использует синтезаторы речи и искусственный интеллект, может привести к новым способам взаимодействия компьютера с мозгом. По мнению ученых, это первый шаг, сделанный на пути помощи людям, не способным говорить, например, страдающим от амиотрофического латерального склероза или выздоравливающим после инсульта.
Результаты научной работы, возглавляемой доктором Нима Месгарани из Института нейробиологии и поведения им. Мортимера Б. Цукермана при Колумбийском университете, были опубликованы в Scientific Reports.
Десятилетия исследований показали, что, когда люди говорят или даже о чем-то думают, в их мозгу возникает характерная активность. Определенная (но узнаваемая) схема сигналов также возникает, когда мы слушаем, как кто-то говорит, или воображаем, что слушаем. Эксперты, пытаясь записать и расшифровать эти сигналы, считают, что в будущем мысли не должны оставаться скрытыми внутри мозга. Вместо этого, при желании, они могут быть переведены в устную речь.
Однако совершить этот прорыв оказалось непросто. Ранние попытки доктора Месгарани расшифровать сигналы мозга были сосредоточены на простых компьютерных моделях, которые анализировали спектрограммы, являющиеся визуальным представлением звуковых частот.
Но из-за того, что этот подход не дал ничего похожего на понятную речь, команда ученых решила использовать вокодер, компьютерный алгоритм, который может синтезировать речь после обучения.
«Это та же технология, которая используется Amazon Echo и Apple Siri для устного ответа на наши вопросы», - пояснил исследователь.
Во время работы ученые попросили пациентов, страдающих эпилепсией, уже перенесших операцию на головном мозге, выслушать предложения разных людей, в то время как они фиксировали их мозговую активность.
Затем исследователи попросили тех же пациентов прослушать записи с воспроизведением цифр от 0 до 9. В ходе этого эксперимента были получены сигналы мозга, которые затем можно было бы пропустить через вокодер. Звук, производимый вокодером в ответ на эти сигналы, анализировался и очищался с помощью нейронных сетей, вроде искусственного интеллекта, который имитирует структуру нейронов в биологическом мозге.
Конечным результатом был роботизированный голос, повторяющий последовательность чисел. Чтобы проверить точность записи, доктор Месгарани и его команда поручили людям прослушать запись и сообщить, что они услышали.
«Мы обнаружили, что люди могут понимать и повторять звуки примерно в 75% случаев, что значительно превосходит любые предыдущие результаты», - сказал Месгарани. Улучшение разборчивости было особенно очевидным при сравнении новых записей с более ранними попытками, основанными на спектрограмме.
Теперь ученый и его команда планируют протестировать более сложные слова и предложения и выполнить те же тесты для сигналов мозга, возникающих, когда человек говорит или думает.
«Так, если человек думает, например, “Мне нужен стакан воды”, наша система может воспринимать сигналы мозга, генерируемые этой мыслью, и превращать их в синтезированную словесную речь», - пояснил Месгарани. «Это изменило бы правила игры. Любой, кто потерял способность говорить из-за травмы или болезни, смог бы получить новый шанс слиться с окружающим миром», - заключил он.
Материал подготовила Татьяна Артюхова
Больше новостей и ближе к сути? Заходите на ленту в Телеграм!
Добавляйте CСб в свои источники ЯНДЕКС.НОВОСТИ.
ЧИТАЙТЕ ТАКЖЕ:
//Партнер Гнездо.ру
Картина дня

В Госдуме предложили отменить оценки по некоторым школьным предметам
Путин отправил в отставку Старовойта с поста главы Минтранса

Главу азербайджанской диаспоры Подмосковья Эльшана Ибрагимова лишили гражданства России

Движение-иноагент «Голос» объявило о прекращении деятельности в России

Бывшему замминистра обороны РФ Павлу Попову предъявили новые обвинения

Кэти Перри и Орландо Блум подтвердили расставание

Ксения Собчак вмешалась в конфликт Инстасамки с Дорой и Мэйби Бэйби

//Новости giraff.io
Наши публикации

Новый российский беспилотник «Альтиус» упал на дом в Казани при испытательном полете
КПРФ против «Спаса» и Никиты Хрущёва

Росавиация: за выходные почти 500 рейсов были отменены, почти 2 тысячи — задержаны

Язык протокола

Что известно о россиянах, задержанных силовиками в Азербайджане, и к чему приведет этот ответ Баку

В Ростовской области решили ограничить мобильный интернет из-за атак БПЛА совсем

Захарова предостерегла россиян, собирающихся в Азербайджан, и выразила надежду на лучшее

Слухи, скандалы, сплетни
Андрей Мерзликин развелся с женой после 20 лет брака

Федор Смолов извинился за избиение двух посетителей «Кофемании» и утверждает о шантаже

Филипп Киркоров о проблемах со здоровьем: "Рука еще побаливает, но в целом все нормально"

Кэти Перри и Орландо Блум подтвердили расставание

Шоубиз
Ксения Бородина вышла замуж за Николая Сердюкова

Виктория Боня о своем восхождении на Эверест: "Удивило молчание коллег по шоу-бизнесу"

Наука
Роскосмос сообщил об устранении утечки воздуха на модуле "Звезда" МКС, о которой известно с 2019 года

«Яндекс» планирует заняться созданием человекоподобных роботов

Корабль Blue Origin с Кэтти Перри и невестой Безоса совершил полет в космос

Застрявшие на МКС астронавты вылетели на Землю после 9 месяцев в космосе

Хайтек
В сеть утекли 16 млрд паролей от аккаунтов Apple, Google и других сервисов

Разработчики ПО для российской ОС «Аврора» подали заявление о банкротстве

В ФСБ рекомендовали откаться от использования российского браузера "Спутник"

Ъ: В российских кнопочных телефонах обнаружили уязвимость, которая позволяет управлять телефоном посторонним

Туризм
Песков: В Кремле не видят новизны в заявлениях Трампа

За поездки за рубеж предложили ввести сбор

Болгария внесла изменения в список документов на получение визы

Пакистан отменил плату за визы для россиян

Спорт
Футболист Диогу Жота погиб в автокатастрофе

Совладельцу и директору ФК «Торпедо» предъявлены обвинения в подкупе судей

Квинси Промеса экстрадировали из Дубая в Нидерланды

Владельца и директора футбольного клуба «Торпедо» задержали

Футбольный клуб «Химки» объявил о своей безвременной кончине по причине отсутствия денег

Роман Ротенберг уйдет с поста главного тренера хоккейного клуба СКА

Вкусный раздел
Юлия Дианова: Не просто завтрак

Дарья Близнюк: «Заготовки от Даши. Вкусно, как ни «крути»!

Анна Аксёнова: Муссовые торты. Легче легкого!

Софи Дюпюи-Голье: Мир хлеба. 100 лучших рецептов домашнего хлеба со всего мира
