Новости Библиотека Учёные Ссылки Карта сайта О проекте


Пользовательский поиск





10.06.2013

Как снять звуковую информацию без микрофона?

Создана экспериментальная система, позволяющая получить звук при помощи высокоскоростной видеокамеры, направленной на горло человека, пишет ScienceNews.

Как снять звуковую информацию без микрофона? Фото Yuri Arcurs / Tetra Images / Corbis
Как снять звуковую информацию без микрофона? Фото Yuri Arcurs / Tetra Images / Corbis

В Токийском университете Васэда (Япония) разработана экспериментальная система, позволяющая реконструировать аудиоинформацию по видеосъёмке без звука.

Традиционные компьютерные системы, позволяющие без микрофона узнать, какие слова произносит человек, используют данные о движении губ и нижней челюсти. Эта информация обрабатывается специализированным программным обеспечением и преобразовывается в текст. Некоторые системы способны автоматически определять язык, на котором произносятся слова.

Новая технология основана на ином подходе. Она предусматривает применение высокоскоростной видеокамеры, направленной на горло человека. Съёмка вибраций участков шеи и кожи ведётся на скорости в 10 тысяч кадров в секунду. Для сравнения: в кинематографе стандартная частота съёмки и проекции равна 24 кадрам в секунду.

Полученная видеозапись обрабатывается на компьютере при помощи специальных алгоритмов и преобразовывается в аудиосигнал. Пока система позволяет интерпретировать только отдельные слова, но в перспективе разработчики надеются добиться возможности распознавания целых предложений.

Как снять звуковую информацию без микрофона? Иллюстрация Токийского университета Васэда
Как снять звуковую информацию без микрофона? Иллюстрация Токийского университета Васэда

Методика может пригодиться в тех случаях, когда необходимо интерпретировать речь человека в зашумлённой обстановке. Теоретически система позволит фиксировать не только слова и фразы, но и интонацию говорящего, что невозможно при чтении по губам.

Для улучшения реконструкции речи может вестись высокоскоростная видеосъёмка не только горла, но и щёк. Это позволит собрать дополнительные данные об аудиосигнале и повысить точность интерпретации.

Владимир Парамонов


Источники:

  1. compulenta.computerra.ru




Rambler s Top100 Рейтинг@Mail.ru
© Злыгостев Алексей Сергеевич, 2001-2017
При копировании материалов активная ссылка обязательна:
http://nplit.ru 'NPLit.ru: Библиотека юного исследователя'