Создана камера, способная записывать голос человека без микрофона

Высокоскоростная камера


В мире существуют различные программы, широко используемые всевозможными спецслужбами и правоохранительными органами, которые по движениям губ, челюстей и мышц лица человека могут распознать те слова, которые произносит этот человек. Наиболее сложные программы могут распознать речь человека на различных языках, но в любом случае, компьютер может с некоторой долей вероятности правильно воспроизвести только слова, чистый текст, не включающий в себя никаких интонаций и эмоциональной составляющей.

Но, используя высокоскоростную камеру, делающую тысячи кадров в секунду, исследователям из университета Васеда (Waseda University in Tokyo) в Токио удалось сделать запись даже самых мельчайших колебаний поверхности кожи лица и шеи человека, которыми сопровождаются звуки, исходящие от голосовых связок человека. После съемки специализированная компьютерная программа, основанная на сложнейших алгоритмах, превратила снятые колебания кожи в соответствующие им звуковые колебания, в голос человека.

"С помощью нашей технологии мы можем получить не только слова, произнесенные человеком, но и его голос с интонациями, несущими эмоциональную составляющую речи" - рассказал Ясухиро Оикоа (Yasuhiro Oikawa), руководитель научной группы, выступая на Международном конгрессе по акустике (International Congress on Acoustics), проходившем 3 июня в Токио.

Используя технологию высокоскоростной съемки, исследователи сделали запись того, как два добровольных участника произносили одно и то же слово на японском языке. Камера снимала с частотой 10 тысяч кадров в секунду, для сравнения, в обычном видео используется съемка с частотой 24 кадра в секунду, а особо качественное видео снимается с частотой 60-80 кадров в секунду. Помимо этого, голос добровольцев записывался с помощью обычного микрофона, а колебания кожи их лица и горла регистрировались с помощью датчиков-виброметров.

После того, как компьютерная программы выдала рассчитанную ей на основе визуальных данных последовательность звуковых колебаний, исследователи сравнили их с реальными данными, записанными с помощью микрофона и виброметров. Оказалось, что рассчитанные звуки совпадали с реальными звуками, расходясь лишь в незначительных деталях. Проигрывая получившийся звуковой файл, исследователи смогли достаточно четко распознать отдельные произносимые слова и опознать голосовые интонации.

Технология реконструкции речи и голоса человека с помощью высокоскоростной камеры находится еще в экспериментальной стадии, только доказывающей работоспособность самой идеи. До конца этого года исследователи планируют довести эту технологию до уровня, когда она сможет работать в режиме реального времени, распознавая и воспроизводя не только короткие слова, фразы, а и достаточно длинные предложения. Для этого исследователи собираются серьезно переработать программное обеспечение системы и реализовать функцию анализа колебаний поверхности кожи некоторых других частей лица человека, к примеру, щек, что предоставит в их распоряжение большее количество информации, позволяющей более качественно реконструировать речь, голос и интонации человека.




Ключевые слова:
Камера, Скорость, Запись, Изображение, Лицо, Горло, Колебания, Кожа, Человек, Речь, Интонация, Голос, Реконструкция, Программное, Обеспечение

Первоисточник

Другие новости по теме:
  • Создан декодер, способный "услышать" внутренний голос, звучащий в голове ...
  • Новая технология позволяет воссоздать трехмерный "фоторобот" человека по ...
  • Компания Microsoft представляет свою технологию перевода в режиме реального ...
  • Новая технология позволит разговаривать по мобильному телефону не произнося ...
  • Новый ларингофон позволит избавиться от страшного механического голоса.




  • 11 июня 2013 08:55
    #1 Написал: skytear

    Публикаций: 0
    Комментариев: 35
    прекрасно, скоро легко с пары километров можно будет "услышать" людей. спецслужбы скажут спасибо
        
    11 июня 2013 15:30
    #2 Написал: KaAnubis

    Публикаций: 0
    Комментариев: 0
    Вот так HAL и раскрыл заговор людей против него в "Космической одисее 2000" fellow
        
    11 июня 2013 22:52
    #3 Написал: Botinax

    Публикаций: 0
    Комментариев: 0
    winked
    если бы меня отключили от микрофонов, я бы тоже подумал, что заговор, даже без этой технологии
    так и HAL посчитал ))
        
    11 июня 2013 23:13
    #4 Написал: volod

    Публикаций: 0
    Комментариев: 1489
    skytear, вряд ли с 2х км можно будет рассмотреть микроколебания, особенно в городах.
        
    12 июня 2013 00:15
    #5 Написал: HeavyGait

    Публикаций: 3
    Комментариев: 531
    Цитата: volod
    вряд ли с 2х км можно будет рассмотреть микроколебания

    Не, ну могут же спутники-шпионы с околоземной орбиты рассмотреть время на наручных часах. Так может и здесь справятся?


    --------------------
        
    12 июня 2013 23:03
    #6 Написал: skytear

    Публикаций: 0
    Комментариев: 35
    конечно справятся... а для чего еще так усердно продвигать данную технологию
        

    Информация

    Посетители, находящиеся в группе Гости, не могут оставлять комментарии к данной публикации.