RU2554510C2 - Устройство - Google Patents

Abstract

Изобретение относится к средствам для обработки звуковых сигналов. Технический результат заключается в уменьшении шумов захваченных звуковых сигналов. Устройство содержит по меньшей мере один процессор и по меньшей мере один модуль памяти, в котором хранится компьютерный программный код, при этом по меньшей мере один модуль памяти и компьютерный программный код сконфигурированы таким образом, чтобы при взаимодействии по меньшей мере с одним процессором обеспечивать выполнение устройством по меньшей мере следующего: предоставления визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, при этом указанный по меньшей мере один звуковой сигнал представляет звуковое поле вокруг устройства в реальном времени с использованием по меньшей мере двух микрофонов; обнаружения, с использованием интерфейса, взаимодействия с указанным визуальным представлением параметра звукового сигнала и обработку по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, в зависимости от указанного взаимодействия. 2 н. и 18 з.п. ф-лы, 7 ил.

Description

Настоящее изобретение относится к устройству для обработки звуковых сигналов. Настоящее изобретение также относится, не ограничиваясь этим, к устройству для обработки звуковых и речевых сигналов в аудиоустройствах.

В устройстве связи обычно используется микрофон или массив микрофонов для захвата акустических волн и их вывода в виде представляющих звук или речь электронных сигналов, которые затем могут обрабатываться и передаваться в другие устройства или сохраняться для последующего воспроизведения. Существующие технологии позволяют использовать несколько микрофонов в массиве микрофонов для захвата акустических волн, и результирующий звуковой сигнал от каждого микрофона может передаваться в звуковой процессор для отделения искомой акустической волны.

С помощью усовершенствованных средств обработки два или более микрофона могут использоваться в сочетании с адаптивной фильтрацией в виде переменных коэффициентов усиления и задержки, применимых к звуковым сигналам каждого из микрофонов в попытке сформировать диаграмму направленности приемного шаблона массива микрофонов. Другими словами, в процессе формирования диаграммы направленности вырабатывается регулируемый профиль чувствительности звукового сигнала.

Хотя формирование диаграммы направленности принимаемых звуковых сигналов может способствовать улучшению отношения сигнал/шум для речевых сигналов в сравнении с фоновым шумом, этот процесс очень чувствителен к относительной позиции устройства с массивом микрофонов и источника сигнала. Таким образом, устройство обычно разрабатывается с использованием микрофонов и средств формирования диаграммы направленности, имеющих датчик звукового сигнала с широким средним всенаправленным диапазоном и нечувствительную записывающую аппаратуру с низким коэффициентом усиления, так чтобы громкие звуковые сигналы не ограничивались системой.

Кроме того, становятся популярными средства записи видеоинформации и звуковой информации или захвата, предназначенные для электронных устройств. Поскольку качество записи изображений в электронных устройствах постоянно возрастает, эти устройства становятся в большей степени приемлемыми для ежедневной записи различных событий, таких как музыкальные концерты, семейные события и т.д., для записи которых ранее применялись специально разработанные устройства записи звуковой информации и видеоинформации.

Обычные средства записи видеоинформации в мобильном устройстве позволяют пользователю регулировать качество изображения или быстро изменять параметры камеры таким образом, чтобы имелась возможность выполнять масштабирование (с использованием, например, технологии цифрового или оптического масштабирования, или их комбинации) или изменять другие параметры записи, такие как вспышка, яркость или контрастность изображения и т.д. Результат изменения любого из этих параметров может четко отслеживаться в таких реализациях, и, по существу, пользователь может быстро определить, что видеоинформация представлена в плохом качестве, и отрегулировать параметры для улучшения качества записи. Однако эти улучшения не касаются средств записи звукового сигнала. Обычно пользователь или оператор устройства записи звука не осведомлен о технических характеристиках звукового сигнала, подлежащего записи, и может не иметь информации об уровнях громкости или о направлении, в котором поступает звуковой сигнал, и поэтому не может определить, что выполняется низкокачественная или неточная запись звукового сигнала, и не может выбрать или отрегулировать параметры записывающего устройства для улучшения качества записи. Кроме того, если устройство даже разработано для предоставления пользователю некоторых функций поддержки, информация на этом устройстве часто отображается таким образом, что пользователь не может взаимодействовать с устройством.

Кроме того, в традиционных устройствах записи видеоинформации пытаются создать устройство захвата звукового сигнала со статическим профилем в отношении диапазона ориентации и направления камеры. С помощью такого устройства трудно разделить направление, в котором осуществляется запись видеоинформации, или, другими словами, направление камеры, и направление/ориентацию и профиль звукозаписывающего оборудования. Например, обычные устройства записи видеоинформации, как правило, сконфигурированы для записи видеоинформации и звуковой информации только в одном и том же направлении.

В рамках настоящего изобретения принимается во внимание тот факт, что использование информации может облегчить процесс управления записью звукового сигнала и, таким образом, например, содействовать уменьшению шумов захваченных звуковых сигналов путем их точного профилирования.

Варианты осуществления настоящего изобретения направлены на решение указанной выше проблемы.

В соответствии с первым аспектом настоящего изобретения, предлагается способ, включающий: предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом; обнаружение, с использованием интерфейса, взаимодействия с указанным визуальным представлением параметра звукового сигнала и обработку по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, в зависимости от указанного взаимодействия.

Предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, может включать по меньшей мере одно из следующего: определение уровня звукового давления захвата по меньшей мере одного звукового сигнала; определение профиля формирования диаграммы направленности звукового сигнала для упомянутого по меньшей мере одного звукового сигнала; определение профиля звукового сигнала для по меньшей мере одного частотного диапазона для упомянутого по меньшей мере одного звукового сигнала и определение состояния ошибки, связанного с упомянутым по меньшей мере одним звуковым сигналом.

Предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, если параметром является уровень звукового давления захвата по меньшей мере одного звукового сигнала, может включать по меньшей мере одно из следующего: отображение текущего уровня звукового давления захвата в качестве текущего уровня и отображение пикового уровня звукового давления захвата в течение заранее заданного периода времени в качестве пикового уровня.

Управление обработкой по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, может включать изменение коэффициента усиления по меньшей мере одного захвата звукового сигнала.

Предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, если параметром является профиль формирования диаграммы направленности для упомянутого по меньшей мере одного звукового сигнала, может включать по меньшей мере одно из следующего: отображение профиля формирования диаграммы направленности звукового сигнала в виде сектора дуги, представляющего угол формирования диаграммы направленности звукового сигнала, и отображение профиля формирования диаграммы направленности звукового сигнала в виде сектора дуги, представляющего угол формирования диаграммы направленности звукового сигнала относительно другого сектора дуги, представляющего угол записи видеоинформации.

Предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, если параметром является профиль звукового сигнала для по меньшей мере одного частотного диапазона для упомянутого по меньшей мере одного звукового сигнала, может включать по меньшей мере одно из следующего: отображение усредненной ориентации по меньшей мере одного звукового сигнала; отображение ориентации звукового сигнала с пиковым уровнем звукового давления; отображение сектора, представляющего уровень звукового давления по меньшей мере одного звукового сигнала для угла, связанного с сектором, при этом радиус сектора зависит от уровня звукового давления, и отображение по меньшей мере одного контура, представляющего уровень звукового давления по меньшей мере одного звукового сигнала, при этом радиус контура зависит от уровня звукового давления.

Управление обработкой по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, может включать изменение ориентации или ширины профиля угла формирования диаграммы направленности звукового сигнала.

Угол формирования диаграммы направленности может определять угол в окрестности центральной точки пространственной фильтрации по меньшей мере одного звукового сигнала.

Предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, если параметром является состояние ошибки, относящееся к упомянутому по меньшей мере одному звуковому сигналу, может включать по меньшей мере одно из следующего: отображение предупреждения об ограничении; отображение состояния ошибки захвата по меньшей мере одного звукового сигнала и отображение аппаратной ошибки, связанной с захватом по меньшей мере одного звукового сигнала.

Управление обработкой по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, может включать по меньшей мере одно из следующего: изменение ориентации или ширины профиля угла формирования диаграммы направленности звукового сигнала; изменение коэффициента усиления по меньшей мере одного звукового сигнала и изменение режима записи.

В соответствии со вторым аспектом настоящего изобретения, предлагается устройство, содержащее по меньшей мере один процессор и по меньшей мере один модуль памяти, в котором хранится компьютерный программный код, при этом по меньшей мере один модуль памяти и компьютерный программный код сконфигурированы таким образом, чтобы при взаимодействии с процессором обеспечивать выполнение устройством по меньшей мере следующего: предоставления визуального представления по меньшей мере одного параметра звукового сигнала, связанного с упомянутым по меньшей мере одним звуковым сигналом; обнаружения, с использованием интерфейса, взаимодействия с указанным визуальным представлением параметра звукового сигнала и обработки по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, в зависимости от указанного взаимодействия.

Предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, может обеспечивать выполнение устройством по меньшей мере одного из следующего: определения уровня звукового давления захвата по меньшей мере одного звукового сигнала; определения профиля формирования диаграммы направленности для упомянутого по меньшей мере одного звукового сигнала; определения профиля звукового сигнала для по меньшей мере одного частотного диапазона для упомянутого по меньшей мере одного звукового сигнала и определения состояния ошибки, связанного с упомянутым по меньшей мере одним звуковым сигналом.

Предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, если параметром является уровень звукового давления захвата по меньшей мере одного звукового сигнала, может обеспечивать выполнение устройством по меньшей мере одного из следующего: отображения текущего уровня звукового давления захвата в качестве текущего уровня и отображения пикового уровня звукового давления захвата в течение заранее заданного периода времени в качестве пикового уровня.

Управление обработкой по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, может обеспечивать выполнение устройством по меньшей мере изменения коэффициента усиления по меньшей мере одного захвата звукового сигнала.

Предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, если параметром является профиль формирования диаграммы направленности звукового сигнала для упомянутого по меньшей мере одного звукового сигнала, может обеспечивать выполнение устройством по меньшей мере одного из следующего: отображения профиля формирования диаграммы направленности звукового сигнала в виде сектора дуги, представляющего угол формирования диаграммы направленности звукового сигнала, и отображения профиля формирования диаграммы направленности звукового сигнала в виде сектора дуги, представляющего угол формирования диаграммы направленности звукового сигнала относительно другого сектора дуги, представляющего угол записи видеоинформации.

Предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, если параметром является профиль звукового сигнала для по меньшей мере одного частотного диапазона для упомянутого по меньшей мере одного звукового сигнала, может обеспечивать выполнение устройством по меньшей мере одного из следующего: отображения усредненной ориентации по меньшей мере одного звукового сигнала; отображения ориентации звукового сигнала с пиковым уровнем звукового давления; отображения сектора, представляющего уровень звукового давления по меньшей мере одного звукового сигнала для угла, связанного с сектором, при этом радиус сектора зависит от уровня звукового давления, и отображения по меньшей мере одного контура, представляющего уровень звукового давления по меньшей мере одного звукового сигнала, при этом радиус контура зависит от уровня звукового давления.

Управление обработкой по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, может обеспечивать выполнение устройством по меньшей мере изменения ориентации или ширины профиля угла формирования диаграммы направленности звукового сигнала.

Угол формирования диаграммы направленности может определять угол в окрестности центральной точки пространственной фильтрации по меньшей мере одного звукового сигнала.

Предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, если параметр определяет состояние ошибки, связанное с упомянутым по меньшей мере одним звуковым сигналом, может обеспечивать выполнение устройством по меньшей мере одного из следующего: отображения предупреждения об ограничении; отображения состояния ошибки захвата по меньшей мере одного звукового сигнала и отображения аппаратной ошибки, связанной с захватом по меньшей мере одного звукового сигнала.

Управление обработкой по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, может обеспечивать выполнение устройством по меньшей мере одного из следующего: изменения ориентации или ширины профиля угла формирования диаграммы направленности звукового сигнала, изменения коэффициента усиления по меньшей мере одного звукового сигнала и изменения режима записи.

В соответствии с третьим аспектом настоящего изобретения, предлагается устройство, содержащее: процессор дисплея, сконфигурированный для предоставления визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом; интерактивный видеоинтерфейс, сконфигурированный для обнаружения взаимодействия с указанным визуальным представлением параметра звукового сигнала, и звуковой процессор, сконфигурированный для обработки по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, в зависимости от указанного взаимодействия.

Процессор дисплея может быть также сконфигурирован для определения по меньшей мере одного из следующего: уровня звукового давления захвата по меньшей мере одного звукового сигнала; профиля формирования диаграммы направленности звукового сигнала для упомянутого по меньшей мере одного звукового сигнала; профиля звукового сигнала для по меньшей мере одного частотного диапазона для упомянутого по меньшей мере одного звукового сигнала и состояния ошибки, связанного с упомянутым по меньшей мере одним звуковым сигналом.

Если параметром является уровень звукового давления захвата по меньшей мере одного звукового сигнала, процессор дисплея также может отображать текущий уровень звукового давления захвата в качестве текущего уровня и/или пиковый уровень звукового давления захвата в течение заранее заданного периода времени в качестве пикового уровня.

Процессор может быть сконфигурирован для изменения коэффициента усиления по меньшей мере одного звукового сигнала.

Процессор дисплея может быть также сконфигурирован для определения по меньшей мере одного из следующего: профиля формирования диаграммы направленности звукового сигнала в виде сектора дуги, представляющего угол формирования диаграммы направленности звукового сигнала, и профиля формирования диаграммы направленности звукового сигнала в виде сектора дуги, представляющего угол формирования диаграммы направленности звукового сигнала относительно другого сектора дуги, представляющего угол записи видеоинформации.

Если параметром является профиль звукового сигнала для по меньшей мере одного частотного диапазона для упомянутого по меньшей мере одного звукового сигнала, процессор дисплея может также отображать одно из следующего: усредненную ориентацию по меньшей мере одного звукового сигнала; ориентацию звукового сигнала с пиковым уровнем звукового давления; сектор, представляющий уровень звукового давления по меньшей мере одного звукового сигнала для угла, связанного с сектором, при этом радиус сектора зависит от уровня звукового давления, и по меньшей мере один контур, представляющий уровень звукового давления по меньшей мере одного звукового сигнала, при этом радиус контура зависит от уровня звукового давления.

Процессор может изменять ориентацию или ширину профиля угла формирования диаграммы направленности звукового сигнала.

Угол формирования диаграммы направленности может определять угол в окрестности центральной точки пространственной фильтрации по меньшей мере одного звукового сигнала.

Процессор дисплея также может быть сконфигурирован для отображения по меньшей мере одного из следующего: предупреждения об ограничении; состояния ошибки захвата по меньшей мере одного звукового сигнала и аппаратной ошибки, связанной с захватом по меньшей мере одного звукового сигнала.

Процессор может быть сконфигурирован для изменения по меньшей мере одного из следующего: ориентации или ширины профиля угла формирования диаграммы направленности звукового сигнала; коэффициента усиления по меньшей мере одного звукового сигнала и режима записи.

В соответствии с четвертым аспектом настоящего изобретения, предлагается устройство, содержащее: средства обработки, сконфигурированные для предоставления визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом; интерфейсные средства обработки, сконфигурированные для обнаружения, с использованием интерфейса, взаимодействия с указанным визуальным представлением параметра звукового сигнала, и средства обработки звуковых сигналов, сконфигурированные для обработки по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, в зависимости от указанного взаимодействия.

Согласно пятому аспекту настоящего изобретения, предлагается машиночитаемый носитель, на котором хранятся инструкции, при исполнении которых компьютером выполняется следующее: предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом; обнаружение, с использованием интерфейса, взаимодействия с указанным визуальным представлением параметра звукового сигнала и обработка по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, в зависимости от указанного взаимодействия.

Электронное устройство может включать описанное выше устройство.

Набор микросхем (чипсет) может включать описанное выше устройство.

КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ

Для лучшего понимания настоящего изобретения далее в примерах приводятся ссылки на прилагаемые чертежи.

На фиг.1 схематично показано устройство, в котором используются варианты осуществления настоящего изобретения.

На фиг.2 более подробно показано устройство, схематично изображенное на фиг.1.

На фиг.3 схематично показано устройство и пример отображаемых параметров звукового сигнала в соответствии с вариантами осуществления настоящего изобретения.

На фиг.4 более подробно показан пример отображаемых параметров звукового сигнала.

На фиг.5 схематично показан пример отображаемых параметров звукового сигнала в соответствии с некоторыми другими вариантами осуществления настоящего изобретения.

На фиг.6 схематично показан алгоритм, иллюстрирующий работу некоторых вариантов осуществления настоящего изобретения.

На фиг.7 показаны примеры визуализации параметров направления звукового сигнала в соответствии с некоторыми вариантами осуществления настоящего изобретения.

Далее описывается устройство и способы для обеспечения улучшенного захвата и гибкой записи звукового сигнала в массиве микрофонов. В связи с этим, вначале со ссылкой на фиг.1 рассматривается структурная схема примера электронного устройства 10, которое может включать компоненты и способы улучшенной производительности захвата звукового сигнала.

Устройство 10 может, например, представлять собой мобильный терминал или пользовательское оборудование системы беспроводной связи. В других вариантах осуществления настоящего изобретения устройство может представлять собой любой аудиоплеер, например mp3-плеер или медиа-плеер, оснащенный, как будет описано ниже, подходящим массивом микрофонов и датчиками.

В некоторых вариантах осуществления настоящего изобретения устройство 10 содержит процессор 21. Процессор 21 может быть сконфигурирован для исполнения различных программных кодов. Реализованные программные коды могут включать усовершенствованный код захвата/записи звукового сигнала.

Реализованные программные коды 23 могут храниться, например, в памяти 22, из которой они при необходимости извлекаются процессором 21. В памяти 22 также может быть отведен раздел 24 для хранения данных, например данных, обработанных в соответствии с вариантами осуществления настоящего изобретения.

Усовершенствованный код захвата/записи звукового сигнала в вариантах осуществления настоящего изобретения может быть реализован, по меньшей мере частично, в аппаратном обеспечении или встроенном программном обеспечении.

Процессор 21 в некоторых вариантах осуществления настоящего изобретения может через цифро-аналоговый преобразователь (DAC, digital-to-analogue converter) 32 соединяться с динамиком 33.

Цифро-аналоговый преобразователь (DAC) 32 может представлять собой любой подходящий преобразователь.

Динамик 33 может, например, представлять собой любое подходящее оборудование преобразования звукового сигнала, пригодное для формирования акустических волн, воспринимаемых ухом пользователя, на основе электронных звуковых сигналов, выводимых преобразователем DAC 32. В некоторых вариантах осуществления настоящего изобретения динамик 33 может представлять собой динамик трубки или воспроизводящего устройства и может подключаться к электронному устройству 10 через разъем для наушников. В некоторых вариантах осуществления настоящего изобретения динамик 33 может содержать преобразователь DAC 32. Кроме того, в некоторых вариантах осуществления настоящего изобретения динамик 33 может подключаться к электронному устройству 10 с помощью беспроводной связи, например, посредством маломощного радиочастотного соединения, такого как профиль A2DP Bluetooth.

Процессор 21 также соединен с приемопередатчиком (TX/RX) 13, с пользовательским интерфейсом (UI, user interface) 15 и памятью 22.

Пользовательский интерфейс 15 может предоставлять пользователю возможность вводить команды в электронное устройство 10, например, с помощью клавиатуры и/или получать информацию из электронного устройства 10, например, на дисплее (не показан). Следует отметить, что пользовательский интерфейс в некоторых вариантах осуществления настоящего изобретения также может быть реализован в виде подходящей комбинации устройств ввода и отображения информации, например в виде сенсорного экрана, позволяющего принимать введенную пользователем информацию и отображать информацию для пользователя.

Приемопередатчик 13 может представлять собой любую подходящую технологию связи и может быть сконфигурирован для взаимодействия с другими электронными устройствами, например, через сеть беспроводной связи.

Устройство 10 в некоторых вариантах осуществления также содержит по меньшей мере два микрофона в массиве 11 микрофонов для ввода или захвата акустических волн и вывода звуковых или речевых сигналов, подлежащих обработке в соответствии с вариантами осуществления настоящего изобретения. В соответствии с некоторыми вариантами осуществления настоящего изобретения, звуковые или речевые сигналы могут передаваться в другие электронные устройства через приемопередатчик 13 или сохраняться в разделе 24 данных в памяти 22 для последующей обработки.

Соответствующий программный код или аппаратное обеспечение для управления захватом звуковых сигналов с использованием по меньшей мере двух микрофонов может активироваться пользователем через пользовательский интерфейс 15. Устройство 10 в таких вариантах осуществления изобретения может также содержать аналого-цифровой преобразователь (ADC, analogue-to-digital converter) 14, сконфигурированный для преобразования входных аналоговых звуковых сигналов, поступающих из массива 11 микрофонов, в цифровые звуковые сигналы и для передачи цифровых звуковых сигналов в процессор 21.

Устройство 10 в некоторых вариантах осуществления настоящего изобретения может принимать звуковые сигналы из массива 11 микрофонов, физически не встроенного в указанное электронное устройство. Например, динамик 33 устройства в некоторых вариантах осуществления настоящего изобретения может содержать массив микрофонов. Динамик 33 затем может передавать звуковые сигналы из массива 11 микрофонов, и, таким образом, устройство 10 может принимать битовый поток звуковых сигналов с соответствующими закодированными звуковыми данными из другого электронного устройства через приемопередатчик 13.

В некоторых вариантах осуществления настоящего изобретения процессор 21 может исполнять усовершенствованный программный код захвата/записи звукового сигнала, хранимый в памяти 22. Процессор 21 в этих вариантах осуществления изобретения может обрабатывать принятые данные звукового сигнала и выводить обработанные звуковые данные.

Принятые данные звукового сигнала в некоторых вариантах осуществления настоящего изобретения могут также не обрабатываться немедленно, а сохраняться в разделе 24 данных в памяти 22, например, для последующей обработки и предоставления или пересылки в другое электронное устройство.

Кроме того, электронное устройство может содержать датчики или группу 16 датчиков. Группа 16 датчиков принимает информацию о среде, в которой функционирует электронное устройство 10, и передает эту информацию в процессор 21, для того чтобы повлиять на процесс обработки звукового сигнала и, в частности, повлиять на процессор 21 в рамках приложений захвата/записи звукового сигнала. Группа 16 датчиков может включать по меньшей мере один из описываемых ниже наборов датчиков.

Группа 16 датчиков в некоторых вариантах осуществления настоящего изобретения содержит модуль камеры. Модуль камеры в некоторых вариантах осуществления настоящего изобретения содержит по меньшей мере одну камеру, оснащенную линзами для фокусировки изображения в средствах захвата цифрового изображения, таких как устройство с зарядовой связью (CCD, charged coupled device). В других вариантах осуществления изобретения средства захвата цифрового изображения могут представлять собой любое подходящее устройство захвата изображения, например датчик изображения, выполненный в виде комплементарного металло-оксидного полупроводника (CMOS, complementary metal oxide semiconductor). Модуль камеры в некоторых вариантах осуществления настоящего изобретения также содержит фотовспышку для освещения объекта перед захватом его изображения. Фотовспышка в таких вариантах осуществления изобретения связана с процессором камеры, управляющим функционированием фотовспышки. В других вариантах осуществления изобретения камера может быть сконфигурирована для восприятия инфракрасного или почти инфракрасного излучения для поддержки чувствительности в среде с низким освещением. По меньшей мере одна камера может быть также связана с процессором камеры для обработки сигналов, принятых по меньшей мере от одной камеры, перед передачей обработанного изображения в процессор. Процессор камеры может соединяться с локальной памятью камеры, в которой могут храниться программные коды, исполняемые процессором камеры при захвате изображения. Кроме того, локальная память камеры в некоторых вариантах осуществления настоящего изобретения может использоваться в качестве буфера для хранения захваченного изображения перед локальной обработкой и в процессе локальной обработки. В некоторых вариантах осуществления настоящего изобретения процессор камеры и память камеры реализованы в процессоре 21 и в памяти 22, соответственно.

Кроме того, в некоторых вариантах осуществления настоящего изобретения модуль камеры может быть физически реализован в динамике устройства воспроизведения.

В некоторых вариантах осуществления настоящего изобретения группа 16 датчиков содержит датчик позиции/ориентации. В некоторых вариантах осуществления изобретения датчик ориентации может быть реализован с помощью цифрового компаса или твердотельного компаса, сконфигурированного для определения ориентации электронных устройств относительно горизонтальной оси. В некоторых вариантах осуществления настоящего изобретения датчик позиции/ориентации может представлять собой датчик силы тяжести, сконфигурированный для вывода информации об ориентации электронного устройства относительно вертикальной оси. Датчик силы тяжести, например, может быть реализован в виде массива ртутных реле, расположенных под различными углами относительно вертикали, с выходом, указывающим угол расположения электронного устройства относительно вертикальной оси. В некоторых вариантах осуществления настоящего изобретения датчик позиции/ориентации может представлять собой акселерометр или гироскоп.

Следует понимать, что структура устройства 10 может быть дополнена или изменена различными способами.

Следует отметить, что схематические структуры, показанные на фиг.2-5, и шаги способа, показанные на фиг.6, представляют только часть операций полной цепи захвата/записи звукового сигнала, включающей некоторые показанные примеры вариантов осуществления настоящего изобретения, реализованные в электронном устройстве, изображенном на фиг.1.

Далее со ссылками на фиг.2 и фиг.6 более подробно описываются некоторые варианты осуществления изобретения в соответствии с их реализацией и функционированием.

На фиг.2 более подробно представлена схема устройства 10 в отношении компонентов, используемых в различных вариантах осуществления настоящего изобретения.

Кроме того, на фиг.6 показана блок-схема, иллюстрирующая последовательность операций, которые могут использоваться в некоторых вариантах осуществления настоящего изобретения.

Согласно некоторым вариантам осуществления настоящего изобретения, пользователю или оператору устройства предоставляется решение интерактивной гибкой записи звуковой и/или аудиовизуальной информации. Пользовательский интерфейс 15 в этих вариантах осуществления изобретения предоставляет пользователю требуемую информацию на основе записанных звуковых сигналов путем измерения и отображения в реальном времени звукового поля, так что оператор или пользователь устройства может проанализировать записанную информацию. Кроме того, в некоторых вариантах осуществления изобретения, в которых используется тот же пользовательский интерфейс, оператор устройства может также в реальном времени регулировать параметры и, таким образом, настраивать записанное звуковое поле, что позволяет избежать записи или захвата звуковых сигналов низкого качества.

Устройство в некоторых вариантах осуществления настоящего изобретения, как было описано выше, содержит массив микрофонов (включающий по меньшей мере два микрофона). Массив 11 микрофонов, как упоминалось выше, сконфигурирован для вывода захваченных звуковых сигналов от каждого микрофона массива. Звуковые сигналы в некоторых вариантах осуществления настоящего изобретения могут затем передаваться в аналого-цифровой преобразователь 14. Аналого-цифровой преобразователь может затем подключаться к процессору 101 управления формированием диаграммы направленности и коэффициентом усиления. В некоторых вариантах осуществления изобретения, как показано на фиг.2, каждый из микрофонов может быть реализован в виде цифрового микрофона, другими словами, такой микрофон может быть оснащен интегрированным аналого-цифровым преобразователем и может передавать выходной сигнал непосредственно в процессор 101 управления формированием диаграммы направленности и коэффициентом усиления.

Следует отметить, что хотя в последующих примерах описывается процесс захвата звуковых сигналов, то же устройство в некоторых других вариантах осуществления изобретения может быть сконфигурировано для сохранения захваченных звуковых сигналов, например, в памяти 22 или для передачи захваченных звуковых сигналов в другое устройство через приемопередатчик 13.

Операцию инициализации массива микрофонов выполняют на шаге 501, показанном на фиг.6.

Процессор 101 управления формированием диаграммы направленности и коэффициентом усиления принимает звуковые сигналы из массива микрофонов и сконфигурирован для выполнения операции фильтрации или формирования диаграммы направленности для звуковых сигналов, поступивших из соответствующего массива микрофонов. Может быть реализована любая подходящая операция формирования диаграммы направленности звуковых сигналов. Кроме того, процессор 101 управления формированием диаграммы направленности и коэффициентом усиления в некоторых вариантах осуществления настоящего изобретения сконфигурирован для формирования начальной весовой матрицы, применяемой к звуковым сигналам, принятым из 'n' микрофонов из массива микрофонов.

В некоторых вариантах осуществления настоящего изобретения процессор 101 управления формированием диаграммы направленности и коэффициентом усиления может принимать информацию датчика камеры и генерировать начальные параметры управления формированием диаграммы направленности и коэффициентом усиления таким образом, чтобы массив микрофонов пытался захватить звуковые сигналы с тем же профилем (направление и охват), что и видеокамера.

Операцию инициализации процесса управления формированием диаграммы направленности и коэффициентом усиления выполняют на шаге 503, показанном на фиг.6.

Процессор 101 управления формированием диаграммы направленности и коэффициентом усиления в некоторых вариантах осуществления настоящего изобретения может также микшировать звуковые сигналы в сформированной диаграмме направленности для получения 'k' различных звуковых каналов. Например, процессор управления формированием диаграммы направленности и коэффициентом усиления может микшировать потоки данных звуковых сигналов от 'n' микрофонов для получения 'k' звуковых каналов. Например, процессор 101 управления формированием диаграммы направленности и коэффициентом усиления в некоторых вариантах осуществления изобретения может выводить стереофонический сигнал с двумя звуковыми каналами, а в других вариантах осуществления изобретения может генерировать один монофонический канал или многоканальный выходной сигнал. Например, процессор управления формированием диаграммы направленности и коэффициентом усиления может микшировать звуковые потоки в сформированной диаграмме направленности для формирования выходного звукового сигнала в формате 5.1 с 6 звуковыми каналами или выходного сигнала с любой другой подходящей комбинацией звуковых каналов. Для формирования этих выходов звуковых каналов процессор 101 управления формированием диаграммы направленности и коэффициентом усиления в таких вариантах осуществления изобретения может использовать любую подходящую технологию микширования.

В некоторых вариантах осуществления настоящего изобретения, как показано на фиг.2, процессор 101 управления формированием диаграммы направленности и коэффициентом усиления может подавать микшированные сигналы в сформированной диаграмме направленности в аудиокодек 103. Кроме того, как показано на фиг.2, процессор управления формированием диаграммы направленности и коэффициентом усиления в некоторых вариантах осуществления изобретения может выполнять второй процесс микширования и подавать 'm' каналов второго микширования в процессор 105 визуализации характеристик звуковых сигналов.

Аудиокодек 103 в некоторых вариантах осуществления настоящего изобретения может обрабатывать данные звуковых каналов для их кодирования, для того чтобы получить более эффективно закодированный поток данных, подходящий для хранения или передачи. Аудиокодек 103 может использовать любой подходящий способ кодирования звукового сигнала, например MPEG-4 AAC LC, Enhanced aacPlus (также известный как ААС+, MPEG-4 НЕ AAC v2), Dolby Digital (также известный как АС-3) и DTS. Аудиокодек 103 в соответствии с вариантом осуществления настоящего изобретения может быть сконфигурирован для передачи закодированного звукового потока в память 22 или для передачи закодированного звукового потока с помощью приемопередатчика 13, или для последующего декодирования звукового потока и передачи его в динамик 33 воспроизведения через цифро-аналоговый преобразователь 32.

Процессор 105 визуализации характеристик звуковых сигналов в некоторых вариантах осуществления настоящего изобретения сконфигурирован для выполнения проверки оценки звуковых параметров в микшированном выходном сигнале, поступающем из процессора 101 управления формированием диаграммы направленности и коэффициентом усиления. Например, процессор 105 визуализации характеристик звуковых сигналов в некоторых вариантах осуществления изобретения может вычислять уровень принятых звуковых сигналов. Другими словами, может вычисляться значение энергии захваченных звуковых сигналов. Кроме того, в некоторых вариантах осуществления настоящего изобретения процессор 105 визуализации характеристик звуковых сигналов определяет пиковый уровень, то есть наибольший уровень для предшествующего (заранее заданного) периода времени.

В некоторых вариантах осуществления настоящего изобретения процессор 105 визуализации характеристик звуковых сигналов рассчитывает направление входа звукового сигнала на основе звукового сигнала в сформированной диаграмме направленности. Например, в некоторых вариантах осуществления изобретения вычисляются уровни энергии звуковых сигналов массива микрофонов в сформированной диаграмме направленности для каждого из выходов каналов, для того чтобы определить приближенное направление звукового сигнала.

В некоторых других вариантах осуществления изобретения процессор 105 визуализации характеристик звуковых сигналов может также определять, оптимально ли захвачен принятый звуковой сигнал. Например, процессор 105 визуализации характеристик звуковых сигналов может определять, достиг ли текущий или пиковый уровень высокого значения, когда текущие установки коэффициента усиления записи слишком высоки, и запись искажается или "ограничивается", поскольку максимальные амплитуды не могут быть точно закодированы или захвачены.

Таким же образом, процессор 105 визуализации характеристик звуковых сигналов может определять, что основной угол принимаемых звуковых сигналов является таким, что массив микрофонов не оптимально направлен для записи или захвата звукового сигнала. Например, проверяется, позволяет ли физическое расположение микрофонов непосредственно принимать акустические волны. В таких примерах некоторые направления или варианты ориентации трудно обнаружить, и на это может быть указано, но это указание в таких вариантах осуществления изобретения может быть стабильным и не меняться. Кроме того, такие ситуации могут не возникать благодаря исходной конструкции массива микрофонов. Например, заблокированные зоны или зоны молчания могут возникать, если пользователь блокирует ряд микрофонов, например, пальцем, что в некоторых вариантах осуществления настоящего изобретения может обнаруживаться с последующим указанием на это. Подобным образом, может быть указано на неисправные микрофоны в массиве.

Процесс вычисления по меньшей мере одного параметра звукового сигнала, такой как определение текущего уровня или пикового уровня, выполняют на шаге 505, показанном на фиг.6.

Кроме того, в некоторых вариантах осуществления настоящего изобретения процессор 105 визуализации характеристик звуковых сигналов на основе характеристик звукового сигнала, таких как уровень, пиковый уровень и параметр направления, может выполнять визуализацию этих значений.

Этот процесс вычисления элементов визуализации выполняют на шаге 507, показанном на фиг.6.

Эти элементы визуализации затем могут передаваться в элемент 111 отображения пользовательского интерфейса для их отображения оператору устройства. Операцию отображения характеристик звукового сигнала выполняют на шаге 509, показанном на фиг.6.

На фиг.3 показан пример визуализации параметров звукового сигнала. Устройство 10 содержит пользовательский интерфейс 15 и, в частности, элемент отображения пользовательского интерфейса. На дисплее пользовательского интерфейса отображается изображение, захваченное камерой, поверх которого отображается элемент 201 визуализации характеристик звукового сигнала. На фиг.4 более подробно показан пример визуализации характеристик звукового сигнала. Элемент 201 визуализации характеристик звукового сигнала включает элемент 307 визуализации уровня звукового давления, который указывает пользователю устройства текущий и пиковый уровни громкости звукового сигнала, захваченного устройством. Текущий уровень громкости может, например, указываться длиной первой полосы, а пиковый уровень громкости - длиной фоновой полосы. В некоторых вариантах осуществления настоящего изобретения элемент визуализации уровня звукового давления может также отображать уровень 'усиления' - текущий коэффициент усиления, применяемый к звуковым сигналам, принятым из массива микрофонов.

Кроме того, в некоторых вариантах осуществления настоящего изобретения элемент визуализации характеристик звукового сигнала содержит указатель направленности звукового сигнала, который указывает направление захваченного звукового сигнала. В некоторых вариантах осуществления изобретения этот указатель может представлять собой компасный румб или вектор, указывающий направление звукового сигнала максимальной громкости. В некоторых вариантах осуществления настоящего изобретения указатель направленности звукового сигнала может использоваться также для указания частоты записанного звукового сигнала путем отображения компасного румба с использованием различных цветов для представления преобладающей частоты звукового сигнала.

На фиг.7 показаны элементы визуализации указателя направленности в соответствии с некоторыми вариантами осуществления настоящего изобретения. Показан описанный выше указатель 601 направленности в виде компаса, при этом направление, указанное компасным румбом, определяет направление сигнала пиковой мощности или направление сигнала средней мощности. В некоторых вариантах осуществления настоящего изобретения могут быть реализованы другие подходящие формы указателя. В некоторых вариантах осуществления настоящего изобретения в пределах указателя 305 направленности звукового сигнала могут также указываться направления сигнала от различных идентифицируемых "источников звука". Например, в этих вариантах осуществления изобретения различные относительные значения амплитуд источников звуковых сигналов могут отображаться с использованием относительных длин стрелок таким образом, чтобы более громкий источник 603а звукового сигнала обозначался более длинной стрелкой, указывающей первое направление, а два других источника, 603b и 603с, звуковых сигналов обозначались более короткими стрелками, указывающими другие различные направления.

В некоторых вариантах осуществления настоящего изобретения, как показано на фиг.7, информация об уровне звукового сигнала может группироваться в регулярные секторы, в каждом из которых отображаются обнаруженные и захваченные уровни звуковых сигналов. В четырех секторах 605а, 605b, 605с и 605d показана относительная амплитуда звукового сигнала в этих секторах, при этом длины радиусов секторов зависят от относительной громкости в этих направленных секторах.

Кроме того, как показано на фиг.7, в некоторых вариантах осуществления настоящего изобретения секторы могут иметь нерегулярную форму. На фиг.7 показан первый нерегулярный сектор 607а, указывающий направленность звукового сигнала в первой области, второй нерегулярный сектор 607b с более высоким уровнем, но более узким профилем, указывающий, таким образом, на очень локализованный источник звукового сигнала, и третий нерегулярный сектор 607с, характеризующийся низкой громкостью, но более широкой областью профиля, который, таким образом, может указывать на источник шумоподобного звукового сигнала.

Кроме того, в некоторых вариантах осуществления настоящего изобретения элементы визуализации указателя направленности содержат ряд контуров, что также показано на фиг.7. Каждый из контуров соответствует определенной частоте или диапазону частот, а расстояние от центра соответствует уровню звукового сигнала относительно сетки/измерительной шкалы уровней.

Элемент 204 визуализации характеристик звукового сигнала в некоторых вариантах осуществления настоящего изобретения может также содержать указатель текущей конфигурации формирования диаграммы направленности в виде профиля формирования диаграммы направленности. Например, как показано на фиг.4, элемент визуализации характеристик профиля звукового сигнала или указатель 303 конфигурации формирования диаграммы направленности указывает сектор указателя, который в виде профиля дуги представляет профиль, охватываемый при выполнении операции формирования диаграммы направленности. Например, если формируется круговая диаграмма направленности (360 градусов), то профиль дуги также составляет 360 градусов. В некоторых вариантах осуществления настоящего изобретения может отображаться профиль направления формирования диаграммы направленности для показа относительных коэффициентов усиления в пределах этой диаграммы направленности, например, толщиной линии, изображающей дугу, или путем использования различных цветов для различных коэффициентов усиления.

В некоторых вариантах осуществления настоящего изобретения элемент визуализации характеристик профиля звукового сигнала также отображается относительно элемента 301 визуализации профиля обзора. Элемент 301 визуализации профиля обзора указывает текущий угол обзора, захваченный камерой, и может быть также представлен в виде дуги, окружающей центральную часть элемента визуализации. Элемент 301 визуализации профиля обзора в некоторых вариантах осуществления настоящего изобретения может, таким образом, изменяться в зависимости от значения масштаба, используемого камерой, то есть при увеличении масштаба изображения угол 301 обзора сужается.

На фиг.5 показан другой пример элементов визуализации характеристик звукового сигнала. В этом примере элемент 303 визуализации характеристик профиля звукового сигнала указывает на то, что фокус формирования диаграммы направленности гораздо уже угла 301 обзора. Кроме того, на фиг.5 показано, что характеристики звукового сигнала в элементе визуализации могут содержать текстовую информацию, которая может являться сообщением 401 предупреждения. В этом примере отображается сообщение предупреждения о том, что существует высокая вероятность ограничения или искажения звукового сигнала в процессе его захвата.

Описанный выше пользовательский интерфейс 15 может также применяться для ввода информации. Например, с помощью элемента визуализации характеристик звукового сигнала, отображаемого на дисплее 111 пользовательского интерфейса, пользователь, например, посредством сенсорного экрана может вводить информацию, которая затем может применяться для управления обработкой звукового сигнала.

Операцию обнаружения введенной информации с использованием ввода пользовательского интерфейса 113 выполняют на шаге 511, показанном на фиг.6.

Например, в некоторых вариантах осуществления настоящего изобретения устройство может регулировать параметры управления коэффициентом усиления в зависимости от обнаруженной входной информации на указателе 307 полосы SPL (sound pressure level, уровень звукового давления). Например, процессор 107 сенсорного управления может обнаруживать или определять движущееся касание сенсорного экрана в направлении к нижней части полосы, вследствие чего коэффициент усиления должен уменьшаться путем передачи сигнала управления коэффициентом усиления в процессор 101 управления формированием диаграммы направленности и коэффициентом усиления, в то время как при обнаружении процессором 107 сенсорного управления движущегося касания в направлении к верхней части полосы коэффициент усиления увеличивается также путем передачи соответствующего сигнала управления коэффициентом усиления в процессор 101 управления формированием диаграммы направленности и коэффициентом усиления. В таких вариантах осуществления изобретения ввод пользовательского интерфейса может обрабатываться процессором 107 сенсорного управления, который при обнаружении любого пригодного распознаваемого входного сигнала сконфигурирован для передачи соответствующего сигнала управления в процессор 101 управления формированием диаграммы направленности и коэффициентом усиления.

Операцию регулировки уровней усиления выполняют на шаге 513, показанном на фиг.6. Любые регулировки уровней усиления затем отражаются визуализируемыми характеристиками звукового сигнала.

Кроме того, в некоторых вариантах осуществления настоящего изобретения в результате обнаружения ввода информации вблизи указателя угла звукового сигнала может также изменяться профиль формирования диаграммы направленности. Например, если используется сенсорный экран с технологией "множества касаний", процессор 107 сенсорного управления при обнаружении движений "сжимания" или "расширения" может передавать сигнал управления в процессор 101 управления формированием диаграммы направленности и коэффициентом усиления соответственно для сужения или расширения профиля формирования диаграммы направленности. В некоторых других вариантах осуществления настоящего изобретения одно касание, обнаруженное процессором 107 сенсорного управления, может использоваться для изменения ориентации 'центра' формирования диаграммы направленности посредством передачи подобного сигнала управления в процессор 101 управления формированием диаграммы направленности и коэффициентом усиления.

Процессор 107 сенсорного управления в этих вариантах осуществления изобретения при обнаружении любого подходящего входного сигнала, указывающего на запрос изменения параметров формирования диаграммы направленности, может затем передать соответствующий сигнал управления в процессор 101 управления формированием диаграммы направленности и коэффициентом усиления, для того чтобы отрегулировать характеристики формирования диаграммы направленности.

Регулировку характеристик формирования диаграммы направленности выполняют на шаге 517, показанном на фиг.6. Эта операция может выполняться циклически для последующего определения нового уровня и пикового уровня звукового сигнала.

Кроме того, в некоторых вариантах осуществления настоящего изобретения датчик 16 может обеспечивать входную информацию для процессора 101 управления формированием диаграммы направленности и коэффициентом усиления. Например, в некоторых вариантах осуществления настоящего изобретения устройству может потребоваться сфокусироваться на конкретном направлении звукового сигнала, отличающемся от направления угла захвата видеоинформации. Например, устройство может осуществлять запись звукового сигнала, поступающего со сцены, как показано на фиг.3, однако потом угол устройства 10 может измениться для фокусировки на другом лице или объекте, при этом запись звукового сигнала со сцены продолжается. В таких вариантах осуществления изобретения датчик может указать позицию или ориентацию устройства, что может быть использовано для обнаружения изменения позиции устройства и, таким образом, для управления операцией формирования диаграммы направленности.

Таким образом, в этих вариантах осуществления изобретения для поддержки записи звукового сигнала, поступающего в предшествующем направлении, изменение позиции камеры может инициировать процесс регулировки угла обзора или параметров формирования диаграммы направленности, выполняемый процессором 101 управления формированием диаграммы направленности и коэффициентом усиления, в зависимости от значений, предоставляемых датчиком. Это изменение ориентации может затем указываться процессором 105 визуализации путем отображения изменения параметров угла обзора и угла звукового сигнала.

Помимо этого, могут использоваться датчики в виде камеры для управления формированием диаграммы направленности и коэффициентом усиления и/или для визуализации характеристик захваченных звуковых сигналов. Например, обнаружение регулировки уровня масштабирования в камере также может использоваться в качестве ввода сигнала управления в процессор 101 управления формированием диаграммы направленности и коэффициентом усиления. В некоторых вариантах осуществления настоящего изобретения, в которых угол звукового сигнала связан с углом обзора, если масштаб изображения в камере увеличивается, используется более узкий угол при формировании диаграммы направленности, а если масштаб уменьшается, то диаграмма направленности расширяется. В других вариантах осуществления настоящего изобретения информация о профиле обзора передается в процессор 105 визуализации характеристик звуковых сигналов для вычисления и отображения корректной взаимосвязи между профилями звукового сигнала и видеосигнала.

Таким образом, в таких вариантах осуществления изобретения пользователю может предоставляться достаточный объем информации для принятия разумного решения, а механизмы управления позволяют избежать записи звукового сигнала низкого качества.

Кроме того, согласно вариантам осуществления настоящего изобретения графически отображается информация об изменении "звукового изображения" вокруг устройства и о том, какие текущие параметры записи звукового сигнала связаны со "звуковым изображением". С помощью этой информации устройство может быть сконфигурировано для регулировки параметров записи звукового сигнала (таких как ширина диаграммы направленности и коэффициент усиления) требуемым образом для текущего процесса записи.

Таким образом, например, если устройство используется для записи презентации перед большой группой участников, то им можно управлять таким образом, чтобы захватывать речь только конкретного участника посредством применения узкого (но с высоким уровнем усиления) профиля диаграммы направленности, благодаря чему при захвате речи уменьшается вероятность наведения помех от других источников звука.

Следует отметить, что в некоторых вариантах осуществления настоящего изобретения процессор 101 управления формированием диаграммы направленности и коэффициентом усиления и/или процессор 105 определения и визуализации характеристик, и/или процессор 107 сенсорного управления могут быть реализованы в виде программ или части процессора 21. В некоторых других вариантах осуществления настоящего изобретения указанные выше процессоры могут быть реализованы аппаратно.

Хотя выше описаны способы управления такими параметрами, как коэффициент усиления или ширина диаграммы направленности, специалист должен понимать, что благодаря отображению такой информации могут изменяться другие параметры захвата или записи. Например, в некоторых вариантах осуществления настоящего изобретения информация может отображаться и регулироваться для изменения режима записи. В процессе изменения режима записи могут выполняться такие управляющие операции, как частотная фильтрация. Например, при наблюдении низкочастотного шума устройство может предложить или разрешить выполнение процесса управления профилем захвата для высокочастотной фильтрации микрофонных сигналов. В некоторых других вариантах осуществления настоящего изобретения изменение режима записи может включать переключение между различными процедурами микширования для образования микшированного сигнала на основе отображаемой информации. Например, захваченный стереофонический сигнал может быть непригоден из-за уровня шумов, и устройство может предложить переключение в режим захвата монофонического сигнала. Подобным же образом, в том случае, если уровни сигналов достаточны для разрешения процесса захвата многоканального звукового сигнала, устройство может путем отображения этой информации предложить многоканальное микширование для захвата звукового сигнала, например, в формате 5.1 или стереофонического сигнала в формате 2.0.

Таким образом, по меньшей мере в одном из вариантов осуществления настоящего изобретения способ включает предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом; обнаружение, с использованием интерфейса, взаимодействия с указанным визуальным представлением параметра звукового сигнала и обработку по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, в зависимости от указанного взаимодействия.

Хотя в приведенных выше примерах описаны варианты осуществления настоящего изобретения, работающие в рамках электронного устройства 10, следует отметить, что изобретение, как описано ниже, может быть реализовано как часть любого звукового процессора. Так, например, варианты осуществления настоящего изобретения могут быть реализованы в звуковом процессоре, который может выполнять обработку звуковых сигналов, передаваемых по фиксированным или проводным линиям связи.

Следовательно, пользовательское оборудование может содержать звуковой процессор, подобный тем, что описаны в представленных выше вариантах осуществления настоящего изобретения.

Следует отметить, что термин "электронное устройство" и "пользовательское устройство" охватывает пользовательское оборудование беспроводной связи любого подходящего типа, например мобильные телефоны, портативные устройства обработки данных или портативные веб-браузеры.

В общем, различные варианты осуществления настоящего изобретения могут быть реализованы в виде аппаратного обеспечения или специализированных схем, программного обеспечения, логических схем или любой их комбинации. Например, некоторые аспекты могут реализовываться в виде аппаратного обеспечения, в то время как другие аспекты могут реализовываться в виде программного или встроенного программного обеспечения, выполняемого контроллером, микропроцессором или другим вычислительным устройством, при этом настоящее изобретение не ограничивается этими примерами. Несмотря на то, что различные аспекты настоящего изобретения могут быть проиллюстрированы или описаны в виде структурных схем, блок-схем алгоритмов, или с использованием других наглядных представлений, следует понимать, что описанные блоки, устройства, системы, технологии или способы могут реализовываться в виде, например, аппаратного обеспечения, программного обеспечения, встроенного программного обеспечения, заказных схем или логики, аппаратного обеспечения общего назначения или контроллера, а также других вычислительных устройств или их комбинаций (изобретение не ограничивается этими примерами).

Таким образом, в целом по меньшей мере в одном из вариантов осуществления настоящего изобретения устройство содержит: процессор дисплея, сконфигурированный для предоставления визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом; интерактивный видеоинтерфейс, сконфигурированный для обнаружения взаимодействия с указанным визуальным представлением параметра звукового сигнала, и звуковой процессор, сконфигурированный для обработки по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, в зависимости от указанного взаимодействия.

Варианты осуществления настоящего изобретения могут быть реализованы с помощью компьютерного программного обеспечения, исполняемого процессором данных мобильного устройства, например процессорным объектом, или с помощью аппаратного обеспечения, или посредством комбинации программного и аппаратного обеспечения. Кроме того, следует отметить, что различные показанные на чертежах блоки логических алгоритмов могут представлять собой шаги программы или взаимосвязанные логические схемы, блоки и функции, или комбинацию шагов программы и логических схем, блоков и функций. Программное обеспечение может храниться на физических носителях, таких как микросхемы памяти или блоки памяти, реализованные в процессоре, на магнитных носителях, таких как жесткий диск или дискеты, и на оптических носителях, таких как диски DVD и их разновидности, например, CD.

Таким образом, по меньшей мере один вариант осуществления настоящего изобретения включает машиночитаемый носитель, содержащий инструкции, при исполнении которых компьютером выполняется следующее: предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом; обнаружение, с использованием интерфейса, взаимодействия с указанным визуальным представлением параметра звукового сигнала и обработка по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, в зависимости от указанного взаимодействия.

Память может быть любого типа, подходящего к локальной технической среде, и может быть реализована с использованием любых подходящих технологий хранения данных и представлять собой, например, устройства полупроводниковой памяти, устройства и системы магнитной памяти, устройства и системы оптической памяти, постоянное запоминающее устройство и съемные блоки памяти. Процессоры данных могут быть любого типа, подходящего к локальной технической среде, и могут, например, включать один или более универсальных компьютеров, специализированных компьютеров, микропроцессоров, цифровых сигнальных процессоров (DSP, digital signal processor), специализированных интегральных схем (ASIC, specific integrated circuit), схем на уровне логических элементов и процессоров на основе многоядерной архитектуры, а также другие подобные устройства.

Варианты осуществления настоящего изобретения могут быть выполнены на практике в виде различных компонентов, таких как модули интегральных схем. Разработка интегральных схем является в высокой степени автоматизированным процессом. Имеются комплексные и эффективные программные средства для преобразования проекта разработки на логическом уровне в проект разработки на полупроводниковой схеме, готовый для травления и формирования полупроводниковой подложки.

Программное обеспечение компании Synopsys, Inc., расположенной в Маунтин Вью, Калифорния, и компании Cadence Design, расположенной в Сан Хосе, Калифорния, автоматически разводит проводники и размещает компоненты на полупроводниковом кристалле с использованием хорошо разработанных правил, а также библиотек, в которых хранятся заранее записанные модули разработки. Разработанный проект для полупроводниковой схемы в стандартизованном электронном формате (например, Opus, GDSII и т.п.) может быть передан на производство полупроводникового устройства для изготовления.

Используемый в описании термин "схема" относится к следующему:

(а) только к аппаратными реализациям (таким как реализации только на аналоговых и/или цифровых схемах),

(б) к комбинациям схем и программного обеспечения (и/или встроенного программного обеспечения), таким как (i) комбинация процессора(процессоров) или (ii) части процессора/программного обеспечения (включая процессор (процессоры) цифровой обработки сигналов, программное обеспечение и модуль (модули) памяти, которые работают совместно, чтобы заставить устройство, такое как мобильный телефон или сервер, выполнять различные функции, и

(в) к схемам, таким как микропроцессор (микропроцессоры) или часть микропроцессора (микропроцессоров), для работы которого необходимо программное обеспечение или встроенное программное обеспечение, даже если это программное обеспечение или встроенное программное обеспечение физически не присутствует.

Это определение термина "схема" используется везде в данном описании, включая формулу изобретения. В качестве другого примера использования этого термина в данном описании термин "схема" также охватывает реализацию просто процессора (или множества процессоров) и сопровождающего его (или их) программного или встроенного программного обеспечения. Термин "схема" охватывает также в применении к конкретному признаку формулы изобретения, например, интегральную схему основной полосы частот или интегральную схему процессора приложений в мобильном телефоне или аналогичную интегральную схему в сервере, устройстве сотовой сети связи или других сетевых устройствах.

Приведенное описание с помощью примеров, не ограничивающих изобретение, предоставляет полное и информативное описание изобретения. Однако специалисту в соответствующей области техники из данного описания в совокупности с прилагаемыми чертежами и формулой изобретения, могут быть очевидны различные модификации и адаптации. Однако любые виды таких модификаций идей данного изобретения остаются в пределах объема вариантов осуществления настоящего изобретения, не ограничивающих возможности его реализации.

Claims (20)

1. Способ обработки звуковых сигналов в устройстве, включающий:
предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного с по меньшей мере одним звуковым сигналом, при этом указанный по меньшей мере один звуковой сигнал представляет звуковое поле вокруг устройства в реальном времени с использованием по меньшей мере двух микрофонов;
обнаружение, с использованием интерфейса, взаимодействия с упомянутым визуальным представлением параметра звукового сигнала и
обработку упомянутого по меньшей мере одного звукового сигнала, связанного с упомянутым параметром звукового сигнала, в зависимости от упомянутого обнаруженного взаимодействия.

2. Способ по п.1, в котором предоставление упомянутого визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, включает по меньшей мере одно из следующего:
определение уровня звукового давления захвата упомянутого по меньшей мере одного звукового сигнала;
определение профиля формирования диаграммы направленности звукового сигнала для упомянутого по меньшей мере одного звукового сигнала;
определение профиля звукового сигнала для по меньшей мере одного частотного диапазона для упомянутого по меньшей мере одного звукового сигнала и
определение состояния ошибки, связанного с упомянутым по меньшей мере одним звуковым сигналом.

3. Способ по п.2, в котором предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, если параметром является уровень звукового давления захвата упомянутого по меньшей мере одного звукового сигнала, включает по меньшей мере одно из следующего:
отображение текущего уровня звукового давления захвата в качестве текущего уровня и
отображение пикового уровня звукового давления захвата в течение заранее заданного периода времени в качестве пикового уровня.

4. Способ по п.3, в котором управление обработкой по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, включает изменение коэффициента усиления по меньшей мере одного захвата упомянутого звукового сигнала.

5. Способ по пп.2-4, в котором предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, если параметром является профиль формирования диаграммы направленности звукового сигнала для упомянутого по меньшей мере одного звукового сигнала, включает по меньшей мере одно из следующего:
отображение профиля формирования диаграммы направленности звукового сигнала в виде сектора дуги, представляющего угол формирования диаграммы направленности звукового сигнала, и
отображение профиля формирования диаграммы направленности звукового сигнала в виде сектора дуги, представляющего угол формирования диаграммы направленности звукового сигнала относительно другого сектора дуги, представляющего угол записи видеоинформации.

6. Способ по пп.2-4, в котором предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, если параметром является профиль звукового сигнала для по меньшей мере одного частотного диапазона для упомянутого по меньшей мере одного звукового сигнала, включает по меньшей мере одно из следующего:
отображение усредненной ориентации упомянутого по меньшей мере одного звукового сигнала;
отображение ориентации звукового сигнала с пиковым уровнем звукового давления;
отображение сектора, представляющего уровень звукового давления упомянутого по меньшей мере одного звукового сигнала для угла, связанного с сектором, при этом радиус сектора зависит от уровня звукового давления, и
отображение по меньшей мере одного контура, представляющего уровень звукового давления упомянутого по меньшей мере одного звукового сигнала, при этом радиус контура зависит от уровня звукового давления.

7. Способ по п.5, в котором управление обработкой по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, включает изменение ориентации или ширины профиля угла формирования диаграммы направленности звукового сигнала.

8. Способ по п.5, в котором угол формирования диаграммы направленности определяет угол в окрестности центральной точки пространственной фильтрации упомянутого по меньшей мере одного звукового сигнала.

9. Способ по пп.2-4, в котором предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, если параметр определяет состояние ошибки, относящееся к упомянутому по меньшей мере одному звуковому сигналу, включает по меньшей мере одно из следующего:
отображение предупреждения об ограничении;
отображение состояния ошибки захвата упомянутого по меньшей мере одного звукового сигнала и отображение аппаратной ошибки, связанной с захватом упомянутого по меньшей мере одного звукового сигнала.

10. Способ по п.9, в котором управление обработкой по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, включает по меньшей мере одно из следующего:
изменение ориентации или ширины профиля упомянутого угла формирования диаграммы направленности звукового сигнала;
изменение коэффициента усиления упомянутого по меньшей мере одного звукового сигнала и изменение режима записи.

11. Устройство для обработки звуковых сигналов, содержащее по меньшей мере один процессор и по меньшей мере один модуль памяти, в котором хранится компьютерный программный код, при этом по меньшей мере один модуль памяти и компьютерный программный код сконфигурированы таким образом, чтобы при взаимодействии с упомянутым по меньшей мере одним процессором обеспечивать выполнение устройством по меньшей мере следующего:
предоставления визуального представления по меньшей мере одного параметра звукового сигнала, связанного с по меньшей мере одним звуковым сигналом, при этом указанный по меньшей мере один звуковой сигнал представляет звуковое поле вокруг устройства в реальном времени с использованием по меньшей мере двух микрофонов;
обнаружения, с использованием интерфейса, взаимодействия с упомянутым визуальным представлением параметра звукового сигнала и
обработки упомянутого по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, в зависимости от упомянутого обнаруженного взаимодействия.

12. Устройство по п.11, в котором предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, обеспечивает выполнение упомянутым устройством по меньшей мере одного из следующего:
определения уровня звукового давления захвата упомянутого по меньшей мере одного звукового сигнала;
определения профиля формирования диаграммы направленности звукового сигнала для упомянутого по меньшей мере одного звукового сигнала;
определения профиля звукового сигнала для по меньшей мере одного частотного диапазона для упомянутого по меньшей мере одного звукового сигнала и
определения состояния ошибки, связанного с упомянутым по меньшей мере одним звуковым сигналом.

13. Устройство по п.12, в котором предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, если параметром является уровень звукового давления захвата упомянутого по меньшей мере одного звукового сигнала, обеспечивает выполнение упомянутым устройством по меньшей мере одного из следующего:
отображения текущего уровня звукового давления захвата в качестве текущего уровня и отображения пикового уровня звукового давления захвата в течение заранее заданного периода времени в качестве пикового уровня.

14. Устройство по п.13, в котором обеспечение выполнения упомянутым устройством управления обработкой упомянутого по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, включает обеспечение выполнения упомянутым устройством по меньшей мере изменения коэффициента усиления по меньшей мере одного захвата звукового сигнала.

15. Устройство по пп.12-14, в котором обеспечение выполнения упомянутым устройством предоставления визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, если параметром является профиль формирования диаграммы направленности звукового сигнала для упомянутого по меньшей мере одного звукового сигнала, включает обеспечение выполнения упомянутым устройством по меньшей мере одного из следующего:
отображения профиля формирования диаграммы направленности звукового сигнала в виде сектора дуги, представляющего угол формирования диаграммы направленности звукового сигнала, и
отображения профиля формирования диаграммы направленности звукового сигнала в виде сектора дуги, представляющего угол формирования диаграммы направленности звукового сигнала относительно другого сектора дуги, представляющего угол записи видеоинформации.

16. Устройство по пп.12-14, в котором предоставление визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, если параметром является профиль звукового сигнала для по меньшей мере одного частотного диапазона для упомянутого по меньшей мере одного звукового сигнала, обеспечивает выполнение упомянутым устройством по меньшей мере одного из следующего:
отображения усредненной ориентации упомянутого по меньшей мере одного звукового сигнала;
отображения ориентации звукового сигнала с пиковым уровнем звукового давления;
отображения сектора, представляющего уровень звукового давления упомянутого по меньшей мере одного звукового сигнала для угла, связанного с упомянутым сектором, при этом радиус сектора зависит от уровня звукового давления, и
отображения по меньшей мере одного контура, представляющего уровень звукового давления по меньшей мере одного звукового сигнала, при этом радиус контура зависит от уровня звукового давления.

17. Устройство по п.15, в котором обеспечение выполнения упомянутым устройством управления обработкой по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, включает обеспечение выполнения упомянутым устройством по меньшей мере изменения ориентации или ширины профиля угла формирования диаграммы направленности звукового сигнала.

18. Устройство по п.15, в котором угол формирования диаграммы направленности определяет угол в окрестности центральной точки пространственной фильтрации упомянутого по меньшей мере одного звукового сигнала.

19. Устройство по пп.12-14, в котором обеспечение выполнения упомянутым устройством предоставления визуального представления по меньшей мере одного параметра звукового сигнала, связанного по меньшей мере с одним звуковым сигналом, если параметр определяет состояние ошибки, относящееся к упомянутому по меньшей мере одному звуковому сигналу, включает обеспечение выполнения упомянутым устройством по меньшей мере одного из следующего:
отображения предупреждения об ограничении;
отображения состояния ошибки захвата упомянутого по меньшей мере одного звукового сигнала и отображения аппаратной ошибки, связанной с захватом упомянутого по меньшей мере одного звукового сигнала.

20. Устройство по п.19, в котором обеспечение выполнения упомянутым устройством управления обработкой по меньшей мере одного звукового сигнала, связанного с параметром звукового сигнала, включает обеспечение выполнения упомянутым устройством по меньшей мере одного из следующего:
изменения ориентации или ширины профиля угла формирования диаграммы направленности звукового сигнала;
изменения коэффициента усиления по меньшей мере одного звукового сигнала и изменения режима записи.

Images