RU2411645C2 - Устройство и способ для генерации значений субполос звукового сигнала и устройство и способ для генерации аудиоотсчетов временной области - Google Patents

Устройство и способ для генерации значений субполос звукового сигнала и устройство и способ для генерации аудиоотсчетов временной области Download PDF

Info

Publication number
RU2411645C2
RU2411645C2 RU2008137468/09A RU2008137468A RU2411645C2 RU 2411645 C2 RU2411645 C2 RU 2411645C2 RU 2008137468/09 A RU2008137468/09 A RU 2008137468/09A RU 2008137468 A RU2008137468 A RU 2008137468A RU 2411645 C2 RU2411645 C2 RU 2411645C2
Authority
RU
Russia
Prior art keywords
window
coefficients
samples
function
window coefficients
Prior art date
Application number
RU2008137468/09A
Other languages
English (en)
Other versions
RU2008137468A (ru
Inventor
Маркус ШНЕЛЛЬ (DE)
Маркус ШНЕЛЛЬ
Манфред ЛУТЦКИ (DE)
Манфред ЛУТЦКИ
Маркус ЛОВАССЕР (DE)
Маркус ЛОВАССЕР
Маркус ШМИДТ (DE)
Маркус ШМИДТ
Марк ГАЙЕР (DE)
Марк ГАЙЕР
Михель МЕЛЛАР (DE)
Михель МЕЛЛАР
Бернд ЭДЛЕР (DE)
Бернд ЭДЛЕР
Маркус МУЛТРУС (DE)
Маркус МУЛТРУС
Геральд ШУЛЛЕР (DE)
Геральд ШУЛЛЕР
Ральф ГАЙГЕР (DE)
Ральф ГАЙГЕР
Бернхард ГРИЛЛ (DE)
Бернхард ГРИЛЛ
Original Assignee
Фраунхофер-Гезелльшафт Цур Фердерунг Дер Ангевандтен Форшунг Е.Ф.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Фраунхофер-Гезелльшафт Цур Фердерунг Дер Ангевандтен Форшунг Е.Ф. filed Critical Фраунхофер-Гезелльшафт Цур Фердерунг Дер Ангевандтен Форшунг Е.Ф.
Publication of RU2008137468A publication Critical patent/RU2008137468A/ru
Application granted granted Critical
Publication of RU2411645C2 publication Critical patent/RU2411645C2/ru

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/022Blocking, i.e. grouping of samples in time; Choice of analysis windows; Overlap factoring
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/0204Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders using subband decomposition
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/45Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of analysis window
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03HIMPEDANCE NETWORKS, e.g. RESONANT CIRCUITS; RESONATORS
    • H03H17/00Networks using digital techniques
    • H03H17/02Frequency selective networks
    • H03H17/0248Filters characterised by a particular frequency response or filtering method
    • H03H17/0264Filter sets with mutual related characteristics
    • H03H17/0266Filter banks
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03MCODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M7/00Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
    • H03M7/30Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/038Speech enhancement, e.g. noise reduction or echo cancellation using band spreading techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Mathematical Physics (AREA)
  • Computer Hardware Design (AREA)
  • Theoretical Computer Science (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Liquid Crystal Substances (AREA)
  • Tires In General (AREA)
  • Medicines That Contain Protein Lipid Enzymes And Other Medicines (AREA)
  • External Artificial Organs (AREA)
  • Developing Agents For Electrophotography (AREA)
  • Peptides Or Proteins (AREA)
  • Materials For Photolithography (AREA)

Abstract

Изобретение относится к устройству и способу для генерации значений субполос звукового сигнала, к устройству и способу для генерации отсчетов временной области. Вариант осуществления устройства (100) для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала содержит средство (110) оконной обработки по анализу для оконной обработки кадра (120) из входных аудиоотсчетов временной области, находящихся в последовательности времени, простирающейся от более раннего отсчета до более позднего отсчета, используя оконную функцию (190) анализа, содержащую последовательность оконных коэффициентов, для получения прошедших оконную обработку отсчетов. Оконная функция анализа содержит первое количество оконных коэффициентов, полученных из большей оконной функции, содержащей последовательность из большего второго количества оконных коэффициентов, причем оконные коэффициенты оконной функции получают с помощью интерполяции оконных коэффициентов большей оконной функции. Устройство (100) дополнительно содержит средство (170) вычислений для вычисления значений субполос звукового сигнала, используя прошедшие оконную обработку отчеты. Технический результат - увеличение полосы пропускания передачи по сравнению со звуковой системой с более высокой задержкой при сопоставимом уровне качества. 6 н. и 18 з.п. ф-лы, 19 ил.

Description

ОБЛАСТЬ ТЕХНИКИ, К КОТОРОЙ ОТНОСИТСЯ ИЗОБРЕТЕНИЕ
Варианты осуществления настоящего изобретения относятся к устройству и способу для генерации значений субполос звукового сигнала, к устройству и способу для генерации аудиоотсчетов временной области и к системам, содержащим любые из указанных выше устройств, которые могут, например, воплощаться в области техники современного кодирования звука, декодирования звука или в других применениях, связанных с передачей звука.
Современная цифровая обработка звука обычно основана на схемах кодирования, которые предоставляют возможность существенного сокращения в плане расхода битов (битрейта), полосы пропускания передачи и объема памяти по сравнению с непосредственной передачей или хранением соответствующих звуковых данных. Это обеспечивают с помощью кодирования звуковых данных на стороне передатчика и декодирования кодированных данных на стороне приемника перед, например, обеспечением передачи декодированных звуковых данных слушателю или для дополнительной обработки сигналов.
Такие системы цифровой обработки звука можно воплощать по отношению к широкому диапазону параметров, которые обычно влияют на качество передаваемых или иначе обрабатываемых звуковых данных, с одной стороны, и на эффективность вычислений, полосу пропускания и другие связанные с производительностью параметры, с другой стороны. Очень часто более высокое качество требует более высокого битрейта, увеличенной вычислительной сложности и более высоких требований к памяти для передачи кодированных звуковых данных. Следовательно, в зависимости от подразумеваемого применения такие факторы, как допустимый битрейт, приемлемая вычислительная сложность и приемлемое количество данных должны быть сбалансированы с необходимым и обеспечиваемым качеством.
Дополнительный параметр, который особенно важен в приложениях в реальном времени, таких как двунаправленная или однонаправленная связь, задержка, вносимая различными схемами кодирования, может также играть важную роль. Как следствие, задержка, вносимая кодированием и декодированием звука, вводит дополнительные ограничения в смысле указанных ранее параметров, когда сопоставляются потребности и стоимость различных схем кодирования, имея в виду определенную область применения. Поскольку такие системы цифрового звука могут применяться во многих различных областях применения, простирающихся от передач с очень низким качеством до высококачественных передач, различные параметры и различные ограничения очень часто налагаются на соответствующие звуковые системы. В некоторых применениях для более низкой задержки может, например, потребоваться более высокий битрейт и, следовательно, увеличенная полоса пропускания передачи по сравнению со звуковой системой с более высокой задержкой при сопоставимом уровне качества.
Однако во многих случаях, вероятно, придется искать компромисс в различных параметрах, таких как битрейт, вычислительная сложность, требования к памяти, качество и задержка.
СУЩНОСТЬ ИЗОБРЕТЕНИЯ
Согласно одному из вариантов осуществления настоящего изобретения, устройство для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала содержит средство оконной обработки по анализу для оконной обработки кадра входных аудиоотсчетов временной области, находящихся в последовательности времени, простирающейся от более раннего отсчета до более позднего отсчета, используя оконную функцию анализа, содержащую последовательность оконных коэффициентов для получения прошедших оконную обработку отсчетов, причем оконная функция анализа содержит первое количество оконных коэффициентов, полученных из большей оконной функции, содержащей последовательность из большего второго количества оконных коэффициентов, причем оконные коэффициенты оконной функции получают с помощью интерполяции оконных коэффициентов большей оконной функции, при этом второе количество является четным числом, и средство вычислений для вычисления значений субполос звукового сигнала, используя прошедшие оконную обработку отсчеты.
Согласно одному из вариантов осуществления настоящего изобретения устройство для генерации аудиоотсчетов временной области содержит средство вычислений для вычисления последовательности промежуточных отсчетов временной области из значений субполос звукового сигнала в каналах субполос звукового сигнала, причем данная последовательность содержит более ранние промежуточные отсчеты временной области и более поздние отчеты временной области, средство оконной обработки по синтезу для оконной обработки последовательности промежуточных отсчетов временной области, используя оконную функцию синтеза, содержащую последовательность оконных коэффициентов для получения прошедших оконную обработку промежуточных отсчетов временной области, при этом оконная функция синтеза содержит первое количество оконных коэффициентов, полученных из большей оконной функции, содержащей последовательность из большего второго количества оконных коэффициентов, причем оконные коэффициенты оконной функции получают с помощью интерполяции оконных коэффициентов большей оконной функции, и причем второе количество является четным числом, и выходной узел суммирования с перекрытием для обработки прошедших оконную обработку промежуточных отсчетов временной области для получения отсчетов временной области.
ПЕРЕЧЕНЬ ЧЕРТЕЖЕЙ
Варианты осуществления настоящего изобретения описаны далее со ссылкой к прилагаемым чертежам.
Фиг.1 показывает структурную схему одного из вариантов осуществления устройства для генерации значений субполос звукового сигнала;
фиг.2a показывает структурную схему одного из вариантов осуществления устройства для генерации аудиоотсчетов временной области;
фиг.2b показывает функциональный принцип согласно одному из вариантов осуществления настоящего изобретения в форме устройства для генерации отсчетов временной области;
фиг.3 показывает концепцию интерполяции оконных коэффициентов согласно одному из вариантов осуществления настоящего изобретения;
фиг.4 показывает интерполяцию оконных коэффициентов в случае синусной оконной функции;
фиг.5 показывает структурную схему варианта осуществления настоящего изобретения, содержащего декодер SBR и кодер SBR;
фиг.6 показывает источники задержки системы SBR;
фиг.7a показывает последовательность операций одного из вариантов осуществления способа генерации значений субполос звукового сигнала;
фиг.7b показывает этап варианта осуществления способа, показанного на фиг. 7a;
фиг.7c показывает последовательность операций одного из вариантов осуществления способа генерации значений субполос звукового сигнала;
фиг.8a показывает последовательность операций сравнительного примера способа генерации отсчетов временной области;
фиг.8b показывает последовательность операций сравнительного примера способа генерации отсчетов временной области;
фиг.8c показывает последовательность операций одного из вариантов осуществления способа генерации отсчетов временной области;
фиг.8d показывает последовательность операций другого варианта осуществления способа генерации отсчетов временной области;
фиг.9a показывает возможную реализацию сравнительного примера способа генерации значений субполос звукового сигнала;
фиг.9b показывает возможную реализацию одного из вариантов осуществления способа генерации значений субполос звукового сигнала;
фиг.10a показывает возможную реализацию сравнительного примера способа генерации отсчетов временной области;
фиг.10b показывает дополнительную возможную реализацию варианта осуществления способа генерации отсчетов временной области;
фиг.11 показывает сравнение оконной функции синтеза согласно варианту осуществления настоящего изобретения и синусной оконной функции;
фиг.12 показывает сравнение оконной функции синтеза согласно варианту осуществления настоящего изобретения и функции фильтра-прототипа SBR QMF;
фиг.13 показывает различные задержки, вызванные оконной функцией и функцией фильтра-прототипа, показанной на фиг. 12;
фиг.14a показывает таблицу, показывающую различные вклады в задержку обычного кодека AAC-LD+SBR и кодека AAC-ELD, содержащего вариант осуществления настоящего изобретения;
фиг.14b показывает дополнительную таблицу, содержащую подробную информацию относительно задержки различных компонентов различных кодеков;
фиг.15a показывает сравнение частотных характеристик устройств, основанных на оконной функции согласно варианту осуществления настоящего изобретения, и устройства, основанного на синусной оконной функции;
фиг.15b показывает крупный план частотной характеристики, показанной на фиг. 15a;
фиг.16a показывает сравнение частотной характеристики 4 различных оконных функций;
фиг.16b показывает крупный план частотных характеристик, показанных на фиг. 16a;
фиг.17 показывает сравнение частотных характеристик двух различных оконных функций, одной оконной функции согласно настоящему изобретению и одной оконной функции, являющейся симметричной оконной функцией;
фиг.18 показывает схематично общее свойство временного маскирования человеческого уха; и
фиг.19 показывает сравнение исходного временного звукового сигнала и временного сигнала, сгенерированного, основываясь на кодеке HEAAC, и временного сигнала, основанного на кодеке, содержащем вариант осуществления настоящего изобретения.
ПОДРОБНОЕ ОПИСАНИЕ ВАРИАНТОВ ОСУЩЕСТВЛЕНИЯ
Фиг. 1-19 показывают структурные схемы и дополнительные схемы, которые описывают функциональные свойства и особенности различных вариантов осуществления устройств и способов для генерации значений субполос звукового сигнала, устройств и способов для генерации отсчетов временной области и систем, содержащих по меньшей мере одно из указанных выше устройств или способов. Однако, перед более подробным описанием первого варианта осуществления настоящего изобретения, нужно отметить, что варианты осуществления настоящего изобретения можно воплощать в аппаратных средствах и в программном обеспечении. Следовательно, реализации, описанные в терминах структурных схем аппаратных реализаций соответствующих вариантов осуществления, можно также рассматривать как последовательности операций соответствующего варианта осуществления соответствующего способа. Кроме того, последовательность операций, описывающую вариант осуществления настоящего изобретения, можно рассматривать как являющуюся структурной схемой соответствующей аппаратной реализации.
В последующем будут описаны реализации наборов фильтров, которые можно воплощать как набор фильтров анализа или набор фильтров синтеза. Набор фильтров анализа является устройством для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала, основываясь на аудиоотсчетах (входных) временной области, находящихся в последовательности времени, простирающейся от более раннего отсчета до более позднего отсчета. Другими словами, термин набор фильтров анализа может синонимично использоваться для варианта осуществления настоящего изобретения в форме устройства для генерации значений субполос звукового сигнала. Соответственно, набор фильтров синтеза является набором фильтров для генерации аудиоотсчетов временной области из значений субполос звукового сигнала в каналах субполос звукового сигнала. Другими словами, термин набор фильтров синтеза может использоваться синонимично для варианта осуществления согласно настоящему изобретению в форме устройства для генерации аудиоотсчетов временной области.
И набор фильтров анализа, и набор фильтров синтеза, которые обобщенно называют наборами фильтров, можно, например, воплощать как модулированные наборы фильтров. Модулированные наборы фильтров, примеры и варианты осуществления которых описаны более подробно ниже, основаны на колебаниях, имеющих частоты, которые основаны или получены из центральных частот соответствующих субполос в области частоты. Термин «модулированный» относится в этом контексте к тому факту, что указанные выше колебания используются в контексте с оконной функцией или функцией фильтра-прототипа, в зависимости от конкретной реализации такого модулированного набора фильтров. Модулированные наборы фильтров могут в принципе быть основаны на действительных колебаниях, таких как гармонические колебания (синусные колебания или косинусные колебания) или соответствующие комплексные колебания (комплексные экспоненциальные колебания). Соответственно, модулированные наборы фильтров упоминаются как действительнозначные модулированные наборы фильтров или комплексные модулированные наборы фильтров, соответственно.
В последующем описании варианты осуществления настоящего изобретения в форме комплексных модулированных наборов фильтров с низкой задержкой и действительнозначных модулированных наборов фильтров с низкой задержкой и соответствующие способы и программные реализации будут описаны более подробно. Одно из основных применений такого модулированного набора фильтров с низкой задержкой - интеграция в систему копирования спектральных полос (SBR) с низкой задержкой, которая в настоящее время основана на использовании комплексного набора фильтров QMF с симметричным фильтром-прототипом (QMF = квадратурный зеркальный фильтр).
Как очевидно в структуре настоящего описания, реализация наборов фильтров с низкой задержкой согласно вариантам осуществления настоящего изобретения обеспечивает преимущество улучшенного соотношения между вычислительной сложностью, частотной характеристикой, временным распределением шума и качеством (восстановления). Кроме того, улучшенное соотношение между задержкой и качеством восстановления обеспечивают, основываясь на подходе использования так называемых методик с нулевой задержкой для расширения импульсной передаточной функции соответствующих наборов фильтров, не вводя дополнительную задержку. Более низкую задержку на предопределенном уровне качества, лучшее качество на предопределенном уровне задержки или одновременное улучшение и задержки, и качества можно обеспечивать, используя набор фильтров анализа или набор фильтров синтеза согласно варианту осуществления настоящего изобретения.
Варианты осуществления настоящего изобретения основаны на обнаружении, что эти улучшения можно обеспечивать, используя схему интерполяции для получения оконной функции, имеющей первое количество оконных коэффициентов, основываясь на оконной функции, имеющей большее второе количество оконных коэффициентов. Используя схему интерполяции, можно обеспечивать улучшенное распределение значений энергии оконных коэффициентов оконных функций. Это приводит во многих случаях к улучшенному уровню наложения спектров и улучшению качества звука. Например, когда большая оконная функция содержит четное количество оконных коэффициентов, схема интерполяции может быть полезной.
Вычислительная сложность увеличивается только немного при использовании схемы интерполяции. Однако это небольшое увеличение не только перевешивается улучшением качества, но также и результирующей экономией, относящейся к меньшему использованию памяти, если сравнивать ситуацию с двумя отдельными оконными функциями, хранящимися независимо. Хотя в одной из реализаций интерполяцию можно выполнять в одном или в нескольких циклах тактового сигнала процессора, что во многих случаях приводит к незначительным задержке и увеличению вычислительной сложности, дополнительные требования к памяти могут быть чрезвычайно важными во многих применениях. Например, в случае мобильных приложений, память может быть ограничена, особенно когда используют длинные оконные функции, имеющие значительное количество оконных коэффициентов.
Кроме того, варианты осуществления согласно настоящему изобретению могут использоваться в контексте с новой оконной функцией для любого из двух описанных выше наборов фильтров, дополнительно улучшая указанные выше соотношения. В случае набора фильтров анализа качество и/или задержку можно дополнительно улучшать, используя оконную функцию анализа, содержащую последовательность оконных коэффициентов, которая содержит первую группу, содержащую первую последовательную часть последовательности оконных коэффициентов, и вторую группу оконных коэффициентов, содержащих вторую последовательную часть последовательности оконных коэффициентов. Первая часть и вторая часть содержат все оконные коэффициенты оконной функции. Кроме того, первая часть содержит меньше оконных коэффициентов, чем вторая часть, но значение энергии оконных коэффициентов в первой части выше, чем значение энергии оконных коэффициентов второй части. Первая группа оконных коэффициентов используется для оконной обработки более поздних отсчетов временной области, а вторая группа оконных коэффициентов используется для оконной обработки более ранних отсчетов временной области. Эта форма оконной функции обеспечивает возможность обработки отсчетов временной области с помощью оконных коэффициентов, которые ранее имели более высокие значения энергии. Это является результатом описанного распределения оконных коэффициентов на две части и их применения к последовательности аудиоотсчетов временной области. Как следствие, использование такой оконной функции может уменьшать задержку, введенную набором фильтров, при постоянном уровне качества, или допускает улучшение уровня качества, основываясь на постоянном уровне задержки.
Соответственно, в случае варианта осуществления настоящего изобретения в форме устройства для генерации аудиоотсчетов временной области и соответствующего способа, средство оконной обработки по синтезу может использовать оконную функцию синтеза, которая содержит последовательность оконных коэффициентов, упорядоченных соответственно в первой (последовательной) части и второй (последовательной) части. Также в случае оконной функции синтеза, значение энергии или значение полной энергии оконного коэффициента в первой части выше, чем значение энергии или значение полной энергии оконного коэффициента второй части, причем первая часть содержит меньше оконных коэффициентов, чем вторая часть. Из-за этого распределения оконных коэффициентов на две части и того факта, что средство оконной обработки по синтезу использует первую часть коэффициентов блока оконной функции для оконной обработки более поздних отсчетов временной области и вторую часть оконных коэффициентов для оконной обработки более ранних отсчетов временной области, ранее описанные эффекты и преимущества также относятся к набору фильтров синтеза или соответствующему варианту осуществления способа.
Подробные описания оконных функций синтеза и оконных функций анализа, используемых в структуре некоторых вариантов осуществления настоящего изобретения, будут описаны позже более подробно. Во многих вариантах осуществления настоящего изобретения последовательность оконных коэффициентов оконной обработки по синтезу и/или оконной обработки по анализу содержит точно первую группу и вторую группу оконных коэффициентов. Кроме того, каждый из оконных коэффициентов последовательности оконных коэффициентов принадлежит точно к одной из первой группы и второй группы оконных коэффициентов.
Каждая из этих двух групп содержит точно одну часть последовательности оконных коэффициентов, расположенных последовательно. В настоящем описании часть содержит последовательный набор оконных коэффициентов в соответствии с последовательностью оконных коэффициентов. В вариантах осуществления согласно настоящему изобретению каждая из этих двух групп (первой и второй группы) содержит точно одну часть последовательности оконных коэффициентов, как объяснено выше. Соответствующие группы оконных коэффициентов не содержат ни одного оконного коэффициента, который не принадлежит к точно одной части соответствующей группы. Другими словами, во многих вариантах осуществления настоящего изобретения каждая из первой и второй группы оконных коэффициентов содержит только первую часть и вторую часть оконных коэффициентов, не содержат дополнительные оконные коэффициенты.
В структуре настоящего описания последовательную часть последовательности оконных коэффициентов следует понимать в математическом смысле как связанный набор оконных коэффициентов, причем в данном наборе не отсутствуют оконные коэффициенты по сравнению с последовательностью оконных коэффициентов, которая лежит в диапазоне (например, в диапазоне индексов) оконных коэффициентов соответствующей части. Как следствие, во многих вариантах осуществления настоящего изобретения последовательность оконных коэффициентов делят точно на две связанных части оконных коэффициентов, которые формируют каждую из первой или второй групп оконных коэффициентов. В этих случаях каждый оконный коэффициент, который содержится в первой группе оконных коэффициентов, упорядочивают или перед, или после каждого из оконных коэффициентов второй группы оконных коэффициентов по отношению ко всей последовательности оконных коэффициентов.
Другими словами, во многих вариантах осуществления согласно настоящему изобретению последовательность оконных коэффициентов делится точно на две группы, или части, не пропуская оконных коэффициентов. В соответствии с последовательностью оконных коэффициентов, которая также представляет также их очередность, каждая из этих двух групп, или частей, содержит все оконные коэффициенты до (но не включительно) или начиная с (включительно) граничного оконного коэффициента. В качестве примера, первая часть, или первая группа, может содержать оконные коэффициенты, имеющие индексы от 0 до 95 и от 96 до 639 в случае оконной функции, содержащей 640 оконных коэффициентов (имеющих индексы от 0 до 639). В данном случае граничным оконным коэффициентом является оконный коэффициент, соответствующий индексу 96. Естественно, также возможны другие примеры (например, 0-543 и 544-639).
Подробная примерная реализация набора фильтров анализа, описанного в последующем, обеспечивает длину фильтра, охватывающую 10 блоков входных отсчетов, вызывая системную задержку только 2 блока, что соответствует задержке, вводимой MDCT (измененным дискретным косинусным преобразованием) или MDST (измененным дискретным синусным преобразованием). Одно различие происходит из-за большей длины фильтра, охватывающей 10 блоков входных отсчетов, по сравнению с реализацией MDCT или MDST, так что перекрытие увеличивается с 1 блока в случае MDCT и MDST до перекрытия в 9 блоков. Однако можно также реализовывать дополнительные воплощения, охватывающие другое количество блоков входных отсчетов, которые также упоминаются как входные аудиоотсчеты.
Кроме того, можно также рассматривать и осуществлять другие соотношения.
Фиг. 1 показывает структурную схему набора 100 фильтров анализа как вариант осуществления устройства для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала. Набор 100 фильтров анализа содержит средство 110 оконной обработки по анализу для оконной обработки кадра 120 входных аудиоотсчетов временной области. Кадр 120 содержит T блоков 130-1, ..., 130-T (входных) аудиоотсчетов временной области, причем T является положительным целым числом и равно 10 в случае варианта осуществления, показанного на фиг. 1. Однако кадр 120 может также содержать другое количество блоков 130.
И кадр 120, и каждый из блоков 130 содержат входные аудиоотсчеты временной области в последовательности времени, простирающейся от более раннего отсчета до более позднего отсчета согласно временной шкале, которая обозначена стрелкой 140 на фиг. 1. Другими словами, на иллюстрации, которая показана на фиг. 1, чем дальше вправо находится аудиоотсчет временной области, который в этом случае является также входным отсчетом звукового сигнала временной области, тем более поздним является соответствующий аудиоотсчет временной области по отношению к последовательности аудиоотсчетов временной области.
Средство 110 оконной обработки по анализу генерирует, основываясь на последовательности аудиоотсчетов временной области, прошедшие оконную обработку отсчеты временной области, которые упорядочивают в кадр 150 из прошедших оконную обработку отсчетов. Согласно кадру 120 из входных аудиоотсчетов временной области, прошедший оконную обработку кадр из отсчетов 150 также содержит T блоков прошедших оконную обработку отсчетов 160-1..., 160-T. В предпочтительных вариантах осуществления настоящего изобретения каждый из блоков прошедших оконную обработку отсчетов 160 содержит то же самое количество прошедших оконную обработку отсчетов, как количество входных аудиоотсчетов временной области каждого блока 130 входных аудиоотсчетов временной области. Следовательно, когда каждый из блоков 130 содержит N входных аудиоотсчетов временной области, каждый из кадра 120 и кадра 150 содержит T·N отсчетов. В этом случае N является положительным целым числом, которое может, например, иметь значения 32 или 64. Для T=10, каждый из кадров 120, 150 содержит 320 и 640, соответственно, в описанном выше случае.
Средство 110 оконной обработки по анализу связано со средством 170 вычислений для вычисления значений субполос звукового сигнала, основываясь на прошедших оконную обработку отсчетах, обеспеченных средством 110 оконной обработки по анализу. Значения субполос звукового сигнала обеспечиваются средством 170 вычислений как блок 180 значений субполос звукового сигнала, причем каждое из значений субполос звукового сигнала соответствует одному каналу субполос звукового сигнала. В предпочтительном варианте осуществления блок 180 значений субполос звукового сигнала также содержит N значений субполос.
Каждый из каналов субполос звукового сигнала соответствует характерной средней частоте. Средние частоты различных каналов субполос звукового сигнала могут, например, быть равномерно распределены или расположены на одинаковом расстоянии относительно полосы пропускания частот соответствующего звукового сигнала, как описано входными аудиоотсчетами временной области, подаваемыми на набор 100 фильтров анализа.
Средство 110 оконной обработки по анализу настраивают для оконной обработки входных аудиоотсчетов временной области кадра 120, основываясь на оконной обработке по анализу, содержащей последовательность оконных коэффициентов, имеющую первое количество оконных коэффициентов, для получения прошедших оконную обработку отсчетов кадра 150. Средство 110 оконной обработки по анализу настраивают для оконной обработки кадра 120 аудиоотсчетов временной области, умножая значения аудиоотсчетов временной области на оконные коэффициенты оконной функции анализа. Другими словами, оконная обработка содержит поэлементное умножение аудиоотсчетов временной области на соответствующие оконные коэффициенты. Поскольку и кадр 120 из аудиоотсчетов временной области, и оконные коэффициенты содержат соответствующую последовательность, поэлементное умножение оконных коэффициентов и аудиоотсчетов временной области выполняют согласно соответствующим последовательностям, которые, например, обозначены индексом отсчета и индексом оконного коэффициента.
В вариантах осуществления настоящего изобретения оконную функцию используют для оконной обработки кадра входных аудиоотсчетов временной области, произведенной, основываясь на большей оконной функции, содержащей большее второе количество оконных коэффициентов, используя схему интерполяции как, например, показано в контексте фиг. 3 и 4. Большая оконная функция обычно содержит четное количество оконных коэффициентов и может, например, быть асимметричной относительно последовательности оконных коэффициентов. Также могут использоваться симметричные оконные функции.
Оконную функцию 190, используемую для оконной обработки кадра 120 из входных отсчетов временной области, получают, например, с помощью интерполяции средством 110 оконной обработки по анализу или набором 100 фильтров оконных коэффициентов большей оконной функции. В вариантах осуществления согласно настоящему изобретению это выполняют с помощью, например, интерполяции последовательных оконных коэффициентов большей оконной функции. В данном случае можно использовать линейную, полиномиальную или основанную на сплайне схему интерполяции.
Когда, например, каждый оконный коэффициент большей оконной функции используется один раз для генерации оконного коэффициента оконной функции, и второе количество является четным числом, количество оконных коэффициентов оконной функции 190 (первое количество) равно половине второго количества. Такая интерполяция может быть основана на линейной интерполяции, пример которой будет описан позже в контексте уравнения (15). Однако также можно использовать другие схемы интерполяции, как уже описано.
В вариантах осуществления настоящего изобретения в форме набора 100 фильтров анализа, как показано на фиг. 1, оконная функция анализа, а также оконная функция синтеза в случае набора фильтров синтеза может, например, содержать только действительные прошедшие оконную обработку коэффициенты. Другими словами, каждый из оконных коэффициентов, приписанных индексу оконного коэффициента, является действительным значением.
Оконные коэффициенты вместе формируют соответствующую оконную функцию, пример которой показан на фиг. 1, как оконную функцию 190 анализа. В последующем рассматривают оконные функции, которые предоставляют возможность уменьшения задержки при использовании в контексте описанных наборов фильтров. Однако варианты осуществления настоящего изобретения не ограничены такими оконными функциями с низкой задержкой.
Последовательность оконных коэффициентов, формирующих оконную функцию 190 анализа, содержит первую группу 200 и вторую группу 210 оконных коэффициентов. Первая группа 200 содержит первую последовательную и связанную часть оконных коэффициентов последовательности оконных коэффициентов, тогда как вторая группа 210 содержит вторую последовательную и связанную часть оконных коэффициентов. Вместе с первой частью в первой группе 200 они формируют всю последовательность оконных коэффициентов оконной функции 190 анализа. Кроме того, каждый оконный коэффициент последовательности оконных коэффициентов принадлежит или к первой части, или ко второй части оконных коэффициентов, так что вся оконная функция 190 анализа состоит из оконных коэффициентов первой части и второй части. Первая часть оконных коэффициентов, следовательно, идентична первой группе 200 оконных коэффициентов, и вторая часть идентична второй группе 210 оконных коэффициентов, как обозначено соответствующими стрелками 200, 210 на фиг. 1.
Количество оконных коэффициентов в первой группе 200 первой части оконных коэффициентов меньше количества оконных коэффициентов во второй группе второй части оконных коэффициентов. Однако значение энергии или значение полной энергии оконных коэффициентов в первой группе 200 выше значения энергии или значения полной энергии оконных коэффициентов во второй группе 210. Как будет описано позже, значение энергии набора оконных коэффициентов основано на сумме квадратов абсолютных значений соответствующих оконных коэффициентов.
В вариантах осуществления согласно настоящему изобретению оконная функция 190 анализа, а также соответствующая оконная функция синтеза может быть поэтому асимметричной относительно последовательности оконных коэффициентов или индексов оконных коэффициентов. Основываясь на определении набора индексов оконных коэффициентов, по которым определена оконная функция 190 анализа, оконная функция 190 анализа является асимметричной, когда для всех действительных чисел n существует дополнительное действительное число n0 так, чтобы абсолютное значение оконного коэффициента, соответствующего оконному коэффициенту с индексом оконного коэффициента (n0-n), не было равно абсолютному значению оконного коэффициента, соответствующему индексу оконного коэффициента (n0+n), когда (n0-n) и (n0+n) принадлежат набору определения.
Кроме того, как также схематично показано на фиг. 1, оконная функция 190 анализа содержит точки изменения знака, в которых произведения двух последовательных оконных коэффициентов являются отрицательными. Более подробное описание и дополнительные особенности возможных оконных функций согласно вариантам осуществления настоящего изобретения будут обсуждаться более подробно в контексте фиг. 11-19.
Как указано ранее, кадр 150 из прошедших оконную обработку отсчетов содержит подобную блочную конструкцию с отдельными блоками 160-1..., 160-T, как кадр 120 из отдельных входных отсчетов временной области. Поскольку средство 110 оконной обработки по анализу настраивают для оконной обработки входным аудиоотсчетам временной области с помощью умножения этих значений на оконные коэффициенты оконной функции 190 анализа, кадр 150 из прошедших оконную обработку отсчетов находится также во временной области. Средство 170 вычислений вычисляет значения субполос звукового сигнала, или, если быть более точным, блок 180 значений субполос звукового сигнала, используя кадр 150 из прошедших оконную обработку отсчетов и выполняя преобразование из временной области в частотную область. Средство 170 вычислений, как можно поэтому полагать, является средством преобразования время/частота, которое способно обеспечивать блок 180 значений субполос звукового сигнала как спектральное представление кадра 150 из прошедших оконную обработку отсчетов.
Каждое значение субполос звукового сигнала блока 180 соответствует одной субполосе, имеющей характерную частоту. Количество значений субполос звукового сигнала, содержащихся в блоке 180, также иногда упоминается как количество полос.
Во многих вариантах осуществления согласно настоящему изобретению количество значений субполос звукового сигнала в блоке 180 идентично количеству входных аудиоотсчетов временной области каждого из блоков 130 из кадра 120. В случае, когда кадр 150 прошедших оконную обработку отсчетов содержит ту же самую блочную структуру, как кадр 120, так что каждый из блоков 160 прошедших оконную обработку отсчетов также содержит то же самое количество прошедших оконную обработку отсчетов, как блок входных аудиоотсчетов временной области 130, блок 180 значений субполос звукового сигнала естественно также содержит то же самое количество, как блок 160.
Кадр 120 можно дополнительно создавать, основываясь на блоке новых входных аудиоотсчетов временной области 220, сдвигая блоки 130-1…, 130-(T-1) на один блок в направлении, противоположном стрелке 140, указывающей направление времени. Таким образом, кадр 120 из входных аудиоотсчетов временной области, которые будут обработаны, создают, сдвигая последние блоки (T-1) непосредственно предыдущего кадра 120 из аудиоотсчетов временной области на один блок к более ранним аудиоотсчетам временной области и добавляя новый блок 220 новых аудиоотсчетов временной области, как новый блок 130-1, содержащий последние аудиоотсчеты временной области настоящего кадра 120. На фиг. 1 это также обозначено последовательностью обозначенных штриховой линией стрелок 230, указывающих сдвиг блоков 130-1…, 130-(T-1) в направлении, противоположном стрелке 140.
Из-за этого смещения блоков 130 в направлении, противоположном времени, которое обозначено стрелкой 140, настоящий кадр 120, который будут обрабатывать, содержит блок 130-(T-1) непосредственно предыдущего кадра 120, как новый блок 130-T. Соответственно, блоки 130-(T-1)…, 130-2 из настоящего кадра 120, которые будут обрабатывать, равны блоку 130-(T-2)…, 130-1 из непосредственно предыдущего кадра 120. Блок 130-T из непосредственно предыдущего кадра 120 отбрасывают.
Как следствие, каждый аудиоотсчет временной области нового блока 220 будет обрабатываться T раз в структуре из T последовательных обработок T последовательных кадров 120 входных аудиоотсчетов временной области. Следовательно, каждый входной аудиоотсчет временной области нового блока 220 вносит вклад не только в T различных кадров 120, но также и в T различных кадров 150 прошедших оконную обработку отсчетов и T блоков 180 значений субполос звукового сигнала. Как указано прежде, в предпочтительном варианте осуществления согласно настоящему изобретению количество T блоков в кадре 120 равно 10, так, чтобы каждый аудиоотсчет временной области, обеспеченный к набору 100 фильтров анализа, вносил вклад в 10 различных блоков 180 значений субполос звукового сигнала.
Вначале, перед обработкой одного кадра 120 с помощью набора 100 фильтров анализа, кадр 120 может быть инициализирован в небольшое абсолютное значение (ниже предварительно определенного порогового значения), например в значение 0. Как будет объяснено более подробно ниже, форма оконной функции 190 анализа содержит среднюю точку, или «центр масс», которая обычно соответствует или находится между двумя индексами оконных коэффициентов первой группы 200.
Как следствие, количество новых блоков 220, которые вставляют в кадр 120, является небольшим, прежде, чем кадр 120 заполнен по меньшей мере к точке так, чтобы части кадра 120 были заняты, неисчезающими (т.е. имеющими ненулевое значение) значениями, которые соответствуют оконным коэффициентам, имеющим существенный вклад в терминах значений их энергии. Как правило, количество блоков, которые будут вставлять в кадр 120 перед тем, как «значимая» обработка может начаться, равно 2-4 блока в зависимости от формы оконной функции 190 анализа. Следовательно, набор 100 фильтров анализа может обеспечивать блоки 180 быстрее, чем соответствующий набор фильтров, использующий, например, симметричную оконную функцию. Поскольку обычно новые блоки 220 подают на набор 100 фильтров анализа целиком, каждый из новых блоков соответствует времени регистрации или дискретизации, которое по существу задают с помощью длины блока 220 (т.е. количества входных аудиоотсчетов временной области, содержащихся в блоке 220) и частоты дискретизации, или частоты отсчетов. Поэтому оконная функция 190 анализа, которую внедряют в вариант осуществления настоящего изобретения, приводит к уменьшенной задержке перед первым и последующими блоками 180 значений субполос звукового сигнала, которые можно обеспечивать или выводить с помощью набора 100 фильтров.
В качестве дополнительной возможности устройство 100 может генерировать сигнал или содержать в себе информацию об оконной функции 190 анализа, используемой при генерации кадра 180, или об оконной функции синтеза, которая будет использоваться в структуре набора фильтров синтеза. Таким образом, функция 190 фильтра анализа может, например, быть обращенной во времени или с измененным порядком индексов версией оконной функции синтеза, которая будет использоваться набором фильтров синтеза.
Фиг. 2a показывает структурную схему варианта осуществления устройства 300 для генерации аудиоотсчетов временной области, основываясь на блоке значений субполос звукового сигнала. Как ранее объясняется, вариант осуществления настоящего изобретения в форме устройства 300 для генерации аудиоотсчетов временной области часто также упоминается как набор 300 фильтров синтеза, поскольку устройство способно генерировать отсчеты звукового сигнала во временной области, которые могут в принципе быть воспроизведены, основаны на значениях субполос звукового сигнала, которые содержат спектральную информацию о звуковом сигнале. Следовательно, набор 300 фильтров синтеза может синтезировать аудиоотсчеты временной области, основываясь на значениях субполос звукового сигнала, которые могут, например, быть созданы соответствующим набором 100 фильтров анализа.
Фиг. 2a показывает структурную схему набора 300 фильтров синтеза, содержащую средство 310 вычислений, к которому обеспечивают блок 320 значений субполос звукового сигнала (в частотной области). Средство 310 вычислений может вычислять кадр 330, содержащий последовательность промежуточных отсчетов временной области, из значений субполос звукового сигнала блока 320. Кадр 330 из промежуточных отсчетов временной области содержит во многих вариантах осуществления согласно настоящему изобретению также такую же блочную конструкцию, как кадр 150 из прошедших оконную обработку отсчетов набора 100 фильтров анализа на фиг. 1. В этих случаях кадр 330 содержит блоки 340-1…, 340-T промежуточных отсчетов временной области.
Последовательность промежуточных отсчетов временной области кадра 330, а также каждый блок 340 промежуточных отсчетов временной области содержит упорядочение в соответствии со временем, которое обозначено стрелкой 350 на фиг. 2a. Как следствие, кадр 330 содержит начальный промежуточный отсчет временной области в 340-T блоке и последний промежуточный отсчет временной области в блоке 340-1, которые представляют первый и последний промежуточные отсчеты временной области для кадра 330, соответственно. Также каждый из блоков 340 содержит подобное упорядочение. Как следствие, в вариантах осуществления набора фильтров синтеза термины «кадр» и «последовательность» могут часто использоваться как синонимы.
Средство 310 вычислений связано со средством 360 оконной обработки по синтезу, на который подается кадр 330 промежуточных отсчетов временной области. Средство оконной обработки по синтезу настраивают для оконной обработки последовательности промежуточных отсчетов временной области, используя оконную функцию 370 синтеза, схематично изображенную на фиг. 2a. На выходе средство 360 оконной обработки по синтезу обеспечивает кадр 380 из прошедших оконную обработку промежуточных отсчетов временной области, которые могут также содержать блочную структуру из блоков 390-1…, 390-T.
Кадры 330 и 380 могут содержать T блоков 340 и 390, соответственно, причем T является положительным целым числом. В предпочтительном варианте осуществления согласно настоящему изобретению в форме набора 300 фильтров синтеза, количество блоков T равно 10. Однако в различных вариантах осуществления также различное количество блоков может содержаться в одном из кадров. Точнее, в принципе количество блоков T может быть больше или равно 3, или больше или равно 4, в зависимости от обстоятельств реализации и ранее объясненных соотношений для вариантов осуществления согласно настоящему изобретению, содержащему блочную структуру из кадров и для набора 100 фильтров синтеза, и для набора 300 фильтров синтеза.
Средство 360 оконной обработки по синтезу связано с выходным узлом 400 суммирования с перекрытием, на который подается кадр 380 из прошедших оконную обработку промежуточных отсчетов временной области. Выходной узел 400 суммирования с перекрытием может обрабатывать прошедшие оконную обработку промежуточные отсчеты временной области для получения блока 410 отсчетов временной области. Блок 410 (выходных) отсчетов временной области можно затем, например, обеспечивать к дополнительным компонентам для дополнительной обработки, хранения или преобразования в слышимые звуковые сигналы.
Средство 310 вычислений для вычисления последовательности отсчетов временной области, содержащихся в кадре 330, может преобразовывать данные из частотной области во временную область. Поэтому средство 310 вычислений может содержать блок преобразования частота/время, который может генерировать сигнал во временной области спектрального представления, содержащегося в блоке 320 значений субполос звукового сигнала. Как объясняется в контексте средства 170 вычислений из набора 100 фильтров анализа, показанного на фиг. 1, каждое из значений субполос звукового сигнала блока 320 соответствует каналу субполос звукового сигнала, имеющему характеристическую среднюю частоту.
В отличие от этого, промежуточные отсчеты временной области, содержащиеся в кадре 330, представляют в принципе информацию во временной области. Средство 360 оконной обработки по синтезу может использоваться и настроено для оконной обработки последовательности промежуточных отсчетов временной области, содержащихся в кадре 330, используя оконную функции 370 синтеза, как схематично изображено на фиг. 2a.
Как уже описано в контексте фиг. 1, средство 360 оконной обработки по синтезу также использует оконную функцию 370 синтеза, которую получают с помощью интерполяции большей оконной функции, содержащей второе количество оконных коэффициентов. Следовательно, второе количество больше первого количества оконных коэффициентов оконной функции 370 синтеза, используемой для оконной обработки промежуточных отсчетов временной области кадра 330.
Оконную функцию 370 синтеза можно, например, получать с помощью средства 360 оконной обработки по синтезу или с помощью набора 300 фильтров (устройства), выполняя одну из ранее описанных схем интерполяции. Оконные коэффициенты оконной функции синтеза можно, например, создавать, основываясь на линейной, полиномиальной или основанной на сплайне интерполяции. Кроме того, в вариантах осуществления согласно настоящему изобретению интерполяция может быть основана на использовании последовательных оконных коэффициентов большей оконной функции. Когда каждый оконный коэффициент большей оконной функции используется точно один раз, оконная функция 370, содержащая (меньшее) первое количество оконных коэффициентов, может, например, содержать точно половину количества оконных коэффициентов большей оконной функции, когда второе количество является четным числом. Другими словами, в этом случае второе количество может быть в два раза больше первого количества. Однако также другие сценарии и схемы интерполяции могут воплощаться в структуре вариантов осуществления настоящего изобретения.
В последующем так называемую оконную функцию с низкой задержкой рассматривают более подробно. Как указано ранее, варианты осуществления согласно настоящему изобретению совсем не ограничены этими оконными функциями. Также могут использоваться другие оконные функции, такие как симметричные оконные функции.
Оконная функция 370 синтеза содержит последовательность оконных коэффициентов, которая также содержит первую группу 420 и вторую группу 430 оконных коэффициентов, как ранее объясняется в контексте оконной функции 190 с первой группой 200 и второй группой 210 оконных коэффициентов.
Первая группа 420 оконных коэффициентов оконной функции 370 синтеза содержит первую последовательную часть последовательности оконных коэффициентов. Точно так же вторая группа 430 коэффициентов также содержит вторую последовательную часть последовательности оконных коэффициентов, причем первая часть содержит меньше оконных коэффициентов, чем вторая часть, и причем значение энергии или значение полной энергии оконных коэффициентов в первой части выше, чем соответствующее значение энергии оконных коэффициентов второй части. Дополнительные особенности и свойства оконной функции 370 синтеза могут быть подобны соответствующим особенностям и свойствам оконной функции 190 анализа, которая схематично изображена на фиг. 1. Как следствие, делают ссылку к соответствующему описанию в структуре оконной функции 190 анализа и дополнительному описанию оконных функций относительно фиг. 11-19, причем первая группа 200 соответствует первой группе 420, и вторая группа 210 соответствует второй группе 430.
Например, каждая из частей, содержащихся в этих двух группах 420, 430 оконных коэффициентов, обычно формирует последовательный и связанный набор оконных коэффициентов, вместе содержащих все оконные коэффициенты последовательности оконных коэффициентов оконной функции 370. Во многих вариантах осуществления согласно настоящему изобретению оконная функция 190 анализа, которая изображена на фиг. 1, и оконная функция 370 синтеза, которая изображена на фиг. 2a, основаны друг на друге. Например, оконная функция 190 анализа может быть обращенной во времени или с обращенным порядком индексов версией оконной функции 370 синтеза. Однако также возможны другие соотношения между двумя оконными функциями 190, 370. Может потребоваться использовать оконную функцию 370 синтеза в структуре средства 360 оконной обработки по синтезу, которая соотносится с оконной функцией 190 анализа, которая была использована в ходе генерации (возможно перед дополнительными модификациями) блока 320 значений субполос звукового сигнала, подаваемых на набор 300 фильтров синтеза.
Как указано в контексте фиг. 1, набор 300 фильтров синтеза на фиг. 2a можно дополнительно настраивать таким образом, что входящий блок 320 может содержать дополнительные сигналы или дополнительную информацию, относящуюся к оконным функциям. В качестве примера, блок 320 может содержать информацию об оконной функции 190 анализа, используемой для генерации блока 320, или об оконной функции 370 синтеза, которая будет использоваться средством 360 оконной обработки по синтезу. Следовательно, набор 300 фильтров можно настраивать для отделения соответствующей информации и для подачи ее на средство 360 оконной обработки по синтезу.
Выходной узел 400 суммирования с перекрытием может генерировать блок 410 отсчетов временной области, обрабатывая прошедшие оконную обработку промежуточные отсчеты временной области, содержащиеся в кадре 380. В различных вариантах осуществления согласно настоящему изобретению выходной узел 400 суммирования с перекрытием может содержать память для временного хранения ранее принятых кадров 380 из прошедших оконную обработку промежуточных отсчетов временной области. В зависимости от конкретного воплощения выходной узел 400 суммирования с перекрытием может, например, содержать T различных ячеек памяти, содержащихся в памяти, для хранения общего количества T кадров 380 из прошедших оконную обработку промежуточных отсчетов временной области. Однако также другое количество ячеек памяти может содержаться в выходном узле 400 суммирования с перекрытием, когда требуется. Кроме того, в различных вариантах осуществления согласно настоящему изобретению выходной узел 400 суммирования с перекрытием может обеспечивать блок 410 отсчетов временной области, основываясь на одном кадре 380 из одних только промежуточных отсчетов временной области. Варианты осуществления различных наборов 300 фильтров синтеза будут объясняться более подробно позже.
Фиг. 2b показывает функциональный принцип согласно варианту осуществления настоящего изобретения в форме набора 300 фильтров синтеза, в котором на генерации оконной функции 370 с помощью интерполяции не сосредотачиваются только ради простоты.
Блок 320 значений субполос звукового сигнала сначала переводят из частотной области во временную область с помощью средства 310 вычислений, что показано на фиг. 2b стрелкой 440. Результирующий кадр 320 из промежуточных отсчетов временной области, содержащий блоки 340-1…, 340-T из промежуточных отсчетов временной области, затем обрабатывают с помощью средства 360 оконной обработки по синтезу (не показан на фиг. 2b), умножая последовательность промежуточных отсчетов временной области кадра 320 на последовательность оконных коэффициентов оконной функции 370 синтеза для получения кадра 380 из прошедших оконную обработку промежуточных отсчетов временной области. Кадр 380 снова содержит блоки 390-1…, 390-T из прошедших оконную обработку промежуточных отсчетов временной области, вместе формируя кадр 380 из прошедших оконную обработку промежуточных отсчетов временной области.
В показанном на фиг. 2b варианте осуществления изобретенного набора 300 фильтров синтеза выходной узел 400 суммирования с перекрытием затем может генерировать блок 410 выходных отсчетов временной области, складывая для каждого значения индекса аудиоотсчетов временной области блока 410 прошедшие оконную обработку промежуточные отсчеты временной области одного блока 390 различных кадров 380. Как показано на фиг. 2b, аудиоотсчеты временной области блока 410 получают, складывая для каждого индекса аудиоотсчета один прошедший оконную обработку промежуточный отсчет временной области блока 390-1 кадра 380, прошедшего средством 360 оконную обработку по синтезу в текущем цикле, и как ранее описано, соответствующий промежуточный отсчет временной области второго блока 390-2 кадра 380-1, обработанного непосредственно перед кадром 380 и сохраненного в ячейке памяти в выходном узле 400 суммирования с перекрытием. Как показано на фиг. 2b, дальнейшие соответствующие прошедшие оконную обработку промежуточные отсчеты временной области дальнейших блоков 390 (например, блока 390-3 кадра 380-2, блока 390-4 кадра 380-3, блока 390-5 кадра 380-4), ранее обработанные набором 300 фильтров синтеза, могут использоваться. Кадры 380-2, 380-3, 380-4 и возможно дальнейшие кадры 380 обработаны набором 300 фильтров синтеза в предыдущих циклах. Кадр 380-2 обработан непосредственно перед кадром 380-1 и, соответственно, кадр 380-3 создан непосредственно перед кадром 380-2 и т.д.
Выходной узел 400 суммирования с перекрытием, как используется в данном варианте осуществления, может суммировать для каждого индекса блока 410 (выходных) отсчетов временной области T различных блоков 390-1…, 390-T из прошедших оконную обработку промежуточных отсчетов временной области из T различных кадров 380, 380-1…, 380-(T-1). Следовательно, кроме первых T обработанных блоков, каждый из (выходных) отсчетов временной области блока 410 основан на T различных блоках 320 из значений субполос звукового сигнала.
Как в случае варианта осуществления настоящего изобретения набора 100 фильтров анализа, описанного на фиг. 1, из-за формы оконной функции 370 синтеза, набор 300 фильтров синтеза предлагает возможность быстрого обеспечения блока 410 (выходных) отчетов во временной области. Это также является следствием формы оконной функции 370. Поскольку первая группа 420 оконных коэффициентов соответствуют более высокому значению энергии и содержит меньше оконных коэффициентов, чем вторая группа 430, средство 360 оконной обработки по синтезу может обеспечивать «значащие» кадры 380 из прошедших оконную обработку отсчетов, когда кадр 330 из промежуточных отсчетов временной области заполняют так, чтобы по меньшей мере оконные коэффициенты первой группы 420 вносили вклад в кадр 380. Оконные коэффициенты второй группы 430 вносят меньший вклад из-за их меньшего значения энергии.
Поэтому, когда вначале набор 300 фильтров синтеза инициализирован с 0, обеспечение блоков 410 можно в принципе начинать, когда только несколько блоков 320 из значений субполос звукового сигнала приняты с помощью набора 300 фильтров синтеза. Поэтому набор 300 фильтров синтеза также обеспечивает возможность существенного сокращения задержки по сравнению с набором фильтров синтеза, имеющим, например, симметричную оконную функцию синтеза.
Как указано ранее, средства 170 и 310 вычислений из вариантов осуществления, показанных на фиг. 1 и 2a, можно осуществлять как средства действительных вычислений, которые генерируют или могут обрабатывать действительные значения субполос звукового сигнала блоков 180 и 320, соответственно. В этих случаях средства вычислений можно, например, воплощать как средства действительных вычислений, основываясь на гармонических колебательных функциях, таких как синусная функция или косинусная функция. Однако средства комплексных вычислений также можно воплощать, как средства 170, 310 вычислений. В этих случаях средства вычислений можно, например, воплощать на основе комплексных экспоненциальных функций или других гармонических комплексных функций. Частота действительных или комплексных колебаний обычно зависит от индекса значения субполос звукового сигнала, который иногда также упоминается как индекс полосы или индекс субполосы определенной полосы. Кроме того, частота может зависеть от средней частоты соответствующей субполосы или быть ей идентичной. Например, частоту колебаний можно умножать на постоянный коэффициент, сдвигать относительно средней частоты соответствующей субполосы, или она может зависеть от комбинации обеих модификаций.
Средства 170, 310 комплексных вычислений можно создавать или воплощать, основываясь на средствах действительных вычислений. Например, для средства комплексных вычислений эффективная реализация может в принципе использоваться и для косинусно-модулированной части, и для синусно-модулированной части набора фильтров, представляющих действительную и мнимую часть комплексного компонента. Это подразумевает, что можно воплощать и косинусно-модулированную часть, и синусно-модулированную часть, основываясь, например, на измененных структурах DCT-IV и DST-IV. Кроме того, дополнительные реализации могут использовать применение FFT (FFT = быстрое преобразование Фурье), которое можно осуществлять совместно и для действительной части, и для данной части комплексно-модулированных средств вычислений, используя одно FFT, или вместо этого используя один отдельный узел FFT для каждого преобразования.
Математическое описание
Следующие разделы описывают примеры вариантов осуществления набора фильтров анализа и набора фильтров синтеза с множеством перекрытий 8 блоков в прошлое, которые не вызывают дополнительную задержку, как объяснено выше, и один блок в будущее, который вызывает ту же самую задержку, как структура MDCT/MDST (MDCT = измененное дискретное косинусное преобразование; MDST = измененное дискретное синусное преобразование). Другими словами, в последующем примере, параметр T равен 10.
Сначала будет приведено описание модулированного комплексного набора фильтров анализа с низкой задержкой. Как показано на фиг. 1, набор 100 фильтров анализа содержит этапы преобразования применения оконной функции анализа, выполняемые средством 110 оконной обработки по анализу, и модуляции анализа, выполняемые средством 170 вычислений. Оконная обработка анализа основана на уравнении
Figure 00000001
где zi,n - (действительный) прошедший оконную обработку отсчет, соответствующий индексу i блока и индексу n отсчета кадра 150, показанного на фиг. 1. Значение xi,n - (действительный) входной временной отсчет, соответствующий тому же самому индексу i блока и индексу n отсчета. Оконная функция 190 анализа представлена в уравнении (1) своими действительными оконными коэффициентами w(n), причем n - также индекс оконного коэффициента в диапазоне, обозначенном в уравнении (1). Как уже ранее объяснено, параметр N - количество отсчетов в одном блоке 220, 130, 160, 180.
Из аргументов оконной функции анализа w (10N-1-n) можно заметить, что оконная функция анализа представляет перевернутую версию, или обращенную во времени версию оконной функции синтеза, которая фактически представлена оконным коэффициентом w(n).
Модуляция анализа, выполняемая средством 170 вычислений в варианте осуществления, показанном на фиг. 1, основана на этих двух уравнениях
Figure 00000002
или
Figure 00000003
поскольку индекс спектрального коэффициента или индекс k полосы является целым числом в диапазоне
Figure 00000004
Значения XReal, i, k и Ximag, i, k представляют действительную часть и мнимую часть комплексного значения субполос звукового сигнала, соответствующего индексу i блока и индексу k спектрального коэффициента блока 180. Параметр n0 представляет индексную опцию, которая равна
Figure 00000005
Соответствующий модулирующий комплексный набор фильтров синтеза с низкой задержкой содержит этапы преобразования модуляции синтеза, оконная обработка синтеза и сложение с перекрытием, как будет описано.
Модуляция синтеза основана на уравнении
Figure 00000006
где x'i,n - промежуточный отсчет временной области кадра 330, соответствующий индексу n отсчета и индексу i блока. Параметр N - также целое число, указывающее длину блока 320, 340, 390, 410, которая также упоминается как длина блока преобразования или, из-за блочной структуры кадров 330, 380, как смещение к предыдущему блоку. Также дополнительные переменные и параметры были введены выше, такие как индекс k спектрального коэффициента и смещение n0.
Оконная обработка по синтезу, выполняемая средством 360 оконной обработки по синтезу в варианте осуществления, показанном на фиг. 2a, основана на уравнении
Figure 00000007
где z'i,n - значение прошедшего оконную обработку промежуточного отсчета временной области, соответствующего индексу n отсчета и индексу i блока кадра 380.
Преобразование сложения с перекрытием основано на уравнении
Figure 00000008
для 0≤n<N
где outi,n представляет (выходной) отчет временной области, соответствующий индексу n отсчета и индексу i блока. Уравнение (8), следовательно, показывает операцию суммирование с перекрытием, которую выполняет выходной узел 400 суммирования с перекрытием, который показан в нижней части фиг. 2b.
Однако варианты осуществления согласно настоящему изобретению не ограничены модулированным комплексным набором фильтров с низкой задержкой, учитывая обработку звуковых сигналов с помощью одного из этих наборов фильтров. Можно также воплощать реализацию действительнозначных наборов фильтров с низкой задержкой для улучшенного с низкой задержкой кодирования звука. В качестве сравнения, например, уравнения (2) и (6) в терминах появления косинусной части, вклада косинусной модуляции анализа и модуляции синтеза имеют сопоставимую структуру, когда рассматривают структуру MDCT. Хотя способ разработки в принципе предоставляет возможность расширения MDCT в обоих направлениях по отношению ко времени, только расширение на E (=T-2) блоков в прошлое применяют в данной работе, где каждый из T блоков содержит N отсчетов. Частотный коэффициент xi,k полосы k и блока i внутри N-канального или N-полосного набора фильтров анализа может быть получен в итоге с помощью
Figure 00000009
для индекса k спектрального коэффициента, как определено уравнением (4). В данном случае n - также индекс отсчета, и wa - оконная функция анализа.
Для завершения ранее приведенного математического описания модулирующий комплексный набор фильтров анализа с низкой задержкой может быть приведен в той же самой форме суммирования, как уравнение (9), меняя косинусную функцию на комплексную экспоненциальную функцию. Точнее, с определением и переменными, приведенными выше, уравнения (1), (2), (3) и (5) можно суммировать и расширять согласно
Figure 00000010
где в отличие от уравнений (2) и (3) расширение на 8 блоков в прошлое было заменено переменной E (=8).
Этапы модуляции синтеза и оконной обработки по синтезу, как описано для комплексного случая в уравнениях (6) и (7), можно суммировать в случае действительнозначного набора фильтров синтеза. Кадр 380 прошедших оконную обработку промежуточных отсчетов временной области, который также упоминается как демодулированный вектор, задают с помощью
Figure 00000011
где z'i,n - прошедший оконную обработку промежуточный отчет временной области, соответствующий индексу i полосы и индексу n отсчета. Индекс n отсчета является также целым числом в диапазоне
Figure 00000012
и ws(n) является оконной функцией синтеза, которая совместима с оконной функцией анализа wa(n) по уравнению (9).
Этап преобразования сложения с перекрытием затем задают с помощью
Figure 00000013
где x'i,n - восстановленный сигнал, или скорее отсчет временной области блока 410 в соответствии с выходным узлом 400 суммирования с перекрытием, показанным на фиг. 2a.
Для комплексного набора фильтров синтеза 300 уравнения (6) и (7) можно суммировать и обобщать относительно расширения E (= 8) блоков согласно
Figure 00000014
где
Figure 00000015
является мнимой единицей. Уравнение (13) представляет обобщение уравнения (8) и также правильно для комплексного случая.
Как показывает прямое сравнение уравнения (14) с уравнением (7), оконная функция w(n) уравнения (7) является той же самой оконной функцией синтеза, как ws(n) уравнения (14). Как указано прежде, подобное сравнение уравнения (10) с коэффициентом оконной функции анализа wa(n) с уравнением (1) показывает, что оконная функция анализа - обращенная во времени версия оконной функции синтеза в случае уравнения (1).
Поскольку и набор 100 фильтров анализа, который показан на фиг. 1, и набор 300 фильтров синтеза, который показан на фиг. 2a, предлагают существенное улучшение в терминах соотношения между задержкой с одной стороны и качеством обработки звука с другой стороны, наборы 100, 300 фильтров часто упоминаются как наборы фильтров с низкой задержкой. Их комплексная версия иногда упоминается как комплексный набор фильтров с низкой задержкой, что сокращают как CLDFB. При некоторых обстоятельствах термин CLDFB используется не только для комплексной версии, но также и для действительнозначной версии набора фильтров.
Как показало предыдущее обсуждение математических предпосылок, структура, используемая для осуществления предложенных наборов фильтров с низкой задержкой, использует структуру, подобную MDCT или IMDCT (IMDCT = обратное MDCT), которая известна из стандарта MPEG-4, используя расширенное перекрытие. Дополнительные области перекрытия можно прикреплять поблочно к левой, а также к правой стороне MDCT-подобной центральной части. В данном случае используется только расширение в правую сторону (для набора фильтров синтеза), которое зависит только от предыдущих отсчетов и поэтому не вызывает дополнительную задержку.
Изучение уравнений (1), (2) и (14) показывает, что данная обработка очень похожа на обработку в MDCT или IMDCT. Только с помощью небольших модификаций, содержащих измененную оконную функцию анализа и оконную функцию синтеза, соответственно, MDCT или IMDCT расширяют на модулированный набор фильтров, который может обрабатывать многочисленные перекрытия и очень адаптируем по отношению к его задержке. Например, уравнения (2) и (3) показывают комплексную версию, которую в принципе получают с помощью простого добавления синусной модуляции к данной косинусной модуляции.
Интерполяция
Как описано в контексте фиг. 1 и 2a, и средство 110 оконной обработки по анализу, и средство 360 оконной обработки по синтезу, или соответствующие наборы 100, 300 фильтров настраивают для оконной обработки соответствующим кадрам отсчетов временной области, умножая каждый из соответствующих аудиоотсчетов временной области на отдельный оконный коэффициент. Каждый из отсчетов временной области, другими словами, умножают на (отдельный) оконный коэффициент, как, например, демонстрируют уравнения (1), (7), (9), (10), (11) и (14). Как следствие, количество оконных коэффициентов соответствующей оконной функции обычно идентично количеству соответствующих аудиоотсчетов временной области.
Однако при определенных воплощениях может быть желательно осуществлять оконную функцию, имеющую большее второе количество оконных коэффициентов по сравнению с текущей оконной функцией, имеющей меньшее первое количество коэффициентов, которое фактически используется во время оконной обработки соответствующему кадру или последовательности аудиоотсчетов временной области. Это может, например, быть необходимо в случае, когда требования к памяти в определенной реализации могут быть важнее, чем эффективность вычислений. Дополнительный сценарий, в котором субдискретизация оконных коэффициентов может стать полезной, в случае так называемого подхода двойной скорости, который, например, используется в структуре систем SBR (SBR = копирование спектральных полос). Концепция SBR будет объяснена более подробно в контексте фиг. 5 и 6.
В таком случае средство 110 оконной обработки по анализу или средство 360 оконной обработки по синтезу можно дополнительно настраивать таким образом, что соответствующая оконная функция, используемая для оконной обработки аудиоотсчетов временной области, поданных на соответствующее средство 110, 360 оконной обработки, получается с помощью интерполяции оконных коэффициентов большей оконной функции, имеющей большее второе количество оконных коэффициентов.
Интерполяция может, например, быть линейной, полиномиальной или основанной на сплайне интерполяцией. Например, в случае линейной интерполяции, но также и в случае полиномиальной или основанной на сплайне интерполяции, соответствующий блок 100, 360 оконной функции может интерполировать оконные коэффициенты оконной функции, используемые для применения оконной функции, основываясь на двух последовательных оконных коэффициентах большей оконной функции в соответствии с последовательностью оконных коэффициентов большей оконной функции для получения одного оконного коэффициента оконной функции.
Особенно в случае четного количества аудиоотсчетов временной области и оконных коэффициентов, реализация интерполяции, как ранее описано, приводит к существенному улучшению качества звука. Например, в случае четного количества N·T аудиоотсчетов временной области в одном из кадров 120, 330, неиспользование интерполяции, например линейной интерполяции, приводит к серьезным эффектам наложения спектров во время дополнительной обработки соответствующих аудиоотсчетов временной области.
Фиг. 3 показывает пример линейной интерполяции, основанной на оконной функции (оконной функции анализа или оконной функции синтеза), которую используют в контексте с кадрами, содержащими N·T/2 аудиоотсчетов временной области. Из-за ограничений памяти или других конкретных воплощений, сами оконные коэффициенты оконной функции не хранят в памяти, но большая оконная функция, содержащая N·T оконных коэффициентов, хранится в соответствующей памяти или доступна иным образом. Фиг. 3 показывает на верхнем графике соответствующие оконные коэффициенты c(n), как функцию индексов n оконных коэффициентов в диапазоне между 0 и N·T-1.
Основываясь на линейной интерполяции двух последовательных оконных коэффициентов оконной функции, имеющей большее количество оконных коэффициентов, как изображено на верхнем графике на фиг. 3, интерполированную оконную функцию вычисляют, основываясь на уравнении
Figure 00000016
Количество интерполированных оконных коэффициентов ci(n) оконной функции, которую будут применять к кадру, имеющему N·T/2 аудиоотсчетов временной области, содержит половину количества оконных коэффициентов.
Чтобы показать это дополнительно, в верхней части фиг. 3 показаны оконные коэффициенты 450-0…, 450-7, соответствующие оконным коэффициентам c(0)…, c(7). Основываясь на этих оконных коэффициентах и дополнительных оконных коэффициентах оконной функции, применение уравнения (15) приводит к оконным коэффициентам ci(n) интерполированной оконной функции, изображенной в нижней части фиг. 3. Например, основанный на оконных коэффициентах 450-2 и 450-3, оконный коэффициент 460-1 создают, основываясь на уравнении (15), как показывается стрелками 470 на фиг. 3. Соответственно, оконный коэффициент 460-2 из интерполированной оконной функции вычисляют, основываясь на оконных коэффициентах 450-4, 450-5 оконной функции, изображенной в верхней части фиг. 3. Фиг. 3 показывает генерацию дополнительных оконных коэффициентов ci(n).
Чтобы показать нейтрализацию наложения спектров, обеспечиваемую с помощью интерполированной субдискретизации оконной функции, фиг. 4 показывает интерполяцию оконных коэффициентов в случае синусной оконной функции, которая может, например, использоваться в MDCT. Для простоты левую половину оконной функции и правую половину оконной функции отображают друг поверх друга. Фиг. 4 показывает упрощенную версию синусной оконной функции, содержащей только 2·4 оконных коэффициентов, или точек, для MDCT, имеющей длину 8 отсчетов.
Фиг. 4 показывает четыре оконных коэффициента 480-1, 480-2, 480-3 и 480-4 из первой половины синусной оконной функции и четыре оконных коэффициента 490-1, 490-2, 490-3 и 390-4 из второй половины синусной оконной функции. Оконные коэффициенты 490-1…, 490-4 соответствуют индексам оконных коэффициентов 5…, 8. Оконные коэффициенты 490-1…, 490-4 соответствуют второй половине длины оконной функции, так что к приведенным индексам необходимо добавлять N'=4 для получения действительных индексов.
Для уменьшения или даже для обеспечения нейтрализации эффектов наложения спектров, как описано ранее, оконный коэффициент должен соответствовать условию
Figure 00000017
настолько хорошо, насколько возможно. Чем лучше соотношение (16) выполняется, тем лучше подавление наложения спектров или нейтрализация наложения спектров.
Предполагая ситуацию, когда новая оконная функция, имеющая половину количества оконных коэффициентов, должна быть определена для левой половины оконной функции, возникает следующая проблема. Вследствие того что оконная функция содержит четное количество оконных коэффициентов (субдискретизация с четным количеством), не используя схему интерполяции, как показано на фиг. 3, оконные коэффициенты 480-1 и 480-3 или 480-2 и 480-4 соответствуют только одному значению наложения спектров исходной оконной функции или исходного фильтра.
Это приводит к неуравновешенному соотношению спектральной энергии и приводит к несимметричному перераспределению средней точки (центра масс) соответствующей оконной функции. Основываясь на уравнении интерполяции (15) для оконного коэффициента w(n) на фиг. 4, интерполированные значения I1 и I2 соответствуют соотношению наложения спектров (16) намного лучше и, следовательно, приводят к существенному улучшению качества обработанных звуковых данных.
Однако использование еще более сложной схемы интерполяции, например, основанной на сплайне, или другой подобной схемы интерполяции может даже привести к оконным коэффициентам, которые соответствуют соотношению (16) еще лучше. Линейная интерполяция в большинстве случаев достаточна и допускает быструю и эффективную реализацию.
При ситуации в случае обычной системы SBR, использующей набор фильтров SBR-QMF (QMF = зеркальный квадратурный фильтр), линейная интерполяция или другая схема интерполяции не должна осуществляться, поскольку фильтр-прототип SBR-QMF содержит нечетное количество коэффициентов фильтра-прототипа. Это подразумевает, что фильтр-прототип SBR-QMF содержит максимальное значение, относительно которого можно осуществлять субдискретизацию так, чтобы симметрия фильтра-прототипа SBR-QMF оставалась неповрежденной.
На фиг. 5 и 6 описано возможное применение вариантов осуществления согласно настоящему изобретению в форме и набора фильтров анализа, и набора фильтров синтеза. Одной важной областью применения является система SBR, или инструментальное средство SBR (SBR = копирование спектральных полос). Однако дополнительные применения вариантов осуществления согласно настоящему изобретению могут исходить из других областей техники, в которых существует потребность в изменении спектра (например, изменении усиления или коррекции), такой как пространственное кодирование звукового объекта, параметрическое стереокодирование с низкой задержкой, пространственное/окружающее кодирование с низкой задержкой, маскирование потерь кадра, подавление эха или другие соответствующие применения.
Основной идеей для SBR является наблюдение, что обычно существует сильная корреляция между характеристиками высокочастотного диапазона сигнала, который будет упоминаться как так называемый сигнал верхней полосы, и характеристиками низкочастотного диапазона, дополнительно называемого нижней полосой, или сигналами нижней полосы, того же самого сигнала. Таким образом, хорошую аппроксимацию для представления исходного входного сигнала верхней полосы можно обеспечивать с помощью перемещения из нижней полосы в верхнюю полосу.
В дополнение к перемещению, восстановление верхней полосы включает формирование огибающей спектра, что содержит регулировку усиления. Этим процессом обычно управляют с помощью передачи огибающей спектра верхней полосы исходного входного сигнала. Дополнительная управляющая информация, посылаемая от кодера, управляет дополнительными модулями синтеза, такими как модуль обратной фильтрации, добавление шума и синусоиды, для обработки звукового материала, когда одно только перемещение не достаточно. Соответствующие параметры содержат параметр «шум верхней полосы» для добавления шума и параметр «тональность верхней полосы» для добавления синусоиды. Эта направляющая информация обычно упоминается как данные SBR.
Процесс SBR можно объединять с волной любой обычной формы или с кодеком посредством предпроцесса на стороне кодера и постпроцесса на стороне декодера. SBR кодирует высокочастотную часть звукового сигнала с очень низкой стоимостью, тогда как звуковой кодек используется для кодирования низкочастотной части сигнала.
На стороне кодера исходный входной сигнал анализируют, огибающую спектра верхней полосы и ее характеристики по отношению к нижней полосе кодируют, и результирующие данные SBR мультиплексируют с битовым потоком от кодека для нижней полосы. На стороне декодера данные SBR сначала демультиплексируют. Процесс декодирования организован в общем случае поэтапно. Сначала основной декодер создает нижнюю полосу и затем декодер SBR работает в качестве постпроцессора, используя декодированные данные SBR для управления процессом копирования спектральной полосы. Затем получают выходной сигнал всей полосы пропускания.
Для получения максимальной эффективности кодирования и сохранения низкой вычислительной сложности, улучшенные кодеки SBR часто воплощаются как так называемые системы двойной скорости. Двойная скорость подразумевает, что с ограниченной полосой основной кодек работает на половине внешней частоты дискретизации звукового сигнала. Напротив, часть SBR обрабатывают с полной частотой дискретизации.
Фиг. 5 показывает схематическую структурную схему системы 500 SBR. Система 500 SBR содержит, например, кодер 510 AAC-LD (AAC-LD = расширенный звуковой кодек с низкой задержкой) и кодер 520 SBR, к которому звуковые данные, которые будут обрабатываться, обеспечивают параллельно. Кодер 520 SBR содержит набор 530 фильтров анализа, который показан на фиг. 5, как набор фильтров анализа QMF. Набор 530 фильтров анализа способен обеспечивать значения субполос звукового сигнала, соответствующие субполосам, основываясь на звуковых сигналах, обеспеченных к системе 500 SBR. Эти значения субполос звукового сигнала затем обеспечивают к модулю 540 извлечения параметра SBR, который создает данные SBR, которые описаны ранее, например, содержащие огибающую спектра для верхней полосы, параметр шума верхней полосы и параметр тональности верхней полосы. Эти данные SBR затем обеспечивают на кодер 510 AAC-LD.
Кодер 510 AAC-LD показан на фиг. 5 как кодер двойной скорости. Другими словами, кодер 510 работает на половине частоты выборки по сравнению с частотой отсчетов звуковых данных, обеспечиваемых на кодер 510. Для обеспечения этого кодер 510 AAC-LD содержит субдискретизирующий узел 550, который дополнительно может содержать низкочастотный фильтр, чтобы избежать искажений, вызванных, например, нарушением теории Найквиста-Шэннона. Субдискретизированные звуковые данные, которые выводят с помощью субдискретизирующего узла 550, затем обеспечивают на кодер 560 (набор фильтров анализа) в форме набора фильтров MDCT. Сигналы, обеспеченные кодером 560, затем квантуют и кодируют в квантующем и кодирующем узле 570. Кроме того, данные SBR, которые обеспечивают с помощью модуля 540 извлечения параметра SBR, также кодируют для получения битового потока, который затем выводят с помощью кодера 510 ACC-LD. Квантующий и кодирующий узел 570 может, например, квантовать данные согласно свойствам слуха человеческого уха.
Битовый поток затем подают на декодер 580 AAC-LD, который является частью декодирующей стороны, к которой транспортируют битовый поток. Декодер AAC-LD содержит декодирующий и деквантизирующий узел 590, который извлекает данные SBR из битового потока и деквантованные или повторно квантованные звуковые данные в частотной области, представляющее нижнюю полосу. Данные нижней полосы затем подают на набор 600 фильтров синтеза (набор фильтров обратного MDCT). Узел 600 обратного MDCT (MDCT-1) конвертирует сигналы, поданные на узел обратного MDCT, из частотной области во временную область для обеспечения временного сигнала. Этот сигнал во временной области затем обеспечивают на декодер 610 SBR, который содержит набор 620 фильтров анализа, который показан на фиг. 5, как набор фильтров анализа QMF.
Набор 620 фильтров анализа выполняет спектральный анализ временного сигнала, обеспечиваемого к набору 620 фильтров анализа, представляющего нижнюю полосу. Эти данные затем подают на высокочастотный генератор 630, который также упоминается как ВЧ-генератор. Основываясь на данных SBR, обеспеченных кодером 580 AAC-LD и его декодирующим и деквантизирующим узлом 590, ВЧ-генератор 630 создает сигналы верхней полосы, основываясь на сигналах нижней полосы, обеспеченных набором 620 фильтров анализа. Сигналы и нижней полосы, и верхней полосы затем подают на набор 640 фильтров синтеза, который переносит сигналы и нижней полосы, и верхней полосы из частотной области во временную область для обеспечения звукового выходного сигнала во временной области, сформированного системой 500 SBR.
Для законченности следует отметить, что во многих случаях систему 500 SBR, которая показана на фиг. 5, не воплощают таким образом. Более точно, кодер 510 AAC-LD и кодер 520 SBR обычно осуществляют на стороне кодера, которую обычно воплощают отдельно от стороны декодера, содержащей декодер 580 AAC-LD и декодер 610 SBR. Другими словами, показанная на фиг. 5 система 500 по существу представляет соединение двух систем, а именно кодера, содержащего указанные выше кодеры 510, 520, и декодера, содержащего указанные выше декодеры 580, 610.
Варианты осуществления согласно настоящему изобретению в форме наборов 100 фильтров анализа и наборов 300 фильтров синтеза могут, например, осуществляться в системе 500, показанной на фиг. 5, как замена набора 530 фильтров анализа, набора 620 фильтров анализа и набора 640 фильтров синтеза. Другими словами, наборы фильтров синтеза или анализа компонентов системы 500 SBR можно, например, заменить соответствующими вариантами осуществления согласно настоящему изобретению. Кроме того, MDCT 560 и обратное MDCT 600 можно также заменять наборами фильтров с низкой задержкой анализа и синтеза, соответственно. В этом случае, если все описанные замены осуществлены, то будет реализован так называемый улучшенный с низкой задержкой кодек (кодек=кодер-декодер) AAC.
Целью улучшенного с низкой задержкой AAC (AAC-ELD) кодека является объединение особенностей низкой задержки AAC-LD (расширенного звукового кодека с низкой задержкой) с высокой эффективностью кодирования HE-AAC (высокопроизводительного расширенного звукового кодека), используя SBR с AAC-LD. Декодер 610 SBR работает в этом сценарии в качестве постпроцессора, который обеспечивают после основного декодера 580, включающего в себя законченный набор фильтров анализа и набор 640 фильтров синтеза. Поэтому, компоненты декодера 610 SBR добавляют дополнительную задержку декодирования, которая показывается на фиг. 5 с помощью штриховки компонентов 620, 630, 540.
Во многих реализациях систем 500 SBR нижняя часть частот, или нижняя полоса, располагается обычно от 0 кГц до 5-15 кГц и кодируется с использованием кодера, воспроизводящего форму сигнала, называемого основным кодеком. Основной кодек может, например, быть одним из семейства звуковых кодеков MPEG. Дополнительно, восстановление высокочастотной части, или верхней полосы, обеспечивают с помощью преобразования нижней полосы. Комбинацию SBR с основным кодером во многих случаях воплощают как систему с двойной скоростью, где указанный кодер/декодер AAC работает на половине частоты дискретизации кодера/декодера SBR.
Большинство управляющих данных используется для представления огибающей спектра, которое имеет изменяющуюся разрешающую способность по времени и частоте, чтобы иметь возможность управлять наилучшим образом процессом SBR с наименьшим возможным битрейтом служебной информации. Другие управляющие данные главным образом управляют отношением звукового сигнала к помехам верхней полосы.
Как показано на фиг. 5, выходная информация от основного декодера 580 AAC обычно анализируется с помощью 32-канального набора 620 фильтров QMF. Затем модуль 630 ВЧ-генератора повторно создает верхнюю полосу с помощью восстановления субполосы QMF из существующей нижней полосы в верхнюю полосу. Кроме того, обратную фильтрацию выполняют на основе субполос, основываясь на данных управления, полученных из битового потока (данных SBR). Устройство регулировки огибающей изменяет огибающую спектра восстановленной верхней полосы и добавляет дополнительные компоненты, такие как шум и синусоиды, согласно управляющим данным в битовом потоке. Так как все операции выполняют в частотной области (которая также известна как область QMF или субполос), конечным этапом декодера 610 является синтез QMF 640, для сохранения сигнала во временной области. Например, в случае, когда анализ QMF на стороне кодера выполняют в системе 32-QFM субполос для 1024 отсчетов временной области, высокочастотное восстановление приводит к 64-QMF субполосам, на которых синтез выполняют, создавая 2048 отсчетов временной области, так что получают повышающую дискретизацию с коэффициентом 2.
Кроме того, задержка основного кодера 510 удваивается с помощью работы на половине исходной частоты дискретизации в режиме двойной скорости, что приводит к дополнительным источникам задержки и в процессе кодера, и в процессе декодера AAC-LD в комбинации с SBR. В последующем исследуют такие источники задержки, и связанную с ними задержку минимизируют.
Фиг. 6 показывает упрощенную структурную схему системы 500, показанной на фиг. 5. Фиг. 6 концентрируется на источниках задержки в процессе кодера/декодера, используя SBR и наборы фильтров с низкой задержкой для кодирования. Сравнивая фиг. 6 с фиг. 5, MDCT 560 и обратное MDCT 600 были заменены модулями с оптимизированной задержкой, так называемыми MDCT 560' с низкой задержкой (LD MDCT) и обратным MDCT 600' с низкой задержкой (LD IMDCT). Кроме того, ВЧ-генератор 630 был также заменен модулем 630' с оптимизированной задержкой.
Кроме MDCT 560' с низкой задержкой и обратного MDCT 600' с низкой задержкой, измененное средство создания кадра SBR и измененный ВЧ-генератор 630' используют в системе, показанной на фиг. 6. Чтобы избежать задержки в различных средствах создания кадра из состава основного кодера/декодера 560, 600 и соответствующих модулей SBR, средство создания кадра SBR настраивают так, чтобы соответствовать длине кадра, равной 480 или 512 отсчетов AAC-LD. Кроме того, переменная архитектура времени ВЧ-генератора 630, которая подразумевает 384 отсчета задержки, ограничена относительно распространения данных SBR по смежным кадрам AAC-LD. Таким образом, единственные оставшиеся источники задержки модуля SBR - наборы 530, 620 и 640 фильтров.
Согласно ситуации, изображенной на фиг. 6, представляя частичную реализацию кодека AAC-ELD, некоторая оптимизация задержки была уже осуществлена, которая включает в себя использование набора фильтров с низкой задержкой в основном кодере AAC-LD и удаление ранее упомянутого перекрытия SBR. Для дополнительного уменьшения задержки необходимо исследовать остальные модули. Фиг. 6 показывает источники задержки в процессе кодера/декодера, используя SBR и наборы фильтров с низкой задержкой, называемые LD-MDCT и LD-IMDCT в данной работе. По сравнению с фиг. 5 на фиг. 6 каждый блок представляет источник задержки, причем модули с оптимизированной задержкой показаны заштрихованными. Подобные модули пока не оптимизированы для низкой задержки.
Фиг. 7a показывает последовательность операций, содержащую псевдокод языка C или C++, чтобы показать вариант осуществления согласно настоящему изобретению в форме набора фильтров анализа или соответствующего способа генерации значений субполос звукового сигнала в каналах субполос звукового сигнала. Более точно, фиг. 7a представляет последовательность операций комплексного набора фильтров анализа для 32 полос.
Как описано раньше, набор фильтров анализа используется для разбиения во временной области сигнала, например, выведенного из основного кодера, на N=32 сигналов субполос. Выход набора фильтров, отсчеты субполос или значения субполос звукового сигнала в случае комплексного набора фильтров анализа являются комплексными, и таким образом их передискретизируют с коэффициентом 2, по сравнению с действительнозначным набором фильтров. Фильтрация вовлекает и содержит следующие этапы, причем массив x(n) содержит точно 320 отсчетов временной области. Чем выше индекс отсчетов n в массиве, тем старше отсчеты.
После начала вариантов осуществления способа на этапе S100, сначала на этапе S110 отсчеты в массиве x(n) сдвигают на 32 позиции. На этапе S120 самые старшие 32 отсчета отбрасывают, и 32 новых отсчета сохраняют в ячейках с 31 по 0. Как показано на фиг. 7a, входные аудиоотсчеты временной области сохраняют в ячейках, соответствующих уменьшающемуся индексу n в диапазоне от 31 до 0. Это приводит к обращению во времени отсчетов, сохраненных в соответствующем кадре или векторе, так что изменение порядка индексов оконной функции для получения оконной функции анализа, основываясь на оконной функции синтеза (с одинаковой длиной), уже выполнено.
Во время этапа S130 оконные коэффициенты ci (j) получают с помощью линейной интерполяции коэффициентов c(j), основываясь на уравнении (15). Интерполяция основана на размере блока (длине блока или количестве значений субполос) N=64 значений и основана на кадре, содержащем T=10 блоков. Следовательно, индекс оконных коэффициентов интерполированной оконной функции находится в диапазоне между 0 и 319 согласно уравнению (15). Оконные коэффициенты c(n) даны в таблице в приложении 1 описания. Однако в зависимости от конкретного воплощения для получения оконных коэффициентов, основываясь на значениях, приведенных в таблицах в приложениях 1 и 3, нужно рассматривать дополнительные изменения знака относительно оконных коэффициентов, соответствующих индексам 128-255 и 384-511 (умножение с коэффициентом (-1)).
В этих случаях оконные коэффициенты w(n) или c(n) для использования можно получать согласно
Figure 00000018
с функцией s(n) переключения знака согласно
Figure 00000019
для n = от 0 до 639, причем wtable(n) - значения, приведенные в таблицах в приложениях.
Однако оконные коэффициенты не требуется воплощать согласно таблице в приложении 1 для получения, например, уже описанного сокращения задержки. Для обеспечения этого сокращения задержки при поддержке уровня качества обработанных звуковых данных или для обеспечения другого соотношения оконные коэффициенты c(n) для индекса n оконного коэффициента в диапазоне между 0 и 639 могут соответствовать одному из наборов соотношений, которые приведены в одном из приложений 2-4. Кроме того, нужно отметить, что также другие оконные коэффициенты c(n) можно использовать в вариантах осуществления согласно настоящему изобретению. Естественно, можно воплощать также другие оконные функции, содержащие другое количество оконных коэффициентов, чем 320 или 640, хотя таблицы в приложениях 1-4 относятся только к оконным функциям, имеющим 640 оконных коэффициентов.
Линейная интерполяция согласно S130 приводит к существенному повышению качества и приводит к уменьшению или к нейтрализации наложения спектров в случае оконной функции, содержащей четное количество оконных коэффициентов. Нужно дополнительно отметить, что комплексная единица не равна j, как в уравнениях (1), (2) и (16), а обозначена с помощью i=
Figure 00000020
.
На этапе S140 отсчеты массива x(n) затем умножают поэлементно на интерполированные коэффициенты ci(n) оконной функции.
На этапе S150 прошедшие оконную обработку отсчеты суммируют согласно уравнению, приведенному в последовательности операций на фиг. 7a, для создания массива из 64 элементов u(n). На этапе S160 32 новых отсчета субполос или значений субполос звукового сигнала W (k, l) вычисляют согласно матричной операции Mu, причем элементы матрицы М задают с помощью
Figure 00000021
где exp () обозначает комплексную экспоненциальную функцию и, как ранее указано, i - мнимая единица. Перед окончанием цикла последовательности операций на этапе S170 можно выводить каждое из значений субполос W (k, l) (= W [k] [l]), которое соответствует отсчету l в субполосе, имеющей индекс k. Другими словами, каждый цикл в последовательности операций, показанной на фиг. 7a, создает 32 комплексных значений субполос, каждое представляет выход от одной субполосы набора фильтров.
Фиг. 7b показывает этап S150 сокращения кадра 150 из прошедших оконную обработку аудиоотсчетов временной области, содержащих 10 блоков 160-1,…, 160-10 из прошедших оконную обработку аудиоотсчетов временной области z(n), до вектора u(n) с помощью 5-кратного суммирования двух блоков каждого кадра 150. Сокращение или уменьшение выполняют на поэлементной основе так, что прошедшие оконную обработку аудиоотсчеты временной области, соответствующие тому же самому индексу отсчета в каждом из блоков 160-1, 160-3, 160-5, 160-7 и 160-9, складывают для получения соответствующих значений в первых блоках 650-1 вектора u(n). Соответственно, основанные на блоках 160-2, 160-4, 160-6, 160-8 и 160-10 соответствующие элементы вектора u(n) в блоке 160-2 создают на этапе S150.
Дополнительный вариант осуществления согласно настоящему изобретению в форме набора фильтров анализа можно осуществлять как 64-полосный комплексный набор фильтров с низкой задержкой. Обработка этого комплексного набора фильтров с низкой задержкой как набора фильтров анализа в основном подобна набору фильтров анализа, как описано в контексте фиг. 7a. Из-за общих черт и в основном той же самой обработки, как описано в контексте фиг. 7a, различия между описанным комплексным набором фильтров анализа для 32 полос на фиг. 7a и комплексным набором фильтров анализа для 64 субполос будут описаны далее.
В отличие от набора фильтров анализа, содержащего 32 субполосы, как показано на фиг. 7a, вектор кадра x(n) содержит в случае 64-полосного набора фильтров анализа 640 элементов, имеющих индексы от 0 до 639. Следовательно, этап S110 изменяют таким образом, что отсчеты в массиве x(n) сдвигают на 64 позиции, причем самые старшие 64 отсчета отбрасывают. На этапе S120 вместо 32 новых отсчетов 64 новых отсчета сохраняют в ячейках с 63 по 0. Как показано на фиг. 7c, входящие аудиоотсчеты временной области сохраняют в ячейках, соответствующих уменьшающемуся индексу n в диапазоне от 63 до 0. Это приводит к обращению во времени отсчетов, сохраненных в соответствующем кадре, или векторе, так что изменение порядка индексов оконной функции для получения оконной функции анализа, основываясь на оконной функции синтеза (с одинаковой длиной), уже выполнено.
Поскольку последовательность оконных коэффициентов c(n), используемых для оконной обработки элементом вектора кадра x(n), содержит обычно 640 элементов, этап S130 линейной интерполяции оконных коэффициентов для получения интерполированных прошедших оконную обработку ci(n) может быть опущен.
Затем, во время этапа S140, в отношении отсчетов массива x(n) выполняют умножение или оконную обработку при помощи последовательности оконных коэффициентов c(n), которые также основаны на значениях в таблице в приложении 1. В случае, когда оконные коэффициенты c(n) являются коэффициентами оконной функции синтеза, оконная обработка, или умножение массива x(n) на оконные коэффициенты c(n), выполняется согласно уравнению
Figure 00000022
для n=0,…, 639. Также, для обеспечения свойств с низкой задержкой оконной функции, не обязательно воплощать оконную функцию точно согласно оконным коэффициентам, основываясь на значениях, приведенных в таблице приложения 1. Для многих приложений реализация, в которой оконные коэффициенты соответствуют любому набору соотношений, которые приведены в таблицах в приложениях 2-4, будет достаточна для обеспечения приемлемого соотношения между качеством и существенным сокращением задержки. Однако, в зависимости от конкретного воплощения, для получения оконных коэффициентов, основываясь на значениях, приведенных в таблицах в приложениях 1 и 3, дополнительные изменения знака оконных коэффициентов, соответствующих индексам 128-255 и 384-511 (умножение с коэффициентом (-1)), нужно рассматривать согласно уравнениям (16a) и (16b).
Этап S150 последовательности операций, показанной на фиг. 7a, затем заменяют суммированием отсчетов вектора кадра z(n) согласно уравнению
Figure 00000023
для создания массива с 128 элементами u(n).
Этап S160 на фиг. 7a затем заменяют этапом, в котором 64 новых отсчетов субполос вычисляют согласно матричной операции Mu, причем матричные элементы матрицы М задают с помощью
Figure 00000024
где exp () обозначает комплексную экспоненциальную функцию, и i, как уже объяснялось, - мнимая единица.
Фиг. 7c показывает последовательность операций согласно варианту осуществления настоящего изобретения в форме действительнозначного набора фильтров анализа для 32 каналов субполос. Вариант осуществления, который показан на фиг. 7c, не отличается значительно от варианта осуществления, показанного на фиг. 7a. Основное различие между этими двумя вариантами осуществления - то, что этап S160 вычисления новых 32 комплексных значений субполос звукового сигнала заменяют в варианте осуществления, показанном на фиг. 7c, этапом S162, в котором 32 действительных отсчета субполос звукового сигнала вычисляют согласно матричной операции Mru, причем элементы матрицы Mr задают с помощью
Figure 00000025
Как следствие, каждый цикл в последовательности операций создает 32 действительных отсчета субполос, причем W (k, l) соответствует аудиоотсчету l субполосы k.
Действительнозначный набор фильтров анализа может, например, использоваться в структуре режима с низким энергопотреблением системы SBR, как показано на фиг. 5. Режим с низким энергопотреблением инструментального средства SBR отличается от высококачественного инструментального средства SBR главным образом относительно факта, что используют действительнозначные наборы фильтров. Это уменьшает сложность вычислений и объем вычислительных работ в 2 раза, так что количество операций в единицу времени по существу сокращается в 2 раза, поскольку не требуется вычислять мнимую часть.
Предложенные новые наборы фильтров согласно настоящему изобретению полностью совместимы с режимом с низким энергопотреблением систем SBR. Таким образом, с наборами фильтров согласно настоящему изобретению, системы SBR могут все равно работать и в обычном режиме, или в высококачественном режиме, с комплексными наборами фильтров, и в режиме с низким энергопотреблением с действительнозначными наборами фильтров. Действительнозначный набор фильтров можно, например, получать из комплексного набора фильтров при использовании только действительных значений (вклад косинусной модуляции) и исключении мнимых значений (вклад синусной модуляции).
Фиг. 8a показывает последовательность операций согласно сравнительному примеру настоящего изобретения в форме комплексного набора фильтров синтеза для 64 каналов субполос. Как ранее описано, фильтрацию синтеза обработанных SBR сигналов субполос обеспечивают с использованием 64-субполосного набора фильтров синтеза. Выход набора фильтров - блок действительных отсчетов временной области, как описано в контексте фиг. 1. Процесс показывают с помощью последовательности операций на фиг. 8a, которая также показывает сравнительный пример в форме способа генерации аудиоотсчетов временной области.
Фильтрация синтеза содержит после начала (этап S200) следующие этапы, причем массив v содержит 1280 отсчетов. На этапе S210 отсчеты в массиве v сдвигают на 128 позиций, причем самые старшие 128 отсчетов отбрасывают. На этапе S220 64 новых комплексных значений субполос звукового сигнала умножают на матрицу N, причем элементы матрицы N (k, n) задают с помощью
Figure 00000026
где exp () обозначает комплексную экспоненциальную функцию, и i - мнимая единица. Действительную часть выхода этой операции сохраняют в ячейках 0-127 массива v, как показано на фиг. 8a.
На этапе S230 отсчеты, которые находятся теперь во временной области, извлекают из массива v согласно уравнению, приведенному на фиг. 8a, для создания массива из 640 элементов g(n). На этапе S240 действительные отсчеты временной области из массива g умножают на оконный коэффициент c(n) для создания массива w, причем оконные коэффициенты являются опять оконными коэффициентами, основанными на значениях, приведенных в таблице в приложении 1.
Однако, как указано прежде, не требуется, чтобы оконные коэффициенты были точно основаны на значениях, приведенных в таблице приложения 1. В различных сравнительных примерах достаточно, если оконные коэффициенты соответствуют одному из наборов соотношений, которые приведены в таблицах приложений 2-4, для обеспечения желательного свойства с низкой задержкой набора фильтров синтеза. Кроме того, как объяснено в контексте набора фильтров анализа, также можно использовать другие оконные коэффициенты в структуре набора фильтров синтеза. Однако, в зависимости от конкретного воплощения, для получения оконных коэффициентов, основываясь на значениях, приведенных в таблицах в приложениях 1 и 3, нужно рассматривать дополнительно изменение знака относительно оконных коэффициентов, соответствующих индексам 128-255 и 384-511 (умножение с коэффициентом (-1)).
На этапе S250 64 новых выходных отчета вычисляют с помощью суммирования отсчетов из массива w(n) согласно последнему этапу и формуле, приведенной в последовательности операций на фиг. 8a, прежде чем один цикл последовательности операций закончится на этапе S260. В последовательности операций, как показано на фиг. 8a, X [k][l] (= X (k, l)) соответствует значению l субполосы звукового сигнала в субполосе, имеющей индекс k. Каждый новый цикл, как показано на фиг. 8a, генерирует 64 действительных аудиоотсчета временной области в качестве выхода.
Реализация, которая показана на фиг. 8a, набора фильтров комплексного анализа для 64 полос не требует буфера сложения с перекрытием, содержащего несколько ячеек памяти, как объяснено в контексте варианта осуществления, показанного на фиг. 2b. В данном случае буфер сложения с перекрытием «скрыт» в векторах v и g, которые вычисляют, основываясь на значениях, хранящихся в векторе v. Буфер сложения с перекрытием осуществляют в структуре этих векторов с индексами, которые больше 128, так что эти значения соответствуют значениям от предыдущих или прошлых блоков.
Фиг. 8b показывает последовательность операций набора фильтров действительного синтеза для 64 действительных каналов субполос звукового сигнала. Набор фильтров действительного синтеза, согласно фиг. 8b, можно также осуществлять в случае реализации SBR с низким энергопотреблением, как соответствующий набор фильтров SBR.
Последовательность операций на фиг. 8b отличается от последовательности операций на фиг. 8a, главным образом по отношению к этапу S222, который заменяет S220 на фиг. 8a. На этапе S222 64 новых действительных значений субполос звукового сигнала умножают на матрицу Nr, в которой элементы матрицы Nr(k, n) задают с помощью
Figure 00000027
причем выход от этой операции еще раз сохраняют в ячейках 0-127 массива v.
Кроме этих изменений, последовательность операций, которая показана на фиг. 8b в случае действительнозначного набора фильтров синтеза для режима SBR с низким энергопотреблением, не отличается от последовательности операций, которая показана на фиг. 8a для комплексного набора фильтров синтеза для высококачественного режима SBR.
Фиг. 8c показывает последовательность операций согласно варианту осуществления настоящего изобретения в форме субдискретизированного комплексного набора фильтров синтеза и соответствующего способа, который может, например, осуществляться в высококачественной реализации SBR. Чтобы быть более точным, набор фильтров синтеза, как описано на фиг. 8c, относится к комплексному набору фильтров синтеза, способного обрабатывать комплексные значения субполос звукового сигнала для 32 каналов субполос.
Субдискретизированную фильтрацию синтеза сигналов субполос SBR-процесса обеспечивают, используя набор фильтров синтеза с 32 каналами, как показано на фиг. 8c. Выход от набора фильтров - блок действительных отсчетов временной области. Процесс приведен в последовательности операций на фиг. 8c. Фильтрация синтеза содержит после начала (этап S300) следующие этапы, причем массив v содержит 640 действительных отсчетов временной области.
На этапе S310 отсчеты в массиве v сдвигают на 64 позиции, причем самые старшие 64 отсчета отбрасывают. Затем на этапе S320 32 новых комплексных отсчета субполос или комплексных значений субполос звукового сигнала умножают на матрицу N, элементы которой задают с помощью
Figure 00000028
причем exp () обозначает комплексную экспоненциальную функцию, и i - снова мнимая единица. Действительную часть выводимой информации от этой операции затем сохраняют в ячейках 0-63 массива v.
На этапе S330 отсчеты извлекают из вектора v согласно уравнению, приведенному в последовательности операций на фиг. 8c, для создания массива g из 320 элементов. На этапе S340 оконные коэффициенты ci(n) интерполированной оконной функции получают с помощью линейной интерполяции коэффициентов c(n) в соответствии с уравнением (15), причем индекс n находится опять в диапазоне между 0 и 319 (N=64, T=10 для уравнения (15)). Как показано ранее, коэффициенты оконной функции c(n) основаны на значениях, приведенных в таблице приложения 1. Кроме того, для обеспечения свойства с низкой задержкой, как показано ранее, оконные коэффициенты c(n) не обязаны быть точно цифрами, приведенными в таблице приложения 1. Достаточно, если оконные коэффициенты c(n) соответствуют по меньшей мере одному набору соотношений, которые приведены в приложениях 2-4. Однако, в зависимости от конкретного воплощения для получения оконных коэффициентов, основываясь на значениях, приведенных в таблицах в приложениях 1 и 3, дополнительно изменение знака оконных коэффициентов, соответствующих индексам 128-255 и 384-511 (умножение с коэффициентом (-1)), нужно рассматривать согласно уравнениям (16a) и (16b). Кроме того, также различные оконные функции, содержащие различные оконные коэффициенты c(n), можно, естественно, использовать в вариантах осуществления настоящего изобретения.
На этапе S350 отсчеты массива g умножают на интерполированные оконные коэффициенты ci(n) интерполированной оконной функции для получения прошедших оконную обработку отсчетов временной области w(n).
Затем на этапе S360 32 новых выходных отсчета вычисляют с помощью суммирования отсчетов из массива w(n) согласно последнему этапу S360, перед конечным этапом S370 в последовательности операций фиг. 8c.
Как указано ранее, в последовательности операций на фиг. 8c X ([k][l]) (= x (k, l)) соответствует значению l субполос звукового сигнала в канале k субполос звукового сигнала. Кроме того, каждый новый цикл последовательности операций, как обозначено на фиг. 8c, создает 32 действительных отсчета временной области в качестве выхода.
Фиг. 8d показывает последовательность операций варианта осуществления согласно заданному изобретению в форме субдискретизированного действительнозначного набора фильтров синтеза, который может, например, использоваться в случае набора фильтров SBR с низким энергопотреблением. Вариант осуществления и последовательность операций, показанная на фиг. 8d, отличаются от последовательности операций, показанной на фиг. 8c субдискретизированного комплексного набора фильтров синтеза только по отношению к этапу S320, который заменен в последовательности операций, показанной на фиг. 8d, этапом S322.
На этапе S322 32 новых действительных значений субполос звукового сигнала, или отсчетов субполос, умножают на матрицу Nr, причем элементы матрицы Nr задают с помощью
Figure 00000029
причем выход от этой операции сохраняют в ячейках от 0 до 64 массива v.
Фиг. 9a показывает реализацию сравнительного примера в форме способа, соответствующего комплексному набору фильтров анализа для 64 субполос. Фиг. 9a показывает реализацию, как MATLAB-реализацию, которая обеспечивает в качестве выхода вектор y и вектор «state». Данную функцию, как определено в скрипте, показанном на фиг. 9a, называют LDFB80, в которой вектор x, содержащий новые аудиоотсчеты, и вектор «state» обеспечивают в качестве вводимой информации. Название функции LDFB80 - сокращение для набора фильтров с низкой задержкой для 8 блоков, простирающихся в прошлое, и 0 блоков - в будущее.
В языке программирования MATLAB знак процента (%) указывает комментарии, которые не выполняются, а просто служат цели прокомментировать и показать исходный код. В последующем описании различные сегменты исходного кода будут объяснены относительно их функций.
В последовательности кода S400 буфер, который представлен вектором «state», обновляют таким образом, что содержимое вектора «state», имеющее индексы от 577 до 640, заменяют содержанием вектора x, содержащим новые входные аудиоотсчеты временной области. В последовательности кода S410 оконные коэффициенты оконной функции анализа, которые хранятся в переменной LDFB80_win, перемещают в вектор win_ana.
На этапе S420, который предполагает, что последние отсчеты выровнены к правой стороне буфера, выполняют фактическую оконную обработку. На этапе S420 содержимое вектора «state» поэлементно умножают (.*) на элементы вектора win_ana, содержащего оконную функцию анализа. Выходную информацию этого умножения затем сохраняют в векторе x_win_orig.
На этапе S430 содержимое вектора x_win_orig изменяют для формирования матрицы размером 128·5 элементов, называемой x_stack. На этапе S440 выполняют изменение знака стека x_stack относительно второго и четвертого столбца матрицы x_stack.
На этапе S450 стек x_stack сокращают, или уменьшают, с помощью суммирования элементов x_stack относительно второго индекса и одновременно инвертируя порядок элементов и перемещая перед сохранением результат снова в другой x_stack.
В сегменте кода S460 преобразование из временной области в частотную область выполняют с помощью вычисления комплексного быстрого преобразования Фурье (FFT) поэлементно умноженного содержимого стека x_stack, которое умножают на комплексную экспоненциальную функцию, к которой обеспечивают параметр (-i·π·n/128), с индексами в диапазоне от 0 до -127 и мнимой единицей i.
В сегменте кода S470 постнастройку выполняют с помощью определения переменной m=(64+l)/2 и вычисляя блок, содержащий значения субполос звукового сигнала, как вектор y согласно уравнению
Figure 00000030
Индекс k охватывает диапазон целых чисел от 1-64 в реализации, показанной на фиг. 9a. Вектор y затем выводят как вектор, или блок, содержащий значения 180 субполос звукового сигнала на фиг. 1. Полоса над вторым уравнением разложения на множители (26), а также сегмент кода S417 функции conj() на фиг. 9a относится к комплексному сопряжению параметра соответствующего комплексного числа.
В конечном сегменте кода S480 вектор «state» сдвигают на 64 элемента. Вектор «state» в его сдвинутой форме можно затем обеспечивать к функции LDFB80 в качестве входной информации снова в дополнительном цикле функции.
Фиг. 9b показывает MATLAB-реализацию согласно варианту осуществления настоящего изобретения в форме способа, соответствующего комплексному набору фильтров анализа для 32 субполос. Соответственно, определенная функция упоминается как LDFB80_32, указывая, что реализация представляет набор фильтров с низкой задержкой для 32 субполос, основываясь на дополнительном перекрытии 8 блоков в прошлое и 0 блоков в будущее.
Реализация на фиг. 9b отличается от реализации, показанной на фиг. 9a, только по отношению к нескольким последовательностям кода, которые описаны в последующем описании. Последовательности кода S400, S430, S460, S470 и S480 заменяют соответствующими последовательностями кода S400', S430', S460', S470' и S480', учитывая главным образом факт, что количество субполос, или количество значений субполос, выводимых функцией LDFB80_32, сокращено в 2 раза. Соответственно, этап S400' относится к вектору «state», обновляемому относительно 32 последних записей, соответствующих индексам 289-320, соответствующими 32 входными аудиоотсчетами временной области нового блока 220, как показано на фиг. 1.
Однако главное различие между реализациями, которые показаны на фиг. 9a и 9b, появляется в последовательности кода S410 на фиг. 9a, которая заменена последовательностью кода S412 в реализации, показанной на фиг. 9b. Последовательность кода для S412 на фиг. 9b содержит сначала копирование 640 оконных коэффициентов, содержащих оконные коэффициенты, хранящиеся в векторе LDFB80_win, в локальный вектор win_ana. Затем происходит интерполяция согласно уравнению (15), в которой два последовательных оконных коэффициента, представленных элементами вектора win_ana, складывают и делят на 2 и затем сохраняют назад в вектор win_ana.
Следующая кодовая последовательность S420 идентична кодовой последовательности S420, которая показана на фиг. 9a, которая выполняет фактическое поэлементное умножение (.*) оконной обработки значениям, или элементам, вектора «state» с элементами вектора win_ana, содержащими интерполированные оконные коэффициенты интерполированной оконной функции. Выход от этой операции сохраняют в векторе x_win_orig. Однако, различием между последовательностью кода S420 на фиг. 9b и соответствующей последовательностью кода S420 на фиг. 9a является то, что в случае фиг. 9b, не 640, а только 320 умножений выполняют в структуре применения оконной функции.
В последовательности кода S430', заменяющей последовательность кода S430, стек x_stack подготавливают, изменяя вектор x_win_orig. Однако, поскольку вектор X_win_orig содержит только 320 элементов, по сравнению с соответствующим вектором на фиг. 9a, содержащим 640 элементов, матрица x_stack является матрицей только с 64·5 элементами.
Последовательность кода S440 изменения знака и последовательность кода S450 сокращения стека идентичны в обеих реализациях согласно фиг. 9a и 9b, кроме уменьшенного количества элементов (320 по сравнению с 640).
В последовательности кода S460', которая заменяет последовательность кода S460, выполняют нечетное комплексное быстрое преобразование Фурье (FFT) данных оконной функции, которое очень похоже на преобразование последовательности кода S460 на фиг. 9a. Однако, еще раз, из-за уменьшенного количества выходных значений субполос звукового сигнала, вектор temp обеспечивают с помощью результата быстрого преобразования Фурье, поэлементным умножением элементов стека x_stack и комплексной экспоненциальной функцией параметра (-i·π·n/64), причем индекс n находится в диапазоне между 0 и 63.
Впоследствии, в измененной последовательности кода S470', постнастройку выполняют, определяя переменную m=(32+l)/2 и генерируя выходной вектор y согласно уравнению (26), причем индекс k охватывает только диапазон от 1 до 32, и, причем, число 128, появляющееся в параметре комплексной экспоненциальной функции, заменяют числом 64.
В конечной последовательности кода S480' состояние буфера сдвигают на 32 элемента в случае реализации, показанной на фиг. 9b, причем в соответствующей последовательности кода S480 буфер сдвигают на 64 элемента.
Фиг. 10a показывает MATLAB-скрипт, показывающий реализацию согласно сравнительному примеру в форме способа, соответствующего комплексному набору фильтров синтеза для 64 подполос. Скрипт, показанный на фиг. 10a, определяет функцию ILDFB80, для которой вектор x представляет блок 320 значений субполос звукового сигнала на фиг. 2a, и вектор «state» обеспечивает ввод параметров. Название ILDFB80 указывает, что определенная функция является инверсией набора фильтров с низкой задержкой, соответствующего 8 блокам звуковых данных из прошлого и 0 блокам из будущего. Функция обеспечивает вектор y и новый, или переопределенный вектор «state» в качестве выходной информации, причем вектор y соответствует блоку 410 аудиоотсчетов временной области на фиг. 2a.
В последовательности кода S500 выполняют преднастройку, в которой определяют переменную m=(64+l)/2, а также вектор temp. Элементы temp(n) вектора temp определяют согласно уравнению
Figure 00000031
в котором полоса выше элемента вектора x(n) и функция conj() представляют комплексное сопряжение, exp () представляет комплексную экспоненциальную функцию, i представляет мнимую единицу, и n - индекс в диапазоне от 1 до 64.
В последовательности кода S510 вектор temp расширяют в матрицу, содержащую в первом столбце элементы вектора temp, а во втором столбце - комплексное сопряжение вектора temp, обратное по отношению к порядку элементов, который определяется индексами вектора. Следовательно, в последовательности кода S510 нечетную симметрию матрицы temp устанавливают, основываясь на векторе temp.
В последовательности кода S520 нечетное быстрое преобразование Фурье (FFT) выполняют, основываясь на матрице temp. В этой последовательности кода действительную часть поэлементного умножения результата обратного преобразования Фурье матрицы temp с экспоненциальной функцией, имеющей параметр (i·π/128), выполняют и выводят в вектор y_knl, причем индекс n находится в диапазоне от 0 до 127.
В последовательности кода S530 формируют расширение данных и изменение знака. Для обеспечения этого порядок элементов вектора y_knl изменяют на противоположный и в то же самое время выполняют изменение знака. Затем определяют матрицу tmp, содержащую первый, третий и пятый столбец вектора y_knl, причем второй и четвертый столбец содержат вектор с измененным знаком y_knl.
В последовательности кода S540 оконные коэффициенты, которые сохраняют в векторе LDFB80_win, сначала копируют в вектор win_ana. Затем, оконные коэффициенты синтеза определяют, основываясь на оконных коэффициентах анализа, которые хранятся в векторе win_ana, генерируя обращенную во времени версию оконной функции анализа согласно
Figure 00000032
где N·T - общее количество оконных коэффициентов, и n - индекс оконных коэффициентов.
В последовательности кода S550 оконную функцию синтеза применяют к вектору tmp с помощью поэлементного умножения вектора на оконную функцию синтеза. В последовательности кода S560 буфер обновляют, устанавливая элементы вектора «state» с индексами 577-640 в 0 и складывая содержимое прошедшего оконную обработку вектора tmp с вектором «state».
В последовательности кода S570 выходную информацию вектора y, содержащего аудиоотсчеты временной области, извлекают из вектора «state» с помощью извлечения элементов вектора «state» с индексами 1-64.
В последовательности кода S580, конечной последовательности кода функции, которая показана на фиг. 10a, вектор «state» сдвигают на 64 элемента так, чтобы элементы с индексами от 65 до 640 были скопированы в первые 576 элементов вектора «state».
Фиг. 10b показывает MATLAB-скрипт реализации согласно варианту осуществления настоящего изобретения в форме комплексного набора фильтров синтеза для 32 значений субполос. Название функции, которая определяется скриптом, показанным на фиг. 10b, показывает ее, как определенную функцию, называемую ILDFB80_32, указывая, что определенная функция является инверсией набора фильтров с низкой задержкой для 32 полос с 8 перекрытиями блоков из прошлого и 0 перекрытиями блоков из будущего.
Как обсуждается относительно сравнения реализаций, показанных на фиг. 9a и 9b, реализация согласно скрипту на фиг. 10b также близко соотносится с реализацией набора фильтров синтеза с 64 субполосами согласно фиг. 10a. Как следствие, те же самые векторы обеспечивают к функции и выводятся функцией, которые, однако, содержат только половину набора элементов по сравнению с реализацией на фиг. 10a. Реализация для набора фильтров синтеза с 32 полосами для 32 полос отличается от версии с 64 субполосами, показанной на фиг. 10a, главным образом относительно двух аспектов. Последовательности кода S500, S510, S520, S530, S560, S570 и S580 заменяют последовательностями кода, в которых количество адресуемых элементов и количество дополнительных связанных с элементом параметров делят на 2. Кроме того, последовательность кода S540, которая генерирует оконную функцию синтеза, заменяют последовательностью кода S542, в которой оконную функцию синтеза создают, как линейно интерполированную оконную функцию синтеза согласно уравнению (15).
В последовательности кода S500', заменяющей последовательность кода S500, определяют, что переменная m равна m=(32+l)/2, и вектор temp определяют согласно уравнению (27), причем индекс n охватывает только диапазон 1-32, и, причем, коэффициент 1/128 заменяют коэффициентом 1/64 в параметре экспоненциальной функции.
Соответственно, в последовательности кода S510', заменяющей последовательность кода S510, диапазон индексов охватывает только индексы, содержащие 32 элемента вектора temp. Другими словами, индекс охватывает только значения от 1 до 32. Соответственно, в последовательности кода S520', заменяющей последовательность кода S520, параметр экспоненциальной функции заменяют на (i·π·n/64), причем индекс n находится в диапазоне от 0 до 63. В структуре последовательности кода S530' диапазон индексов также уменьшают в 2 раза по сравнению с последовательностью кода S530.
Последовательность кода S542, заменяющая последовательность кода S540 на фиг. 10a, также копирует оконную функцию, которая хранится в векторе LDFB80_win, в вектор win_ana и создает обращенную во времени версию win_syn согласно уравнению (28). Однако последовательность кода S542 реализации, показанной на фиг. 10b, дополнительно содержит этап интерполяции согласно уравнению (15), в котором для каждого элемента переопределенного вектора win_syn, содержащего оконные коэффициенты оконной функции синтеза, выполняют линейную интерполяцию двух последовательных оконных коэффициентов исходной оконной функции синтеза.
Последовательность кода S550 применения окна к вектору tmp и замены элементов tmp их прошедшей оконную обработку версией идентична в терминах кода, как прямое сравнение соответствующих последовательностей кода на фиг. 10a и 10b. Однако, из-за меньшего размера вектора tmp в реализации на фиг. 10b, во время реализации выполняют только половину количества умножений.
Также в структуре последовательностей кода S560', S570' и S580', которые заменяют последовательности кода S560, S570 и S580, соответственно, индексы 640 и 64 заменяют на 320 и 32, соответственно. Поэтому эти три конечные последовательности кода отличаются от последовательностей кода реализации, показанной на фиг. 10a, только по отношению к размеру векторов «state», tmp и y.
Как показывают описанные варианты осуществления, средство оконной обработки анализа, а также средство оконной обработки по синтезу настраивают для оконной обработки соответствующим отсчетам временной области, содержащимся в соответствующих кадрах, умножая их поэлементно на оконные коэффициенты оконной функции.
Перед описанием оконной функции, которая может использоваться, например, в качестве оконной функции синтеза и, более точно, в качестве оконной функции анализа в ее обращенной во времени версии, преимущества вариантов осуществления согласно настоящему изобретению будут описаны более подробно, особенно ввиду реализации в структуре инструментального средства SBR или системы, которая показана на фиг. 5 и 6.
Среди преимуществ, варианты осуществления согласно настоящему изобретению и системы, содержащие больше одного варианта осуществления согласно настоящему изобретению, могут предлагать существенное уменьшение задержки по сравнению с другими наборами фильтров. Однако к этому свойству с низкой задержкой обращаются в контексте фиг. 13 и 14 более подробно. Одним из важных аспектов в этом контексте является то, что длина оконной функции, другими словами количество оконных коэффициентов, которые будут применять к кадру или блоку отсчетов временной области, независима от задержки.
Варианты осуществления согласно настоящему изобретению предлагают дополнительное преимущество улучшения качества (восстановленных) звуковых данных. Интерполяция, используемая в вариантах осуществления согласно настоящему изобретению, предлагает значительное уменьшение наложения спектров по сравнению с другими схемами сокращения количества оконных коэффициентов.
Кроме того, как описано в контексте фиг. 17 и 18 более подробно, в психоакустических терминах варианты осуществления согласно настоящему изобретению часто используют свойства временного маскирования человеческого уха лучше, чем множество других наборов фильтров. Кроме того, как будет более точно указано в контексте фиг. 15, 16 и 19, варианты осуществления согласно настоящему изобретению предлагают превосходную частотную характеристику.
Также, во многих наборах фильтров согласно варианту осуществления настоящего изобретения обеспечивают совершенное восстановление, если набор фильтров анализа и набор фильтров синтеза взаимосвязаны. Другими словами, варианты осуществления согласно настоящему изобретению не только предлагают на слух неразличимый выходной сигнал по сравнению с входным сигналом такого взаимосвязанного комплекта из набора фильтров анализа и набора фильтров синтеза, но и (кроме ошибок квантования, вычислительных эффектов округления и других эффектов, вызванных необходимой дискретизацией) идентичный выходной сигнал по сравнению с входным сигналом.
Интеграцию в модуле SBR наборов фильтров согласно настоящему изобретению можно легко обеспечивать. Хотя обычно модули SBR работают в режиме двойной скорости, комплексные наборы фильтров с низкой задержкой согласно вариантам осуществления настоящего изобретения способны обеспечивать совершенное восстановление в режиме одинарной скорости, в то время как исходные наборы фильтров SBR QMF способны обеспечивать только почти совершенное восстановление. В режиме двойной скорости версию с 32 полосами импульсной характеристики получают с помощью линейной интерполяции, также называемой субдискретизацией, двух смежных сигналов или оконных коэффициентов импульсной характеристики с 64 полосами или оконной функции, как объяснено в контексте фиг. 3.
В случае реализации комплексного набора фильтров можно обеспечивать существенное уменьшение задержки анализа (или синтеза) для критически дискретизируемых наборов фильтров, в котором дискретизация или обработка частоты соответствуют граничной частоте согласно теории Найквиста-Шэннона. В случае реализации действительнозначного набора фильтров эффективную реализацию можно обеспечивать, используя оптимизированные алгоритмы, что, например, показано в контексте MATLAB-реализации, показанной на фиг. 9 и 10. Эти реализации могут, например, использоваться для режима с низким энергопотреблением инструментального средства SBR, как описано в контексте фиг. 5 и 6.
Как описано в контексте фиг. 5 и 6, можно обеспечивать дополнительное уменьшение задержки в случае системы SBR при использовании комплексного с низкой задержкой набора фильтров согласно варианту осуществления настоящего изобретения. Как указано ранее, в декодере SBR 610, который показан на фиг. 5, набор 620 фильтров анализа QMF заменяют комплексным набором фильтров с низкой задержкой (CLDFB) согласно варианту осуществления настоящего изобретения. Эту замену можно делать вычислительным способом, сохраняя количество полос (64), длину импульсной характеристики (640) и при использовании комплексной модуляции. Задержку, обеспечиваемую этим инструментальным средством, минимизируют до такой степени, чтобы обеспечивать достаточно низкую полную задержку двусторонней связи, не жертвуя обеспечиваемым уровнем качества.
Если сравнивать, например, с системой, содержащей MDCT и MDST, для формирования комплексной MDCT-подобной системы, вариант осуществления согласно настоящему изобретению обеспечивает намного лучшую частотную характеристику. По сравнению с набором фильтров QMF, например, используемым в MPEG-4 SBR в настоящее время, система, содержащая один или большее количество наборов фильтров согласно вариантам осуществления настоящего изобретения обеспечивает значительно более низкую задержку.
Даже по сравнению с низкой задержкой набора фильтров QMF, варианты осуществления согласно настоящему изобретению предлагают преимущество совершенного восстановления, объединенного с более низкой задержкой. Преимущества, являющиеся результатом свойства совершенного восстановления в отличие от почти совершенного восстановления наборов фильтров QMF, являются следующими. Для почти совершенного восстановления высокое затухание в полосе задержки необходимо для уменьшения наложения спектров до достаточно низкого уровня. Это ограничивает возможность обеспечения очень низкой задержки при разработке фильтра. Напротив, при использовании варианта осуществления согласно настоящему изобретению теперь существует возможность независимой разработки фильтра, так что не требуется высокое затухание в полосе задержки для уменьшения наложения спектров до достаточно низкого уровня. Затухание в полосе задержки должно только быть достаточно низким для обеспечения уменьшенного наложения спектров, достаточного для требуемого приложения обработки сигналов. Таким образом, лучшее соотношение для более низкой задержки можно обеспечивать в конструкции фильтра.
Фиг. 11 показывает сравнение оконной функции 700, которая может, например, использоваться в варианте осуществления согласно настоящему изобретению, с синусной оконной функцией 710. Оконная функция 700, которая также упоминается как оконная функция CMLDFB «синтеза» (CMLDFB = комплексный модулированный набор фильтров с низкой задержкой), содержит 640 оконных коэффициентов, основанных на значениях, приведенных в таблице в приложении 1. Относительно интенсивности оконных функций нужно отметить, что в последующем общие коэффициенты усиления или коэффициенты затухания для корректировки амплитуды прошедшего оконную обработку сигнала не рассматривают. Оконные функции могут, например, быть нормализованы относительно значения, соответствующего центру задержки, как описано в контексте фиг. 13, или относительно значения n=N, n=N-1 или n=N+1, где N - длина блока, и n - индекс оконных коэффициентов. Для сравнения синусную оконную функцию 710 определяют только по 128 отсчетам и, например, она используется в случае модуля MDCT или MDST.
Однако, в зависимости от конкретного воплощения, для получения оконных коэффициентов, основываясь на значениях, приведенных в таблицах в приложениях 1 и 3, дополнительно изменение знака относительно оконных коэффициентов, соответствующих индексам 128-255 и 384-511 (умножение с коэффициентом (-1)), нужно рассматривать согласно уравнениям (16a) и (16b).
Перед обсуждением различий двух оконных функций 700, 710, нужно отметить, что обе оконные функции содержат только действительные оконные коэффициенты. Кроме того, в обоих случаях абсолютное значение оконного коэффициента, соответствующего индексу n=0, меньше 0,1. В случае оконной функции 700 CMLDFB соответствующее значение еще меньше, чем 0,02.
Рассматривая две оконные функции 700, 710 относительно их наборов определения, очевидны несколько существенных различий. В то время, когда синусная оконная функция 710 симметрична, оконная функция 700 показывает асимметричное поведение. Для определения этого более ясно, синусная оконная функция симметрична, поскольку существует действительное значение n0, так что относительно всех действительных чисел n оконная функция 710 определена для (n0+n) и (n0-n), соотношение
Figure 00000033
выполняют до необходимой границы (ε≥0; абсолютное значение различия терминов на двух сторонах уравнения (29) меньше или равно ε), причем w(n) представляет оконный коэффициент, соответствующий индексу n. В случае синусной оконной функции соответствующий индекс n0 находится точно между двух самых верхних оконных коэффициентов. Другими словами, для синусной оконной функции 710 индекс n0=63,5. Синусную оконную функцию определяют для индексов n=0…, 127.
Напротив, оконную функцию 700 определяют по набору индексов n=0…, 639. Оконная функция 700 явно асимметрична в том смысле, что для всех действительных чисел n0 всегда существует по меньшей мере одно действительное число так, чтобы (n0+n) и (n0-n) принадлежали набору определения оконной функции, для которой неравенство
Figure 00000034
выполняется до (почти искусственно) определяемой границы (ε≥0; абсолютное значение разности терминов на двух сторонах уравнения (29) больше или равно ε), где w(n) - также оконный коэффициент, соответствующий индексу n.
Дополнительными различиями между двумя оконными функциями, которые обе относятся к размеру блока N=64 отсчета, является то, что максимальное значение оконной функции 700 больше 1, и получают его для индексов в диапазоне
Figure 00000035
для оконной функции синтеза. В случае оконной функции 700, показанной на фиг. 11, максимальное полученное значение больше 1,04, полученное при индексе отсчета n=77. Напротив, максимальные значения синусной оконной функции 710 меньше или равно 1, которые получают при n=63 и n=64.
Однако также оконная функция 700 получает значение приблизительно 1 при индексах отсчетов около n=N. Точнее, абсолютное значение или само значение оконного коэффициента w (N-1), соответствующее индексу n=n-1, меньше 1, тогда как абсолютное значение или само значение оконного коэффициента w(n), соответствующего индексу n=N, больше 1. В некоторых вариантах осуществления согласно настоящему изобретению эти два оконных коэффициента соответствуют соотношениям
Figure 00000036
что является результатом оптимизации качества звука наборов фильтров, согласно вариантам осуществления настоящего изобретения. Во многих случаях желательно иметь оконный коэффициент w(0), содержащий как можно меньшее абсолютное значение. В этом случае, детерминант оконных коэффициентов
Figure 00000037
должен быть максимально возможно близок к 1 для обеспечения качества звука, которое оптимизировано относительно возможных параметров. Знак детерминанта, как задается уравнением (33), однако, можно выбирать свободно. Как следствие того, что оконный коэффициент w(0) меньше или приблизительно равен 0, произведение w (N-1)·w(n) или его абсолютное значение должно быть как можно ближе к +/-1. В этом случае оконный коэффициент w(2N-1) можно выбирать почти свободно. Уравнение (33) является результатом использования методики матриц с нулевой задержкой, которая описана в «New Framework for Modulated Perfect Reconstruction Filter Banks» by G.D.T. Schuller and M.J.T. Smith, IEEE Transactions on Signal Processing, Vol. 44, No. 8, August 1996.
Кроме того, как описано более подробно в контексте фиг. 13, оконные коэффициенты, соответствующие индексам N-1 и N, содержатся в середине центра модуляции и поэтому соответствуют отсчету, имеющему значение приблизительно 1,0 и совпадающему с задержкой набора фильтров, которая определяется функцией фильтра-прототипа или оконной функцией.
Оконная функция 700 синтеза, как показано на фиг. 11, кроме того показывает колебательное поведение со строго монотонно увеличивающимися оконными коэффициентами от оконного коэффициента последовательности оконных коэффициентов, соответствующего индексу (n=0), используемому для оконной обработки последнему аудиоотсчету временной области, до оконного коэффициента, содержащего самое высокое абсолютное значение всех оконных коэффициентов оконной функции 700 синтеза. Естественно, в случае обращенной во времени оконной функции анализа колебательное поведение содержит строго монотонное уменьшение оконных коэффициентов от оконного коэффициента, содержащего самое высокое абсолютное значение всех оконных коэффициентов соответствующей (обращенной во времени) оконной функции анализа, до оконных коэффициентов последовательности оконных коэффициентов, соответствующих индексу (n=639), используемых для оконной обработки последнему аудиоотсчету временной области.
Как следствие колебательного поведения разработка оконной функции 700 синтеза начинается с оконного коэффициента, соответствующего индексу n=0, имеющего абсолютное значение меньше 0,02, и оконного коэффициента, соответствующего индексу n=1, который меньше 0,03, получая значение приблизительно 1, соответствующее индексу n=N, получая максимальное значение больше 1,04 при индексе согласно уравнению (31), получая дальнейшее значение приблизительно 1 при индексе n=90 и 91, первое изменение знака при значениях индекса n=162 и n=163, получая минимальное значение меньше -0,1 или -0,12755 при индексе приблизительно n=3N и дальнейшее изменение знака при значениях индекса n=284 и n=285. Однако оконная функция 700 синтеза дополнительно может содержать дополнительные изменения знака при дополнительном значении индекса n. Сравнивая оконные коэффициенты со значениями, приведенными в таблицах в приложениях 1 и 3, дополнительные изменения знака оконных коэффициентов, соответствующих индексам 128-255 и 384-511 (умножение с коэффициентом (-1)), нужно рассматривать согласно уравнениям (16a) и (16b).
Колебательное поведение оконной функции 700 синтеза подобно поведению сильно затухающего колебания, которое показывают с помощью максимального значения приблизительно 1,04 и минимального значения приблизительно -0,12. Как следствие, больше 50% всех оконных коэффициентов содержат абсолютные значения, которые меньше или равны 0,1. Как описано в контексте вариантов осуществления, описанных на фиг. 1 и 2a, разработка оконной функции содержит первую группу 420 (или 200) и вторую группу 430 (или 210), причем первая группа 420 содержит первую последовательную часть оконных коэффициентов, и вторая группа 430 содержит вторую последовательную часть оконных коэффициентов. Как уже указано прежде, последовательность оконных коэффициентов содержит только первую группу 420 оконных коэффициентов и вторую группу 430 оконных функций, причем первая группа 420 оконных коэффициентов содержит точно первую последовательную последовательность оконных коэффициентов, и причем вторая группа 430 содержит точно вторую последовательную часть оконных коэффициентов. Следовательно, термины первая группа 420 и первая часть оконных коэффициентов, а также термины вторая группа 430 и вторая часть оконных коэффициентов могут использоваться в качестве синонимов.
Больше 50% всех оконных коэффициентов, имеющих абсолютные значения, которые меньше или равны 0,1, содержатся во второй группе, или второй части 430 оконных коэффициентов, как следствие сильно затухающего колебательного поведения оконной функции 700. Кроме того, также больше 50% всех оконных коэффициентов, содержащихся во второй группе, или второй части 430 оконных коэффициентов, содержат абсолютные значения, которые меньше или равны 0,01.
Первая часть 420 оконных коэффициентов содержит меньше одной третьей всех оконных коэффициентов последовательности оконных коэффициентов. Соответственно, вторая часть 430 оконных коэффициентов содержит больше двух третьих оконных коэффициентов. В случае общего количества T блоков, которые будут обрабатываться в одном из кадров 120, 150, 330, 380 из более четырех блоков, первая часть обычно содержит 3/2 · N оконных коэффициентов, причем N - количество отсчетов временной области одного блока. Соответственно, вторая часть содержит остальную часть оконных коэффициентов или, точнее, (T-3/2) N оконных коэффициентов. В случае T=10 блоков в кадре, как показано на фиг. 11, первая часть содержит 3/2·N оконных коэффициентов, тогда как вторая часть 210 содержит 8,5·N оконных коэффициентов. В случае размера блока N=64 аудиоотсчетов временной области в блоке, первая часть содержит 96 оконных коэффициентов, тогда как вторая часть содержит 544 оконных коэффициентов. Оконная функция 700 синтеза, как показано на фиг. 11, получает значение приблизительно 0,96 на границе первой части и второй части при индексе приблизительно n=95 или 96.
Несмотря на количество оконных коэффициентов, содержащихся в первой части 420 и второй части 430, значение энергии или значение полной энергии соответствующих оконных коэффициентов отличаются значительно друг от друга. Значение энергии определяют с помощью
Figure 00000038
где w(n) - оконный коэффициент, и индекс n, по которому оценивают сумму в уравнении (34), соответствует индексам соответствующих частей 420, 430, всему набору оконных коэффициентов или любому другому набору оконных коэффициентов, которым соответствуют соответствующие значения энергии E. Несмотря на существенное различие оконных коэффициентов, значение энергии первой части 420 равно или выше 2/3 полного значения энергии всех оконных коэффициентов. Соответственно, значение энергии второй части 430 меньше или равно 1/3 полного значения энергии всех оконных коэффициентов.
Чтобы показать это, значение энергии первой части 420 оконных коэффициентов оконной функции 700 приблизительно равно 55,85, в то время как значение энергии оконных коэффициентов второй части 430 приблизительно равно 22,81. Значение полной энергии всех оконных коэффициентов оконной функции 700 приблизительно равно 78,03, так что значение энергии первой части 420 составляет приблизительно 71,6% значения полной энергии, в то время как значение энергии второй части 430 составляет приблизительно 28,4% значения полной энергии всех оконных коэффициентов.
Естественно, уравнение (34) может быть представлено в нормализованной версии, деля значение E энергии на коэффициент нормализации E0, который может в принципе быть любым значением энергии. Коэффициент нормализации E0 может, например, быть значением полной энергии всех оконных коэффициентов последовательности оконных коэффициентов, вычисленным согласно уравнению (34).
Основываясь на абсолютных значениях оконных коэффициентов или основываясь на значениях энергии соответствующих оконных коэффициентов, также можно определять среднюю точку, или «центр масс», из последовательности оконных коэффициентов. Центр масс, или средняя точка, последовательности оконных коэффициентов - действительное число и обычно находится в диапазоне индексов первой части 420 оконных коэффициентов. В случае соответствующих кадров, содержащих больше четырех блоков аудиоотсчетов временной области (T>4), центр масс nca, основанный на абсолютных значениях оконных коэффициентов, или центр масс nce, основанный на значениях энергии оконных коэффициентов, меньше 3/2·N. Другими словами, в случае T=10 блоков в кадре, центр масс находится в пределах области индексов первой части 200.
Центр масс nca, основанный на абсолютных значениях оконных коэффициентов w(n), определяют согласно
Figure 00000039
и центр масс nce, учитывая значения энергии оконных коэффициентов w(n), определяют согласно
Figure 00000040
где N и T - положительные целые числа, указывающие количество аудиоотсчетов временной области в блоке и количество блоков в кадре, соответственно. Естественно, средние точки согласно уравнениям (35) и (36) можно также вычислять по отношению к ограниченному набору оконных коэффициентов, заменяя пределы приведенных выше сумм соответствующим образом.
Для оконной функции 700, которая показана на фиг. 1, центр масс nca, основанный на абсолютных значениях оконных коэффициентов w(n), равен значению nca≈87,75, и средняя точка, или центр масс nce относительно значений энергии оконных коэффициентов w(n)-nce≈80,04. Поскольку первая часть 200 оконных коэффициентов оконной функции 700 содержит 96 (= 3/2·N; N=64) оконных коэффициентов, обе центральные точки находятся в пределах первой части 200 оконных коэффициентов, как ранее описано.
Оконные коэффициенты w(n) оконной функции 700 основаны на значениях, приведенных в таблице в приложении 1. Однако для обеспечения, например, свойства набора фильтров с низкой задержкой, как описано ранее, не требуется осуществлять оконную функцию точно так, как задано оконными коэффициентами в таблице приложения 1. Во многих случаях более чем достаточно для оконных коэффициентов оконной функции, содержащей 640 оконных коэффициентов, для удовлетворения условий любого из соотношений или уравнений, приведенных в таблицах приложений 2-4. Оконные коэффициенты, или коэффициенты фильтра, приведенные в таблице в приложении 1, представляют предпочтительные значения, которые можно настраивать согласно уравнениям (16a) и (16b) в некоторых реализациях. Однако, как указано, например, с помощью дополнительных таблиц, приведенных в дополнительных приложениях, предпочтительные значения могут различаться от второй, третьей, четвертой, пятой цифры после десятичной точки так, чтобы у результирующих фильтров или оконных функций все еще были преимущества вариантов осуществления согласно настоящему изобретению. Однако, в зависимости от конкретного воплощения для получения оконных коэффициентов, основываясь на значениях, приведенных в таблицах в приложениях 1 и 3, дополнительно изменения знака относительно оконных коэффициентов, соответствующих индексам 128-255 и 384-511 (умножение с коэффициентом (-1)), нужно рассматривать согласно уравнениям (16a) и (16b).
Естественно, дополнительные оконные функции, содержащие различное количество оконных коэффициентов, могут одинаково быть определены и использоваться в структуре вариантов осуществления согласно настоящему изобретению. В этом контексте нужно отметить, что и количество аудиоотсчетов временной области в блоке, и количество блоков в кадре, а также распределение блоков относительно прошлых отсчетов и будущих отсчетов могут различаться по широкому диапазону параметров.
Фиг. 12 показывает сравнение комплексной модулированной с низкой задержкой оконной функции набора фильтров (оконной функции 700 CMLDFB), которая показана на фиг. 11, и исходного фильтра-прототипа 720 SBR QMF, который используется, например, в инструментальном средстве SBR согласно стандартам MPEG. Как показано на фиг. 11, оконная функция 700 CMLDFB является опять оконной функцией синтеза согласно варианту осуществления настоящего изобретения.
Хотя оконная функция 700 согласно варианту осуществления настоящего изобретения явно асимметрична, как определено в контексте уравнения (30), исходный SBR QMF фильтр-прототип 720 симметричен относительно индексов n=319 и 320, поскольку и оконную функцию 700, и также фильтр-прототип 720 SBR QMF определяют относительно 640 индексов. Другими словами, по отношению к уравнению (29) «значение индекса» n0, представляющее индекс центра симметрии, задают с помощью n0=319,5 в случае фильтра-прототипа 720 SBR QMF.
Кроме того, из-за симметрии фильтра-прототипа 720 SBR QMF, также средняя точка nca и nce согласно уравнениям (35) и (36), соответственно, идентичны центру симметрии n0. Значение энергии фильтра-прототипа 720 SBR QMF равно 64,00, поскольку фильтр-прототип является ортогональным фильтром. Напротив, явно асимметричная оконная функция 700 содержит значение энергии 78,0327, как описано ранее.
В следующих разделах описания системы SBR, которая представлена в контексте фиг. 5 и 6, будут рассмотрены, в которых декодер SBR 610 содержит варианты осуществления согласно настоящему изобретению в форме набора фильтров анализа, как набора 620 фильтров, и вариант осуществления согласно настоящему изобретению в форме набора фильтров синтеза для набора 640 фильтров синтеза. Как представлено более подробно, полная задержка набора фильтров анализа согласно настоящему изобретению, использующему оконную функцию 700, как показано на фиг. 11 и 12, содержит полную задержку 127 отсчетов, тогда как исходная SBR QMF модель, основанная на фильтре инструментального средства SBR, приводит к полной задержке 640 отсчетов.
Замена наборов фильтров QMF в модуле SBR, например в декодере SBR 610, комплексным набором фильтров с низкой задержкой (CLDFB) приводит к сокращению задержки с 42 мс до 31,3 мс, не вводя ухудшения качества звука или дополнительной вычислительной сложности. С новым набором фильтров и стандартный режим SBR (высококачественный режим), и режим с низким энергопотреблением, использующий только действительнозначные наборы фильтров, поддерживаются, как показано в описании вариантов осуществления согласно настоящему изобретению относительно фиг. 7-10.
Особенно в области техники телекоммуникации и двусторонней связи, низкая задержка является очень важной. Хотя улучшенный с низкой задержкой кодек AAC уже может обеспечивать достаточно низкую задержку для приложений связи, равную 42 мс, его алгоритмическая задержка все еще выше, чем задержка основного кодека с низкой задержкой AAC, который способен обеспечивать задержку до 20 мс, и задержка других кодеков средств связи. В декодере 610 SBR узел анализа и синтеза QMF все еще вызывает задержку восстановления 12 мс. Перспективным подходом для уменьшения этой задержки является использование методики набора фильтров с низкой задержкой согласно варианту осуществления настоящего изобретения и замена текущего набора фильтров QMF соответствующей версией с низкой задержкой согласно вариантам осуществления настоящего изобретения. Другими словами, дополнительное уменьшение задержки обеспечивают с помощью простой замены обычных наборов фильтров, используемых в модуле 610 SBR, комплексным набором фильтров с низкой задержкой согласно вариантам осуществления настоящего изобретения.
Для использования в модуле 610 SBR новые наборы фильтров согласно вариантам осуществления настоящего изобретения, которые также упоминаются как CLDFB, проектируют так, чтобы они были настолько подобны первоначально используемым наборам фильтров QMF, насколько возможно. Это включает в себя, например, использование 64 субполос или полос, равной длины импульсных характеристик и совместимости с режимом двойной скорости, как используется в системах SBR.
Фиг. 13 показывает сравнение оконной функции 700 CLDFB согласно варианту осуществления настоящего изобретения и исходного фильтра-прототипа 720 SBR QMF. Кроме того, она показывает задержку модулированных наборов фильтров, которую можно определять с помощью анализа задержки перекрытия, введенную фильтром-прототипом или оконной функцией в дополнение к задержке создания кадра центра модуляции, имеющего длину N отсчетов в случае системы, основанной на DCT-IV. Ситуация, показанная на фиг. 13, относится еще раз к случаю набора фильтров синтеза. Оконная функция 700 и функция 720 фильтра-прототипа также представляют импульсные характеристики фильтров-прототипов синтеза этих двух используемых наборов фильтров.
Относительно задержки анализа и для набора фильтров SBR QMF, и для предложенного CLDFB согласно варианту осуществления настоящего изобретения, при анализе и синтезе перекрытие только с правой стороны и с левой стороны от центра модуляции, соответственно, добавляет задержку.
Для обоих наборов фильтров центр модуляции основан на DCT-IV, вводящем задержку в 64 отсчета, которая отмечена на фиг. 13 как задержка 750. В случае фильтра-прототипа 720 SBR QMF из-за симметрии задержка 750 центра модуляции симметрично упорядочена по отношению к центру масс, или к средней точке, соответствующей функции 720 фильтра-прототипа, как обозначено на фиг. 13. Причина для такого поведения состоит в том, что буфер набора фильтров SBR QMF должен быть заполнен к точке, в которой функцию 720 фильтра-прототипа, имеющую наиболее значительный вклад в терминах соответствующих значений энергии фильтра-прототипа, рассматривают при обработке. Из-за формы функции 720 фильтра-прототипа требуется, чтобы буфер был заполнен по меньшей мере к средней точке, или к центру масс, соответствующей функции фильтра-прототипа.
Чтобы показать это дополнительно, начиная с полностью инициализированного буфера соответствующего набора фильтров SBR QMF, буфер должен быть заполнен к точке, когда обработка данных приведет к обработке значительных данных, которые требуют, чтобы у соответствующей оконной функции или функции фильтра-прототипа был существенный вклад. В случае функции фильтра-прототипа SBR QMF, симметричная форма фильтра-прототипа 720 приводит к задержке, которая примерно равна центру масс, или средней точке, функции фильтра-прототипа.
Однако, поскольку задержка, введенная центром модуляции системы, основанной на DCT-IV для N=64 отсчетов, всегда присутствует, и система также содержит задержку одного блока, можно заметить, что прототип синтеза для SBR QMF вводит задержку перекрытия 288 отсчетов.
Как указано ранее, в случае наборов фильтров синтеза, к которым относится фиг. 13, это дополнительное перекрытие 760 с левой стороны вызывает задержку, в то время как перекрытие 770 с правой стороны относится к прошлым отсчетам и поэтому не вводит дополнительную задержку в случае набора фильтров синтеза.
Напротив, начиная с полностью инициализированного буфера CLDFB согласно варианту осуществления настоящего изобретения, набор фильтров синтеза, а также набор фильтров анализа способен быстрее обеспечивать «значимые» данные по сравнению с набором фильтров SBR QMF из-за формы оконной функции. Другими словами, из-за формы оконной функции 700 анализа или синтеза отсчеты, прошедшие оконные обработки, которые указывают существенный вклад, могут использоваться быстрее. Как следствие, прототип синтеза или оконная функция синтеза CLDFB вводят только задержку перекрытия из 32 отсчетов, принимая во внимание задержку, уже введенную центром модуляции 750. Первая часть 420 или первая группа 420 оконных коэффициентов оконной функции 700 согласно варианту осуществления настоящего изобретения содержат в предпочтительном варианте осуществления согласно настоящему изобретению 96 оконных коэффициентов, соответствующих задержке, вызванной перекрытием 760 с левой стороны вместе с задержкой 750 центром модуляции.
Та же самая задержка вводится набором фильтров анализа, или функцией-прототипом анализа. Причина состоит в том, что набор фильтров анализа основан на обращенной во времени версии оконной функции синтеза или на функции-прототипе. Таким образом, задержка перекрытия, введенная на правой стороне, содержит ту же самую величину перекрытия, как набор фильтров синтеза. Следовательно, в случае исходного набора фильтров прототипа QMF также вводят задержку 288 отсчетов, в то время как для набора фильтров анализа согласно варианту осуществления настоящего изобретения только 32 отсчета вводят в качестве задержки.
Таблица, показанная на фиг. 14a, обеспечивает представление задержки с различными измененными узлами, принимая длину кадра равной 480 отсчетов и частоту дискретизации 48 кГц. В стандартной конфигурации, содержащей кодек AAC-LD вместе со стандартным инструментальным средством SBR, наборы фильтров MDCT и IMDCT в режиме двойной скорости вызывают задержку 40 мс. Кроме того, само инструментальное средство QMF вызывает задержку 12 мс. Кроме того, из-за SBR-перекрытия создается дополнительная задержка 8 мс, так что полная задержка этого кодека находится в диапазоне 60 мс.
Для сравнения кодек AAC-ELD, содержащий версии с низкой задержкой MDCT и IMDCT, создает в подходе с двойной скоростью задержку 30 мс. По сравнению с исходным набором фильтров QMF инструментального средства SBR, использование комплексного набора фильтров с низкой задержкой согласно варианту осуществления настоящего изобретения приведет к задержке только 1 мс по сравнению с 12 мс исходного инструментального средства QMF. Избегая SBR-перекрытия можно полностью избежать дополнительного перекрытия 8 мс прямой комбинации AAC-LD и инструментального средства SBR. Поэтому улучшенный с низкой задержкой кодек AAC может обеспечивать полную алгоритмическую задержку 31 мс, а не 60 мс для ранее описанной прямой комбинации. Поэтому можно заметить, что комбинация описанных способов сокращения задержки действительно приводит к сохранению полной задержки 29 мс.
Таблица на фиг. 14b дает дополнительное представление полной задержки кодека, которая вызвана исходной и предложенной версиями набора фильтров в системе, которая показана на фиг. 5 и 6. Данные и значения, приведенные на фиг. 14b, основаны на частоте дискретизации 48 кГц и основном размере кадра кодера 480 отсчетов. Из-за подхода двойной скорости системы SBR, как показано и обсуждается на фиг. 5 и 6, основной кодер эффективно работает на частоте дискретизации 24 кГц. Так как задержка создания кадра 64 отсчетов для центра модуляции уже введена основным кодером, это может быть вычтено из автономных значений задержки этих двух наборов фильтров, как описано в контексте фиг. 13.
Таблица на фиг. 14b подчеркивает, что можно уменьшать полную задержку улучшенного с низкой задержкой кодека AAC, содержащего версии с низкой задержкой MDCT и IMDCT (LD MDCT и LD IMDCT). Хотя полная алгоритмическая задержка 42 мс обеспечивается только с использованием версии MDCT и IMDCT с низкой задержкой, а также исходных наборов фильтров QMF, при использовании комплексных наборов фильтров с низкой задержкой согласно вариантам осуществления настоящего изобретения вместо обычных наборов фильтров QMF полная алгоритмическая задержка может быть значительно уменьшена только до 31,3 мс.
Для оценки качества наборов фильтров согласно вариантам осуществления настоящего изобретения и систем, содержащих один или большее количество наборов фильтров, выполнены тесты прослушивания, из которых можно заключить, что наборы фильтров согласно вариантам осуществления настоящего изобретения сохраняют качество звука AAC-ELD на том же самом уровне и не вводят ухудшения ни для комплексного режима SBR, ни для действительного режима SBR с низким энергопотреблением. Таким образом, оптимизированные относительно задержки наборы фильтров согласно вариантам осуществления настоящего изобретения не приводят к ухудшению качества звука, хотя они могут сокращать задержку больше чем на 10 мс. Для переходных элементов можно даже заметить, что обеспечивают некоторое небольшое, но статистически не существенное улучшение. Указанные выше улучшения наблюдались во время тестов прослушивания кастаньет и колокольчиков.
Для дополнительной проверки, что субдискретизация в случае набора фильтров с 32 полосами согласно варианту осуществления настоящего изобретения работает одинаково хорошо для наборов фильтров согласно настоящему изобретению по сравнению с наборами фильтров QMF, была выполнена следующая оценка. Сначала проанализировали логарифмическую синусоидную развертку с субдискретизирующим набором фильтров с 32 полосами, причем были добавлены 32 верхних полосы, инициализированные в ноль. Затем результат был синтезирован с помощью набора фильтров с 64 полосами, субдискретизированными снова, и его сравнивали с исходным сигналом. Использование обычного фильтра-прототипа SBR QMF приводит к отношению сигнал-шум (ОСШ) 59,5 дБ. Набор фильтров согласно настоящему изобретению, однако, обеспечивает значения ОСШ 78,5 дБ, что показывает, что наборы фильтров согласно вариантам осуществления настоящего изобретения также работают в субдискретизированной версии по меньшей мере так же, как исходные наборы фильтров QMF.
Чтобы показать, что этот подход несимметричного набора фильтров, оптимизированного относительно задержки, который используется в вариантах осуществления согласно настоящему изобретению, действительно обеспечивает дополнительное значение по сравнению с классическим набором фильтров с симметричным прототипом, ниже будут сравнивать асимметричные прототипы с симметричными прототипами, имеющими ту же самую задержку.
Фиг. 15a показывает сравнение частотной характеристики набора фильтров согласно настоящему изобретению, использующему оконную функцию с низкой задержкой (график 800), с частотной характеристикой набора фильтров, использующего синусную оконную функцию, имеющую длину 128 сигналов (график 810). Фиг. 15b показывает увеличенное изображение частотной характеристики для тех же самых наборов фильтров, использующих те же самые оконные функции, которые описаны ранее.
Прямое сравнение этих двух графиков 800, 810 показывает, что частотная характеристика набора фильтров, использующего набор фильтров с низкой задержкой согласно варианту осуществления настоящего изобретения, значительно лучше, чем соответствующая частотная характеристика набора фильтров, использующего синусную оконную функцию с 128 сигналами, имеющего ту же самую задержку.
Кроме того, фиг. 16a показывает сравнение различных оконных функций с полной задержкой 127 отсчетов. Набор фильтров (CLDFB) с 64 полосами содержит полную задержку 127 отсчетов, включающих в себя задержку создания кадра и задержку перекрытия. Модулированный набор фильтров с симметричным прототипом и той же самой задержкой поэтому имеет прототип с длиной 128, как уже показано в контексте фиг. 15a и 15b. Для этих наборов фильтров с 50%-ным перекрытием, таких как, например, MDCT, синусная оконная функция или производная от функции Кайзера-Бесселя (KBD) оконная функция в общем случае обеспечивают хороший выбор для прототипов. Следовательно, на фиг. 16a общий вид частотной характеристики набора фильтров, использующего оконную функцию с низкой задержкой в качестве прототипа согласно варианту осуществления настоящего изобретения, сравнивают с частотными характеристиками альтернативных симметричных прототипов с той же самой задержкой. Фиг. 16a показывает, кроме частотной характеристики набора фильтров согласно настоящему изобретению (график 800) и частотной характеристики набора фильтров, использующего синусную оконную функцию (график 810), как уже показано на фиг. 15a и 15b, также две KBD оконные функции, основанные на параметрах α=4 (график 820) и α=6 (график 830). И фиг. 16a, и крупный план фиг. 16a, показанный на фиг. 16b, ясно показывают, что намного лучшую частотную характеристику можно обеспечивать с помощью набора фильтров согласно варианту осуществления настоящего изобретения, имеющего несимметричную оконную функцию или функцию фильтра-прототипа с той же самой задержкой.
Для того чтобы показать это преимущество на более общей основе, на фиг. 17 сравнивают два набора фильтров-прототипов со значениями задержки, отличающимися от ранее описанного набора фильтров. Хотя набор фильтров согласно настоящему изобретению, который рассматривают на фиг. 15 и 16, имеет полную задержку 127 отсчетов, которая соответствует перекрытию 8 блоков в прошлое и 0 блоков в будущее (CLDFB 80), фиг. 17 показывает сравнение частотных характеристик двух различных наборов фильтров-прототипов с той же самой задержкой 383 отсчетов. Точнее, фиг. 17 показывает частотную характеристику несимметричного набора фильтров-прототипов (график 840) согласно варианту осуществления настоящего изобретения, которое основано на перекрытии 6 блоков отсчетов временной области в прошлое и 2 блоков отсчетов временной области в будущее (CLDFB 62). Кроме того, фиг. 17 также показывает частотную характеристику (график 850) соответствующей симметричной функции фильтра-прототипа, также имеющей задержку 383 отсчетов. Можно заметить, что с тем же самым значением задержки несимметричный прототип, или оконная функция, обеспечивает лучшие частотные характеристики, чем набор фильтров с симметричной оконной функцией или фильтр-прототип. Это демонстрирует возможность лучшего соотношения между задержкой и качеством, как указано ранее.
Фиг. 18 показывает эффект временного маскирования человеческого уха. Когда звук, или тон, появляется в момент времени, обозначенный линией 860 на фиг. 18, эффект маскирования, относящийся к частоте тона, или звука, и к соседним частотам возникает приблизительно за 20 мс перед фактическим началом звука. Этот эффект называют предмаскированием и он является одним из аспектов психоакустических свойств человеческого уха.
В ситуации, показанной на фиг. 18, звук остается слышимым приблизительно в течение 200 мс до момента времени, показанного линией 870. В течение этого времени средство маскирования человеческого уха активно, что также называют одновременным маскированием. После остановки звука (показана с помощью линии 870), маскирование частоты на соседней частоте тона медленно ослабляется в течение периода времени, приблизительно равного 150 мс, как показано на фиг. 18. Этот психоакустический эффект также упоминается как пост-маскированием.
Фиг. 19 показывает сравнение поведения предэха обычного кодированного HE-AAC сигнала и кодированного HE-AAC сигнала, который основан на наборе фильтров, использующем набор фильтров с низкой задержкой (CMLDFB) согласно варианту осуществления настоящего изобретения. Фиг. 19a показывает исходный временной сигнал кастаньет, который был обработан с помощью системы, содержащей кодек HE-AAC (HE-AAC = высокопроизводительный продвинутый звуковой кодек). Выходной сигнал системы, основанной на обычном HE-AAC, показывают на фиг. 19b. Прямое сравнение этих двух сигналов, исходного временного сигнала и выходного сигнала кодека HE-AAC, показывает, что до начала звука кастаньет в области, показанной стрелкой 880, выходной сигнал кодека HE-AAC содержит заметные эффекты предэха.
Фиг. 19c показывает выходной сигнал системы, содержащей HE-AAC, основанной на наборах фильтров, содержащих оконную функцию CMLDFB согласно варианту осуществления настоящего изобретения. Те же самые исходные временные сигналы, показанные на фиг. 19a, и обработанные с использованием наборов фильтров согласно варианту осуществления настоящего изобретения, показывают значительное уменьшение появления эффектов предэха непосредственно перед началом сигнала кастаньет, как обозначено стрелкой 890 на фиг. 19c. Из-за эффекта предмаскирования, который описан в контексте фиг. 18, эффект предэха, обозначенный стрелкой 890 на фиг. 19c, будет намного лучше замаскирован, чем эффект предэха, обозначенный стрелкой 880 в случае обычного кодека HE-AAC. Поэтому поведение предэха наборов фильтров согласно настоящему изобретению, что является также результатом значительно уменьшенной задержки по сравнению с обычными наборами фильтров, заставляет выходной сигнал быть намного лучше приспособленным к свойствам временного маскирования и психоакустическим свойствам человеческого уха. Как следствие, как уже было указано при описании тестов прослушивания, использование наборов фильтров согласно варианту осуществления настоящего изобретения может даже привести к улучшению качества, вызванного уменьшенной задержкой.
Варианты осуществления согласно настоящему изобретению не увеличивают вычислительную сложность по сравнению с обычными наборами фильтров. Наборы фильтров с низкой задержкой используют ту же самую длину фильтра и тот же самый режим модуляции как, например, наборы фильтров QMF в случае систем SBR, так что вычислительная сложность не увеличивается. В терминах требований к памяти из-за асимметричной природы фильтров-прототипов, требования к памяти ПЗУ (постоянного запоминающего устройства) для набора фильтров синтеза увеличиваются приблизительно на 320 слов в случае набора фильтров, основанного на N=64 отсчетов в блоке и T=10 блоков в кадре. Кроме того, в случае системы, связанной с SBR, требования к памяти дополнительно увеличиваются еще на 320 слов, если фильтр анализа хранится отдельно.
Однако, поскольку текущие требования к ПЗУ для основного кодека AAC-ELD приблизительно равны 2,5 килослова и для реализации SBR - еще 2,5 килослова, требования к ПЗУ только умеренно увеличиваются примерно на 10%. В качестве возможного соотношения между памятью и сложностью, если использование небольшого объема памяти является главным, то линейная интерполяция может использоваться для создания фильтра анализа из фильтра синтеза, как указано в контексте на фиг. 3 и в уравнении (15). Эта операция интерполяции увеличивает количество необходимых команд только приблизительно на 3,6%. Поэтому при замене обычных наборов фильтров QMF в структуре модулей SBR с низкой задержкой наборами фильтров согласно вариантам осуществления настоящего изобретения задержка может быть уменьшена в некоторых вариантах осуществления более чем на 10 мс без какого-либо ухудшения качества звука или значительного увеличения сложности.
Поэтому варианты осуществления согласно настоящему изобретению относятся к оконной функции анализа или синтеза, или к устройству, или к способу применения оконной функции. Кроме того, описан набор фильтров анализа или синтеза или способ анализа или синтеза сигнала, используя оконную функцию. Естественно, также раскрыта компьютерная программа, которая воплощает один из указанных выше способов.
Реализация согласно вариантам осуществления настоящего изобретения может быть выполнена как аппаратная реализация, программная реализация или их комбинация. Данные, векторы и переменные, сгенерированные, принятые или сохраненные иным образом для обработки, могут храниться в различных видах запоминающих устройств, таких как запоминающие устройства прямого доступа, буфера, постоянные запоминающие устройства, энергонезависимые запоминающие устройства (например, электрически стираемое программируемое ПЗУ (ЭСППЗУ), флэш-память) или другие запоминающие устройства, такие как магнитные или оптические запоминающие устройства. Ячейка памяти может, например, быть одним или большим количеством запоминающих устройств, требуемых для хранения или сохранения соответствующего количества данных, таких как переменные, параметры, векторы, матрицы, оконные коэффициенты или другая информация и данные.
Программные реализации могут работать на различных компьютерах, компьютероподобных системах, процессорах, СпИС (специализированных интегральных схемах) или других интегральных схемах (ИС).
В зависимости от конкретных требований реализации вариантов осуществления изобретенных способов варианты осуществления изобретенных способов можно осуществлять в аппаратных средствах, в программном обеспечении или в их комбинации. Реализацию можно выполнять, используя цифровой носитель данных, в частности диск CD (компакт диск), DVD (цифровой видео диск) или другой диск, хранящий на себе считываемый с помощью электроники управляющий сигнал, который взаимодействует с программируемой компьютерной системой, процессором или интегральной схемой таким образом, что выполняют вариант осуществления изобретенного способа. Таким образом в общем случае вариантом осуществления настоящего изобретения является компьютерный программный продукт с кодом программы, хранящимся на считываемом компьютером носителе, данный код программы предназначен для выполнения варианта осуществления изобретенных способов, когда данный компьютерный программный продукт исполняется в компьютере, в процессоре или в интегральной схеме. Другими словами, вариантом осуществления изобретенных способов таким образом является компьютерная программа, имеющая код программы для выполнения по меньшей мере одного из вариантов осуществления изобретенных способов, когда данная компьютерная программа выполняется в компьютере, в процессоре или в интегральной схеме.
Устройство для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения содержит средство (110) оконной обработки по анализу для оконной обработки кадра (120) входных аудиоотсчетов временной области, находящихся в последовательности времени, простирающейся от более раннего отсчета до более позднего отсчета, используя оконную функцию (190) анализа, содержащую последовательность оконных коэффициентов для получения прошедших оконную обработку отсчетов, оконная функция (190) анализа содержит первую группу (200) оконных коэффициентов, содержащую первую часть последовательности оконных коэффициентов, и вторую группу (210) оконных коэффициентов, содержащую вторую часть последовательности оконных коэффициентов, первая часть содержит меньше оконных коэффициентов, чем вторая часть, причем значение энергии оконных коэффициентов в первой части выше, чем значение энергии оконных коэффициентов второй части, причем первая группа оконных коэффициентов используется для оконной обработки более поздних отсчетов временной области, а вторая группа оконных коэффициентов используется для оконной обработки более ранних отсчетов временной области, и средство (170) вычислений для вычисления значений субполос звукового сигнала, используя прошедшие оконную обработку отсчеты.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что оконная функция (190) анализа асимметрична относительно последовательности оконных коэффициентов.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что значение энергии оконных коэффициентов первой части больше или равно 2/3 значения энергии всех оконных коэффициентов из последовательности оконных коэффициентов, а значение энергии оконных коэффициентов второй части оконных коэффициентов меньше или равно 1/3 значения энергии всех оконных коэффициентов последовательности оконных коэффициентов.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что первая часть оконных коэффициентов содержит 1/3 или меньше 1/3 общего количества оконных коэффициентов последовательности оконных коэффициентов, а вторая часть содержит 2/3 или больше 2/3 общего количества оконных коэффициентов из последовательности оконных коэффициентов.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что средняя точка оконных коэффициентов оконной функции (190) анализа соответствует действительному значению в диапазоне индексов первой части оконных коэффициентов.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что оконная функция (190) анализа содержит строго монотонное уменьшение с оконного коэффициента, содержащего самое высокое абсолютное значение всех оконных коэффициентов оконной функции (190) анализа, до оконного коэффициента последовательности оконных коэффициентов, используемого для оконной обработки последнего аудиоотсчета временной области.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что оконная функция (190) анализа содержит колебательное поведение.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что оконный коэффициент, соответствующий индексу n=(T-1)·N, содержит абсолютное значение в диапазоне от 0,9 до 1,1, причем индекс последовательности оконных коэффициентов - целое число в диапазоне от 0 до N·T-1, причем оконный коэффициент, используемый для оконной обработки последнему входному аудиоотсчету временной области кадра 120, является оконным коэффициентом, соответствующим индексу N·T-1, причем средство (110) оконной обработки по анализу настраивают таким образом, что кадр (120) из входных аудиоотсчетов временной области содержит последовательность из T блоков (130) из входных аудиоотсчетов временной области, простирающихся от более раннего до более позднего входного аудиоотсчета временной области кадра (120), каждый блок содержит N входных аудиоотсчетов временной области, и причем T и N являются положительными целыми числами, и T больше 4.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что оконный коэффициент, соответствующий индексу оконных коэффициентов n=N·T-1, содержит абсолютное значение меньше 0,02.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что оконная обработка содержит умножение входных аудиоотсчетов x(n) звукового сигнала временной области кадра (120) для получения прошедших оконную обработку отсчетов z(n) прошедшего оконную обработку кадра, основываясь на уравнении
Figure 00000041
в котором n - целое число, указывающее индекс последовательности оконных коэффициентов в диапазоне от 0 до T·N-1, в котором c(n) - оконный коэффициент, соответствующий оконной функции анализа индексу n, в котором x (N·T-1) - последний входной аудиоотсчет временной области кадра (120) из входных аудиоотсчетов временной области, причем средство (110) оконной обработки по анализу настраивают таким образом, что кадр (120) из входных аудиоотсчетов временной области содержит последовательность из T блоков (130) входных аудиоотсчетов временной области, простирающихся от более раннего до более позднего входного аудиоотсчета временной области кадра (120), каждый блок содержит N входных аудиоотсчетов во временной области, и причем T и N являются положительными целыми числами, и T больше 4.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что оконные коэффициенты c(n) соответствуют соотношениям, приведенным в таблице в приложении 4.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения устройство (100) настраивают для использования оконной функции (190) анализа, являющейся обращенной во времени или с измененным порядком индексов версией оконной функции (370) синтеза, которая будет использоваться для значений субполос звукового сигнала.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что первая часть оконной функции анализа содержит оконный коэффициент, имеющий абсолютное максимальное значение, которое больше 1.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что все оконные коэффициенты последовательности оконных коэффициентов - действительные оконные коэффициенты.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что кадр (120) из входных аудиоотсчетов временной области содержит последовательность из T блоков (130) входных аудиоотсчетов временной области, простирающихся от более раннего до более позднего входного аудиоотсчета временной области кадра (120), каждый блок содержит N входных аудиоотсчетов временной области, причем T и N являются положительными целыми числами, и T больше 4.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что оконная обработка содержит поэлементное умножение входных аудиоотсчетов временной области кадра (120) с оконными коэффициентами последовательности оконных коэффициентов.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что каждый входной аудиоотсчет временной области поэлементно умножают на оконный коэффициент оконной функции анализа в соответствии с последовательностью входных аудиоотсчетов временной области и последовательности оконных коэффициентов.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что для каждого входного аудиоотсчета временной области кадра (120) из входных аудиоотсчетов временной области создают точно один прошедший оконную обработку отсчет.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что оконный коэффициент, соответствующий индексу оконных коэффициентов n=(T-3)·N, содержит значение меньше -0,1, причем индекс последовательности оконных коэффициентов - целое число в диапазоне от 0 до N·T-1, и причем оконный коэффициент, используемый для оконной обработки последнему входному аудиоотсчету временной области - оконный коэффициент, соответствующий индексу N·T-1.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что первая часть оконных коэффициентов содержит 3/2·N оконных коэффициентов, а вторая часть оконных коэффициентов содержит (T-3/2)·N оконных коэффициентов последовательности оконных коэффициентов.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что оконные коэффициенты c(n) соответствуют соотношениям, приведенным в таблице в приложении 3.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что оконные коэффициенты c(n) соответствуют соотношениям, приведенным в таблице в приложении 2.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (110) оконной обработки по анализу настраивают таким образом, что оконные коэффициенты c(n) содержат значения, приведенные в таблице в приложении 1.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения устройство (100) настраивают таким образом, что текущий кадр (120) из входных аудиоотсчетов временной области, которые будут обработаны, создают с помощью сдвига (T-1) более поздних блоков непосредственно предыдущего кадра (120) из входных аудиоотсчетов временной области на один блок к более ранним входным аудиоотсчетам временной области и добавления одного блока (220) новых аудиоотсчетов временной области, как блока, содержащего последние входные аудиоотсчеты временной области текущего кадра (120).
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения устройство (100) настраивают таким образом, что текущий кадр (120) из входных отчетов звукового сигнала во временной области x(n), который будут обрабатывать, создают, основываясь на смещении входных аудиоотсчетов xprev(n) временной области непосредственно предыдущего кадра (120) из входных аудиоотсчетов временной области, основываясь на уравнении
Figure 00000042
для индекса времени или отсчета n=32,…, 319, и причем устройство (100) дополнительно настраивают для генерации входных аудиоотсчетов временной области x(n) настоящего кадра (120) из входных аудиоотсчетов во временной области, с помощью внедрения 32 следующих входных отсчетов временной области согласно порядку входных аудиоотсчетов временной области с уменьшением времени, или индексов отсчетов n для входных аудиоотсчетов временной области x(n) настоящего кадра (120), начиная с индекса времени или отсчета n=31.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения блок (170) вычислений содержит средство преобразования время/частота, настроенный для генерации значений субполос звукового сигнала таким образом, что все значения субполос, основанные на одном кадре (150) прошедших оконную обработку отсчетов, представляют спектральное представление отсчетов прошедшего оконную обработку кадра (150) из прошедших оконную обработку отсчетов.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство преобразования время/частота настраивают для генерации комплексных или действительных значений субполос звукового сигнала.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (170) вычислений настраивают для вычисления одного значения субполос звукового сигнала для каждого входного аудиоотсчета временной области одного блока (130) входных аудиоотсчетов временной области, причем вычисление каждого значения субполос звукового сигнала, или каждого из входных аудиоотсчетов временной области одного блока (130) входных аудиоотсчетах временной области основано на прошедших оконную обработку отсчетах прошедшего оконную обработку кадра (150).
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (170) вычислений настраивают для вычисления значений субполос звукового сигнала, основываясь на умножении прошедших оконную обработку отсчетов (150) на гармоническую колебательную функцию для каждого значения субполос и сложении умноженных прошедших оконную обработку отсчетов, причем частота гармонической колебательной функции основана на средней частоте соответствующей субполосы значений субполос.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (170) вычислений настраивают таким образом, что гармоническая колебательная функция - комплексная экспоненциальная функция, синусная функция или косинусная функция.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (170) вычислений настраивают для вычисления значений субполос звукового сигнала wkl, основываясь на уравнении
Figure 00000043
для n=0,..., 63 и
Figure 00000044
для k=0,..., 31, причем z(n) - прошедшие оконную обработку отсчеты, соответствующие индексу n, причем k - индекс субполосы, причем l индекс блока (180) значений субполос звукового сигнала, и причем fosc(x) является колебательной функцией, зависящей от действительной переменной x.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения средство (170) вычислений настраивают таким образом, что колебательная функция fosc(x)
Figure 00000045
или
Figure 00000046
или
Figure 00000047
где i - мнимая единица.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения устройство (100) настраивают для обработки кадра (120) действительных входных аудиоотсчетов временной области.
В устройстве для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно вариантам осуществления настоящего изобретения устройство (100) настраивают для обеспечения сигнала, который указывает оконную функцию (370) синтеза, которая будет использоваться со значениями субполос звукового сигнала, или который указывает оконную функцию (190) анализа, используемую для генерации значений субполос звукового сигнала.
Устройство для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения содержит средство (310) вычислений для вычисления последовательности (330) из промежуточных отсчетов временной области из значений субполос звукового сигнала в каналах субполос звукового сигнала, данная последовательность содержит более ранние промежуточные отсчеты временной области и более поздние отчеты во временной области, средство (360) оконной обработки по синтезу для оконной обработки последовательности (330) из промежуточных отсчетов временной области использует оконную функцию (370) синтеза, содержащую последовательность оконных коэффициентов, для получения прошедших оконную обработку промежуточных отсчетов временной области, оконная функция (370) синтеза содержит первую группу (420) оконных коэффициентов, содержащих первую часть последовательности оконных коэффициентов, и вторую группу (430) оконных коэффициентов, содержащих вторую часть последовательности оконных коэффициентов, первая часть содержит меньше оконных коэффициентов, чем вторая часть, причем значение энергии оконных коэффициентов в первой части выше, чем значение энергии оконных коэффициентов второй части, причем первая группа оконных коэффициентов используется для оконной обработки более поздним промежуточным отсчетам временной области, а вторая группа оконных коэффициентов используется для оконной обработки более ранним промежуточным отсчетам временной области, и выходной узел (400) суммирования с перекрытием для обработки прошедших оконную обработку промежуточных отсчетов временной области для получения отсчетов временной области.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (360) оконной обработки по синтезу настраивают таким образом, что значение энергии оконных коэффициентов первой части оконных коэффициентов больше или равно 2/3 значения энергии всех оконных коэффициентов оконной функции (370) синтеза, а значение энергии второй части оконных коэффициентов меньше или равно 1/3 значения энергии всех оконных коэффициентов оконной функции синтеза.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (360) оконной обработки по синтезу настраивают таким образом, что первая часть оконных коэффициентов содержит 1/3 или меньше 1/3 общего количества всех оконных коэффициентов последовательности оконных коэффициентов, а вторая часть оконных коэффициентов содержит 2/3 или больше 2/3 общего количества оконных коэффициентов последовательности оконных коэффициентов.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (360) оконной обработки по синтезу настраивают таким образом, что средняя точка оконных коэффициентов оконной функции (370) синтеза соответствует действительному значению в диапазоне индексов первой части оконных коэффициентов.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (360) оконной обработки по синтезу настраивают таким образом, что оконная функция синтеза содержит строго монотонное увеличение с оконного коэффициента последовательности оконных коэффициентов, используемого для оконной обработки последнему промежуточному отсчету временной области, к оконному коэффициенту, содержащему самое высокое абсолютное значение всех оконных коэффициентов оконной функции синтеза.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (360) оконной обработки по синтезу настраивают таким образом, что оконная функция (370) синтеза имеет колебательное поведение.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения оконный коэффициент, соответствующий индексу n=N, содержит абсолютное значение в диапазоне между 0,9 и 1,1, причем индекс n последовательности оконных коэффициентов является целым числом в диапазоне от 0 до T·N - 1, причем оконный коэффициент, используемый для оконной обработки последнему промежуточному отсчету временной области - оконный коэффициент, соответствующий индексу n=0, причем T - целое число больше 4, указывающее количество блоков, содержащихся в кадре (330) промежуточных отсчетов временной области, причем устройство (300) настраивают для генерации блока (410) аудиоотсчетов временной области, блок (410) аудиоотсчетов временной области содержит N аудиоотсчетов временной области, причем N является положительным целым числом.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (360) оконной обработки по синтезу настраивают таким образом, что оконный коэффициент, соответствующий индексу n=0, содержит абсолютное значение, меньше или равное 0,02.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (360) оконной обработки по синтезу настраивают таким образом, что оконный коэффициент, соответствующий индексу n=3N, меньше -0,1, причем устройство (300) настраивают для генерации блока (410) аудиоотсчетов временной области, блок (410) аудиоотсчетов временной области содержит N аудиоотсчетов временной области, причем N является положительным целым числом.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (360) оконной обработки по синтезу настраивают таким образом, что оконная обработка содержит умножение промежуточных отсчетов временного области g(n) последовательности промежуточных отсчетов временной области для получения прошедших оконную обработку отсчетов z(n) прошедшего оконную обработку кадра (380), основываясь на уравнении
Figure 00000048
для n=0,…, T · N-1.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (360) оконной обработки по синтезу настраивают таким образом, что оконные коэффициенты c(n) соответствуют соотношениям, приведенным в таблице в приложении 4.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения устройство (300) настраивают для использования оконной функции (370) синтеза, являющейся обращенной во времени или с измененным порядком индексов версией оконной функции (190) анализа, используемой для генерации значений субполос звукового сигнала.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения устройство (300) настраивают для генерации блока (410) аудиоотсчетов временной области, блок (410) аудиоотсчетов временной области содержит N аудиоотсчетов временной области, причем N является положительным целым числом.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения устройство (300) настраивают для генерации блока (410) аудиоотсчетов временной области, основываясь на блоке (320) значений субполос звукового сигнала, содержащем N значений субполос звукового сигнала, и причем средство (310) вычислений настраивают для вычисления последовательности (330) из промежуточных аудиоотсчетов временной области, содержащей T·N промежуточных аудиоотсчетов временной области, причем T является положительным целым числом.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (360) оконной обработки по синтезу настраивают таким образом, что оконная функция синтеза асимметрична относительно последовательности оконных коэффициентов.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (360) оконной обработки по синтезу настраивают таким образом, что первая часть содержит максимальное значение всех оконных коэффициентов оконной функции синтеза, имеющее абсолютное значение больше 1.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (360) оконной обработки по синтезу настраивают таким образом, что первая часть содержит 3/2·N оконных коэффициентов, а вторая часть оконных коэффициентов содержит (T-3/2)·N оконных коэффициентов, причем T - индекс, больше или равный 4, указывающий количество блоков 340, содержащихся в кадре (330) промежуточных отсчетов временной области.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (360) оконной обработки по синтезу настраивают таким образом, что оконная обработка к последовательности промежуточных отсчетов временной области содержит поэлементное умножение промежуточных отсчетов временной области на оконный коэффициент.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (360) оконной обработки по синтезу настраивают таким образом, что каждый промежуточный отсчет временной области поэлементно умножают на оконный коэффициент оконной функции (370) синтеза в соответствии с последовательностью промежуточных отсчетов временной области и последовательностью оконных коэффициентов.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (360) оконной обработки по синтезу настраивают таким образом, что оконные коэффициенты оконной функции (370) синтеза имеют действительные значения.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (360) оконной обработки по синтезу настраивают таким образом, что оконный коэффициент c(n) соответствует соотношениям, приведенным в таблице в приложении 3.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (360) оконной обработки по синтезу настраивают таким образом, что оконные коэффициенты c(n) соответствуют соотношениям, приведенным в таблице в приложении 2.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (360) оконной обработки по синтезу настраивают таким образом, что оконные коэффициенты c(n) содержат значения, приведенные в таблице в приложении 1.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (310) вычислений настраивают для вычисления промежуточных отсчетов временной области последовательности промежуточных отсчетов временной области, основываясь на умножении значений субполос звукового сигнала на гармоническую колебательную функцию и суммировании умноженных значений субполос звукового сигнала, причем частота гармонической колебательной функции основана на средней частоте соответствующей субполосы.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (310) вычислений настраивают таким образом, что гармоническая колебательная функция - комплексная экспоненциальная функция, синусная функция или косинусная функция.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (310) вычислений настраивают для вычисления действительных промежуточных отсчетов временной области, основываясь на комплексных или действительных значениях субполос звукового сигнала.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (310) вычислений настраивают для вычисления последовательности действительных промежуточных отсчетов временной области z (i, n), основываясь на уравнении
Figure 00000049
для целого числа n в диапазоне от 0 до N·T-1, где Re(x) является действительной частью комплексного числа x, π=3,14… круговое число, и fosc(x) является гармонической колебательной функцией, причем
Figure 00000050
,
когда значения субполос звукового сигнала, обеспеченные на средство вычислений, являются комплексными значениями, причем i - мнимая единица и причем
Figure 00000051
,
когда значения субполос звукового сигнала, поданные на средство (310) вычислений, являются действительными значениями.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (310) вычислений содержит средство преобразования частота/время, настроенное для генерации последовательности промежуточных отсчетов временной области таким образом, что значения субполос звукового сигнала, обеспеченные на средство (310) вычислений, представляют спектральное представление последовательности промежуточных отсчетов временной области.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство преобразования частота/время настраивают для генерации последовательности промежуточных отсчетов временной области, основываясь на комплексных или действительных значениях субполос звукового сигнала.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (310) вычислений настраивают для вычисления последовательности промежуточных отсчетов g(n) временной области значений X(k) субполос звукового сигнала, основываясь на уравнении
Figure 00000052
для целого числа n в диапазоне 20N-1 и 2N,
Figure 00000053
для целого числа n в диапазоне 0 и 2N-1 и
Figure 00000054
для целого числа j в диапазоне 0 и 4 и для целого числа k в диапазоне 0 и N-1, причем N - целое число, указывающее количество значений субполос звукового сигнала и количество аудиоотсчетов временной области, причем v - действительный вектор, причем vprev - действительный вектор v непосредственно предыдущей генерации аудиоотсчетов временной области, причем i - мнимая единица, и π - круговое число.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения средство (310) вычислений настраивают для вычисления последовательности промежуточных отсчетов g(n) временной области из значений X(k) субполос звукового сигнала, основываясь на уравнении
Figure 00000055
для целого числа n в диапазоне 20N-1 и 2N,
Figure 00000056
для целого числа n в диапазоне 0 и 2N-1 и
Figure 00000057
для целого числа j в диапазоне 0 и 4 и для целого числа k в диапазоне 0 и N-1, причем N - целое число, указывающее количество значений субполос звукового сигнала и количество аудиоотсчетов временной области, причем v - действительный вектор, причем vprev - действительный вектор v непосредственно предыдущей генерации аудиоотсчетов временной области, и причем π - круговое число.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения выходной узел (400) суммирования с перекрытием настраивают для обработки прошедших оконную обработку промежуточных отсчетов временной области способом с перекрытием, основываясь на T последовательно обеспеченных блоков (320) из значений субполос звукового сигнала.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения выходной узел (400) суммирования с перекрытием настраивают для обеспечения отсчетов временной области outl(n), причем n - целое число, указывающее индекс отсчета, основываясь на уравнении
Figure 00000058
где zl,n - прошедшие оконную обработку промежуточные отсчеты временной области, соответствующие индексу n отсчета и индексу l кадра или последовательности в диапазоне от 0 до T-l, причем l=0 соответствует последнему кадру или последовательности, и значения меньше l - ранее созданным кадрам или последовательностям.
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения выходной узел (400) суммирования с перекрытием настраивают для обеспечения отсчетов временной области out(k), основываясь на уравнении
Figure 00000059
,
в котором w - вектор, содержащий прошедшие оконную обработку промежуточные отсчеты временной области, и k - целое число, указывающее индекс в диапазоне между 0 и (N-1).
В устройстве для генерации аудиоотсчетов временной области согласно вариантам осуществления настоящего изобретения устройство (300) настраивают для приема сигнала, который указывает оконную функцию (190) анализа, используемую для генерации значений субполос звукового сигнала, или который указывает оконную функцию (370) синтеза, которая будет использоваться для генерации аудиоотсчетов временной области.
Согласно вариантам осуществления настоящего изобретения кодер (510) содержит устройство (560) для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала согласно варианту осуществления настоящего изобретения.
Согласно вариантам осуществления настоящего изобретения кодер (510) дополнительно содержит блок (570) квантизации и кодирования, связанный с устройством (560) для генерации значений субполос звукового сигнала и настроенный для квантования и кодирования значений субполос звукового сигнала, выведенных устройством (560), и для выведения квантованных кодированных значений субполос звукового сигнала.
Согласно вариантам осуществления настоящего изобретения декодер (580) содержит устройство (600) для генерации аудиоотсчетов временной области согласно варианту осуществления настоящего изобретения.
Согласно вариантам осуществления настоящего изобретения декодер (580) дополнительно содержит блок (590) декодирования и деквантизации, настроенный для приема кодированных и квантованных значений субполос звукового сигнала, связанный с устройством (600) для генерации аудиоотсчетов временной области, и настроенный для обеспечения декодированных и деквантованных значений субполос звукового сигнала, как значений субполос звукового сигнала, к устройству (600).
Согласно вариантам осуществления настоящего изобретения кодер (520) SBR содержит устройство (530) для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала, основываясь на кадре входных аудиоотсчетов временной области, обеспеченных на кодер (520) SBR, и модуль (540) извлечения параметра SBR, связанный с устройством (530) для генерации значений субполос звукового сигнала и настроенный для извлечения и выведения параметров SBR, основываясь на значениях субполос звукового сигнала.
Согласно вариантам осуществления настоящего изобретения система (610) содержит устройство (620) для генерации значений субполос звукового сигнала из кадра входных аудиоотсчетов временной области, обеспеченных к системе (610); и устройство (640) для генерации аудиоотсчетов временной области, основываясь на значениях субполос звукового сигнала, созданных устройством (640) для генерации значений субполос звукового сигнала.
Согласно вариантам осуществления настоящего изобретения система (610) является декодером SBR.
Согласно вариантам осуществления настоящего изобретения система дополнительно содержит ВЧ-генератор (630), связывающий между собой устройство (620) для генерации значений субполос звукового сигнала и устройство (640) для генерации аудиоотсчетов временной области и настроенный для приема данных SBR, настроенный для изменения или добавления значений субполос звукового сигнала, основываясь на данных SBR и значениях субполос звукового сигнала от устройства (620) для генерации значений субполос звукового сигнала.
По отношению ко всем устройствам и способам согласно вариантам осуществления настоящего изобретения в зависимости от конкретных воплощений, для получения оконных коэффициентов, основываясь на значениях, приведенных в таблицах в приложениях 1 и 3, можно осуществлять дополнительное изменение знака по отношению к оконным коэффициентам, соответствующим индексам 128-255 и 384-511 (умножение с коэффициентом (-1)). Другими словами, оконные коэффициенты оконной функции основаны на оконных коэффициентах, приведенных в таблице в приложении 1. Для получения оконных коэффициентов оконной функции, показанной на данных фигурах, оконные коэффициенты в таблице, соответствующие индексам 0-127, 256-383 и 512-639, необходимо умножать на (+1) (т.е. отсутствие изменения знака), и оконные коэффициенты, соответствующие индексам 128-255 и 384-511, необходимо умножать на (-1) (т.е. изменять знак) для получения оконных коэффициентов показанной оконной функции. Соответственно соотношения, приведенные в таблице в приложении 3, необходимо обрабатывать соответствующим образом.
Следует отметить, что в структуре настоящей заявки под уравнением, основанным на уравнении, понимают введение дополнительных задержек, коэффициентов, дополнительных коэффициентов и введение другой простой функции. Дополнительно, можно удалять простые константы, постоянные слагаемые и т.д. Кроме того, они также включают в себя алгебраические преобразования, эквивалентные преобразования и аппроксимации (например, аппроксимация Тэйлора), совсем или существенным способом не изменяющие результат уравнения. Другими словами случай, когда уравнение или выражение основано на уравнении или выражении, включает в себя и небольшие модификации, и преобразования, приводящие по существу к идентичному результату.
Хотя приведенное выше, в частности, показано и описано в отношении конкретных вариантов осуществления, специалистам будет понятно, что различные другие изменения во внешнем виде и деталях можно выполнять, не отступая от их объема и формы. Следует понимать, что различные изменения можно делать при применении различных вариантов осуществления, не отступая от раскрытой более широкой концепции, которую охватывает последующая формула изобретения.

Claims (24)

1. Устройство для генерации значений субполос звукового сигнала в каналах субполос звукового сигнала, содержащее
средство (110) оконной обработки по анализу для оконной обработки кадра (120) входных аудиоотсчетов временной области, находящихся в последовательности времени, простирающейся от более раннего отсчета до более позднего отсчета, посредством применения оконной функции (190) анализа к входным аудиоотсчетам временной области для получения прошедших оконную обработку отсчетов, при этом оконная функция анализа содержит последовательность оконных коэффициентов, имеющую первое количество оконных коэффициентов, полученных из другой оконной функции, содержащей другую последовательность, содержащую второе количество оконных коэффициентов, причем второе количество оконных коэффициентов больше первого количества оконных коэффициентов,
при этом оконные коэффициенты оконной функции анализа получают с помощью интерполяции оконных коэффициентов упомянутой другой оконной функции; и
причем второе количество является четным числом; и
средство (170) вычислений для вычисления значений субполос звукового сигнала, используя прошедшие оконную обработку отсчеты.
2. Устройство (100) по п.1, выполненное с возможностью интерполяции оконных коэффициентов упомянутой другой оконной функции для получения оконных коэффициентов оконной функции.
3. Устройство (100) по п.1, в котором устройство (100) или средство (110) оконной обработки по анализу сконфигурировано таким образом, что оконные коэффициенты оконной функции линейно интерполируются.
4. Устройство (100) по п.1, в котором устройство (100) или средство (110) оконной обработки по анализу сконфигурировано таким образом, что оконные коэффициенты оконной функции анализа интерполируются, основываясь на двух последовательных оконных коэффициентах упомянутой другой оконной функции в соответствии с последовательностью оконных коэффициентов упомянутой другой оконной функции, для получения одного оконного коэффициента оконной функции.
5. Устройство (100) по п.1, в котором устройство (100) или средство (110) оконной обработки по анализу сконфигурировано для получения оконных коэффициентов с(n) оконной функции анализа, основываясь на уравнении
c(n)=1/2(c2(2n)+c2(2n+1)),
где n - целое число, указывающее индекс оконных коэффициентов с(n), и c2(n) - оконный коэффициент упомянутой другой оконной функции.
6. Устройство (100) по п.5, в котором устройство (100) или средство (110) оконной обработки по анализу сконфигурировано таким образом, что оконные коэффициенты c2(n) упомянутой другой оконной функции соответствуют соотношениям, приведенным в таблице в приложении 4.
7. Устройство (100) по п.1, в котором средство (110) оконной обработки по анализу сконфигурировано таким образом, что оконная обработка содержит умножение входных аудиоотсчетов х(n) временной области кадра (120) для получения прошедших оконную обработку отсчетов z(n) прошедшего оконную обработку кадра, основываясь на уравнении
z(n)=x(n)·c(n),
где n - целое число, указывающее индекс последовательности оконных коэффициентов в диапазоне от 0 до T·N-1, c(n) - оконный коэффициент оконной функции анализа, соответствующий индексу n, причем х (N·T-1) является самым поздним входным аудиоотсчетом временной области кадра (120) входных аудиоотсчетов временной области, при этом средство (110) оконной обработки по анализу сконфигурировано таким образом, что кадр (120) входных аудиоотсчетов временной области содержит последовательность из Т блоков (130) входных аудиоотсчетов временной области, простирающихся от самого раннего до самого позднего входного аудиоотсчета временной области кадра (120), причем каждый блок содержит N входных аудиоотсчетов временной области, Т и N являются положительными целыми числами, и Т больше 4.
8. Устройство (100) по п.1, в котором средство (110) оконной обработки по анализу сконфигурировано таким образом, что оконная функция (190) анализа содержит первую группу (200) оконных коэффициентов, содержащую первую часть последовательности оконных коэффициентов, и вторую группу (210) оконных коэффициентов, содержащую вторую часть последовательности оконных коэффициентов, при этом первая часть содержит меньше оконных коэффициентов, чем вторая часть, причем значение энергии оконных коэффициентов в первой части выше значения энергии оконных коэффициентов второй части, и причем первая группа оконных коэффициентов используется для оконной обработки более поздних отсчетов временной области, а вторая группа оконных коэффициентов используется для оконной обработки более ранних отсчетов временной области.
9. Устройство по п.1, выполненное с возможностью использования оконной функции (190) анализа, являющейся обращенной во времени или с обращенным порядком индексов версией оконной функции (370) синтеза, которая должна использоваться для значений субполос звукового сигнала.
10. Устройство (100) по п.1, в котором средство (110) оконной обработки по анализу сконфигурировано таким образом, что упомянутая другая оконная функция асимметрична по отношению к последовательности оконных коэффициентов.
11. Устройство (300) для генерации аудиоотсчетов временной области, содержащее
средство (310) вычислений для вычисления последовательности (330) промежуточных отсчетов временной области из значений субполос звукового сигнала в каналах субполос звукового сигнала, причем данная последовательность содержит более ранние промежуточные отсчеты временной области и более поздние промежуточные отсчеты временной области;
средство (360) оконной обработки по синтезу для оконной обработки последовательности (330) промежуточных отсчетов временной области посредством применения оконной функции (370) синтеза к промежуточным отсчетам временной области для получения прошедших оконную обработку промежуточных отсчетов временной области, при этом оконная функция синтеза содержит последовательность оконных коэффициентов, имеющую первое количество оконных коэффициентов, полученных из другой оконной функции, содержащей другую последовательность, содержащую второе количество оконных коэффициентов, причем второе количество оконных коэффициентов больше первого количества оконных коэффициентов;
причем оконные коэффициенты оконной функции синтеза получают с помощью интерполяции оконных коэффициентов упомянутой другой оконной функции; и
причем второе количество является четным числом; и
выходной узел (400) суммирования с перекрытием для обработки прошедших оконную обработку промежуточных отсчетов временной области для получения отсчетов временной области.
12. Устройство (300) по п.11, выполненное с возможностью интерполяции оконных коэффициентов упомянутой другой оконной функции для получения оконных коэффициентов оконной функции.
13. Устройство (300) по п.11, сконфигурированное таким образом, что оконные коэффициенты оконной функции синтеза линейно интерполируются.
14. Устройство (300) по п.11, сконфигурированное таким образом, что оконные коэффициенты оконной функции синтеза интерполируются, основываясь на двух последовательных оконных коэффициентах упомянутой другой оконной функции в соответствии с последовательностью оконных коэффициентов упомянутой другой оконной функции, для получения одного оконного коэффициента оконной функции.
15. Устройство (300) по п.11, сконфигурированное для получения оконных коэффициентов с(n) оконной функции синтеза, основываясь на уравнении
c(n)=1/2(c2(2n)+c2(2n+1)),
где c2(n) - оконные коэффициенты упомянутой другой оконной функции, соответствующие индексу n.
16. Устройство (300) по п.15, сконфигурированное таким образом, что оконный коэффициент c2(n) соответствует соотношениям, приведенным в таблице в приложении 4.
17. Устройство (300) по п.11, в котором средство (360) оконной обработки по синтезу сконфигурировано таким образом, что оконная обработка содержит умножение промежуточных отсчетов g(n) временной области последовательности промежуточных отсчетов временной области для получения прошедших оконную обработку отсчетов z(n) прошедшего оконную обработку кадра (380), основываясь на уравнении
z(n)=g(n)·c (T·N-1-n)
для n=0, …, T·N-1.
18. Устройство (300) по п.11, в котором средство (360) оконной обработки по синтезу сконфигурировано таким образом, что оконная функция (370) синтеза содержит первую группу (420) оконных коэффициентов, содержащую первую часть последовательности оконных коэффициентов, и вторую группу (430) оконных коэффициентов, содержащую вторую часть последовательности оконных коэффициентов, при этом первая часть содержит меньше оконных коэффициентов, чем вторая часть, причем значение энергии оконных коэффициентов в первой части выше значения энергии оконных коэффициентов второй части, и причем первая группа оконных коэффициентов используется для оконной обработки более поздних промежуточных отсчетов временной области, а вторая группа оконных коэффициентов используется для оконной обработки более ранних промежуточных отсчетов временной области.
19. Устройство (300) по п.11, выполненное с возможностью использования оконной функции (370) синтеза, являющейся обращенной во времени или с обращенным порядком индексов версией оконной функции (190) анализа, используемой для генерации значений субполос звукового сигнала.
20. Устройство (300) по п.11, в котором средство (360) оконной обработки по синтезу сконфигурировано таким образом, что упомянутая другая оконная функция асимметрична по отношению к оконным коэффициентам последовательности.
21. Способ генерации значений субполос звукового сигнала в каналах субполос звукового сигнала, содержащий этапы, на которых
выполняют оконную обработку в отношении кадра входных аудиоотсчетов временной области, находящихся в последовательности времени, простирающейся от более раннего отсчета до более позднего отсчета, посредством применения оконной функции (190) анализа к входным аудиоотсчетам временной области для получения прошедших оконную обработку отсчетов, при этом оконная функция анализа содержит последовательность оконных коэффициентов, имеющую первое количество оконных коэффициентов, полученных из другой оконной функции, содержащей другую последовательность, содержащую второе количество оконных коэффициентов, причем второе количество оконных коэффициентов больше первого количества коэффициентов,
причем оконные коэффициенты оконной функции анализа получают с помощью интерполяции оконных коэффициентов упомянутой другой оконной функции; и
причем второе количество является четным числом; и
вычисляют значения субполос звукового сигнала, используя прошедшие оконную обработку отсчеты.
22. Способ генерации аудиоотсчетов временной области, содержащий этапы, на которых
вычисляют последовательность промежуточных отсчетов временной области из значений субполос звукового сигнала в каналах субполос звукового сигнала, причем данная последовательность содержит более ранние промежуточные отсчеты временной области и более поздние промежуточные отсчеты временной области;
выполняют оконную обработку в отношении последовательности (330) промежуточных отсчетов временной области посредством применения оконной функции (370) синтеза к промежуточным отсчетам временной области для получения прошедших оконную обработку промежуточных отсчетов временной области, при этом оконная функция синтеза содержит последовательность оконных коэффициентов, имеющую первое количество оконных коэффициентов, полученных из другой оконной функции, содержащей другую последовательность, содержащую второе количество оконных коэффициентов, причем второе количество оконных коэффициентов больше первого количества оконных коэффициентов,
причем оконные коэффициенты оконной функции синтеза получают с помощью интерполяции оконных коэффициентов упомянутой оконной функции; и
причем второе количество является четным числом; и складывают с перекрытием прошедшие оконную обработку промежуточные отсчеты временной области для получения отсчетов временной области.
23. Цифровой носитель данных, на котором сохранена программа с программным кодом для выполнения при работе на процессоре способа по п.21.
24. Цифровой носитель данных, на котором сохранена программа с программным кодом для выполнения при работе на процессоре способа по п.22.
RU2008137468/09A 2006-10-25 2007-10-23 Устройство и способ для генерации значений субполос звукового сигнала и устройство и способ для генерации аудиоотсчетов временной области RU2411645C2 (ru)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US86295406P 2006-10-25 2006-10-25
US60/862,954 2006-10-25

Publications (2)

Publication Number Publication Date
RU2008137468A RU2008137468A (ru) 2010-03-27
RU2411645C2 true RU2411645C2 (ru) 2011-02-10

Family

ID=39048961

Family Applications (2)

Application Number Title Priority Date Filing Date
RU2008137468/09A RU2411645C2 (ru) 2006-10-25 2007-10-23 Устройство и способ для генерации значений субполос звукового сигнала и устройство и способ для генерации аудиоотсчетов временной области
RU2009119456/09A RU2420815C2 (ru) 2006-10-25 2007-10-23 Устройство и способ для генерации значений подполос звукового сигнала и устройство и способ для генерации отсчетов звукового сигнала во временной области

Family Applications After (1)

Application Number Title Priority Date Filing Date
RU2009119456/09A RU2420815C2 (ru) 2006-10-25 2007-10-23 Устройство и способ для генерации значений подполос звукового сигнала и устройство и способ для генерации отсчетов звукового сигнала во временной области

Country Status (26)

Country Link
US (11) USRE50132E1 (ru)
EP (10) EP1994530B1 (ru)
JP (2) JP4936569B2 (ru)
KR (2) KR101056253B1 (ru)
CN (2) CN101405791B (ru)
AR (2) AR063400A1 (ru)
AT (1) ATE435480T1 (ru)
AU (2) AU2007308415B2 (ru)
BR (2) BRPI0709310B1 (ru)
CA (2) CA2645618C (ru)
DE (1) DE602007001460D1 (ru)
DK (2) DK1994530T3 (ru)
ES (6) ES2834024T3 (ru)
FI (1) FI3848928T3 (ru)
HK (2) HK1119824A1 (ru)
HU (1) HUE064482T2 (ru)
IL (2) IL193786A (ru)
MX (2) MX2009004477A (ru)
MY (2) MY148715A (ru)
NO (3) NO341567B1 (ru)
PL (6) PL1994530T3 (ru)
PT (5) PT2076901T (ru)
RU (2) RU2411645C2 (ru)
TW (2) TWI355649B (ru)
WO (2) WO2008049589A1 (ru)
ZA (2) ZA200810308B (ru)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2807607C2 (ru) * 2019-06-26 2023-11-17 Долби Лабораторис Лайсэнзин Корпорейшн Банк аудиофильтров с малой задержкой и повышенной разрешающей способностью по частоте

Families Citing this family (71)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USRE50158E1 (en) 2006-10-25 2024-10-01 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Apparatus and method for generating audio subband values and apparatus and method for generating time-domain audio samples
USRE50132E1 (en) 2006-10-25 2024-09-17 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Apparatus and method for generating audio subband values and apparatus and method for generating time-domain audio samples
US8160890B2 (en) * 2006-12-13 2012-04-17 Panasonic Corporation Audio signal coding method and decoding method
US8214200B2 (en) * 2007-03-14 2012-07-03 Xfrm, Inc. Fast MDCT (modified discrete cosine transform) approximation of a windowed sinusoid
EP2077551B1 (en) * 2008-01-04 2011-03-02 Dolby Sweden AB Audio encoder and decoder
CN101983403B (zh) * 2008-07-29 2013-05-22 雅马哈株式会社 演奏相关信息输出装置、具有演奏相关信息输出装置的系统、以及电子乐器
EP2268057B1 (en) * 2008-07-30 2017-09-06 Yamaha Corporation Audio signal processing device, audio signal processing system, and audio signal processing method
US9384748B2 (en) 2008-11-26 2016-07-05 Electronics And Telecommunications Research Institute Unified Speech/Audio Codec (USAC) processing windows sequence based mode switching
EP2359366B1 (en) * 2008-12-15 2016-11-02 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Audio encoder and bandwidth extension decoder
PL3246919T3 (pl) 2009-01-28 2021-03-08 Dolby International Ab Ulepszona transpozycja harmonicznych
PL3985666T3 (pl) 2009-01-28 2023-05-08 Dolby International Ab Ulepszona transpozycja harmonicznych
TWI458258B (zh) * 2009-02-18 2014-10-21 Dolby Int Ab 低延遲調變濾波器組及用以設計該低延遲調變濾波器組之方法
US8392200B2 (en) 2009-04-14 2013-03-05 Qualcomm Incorporated Low complexity spectral band replication (SBR) filterbanks
US9299362B2 (en) 2009-06-29 2016-03-29 Mitsubishi Electric Corporation Audio signal processing device
CN101958119B (zh) * 2009-07-16 2012-02-29 中兴通讯股份有限公司 一种改进的离散余弦变换域音频丢帧补偿器和补偿方法
FR2949582B1 (fr) * 2009-09-02 2011-08-26 Alcatel Lucent Procede pour rendre un signal musical compatible avec un codec a transmission discontinue ; et dispositif pour la mise en ?uvre de ce procede
KR101701759B1 (ko) * 2009-09-18 2017-02-03 돌비 인터네셔널 에이비 입력 신호를 전위시키기 위한 시스템 및 방법, 및 상기 방법을 수행하기 위한 컴퓨터 프로그램이 기록된 컴퓨터 판독가능 저장 매체
ES2936307T3 (es) * 2009-10-21 2023-03-16 Dolby Int Ab Sobremuestreo en un banco de filtros de reemisor combinado
JP5575149B2 (ja) * 2009-11-30 2014-08-20 三菱電機株式会社 分波装置、合波装置および中継装置
UA102347C2 (ru) 2010-01-19 2013-06-25 Долби Интернешнл Аб Усовершенствованное гармоническое преобразование на основе блока поддиапазонов
JP5782677B2 (ja) 2010-03-31 2015-09-24 ヤマハ株式会社 コンテンツ再生装置および音声処理システム
CN102971788B (zh) * 2010-04-13 2017-05-31 弗劳恩霍夫应用研究促进协会 音频信号的样本精确表示的方法及编码器和解码器
US9443534B2 (en) 2010-04-14 2016-09-13 Huawei Technologies Co., Ltd. Bandwidth extension system and approach
ES2942867T3 (es) 2010-07-19 2023-06-07 Dolby Int Ab Procesamiento de señales de audio durante la reconstrucción de alta frecuencia
US12002476B2 (en) 2010-07-19 2024-06-04 Dolby International Ab Processing of audio signals during high frequency reconstruction
CN101908342B (zh) * 2010-07-23 2012-09-26 北京理工大学 利用频域滤波后处理进行音频暂态信号预回声抑制的方法
US8755460B2 (en) * 2010-07-30 2014-06-17 National Instruments Corporation Phase aligned sampling of multiple data channels using a successive approximation register converter
US8762158B2 (en) * 2010-08-06 2014-06-24 Samsung Electronics Co., Ltd. Decoding method and decoding apparatus therefor
FR2969804A1 (fr) * 2010-12-23 2012-06-29 France Telecom Filtrage perfectionne dans le domaine transforme.
AU2012217216B2 (en) 2011-02-14 2015-09-17 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Apparatus and method for coding a portion of an audio signal using a transient detection and a quality result
ES2534972T3 (es) 2011-02-14 2015-04-30 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Predicción lineal basada en esquema de codificación utilizando conformación de ruido de dominio espectral
CN102959620B (zh) 2011-02-14 2015-05-13 弗兰霍菲尔运输应用研究公司 利用重迭变换的信息信号表示
CA2827000C (en) 2011-02-14 2016-04-05 Jeremie Lecomte Apparatus and method for error concealment in low-delay unified speech and audio coding (usac)
SG192746A1 (en) 2011-02-14 2013-09-30 Fraunhofer Ges Forschung Apparatus and method for processing a decoded audio signal in a spectral domain
PL3471092T3 (pl) 2011-02-14 2020-12-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Dekodowanie pozycji impulsów ścieżek sygnału audio
FR2977439A1 (fr) * 2011-06-28 2013-01-04 France Telecom Fenetres de ponderation en codage/decodage par transformee avec recouvrement, optimisees en retard.
FR2977969A1 (fr) * 2011-07-12 2013-01-18 France Telecom Adaptation de fenetres de ponderation d'analyse ou de synthese pour un codage ou decodage par transformee
EP2573761B1 (en) 2011-09-25 2018-02-14 Yamaha Corporation Displaying content in relation to music reproduction by means of information processing apparatus independent of music reproduction apparatus
CN103918029B (zh) 2011-11-11 2016-01-20 杜比国际公司 使用过采样谱带复制的上采样
JP5494677B2 (ja) 2012-01-06 2014-05-21 ヤマハ株式会社 演奏装置及び演奏プログラム
EP2717262A1 (en) * 2012-10-05 2014-04-09 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Encoder, decoder and methods for signal-dependent zoom-transform in spatial audio object coding
ES2881510T3 (es) 2013-02-05 2021-11-29 Ericsson Telefon Ab L M Método y aparato para controlar la ocultación de pérdida de trama de audio
CN117253498A (zh) 2013-04-05 2023-12-19 杜比国际公司 音频信号的解码方法和解码器、介质以及编码方法
TWI557727B (zh) 2013-04-05 2016-11-11 杜比國際公司 音訊處理系統、多媒體處理系統、處理音訊位元流的方法以及電腦程式產品
MX343673B (es) 2013-04-05 2016-11-16 Dolby Int Ab Codificador y decodificador de audio.
US10893488B2 (en) 2013-06-14 2021-01-12 Microsoft Technology Licensing, Llc Radio frequency (RF) power back-off optimization for specific absorption rate (SAR) compliance
EP2830061A1 (en) 2013-07-22 2015-01-28 Fraunhofer Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for encoding and decoding an encoded audio signal using temporal noise/patch shaping
EP3291233B1 (en) 2013-09-12 2019-10-16 Dolby International AB Time-alignment of qmf based processing data
EP3767970B1 (en) 2013-09-17 2022-09-28 Wilus Institute of Standards and Technology Inc. Method and apparatus for processing multimedia signals
WO2015060654A1 (ko) 2013-10-22 2015-04-30 한국전자통신연구원 오디오 신호의 필터 생성 방법 및 이를 위한 파라메터화 장치
KR102244613B1 (ko) * 2013-10-28 2021-04-26 삼성전자주식회사 Qmf 필터링 방법 및 이를 수행하는 장치
WO2015099429A1 (ko) 2013-12-23 2015-07-02 주식회사 윌러스표준기술연구소 오디오 신호 처리 방법, 이를 위한 파라메터화 장치 및 오디오 신호 처리 장치
EP3122073B1 (en) 2014-03-19 2023-12-20 Wilus Institute of Standards and Technology Inc. Audio signal processing method and apparatus
KR101856540B1 (ko) 2014-04-02 2018-05-11 주식회사 윌러스표준기술연구소 오디오 신호 처리 방법 및 장치
EP4002359A1 (en) * 2014-06-10 2022-05-25 MQA Limited Digital encapsulation of audio signals
WO2016142002A1 (en) 2015-03-09 2016-09-15 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Audio encoder, audio decoder, method for encoding an audio signal and method for decoding an encoded audio signal
TWI758146B (zh) 2015-03-13 2022-03-11 瑞典商杜比國際公司 解碼具有增強頻譜帶複製元資料在至少一填充元素中的音訊位元流
EP3107096A1 (en) * 2015-06-16 2016-12-21 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Downscaled decoding
US10847170B2 (en) * 2015-06-18 2020-11-24 Qualcomm Incorporated Device and method for generating a high-band signal from non-linearly processed sub-ranges
WO2017050398A1 (en) 2015-09-25 2017-03-30 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Encoder, decoder and methods for signal-adaptive switching of the overlap ratio in audio transform coding
MX2018010756A (es) * 2016-03-07 2019-01-14 Fraunhofer Ges Forschung Unidad de ocultamiento de error, decodificador de audio, y método relacionado y programa de computadora que usa características de una representación decodificada de una trama de audio decodificada apropiadamente.
US10770082B2 (en) * 2016-06-22 2020-09-08 Dolby International Ab Audio decoder and method for transforming a digital audio signal from a first to a second frequency domain
EP3276620A1 (en) 2016-07-29 2018-01-31 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Time domain aliasing reduction for non-uniform filterbanks which use spectral analysis followed by partial synthesis
US10224974B2 (en) 2017-03-31 2019-03-05 Microsoft Technology Licensing, Llc Proximity-independent SAR mitigation
TWI681384B (zh) * 2018-08-01 2020-01-01 瑞昱半導體股份有限公司 音訊處理方法與音訊等化器
CN113544774B (zh) * 2019-03-06 2024-08-20 弗劳恩霍夫应用研究促进协会 降混器及降混方法
CN112447166B (zh) * 2019-08-16 2024-09-10 阿里巴巴集团控股有限公司 一种针对目标频谱矩阵的处理方法及装置
EP3786948A1 (en) * 2019-08-28 2021-03-03 Fraunhofer Gesellschaft zur Förderung der Angewand Time-varying time-frequency tilings using non-uniform orthogonal filterbanks based on mdct analysis/synthesis and tdar
CN111402917B (zh) * 2020-03-13 2023-08-04 北京小米松果电子有限公司 音频信号处理方法及装置、存储介质
US11632147B2 (en) * 2020-08-13 2023-04-18 Marvell Asia Pte, Ltd. Simplified frequency-domain filter adaptation window
CN114007176B (zh) * 2020-10-09 2023-12-19 上海又为智能科技有限公司 用于降低信号延时的音频信号处理方法、装置及存储介质

Family Cites Families (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US351882A (en) 1886-11-02 Thill-coupling
US3666543A (en) * 1969-11-24 1972-05-30 Ludwig Maier Tris-(2-hydroxyalkyl)-phosphine oxide flame retardant articles
WO1990014719A1 (de) 1989-05-17 1990-11-29 Telefunken Fernseh Und Rundfunk Gmbh Verfahren zur übertragung eines signals
CN1062963C (zh) 1990-04-12 2001-03-07 多尔拜实验特许公司 用于产生高质量声音信号的解码器和编码器
JP3277682B2 (ja) * 1994-04-22 2002-04-22 ソニー株式会社 情報符号化方法及び装置、情報復号化方法及び装置、並びに情報記録媒体及び情報伝送方法
KR100346734B1 (ko) 1995-09-22 2002-11-23 삼성전자 주식회사 고속분석필터및합성필터를구비한오디오부호화기및복호화기
US5819215A (en) 1995-10-13 1998-10-06 Dobson; Kurt Method and apparatus for wavelet based data compression having adaptive bit rate control for compression of digital audio or other sensory data
ATE269575T1 (de) 1997-01-27 2004-07-15 Entropic Res Lab Inc Ein system und verfahren zur prosodyanpassung
JP3065067B2 (ja) * 1998-03-04 2000-07-12 韓國電氣通信公社 Mpegオ―ディオ多チャンネル処理用等間隔サブバンド分析フィルタ及び合成フィルタ
FI114833B (fi) 1999-01-08 2004-12-31 Nokia Corp Menetelmä, puhekooderi ja matkaviestin puheenkoodauskehysten muodostamiseksi
US6226608B1 (en) 1999-01-28 2001-05-01 Dolby Laboratories Licensing Corporation Data framing for adaptive-block-length coding system
US6510407B1 (en) 1999-10-19 2003-01-21 Atmel Corporation Method and apparatus for variable rate coding of speech
SE0001926D0 (sv) 2000-05-23 2000-05-23 Lars Liljeryd Improved spectral translation/folding in the subband domain
US6718300B1 (en) 2000-06-02 2004-04-06 Agere Systems Inc. Method and apparatus for reducing aliasing in cascaded filter banks
US6748363B1 (en) * 2000-06-28 2004-06-08 Texas Instruments Incorporated TI window compression/expansion method
JP2002091499A (ja) * 2000-06-14 2002-03-27 Texas Instruments Inc ウインドウ圧縮/伸張方法
EP1199711A1 (en) 2000-10-20 2002-04-24 Telefonaktiebolaget Lm Ericsson Encoding of audio signal using bandwidth expansion
US6996198B2 (en) 2000-10-27 2006-02-07 At&T Corp. Nonuniform oversampled filter banks for audio signal processing
US6707869B1 (en) 2000-12-28 2004-03-16 Nortel Networks Limited Signal-processing apparatus with a filter of flexible window design
SE0101175D0 (sv) * 2001-04-02 2001-04-02 Coding Technologies Sweden Ab Aliasing reduction using complex-exponential-modulated filterbanks
US7136418B2 (en) * 2001-05-03 2006-11-14 University Of Washington Scalable and perceptually ranked signal coding and decoding
US7400651B2 (en) 2001-06-29 2008-07-15 Kabushiki Kaisha Kenwood Device and method for interpolating frequency components of signal
WO2003019533A1 (fr) 2001-08-24 2003-03-06 Kabushiki Kaisha Kenwood Dispositif et procede d'interpolation adaptive de composantes de frequence d'un signal
DE10228103A1 (de) 2002-06-24 2004-01-15 Bayer Cropscience Ag Fungizide Wirkstoffkombinationen
ES2259158T3 (es) * 2002-09-19 2006-09-16 Matsushita Electric Industrial Co., Ltd. Metodo y aparato decodificador audio.
SE0301273D0 (sv) 2003-04-30 2003-04-30 Coding Technologies Sweden Ab Advanced processing based on a complex-exponential-modulated filterbank and adaptive time signalling methods
JP3876850B2 (ja) 2003-06-02 2007-02-07 ヤマハ株式会社 アレースピーカーシステム
US7563748B2 (en) 2003-06-23 2009-07-21 Cognis Ip Management Gmbh Alcohol alkoxylate carriers for pesticide active ingredients
EP1513137A1 (en) 2003-08-22 2005-03-09 MicronasNIT LCC, Novi Sad Institute of Information Technologies Speech processing system and method with multi-pulse excitation
TWI227866B (en) 2003-11-07 2005-02-11 Mediatek Inc Subband analysis/synthesis filtering method
CN100573666C (zh) * 2003-11-26 2009-12-23 联发科技股份有限公司 子带分析/合成滤波方法
CN1270290C (zh) * 2003-11-26 2006-08-16 联发科技股份有限公司 子带分析/合成滤波方法
US20080249765A1 (en) 2004-01-28 2008-10-09 Koninklijke Philips Electronic, N.V. Audio Signal Decoding Using Complex-Valued Data
CA2457988A1 (en) 2004-02-18 2005-08-18 Voiceage Corporation Methods and devices for audio compression based on acelp/tcx coding and multi-rate lattice vector quantization
WO2006000020A1 (en) 2004-06-29 2006-01-05 European Nickel Plc Improved leaching of base metals
BRPI0607646B1 (pt) 2005-04-01 2021-05-25 Qualcomm Incorporated Método e equipamento para encodificação por divisão de banda de sinais de fala
US7774396B2 (en) 2005-11-18 2010-08-10 Dynamic Hearing Pty Ltd Method and device for low delay processing
US7953604B2 (en) * 2006-01-20 2011-05-31 Microsoft Corporation Shape and scale parameters for extended-band frequency coding
US8036903B2 (en) 2006-10-18 2011-10-11 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Analysis filterbank, synthesis filterbank, encoder, de-coder, mixer and conferencing system
USRE50132E1 (en) 2006-10-25 2024-09-17 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Apparatus and method for generating audio subband values and apparatus and method for generating time-domain audio samples
TW200922334A (en) 2007-11-02 2009-05-16 Univ Nat Chunghsing Low complexity frequency field motion estimation method adapted to wavelet video coding

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2807607C2 (ru) * 2019-06-26 2023-11-17 Долби Лабораторис Лайсэнзин Корпорейшн Банк аудиофильтров с малой задержкой и повышенной разрешающей способностью по частоте

Also Published As

Publication number Publication date
FI3848928T3 (fi) 2023-06-02
PL2109098T3 (pl) 2021-03-08
KR100957711B1 (ko) 2010-05-12
CN101606194B (zh) 2012-06-27
EP4325723B1 (en) 2024-08-28
JP2010507820A (ja) 2010-03-11
AU2007308415B2 (en) 2010-08-26
MX2009004477A (es) 2009-05-13
EP4325723C0 (en) 2024-08-28
HUE064482T2 (hu) 2024-03-28
RU2420815C2 (ru) 2011-06-10
MX2008011898A (es) 2008-11-06
NO20091951L (no) 2009-07-22
US8452605B2 (en) 2013-05-28
BRPI0709310A2 (pt) 2011-07-05
US20130238343A1 (en) 2013-09-12
AU2007308416A1 (en) 2008-05-02
NO20084012L (no) 2009-07-22
PT1994530E (pt) 2009-10-09
EP4207189C0 (en) 2023-11-22
EP4300825A3 (en) 2024-03-20
RU2009119456A (ru) 2010-11-27
EP4325724C0 (en) 2024-08-28
US20100023322A1 (en) 2010-01-28
JP4936569B2 (ja) 2012-05-23
RU2008137468A (ru) 2010-03-27
EP4325724A2 (en) 2024-02-21
PT3848928T (pt) 2023-06-07
EP3288027B1 (en) 2021-04-07
DK3848928T3 (da) 2023-06-19
MY142520A (en) 2010-12-15
DE602007001460D1 (de) 2009-08-13
KR20090058029A (ko) 2009-06-08
US8775193B2 (en) 2014-07-08
PT3288027T (pt) 2021-07-07
EP4300824A2 (en) 2024-01-03
BRPI0716315A2 (pt) 2017-05-30
CN101606194A (zh) 2009-12-16
USRE50144E1 (en) 2024-09-24
CN101405791A (zh) 2009-04-08
JP5083779B2 (ja) 2012-11-28
TWI357065B (en) 2012-01-21
EP4300824C0 (en) 2024-08-28
AU2007308416B2 (en) 2010-07-08
IL197976A (en) 2014-03-31
EP3848928A1 (en) 2021-07-14
USRE50009E1 (en) 2024-06-11
PT2076901T (pt) 2017-08-23
EP4300825A2 (en) 2024-01-03
EP4300825B1 (en) 2024-08-28
US20090319283A1 (en) 2009-12-24
EP2076901B1 (en) 2017-05-10
KR101056253B1 (ko) 2011-08-11
MY148715A (en) 2013-05-31
EP3288027A1 (en) 2018-02-28
TW200836166A (en) 2008-09-01
EP4325724A3 (en) 2024-04-17
KR20080102222A (ko) 2008-11-24
BRPI0709310B1 (pt) 2019-11-05
CA2645618C (en) 2013-01-22
CN101405791B (zh) 2012-01-11
US8438015B2 (en) 2013-05-07
JP2009530675A (ja) 2009-08-27
PL3848928T3 (pl) 2023-07-17
NO341610B1 (no) 2017-12-11
CA2667505C (en) 2015-07-07
ATE435480T1 (de) 2009-07-15
USRE50015E1 (en) 2024-06-18
EP3848928B1 (en) 2023-03-15
EP1994530B1 (en) 2009-07-01
ES2631906T3 (es) 2017-09-06
IL193786A (en) 2011-11-30
ES2873254T3 (es) 2021-11-03
PL4207189T3 (pl) 2024-04-08
HK1251073A1 (zh) 2019-01-18
EP2076901B8 (en) 2017-08-16
PL1994530T3 (pl) 2009-12-31
EP4300825C0 (en) 2024-08-28
ES2966657T3 (es) 2024-04-23
PL2076901T3 (pl) 2017-09-29
EP2076901A1 (en) 2009-07-08
EP4207189B1 (en) 2023-11-22
AU2007308415A1 (en) 2008-05-02
TW200837719A (en) 2008-09-16
WO2008049589A1 (en) 2008-05-02
USRE49999E1 (en) 2024-06-04
IL197976A0 (en) 2009-12-24
CA2667505A1 (en) 2008-05-02
USRE50132E1 (en) 2024-09-17
EP4325723A3 (en) 2024-04-17
ZA200902199B (en) 2010-04-28
PL3288027T3 (pl) 2021-10-18
ES2947516T3 (es) 2023-08-10
USRE50157E1 (en) 2024-10-01
NO341567B1 (no) 2017-12-04
ZA200810308B (en) 2009-12-30
PT2109098T (pt) 2020-12-18
NO342691B1 (no) 2018-07-09
EP1994530A1 (en) 2008-11-26
EP2109098A2 (en) 2009-10-14
USRE50054E1 (en) 2024-07-23
EP4300824B1 (en) 2024-08-28
EP4325723A2 (en) 2024-02-21
TWI355649B (en) 2012-01-01
EP4207189A1 (en) 2023-07-05
EP2109098A3 (en) 2017-06-21
AR063400A1 (es) 2009-01-28
HK1119824A1 (en) 2009-03-13
EP4325724B1 (en) 2024-08-28
DK1994530T3 (da) 2009-08-31
NO20170452A1 (no) 2009-07-22
AR063394A1 (es) 2009-01-28
CA2645618A1 (en) 2008-05-02
ES2834024T3 (es) 2021-06-16
EP4300824A3 (en) 2024-03-20
WO2008049590A1 (en) 2008-05-02
USRE50159E1 (en) 2024-10-01
EP2109098B1 (en) 2020-09-09
ES2328187T3 (es) 2009-11-10

Similar Documents

Publication Publication Date Title
RU2411645C2 (ru) Устройство и способ для генерации значений субполос звукового сигнала и устройство и способ для генерации аудиоотсчетов временной области