KR20210068332A

KR20210068332A - 네거티브 지연 시간 검출 방법, 장치, 전자 기기 및 저장 매체

Info

Publication number: KR20210068332A
Application number: KR1020210064899A
Authority: KR
Inventors: 젱빈 송; 준화 쑤
Original assignee: 베이징 바이두 넷컴 사이언스 앤 테크놀로지 코., 엘티디.
Priority date: 2020-05-21
Filing date: 2021-05-20
Publication date: 2021-06-09
Also published as: KR102436302B1; JP7300478B2; JP2021132400A; CN111736797A; CN111736797B

Abstract

본 출원은 음성 기술 분야에 관한 것으로, 네거티브 지연 시간 검출 방법, 장치, 전자 기기 및 저장 매체를 공개한다. 구체적인 실시형태는, i번째 타임 슬라이스의 마이크로폰 신호를 획득하고, i는 양의 정수이고; (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호를 획득하고, n은 i보다 작은 양의 정수이며; (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호를 제1 버퍼 영역에 저장하고; i번째 타임 슬라이스의 마이크로폰 신호를 제2 버퍼 영역에 저장하며, 제2 버퍼 영역에서 i번째 타임 슬라이스의 마이크로폰 신호를 미리 설정된 시간 동안 지연시키고; (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호로부터 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 선택하며; i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 시간 값 및 유사 참조 신호에 대응되는 시간 값에 따라 네거티브 지연 시간을 결정한다. 이로써, 네거티브 지연 검출을 구현하고, 기존의 알고리즘이 네거티브 지연 검출을 구현할 수 없는 단점을 보완하였다.

Description

네거티브 지연 시간 검출 방법, 장치, 전자 기기 및 저장 매체{NEGATIVE DELAY TIME DETECTION METHOD AND DEVICE, ELECTRONIC EQUIPMENT AND STORAGE MEDIUM}

본 출원의 실시예는 전반적으로 데이터 처리 기술 분야에 관한 것으로, 보다 구체적으로는 음성 기술 분야에 관한 것이다.

차량 애플리케이션에서, 일반적으로 차량 내 음향 시스템을 이용하여 오디오를 재생하기 위해, 스마트 백미러, 휴대폰 등 기기의 음악, 네비게이션 음성 등 오디오 데이터를 차량에 전송해야 한다.

그러나, 스마트 백미러, 휴대폰 등 기기의 오디오 데이터를 차량에 전송할 경우 몇 초 동안의 지연이 존재할 수 있는데, 기존의 반향 제거 모듈은 이러한 큰 지연을 처리할 수 없으므로, 지연 추정 알고리즘을 통해 이러한 긴 지연을 계산하고, 마이크로폰 신호와 참조 신호를 정렬한 후, 반향 제거 알고리즘을 이용하여 처리해야 한다. 하지만, 지연 추정 알고리즘이 긴 지연을 계산할 경우에도 오차가 발생할 수 있으므로, 정렬 후의 마이크로폰 신호 및 참조 신호에 네거티브 지연이 발생할 수 있음으로써, 반향 제거 모듈이 정상적으로 작동할 수 없게 된다.

현재, 네거티브 지연 검출을 구현할 수 있는 알고리즘은 없다.

본 출원은 네거티브 지연 검출을 구현할 수 있는 네거티브 지연 시간 검출 방법, 장치, 전자 기기 및 저장 매체를 제공하기 위한 것이다.

제1 양태에 따르면, 네거티브 지연 시간 검출 방법을 제공하고, 당해 방법은,

i번째 타임 슬라이스의 마이크로폰 신호를 획득하는 단계- i는 양의 정수임- ;

(i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호를 획득하는 단계 - n은 i보다 작은 양의 정수임- ;

상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호를 제1 버퍼 영역에 저장하는 단계;

상기 i번째 타임 슬라이스의 마이크로폰 신호를 제2 버퍼 영역에 저장하고, 상기 제2 버퍼 영역에서 상기 i번째 타임 슬라이스의 마이크로폰 신호를 미리 설정된 시간 동안 지연시키는 단계;

상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호로부터 상기 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 선택하는 단계; 및

상기 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 시간 값 및 상기 유사 참조 신호에 대응되는 시간 값에 따라, 상기 네거티브 지연 시간을 결정하는 단계; 를 포함한다.

제2 양태에 따르면, 네거티브 지연 시간 검출 장치를 제공하고, 당해 장치는,

i번째 타임 슬라이스의 마이크로폰 신호를 획득하는 제1 획득 모듈- i는 양의 정수임- ;

(i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호를 획득하는 제2 획득 모듈- n은 i보다 작은 양의 정수임- ;

상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호를 제1 버퍼 영역에 저장하는 제1 저장 모듈;

상기 i번째 타임 슬라이스의 마이크로폰 신호를 제2 버퍼 영역에 저장하고, 상기 제2 버퍼 영역에서 상기 i번째 타임 슬라이스의 마이크로폰 신호를 미리 설정된 시간 동안 지연시키는 제2 저장 모듈;

상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호로부터 상기 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 선택하는 선택 모듈; 및

상기 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 시간 값 및 상기 유사 참조 신호에 대응되는 시간 값에 따라, 상기 네거티브 지연 시간을 결정하는 결정 모듈; 을 포함한다.

제3 양태에 따르면, 전자 기기를 제공하고, 당해 전자 기기는,

적어도 하나의 프로세서; 및

상기 적어도 하나의 프로세서와 통신 가능하게 연결되는 메모리; 를 포함하고,

상기 메모리에는 상기 적어도 하나의 프로세서에 의해 실행 가능한 명령이 저장되어 있

, 상기 명령은 상기 적어도 하나의 프로세서에 의해 실행되어, 상기 적어도 하나의 프로세서가 제1 양태에 따른 네거티브 지연 시간 검출 방법을 수행하도록 한다.

제4 양태에 따르면, 컴퓨터 명령이 저장된 비일시적 컴퓨터 판독 가능 저장 매체를 제공하고, 상기 컴퓨터 명령은 상기 컴퓨터가 제1 양태에 따른 네거티브 지연 시간 검출 방법을 수행하도록 한다.

제5 양태에 따르면, 비일시적 컴퓨터 판독 가능 저장 매체에 저장된 컴퓨터 프로그램을 제공하고, 상기 컴퓨터 프로그램은 상기 컴퓨터가 제1 양태에 따른 네거티브 지연 시간 검출 방법을 수행하도록 한다.

본 출원이 제공하는 네거티브 지연 시간 검출 방법, 장치, 전자 기기 및 저장 매체는 하기와 같은 유리한 효과를 구비한다.

i번째 타임 슬라이스의 마이크로폰 신호를 획득하고, i는 양의 정수이고; (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호를 획득하고, n은 i보다 작은 양의 정수이며; 상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호를 제1 버퍼 영역에 저장하고; 상기 i번째 타임 슬라이스의 마이크로폰 신호를 제2 버퍼 영역에 저장하며, 상기 제2 버퍼 영역에서 상기 i번째 타임 슬라이스의 마이크로폰 신호를 미리 설정된 시간 동안 지연시키고; 상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호로부터 상기 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 선택하며; 상기 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 시간 값 및 상기 유사 참조 신호에 대응되는 시간 값에 따라 상기 네거티브 지연 시간을 결정함으로써, 네거티브 지연 검출을 구현하고, 기존의 알고리즘이 네거티브 지연 검출을 구현할 수 없는 단점을 보완하였다.

이 부분에서 설명된 내용은 본 출원의 실시예의 핵심 또는 중요 특징을 나타내는 것이 아니고, 본 출원의 범위를 한정하기 위한 것도 아님을 이해해야 한다. 본 출원의 다른 특징은 아래의 명세서를 통해 용이하게 이해될 것이다.

본 출원에 따르면, 네거티브 지연 검출을 구현하고, 기존의 알고리즘이 네거티브 지연 검출을 구현할 수 없는 단점을 보완할 수 있다.

도면은 본 해결수단을 더 잘 이해하도록 제공되는 것으로, 본 출원을 한정하지 않는다.
도 1은 본 출원의 제1 실시예에 따른 네거티브 지연 시간 검출 방법의 개략적인 흐름도이다.
도 2는 본 출원의 제2 실시예에 따른 네거티브 지연 시간 검출 방법의 개략적인 흐름도이다.
도 3은 본 출원의 제3 실시예에 따른 네거티브 지연 시간 검출 방법의 개략적인 흐름도이다.
도 4는 본 출원의 구체적인 일 실시예에 따른 네거티브 지연 시간 검출의 과정 예시도이다.
도 5는 본 출원의 제4 실시예에 따른 네거티브 지연 시간 검출 장치의 개략적인 구조도이다.
도 6은 본 출원의 제5 실시예에 따른 네거티브 지연 시간 검출 장치의 개략적인 구조도이다.
도 7은 본 출원의 제6 실시예에 따른 네거티브 지연 시간 검출 장치의 개략적인 구조도이다.
도 8은 본 출원의 실시예에 따른 네거티브 지연 시간 검출 방법을 구현하기 위한 전자 기기의 블록도이다.

이하, 첨부 도면을 결부하여 본 출원의 예시적인 실시예들을 설명하고자 하며, 이해를 돕기 위해 본 출원의 실시예들의 다양한 세부 사항들이 포함되는데, 이들은 단지 예시적인 것으로 간주되어야 한다. 따라서, 본 출원의 기술 분야의 통상의 지식을 가진 자라면 본 출원의 범위 및 사상을 벗어나지 않으면서 본 명세서에 설명된 실시예들에 대해 다양한 변경 및 수정이 이루어질 수 있음을 알아야 한다. 또한, 명확성 및 간결성을 위해, 공지된 기능 및 구조에 대한 설명은 아래 설명에서 생략된다.

아래 도면을 참조하여 본 출원의 네거티브 지연 시간 검출 방법, 장치, 전자 기기 및 저장 매체를 설명한다.

도 1은 본 출원의 제1 실시예에 따른 네거티브 지연 시간 검출 방법의 개략적인 흐름도이다. 상기 방법은 본 출원이 제공하는 네거티브 지연 시간 검출 장치에 의해 수행될 수 있으며, 전자 기기에 의해 수행될 수도 있다. 전자 기기는 서버, 차량 탑재 단말기 등 기기일 수 있으며, 본 출원은 이에 대해 한정하지 않는다. 아래 본 출원이 제공하는 네거티브 지연 시간 검출 장치가 본 출원의 네거티브 지연 시간 검출 방법을 수행하는 것을 예시로 하여 본 출원을 해석 및 설명한다.

도 1에 도시된 바와 같이, 상기 네거티브 지연 시간 검출 방법은 하기와 같은 단계를 포함한다.

단계 101에서, i번째 타임 슬라이스의 마이크로폰 신호를 획득하고, i는 양의 정수이다.

본 출원의 실시예에서, 획득된 마이크로폰 신호에 대해 타임 슬라이스에 기반하여 마이크로폰 신호에 대해 데이터 처리를 수행할 수 있고, 미리 설정된 샘플링 주파수 및 미리 설정된 타임 슬라이스의 기간에 따라 마이크로폰 신호를 복수의 타임 슬라이스로 분할할 수 있다.

타임 슬라이스의 기간은 미리 설정될 수 있는 바, 예를 들어, 하나의 타임 슬라이스의 기간을 8 ms로 설정할 수 있다.

본 출원의 실시예에서, 샘플링 주파수도 미리 설정될 수 있는데, 샘플링 주파수가 상이하면 동일한 기간의 타임 슬라이스에 기록될 수 있는 샘플링 포인트의 개수는 상이하고 타임 슬라이스에 포함된 데이터 양도 상이하다. 미리 설정된 샘플링 주파수가 16 KHz이고, 하나의 타임 슬라이스의 기간이 8 ms라고 가정하면, 각 타임 슬라이스에 기록된 샘플링 포인트의 개수는 128개이며, 샘플링 주파수가 20 KHz라고 가정하면, 하나의 기간이 8 ms인 타임 슬라이스에 기록된 샘플링 포인트의 개수는 160개이다.

나아가, 미리 설정된 샘플링 주파수에 따라 마이크로폰 신호를 샘플링할 수 있고, 샘플링하여 획득된 데이터를 타임 슬라이스의 각 샘플링 포인트에 순차적으로 기록하며, 각 타임 슬라이스의 기간은 미리 설정된 기간이고, 샘플링이 완성되면 복수의 타임 슬라이스를 획득할 수 있으며, 각 타임 슬라이스에는 일부 마이크로폰 신호가 기록되어 있다.

또한, 본 출원의 실시예에서, 복수의 타임 슬라이스로부터 i번째 타임 슬라이스의 마이크로폰 신호를 획득할 수 있짜, i는 양의 ㆆ警, i의 값은 마이크로폰 신호에 대응되는 타임 슬라이스의 전체 개수보다 크지 않다. 예를 들어, 마이크로폰 신호에 대응되는 타임 슬라이스의 개수가 8개라고 가정하면 i의 최댓값은 8이다.

단계 102에서, (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호를 획득하고, n은 i보다 작은 양의 정수이다.

본 출원의 실시예에서, 참조 신호에 대해서도 타임 슬라이스에 기반하여 참조 신호에 대해 데이처 처리를 수행할 수 있다. 참조 신호는 스마트 백미러, 휴대폰 등과 같은 차량과 서로 연결된 기기가 오디오 데이터를 재생할 시 수집한 신호를 의미하고, 전술한 마이크로폰 신호는 오디오 데이터를 재생할 시 마이크로폰에 의해 수집된 반향 신호이다.

후속적으로 참조 신호와 마이크로폰 신호를 비교한 비교 결과의 정확성을 보장하기 위해, 본 출원에서, 마이크로폰 신호를 처리하는 경우와 동일한 타임 슬라이스 및 샘플링 주파수를 사용하여 참조 신호를 처리한다. 예를 들어, 마이크로폰 신호에 대응되는 타임 슬라이스의 기간이 8 ms이고, 샘플링 주파수가 16 KHz라고 가정하면, 참조 신호에 대응되는 타임 슬라이스의 기간도 8 ms이며, 샘플링 주파수도 16 KHz이므로, 참조 신호에 대응되는 타임 슬라이스에 기록된 샘플링 포인트와 마이크로폰 신호에 대응되는 타임 슬라이스에 기록된 샘플링 포인트의 개수가 일치하도록 보장할 수 있음으로, 후속적으로 두 신호를 비교하는데 편리하다.

본 실시예에서, 타임 슬라이스에 기반하여 참조 신호를 처리하여 복수의 타임 슬라이스의 참조 신호를 획득한 후, 복수의 타임 슬라이스의 참조 신호로부터 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호를 획득할 수 있고, n의 값은 i보다 작은 임의의 양의 정수일 수 있다. 참조 신호는 오디오 데이터를 재생할 시 수집한 신호이고, 마이크로폰 신호는 오디오 데이터를 재생하는 과정에서 마이크로폰에 의해 수집된 것이므로, 마이크로폰 신호는 참조 신호보다 빠를 수 없기에, 본 출원의 실시예에서는 i번째 타임 슬라이스의 참조 신호까지만 획득하면 된다.

단계 103에서, (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호를 제1 버퍼 영역에 저장한다.

본 실시예에서, 획득된 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호를 버퍼 영역에 저장할 수 있고, 상기 버퍼 영역을 제1 버퍼 영역으로 표기할 수 있으며, 제1 버퍼 영역은 하나의 선입 선출 데이터 캐시 큐일 수 있다.

단계 104에서, i번째 타임 슬라이스의 마이크로폰 신호를 제2 버퍼 영역에 저장하고, 제2 버퍼 영역에서 i번째 타임 슬라이스의 마이크로폰 신호를 미리 설정된 시간 동안 지연시킨다.

본 실시예에서, 획득된 i번째 타임 슬라이스의 마이크로폰 신호를 버퍼 영역에 저장할 수도 있고, 마이크로폰 신호를 저장하는 버퍼 영역을 제2 버퍼 영역으로 표기할 수 있으며, 제2 버퍼 영역도 하나의 선입 선출 데이터 캐시 큐이고, 제2 버퍼 영역에서 i번째 타임 슬라이스의 마이크로폰 신호를 미리 설정된 시간 동안 지연시킨다.

미리 설정된 시간은 실제 상황에 따라 결정될 수 있는데, 미리 설정된 시간의 값은 스마트 백미러, 휴대폰 등 기기에 의해 재생되는 오디오 데이터의 차량에서의 지연 및 지연 추정 알고리즘으로 긴 지연를 계산하는 오차와 관련된다.

예를 들면, 상이한 차량에 있어서, 스마트 백미러가 차량에서 오디오 데이터를 재생하는 지연이 상이하다로 가정하면, 최대 지연은 800 ms일 수 있고, 전체 커버리지를 확보하기 위해, 긴 지연은 1초로 검출될 수 있다. 지연 추정 알고리즘의 오차가 5 %라고 가정하면, 1초의 긴 지연에 대응되는 오차는 50 ms이고, 발생될 수 있는 네거티브 지연은 최대 50 ms일 수 있으므로, 네거티브 지연의 문제를 극복하기 위해, 미리 설정된 시간을 50 ms보다 작지 않은 값으로 설정할 수 있고, 예를 들어, 미리 설정된 시간을 60 ms, 80 ms, 100 ms 등으로 설정할 수 있다.

또한, 미리 설정된 시간에 따라 i번째 타임 슬라이스의 마이크로폰 신호를 미리 설정된 시간 동안 지연시킬 수 있다. 예를 들어, 미리 설정된 시간이 60 ms이고, i번째 타임 슬라이스의 마이크로폰 신호의 시작 시간이 9 ms라고 가정하면, 미리 설정된 시간 동안 지연된 i번째 타임 슬라이스의 참조 신호의 시작 시간은 69 ms이다.

본 출원의 실시예의 하나의 가능한 실시형태에서, 제1 버퍼 영역의 길이는 제2 버퍼 영역의 길이보다 크다. 제1 버퍼 영역에 저장된 것은 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호이고, 제2 버퍼 영역에 저장된 것은 i번째 타임 슬라이스의 마이크로폰 신호이므로, 제1 버퍼 영역에 저장해야 할 데이터 양은 제2 버퍼 영역에 저장해야 할 데이터 양보다 많아야 되기 때문에, 본 출원에서, 제1 버퍼 영역의 길이를 제2 버퍼 영역의 길이보다 크게 설정할 수 있음으로써, 매번 획득된 마이크로폰 신호에 대해 모두 복수의 참조 신호를 획득하여 저장할 수 있도록 보장할 수 있으며, 후속적으로 마이크로폰 신호에 대응되는 유사 참조 신호를 정확하게 인식하도록 조건을 제공한다.

단계 105에서, (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호로부터 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 선택한다.

본 실시예에서, 미리 설정된 시간 동안 지연된 i번째 타임 슬라이스의 마이크로폰 신호에 대해, 상기 마이크로폰 신호를 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호 중의 각 참조 신호와 비교하여, i번째 타임 슬라이스의 마이크로폰 신호와 각 참조 신호 사이의 유사도를 계산하고, 계산하여 획득된 유사도 값에 따라, i번째 타임 슬라이스의 마이크로폰 신호와의 유사도 값이 가장 큰 참조 신호를 선택하여 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호로 사용할 수 있다.

단계 106에서, i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 시간 값 및 유사 참조 신호에 대응되는 시간 값에 따라, 네거티브 지연 시간을 결정한다.

본 실시예에서, i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 결정한 후, i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 시간 값 및 유사 참조 신호에 대응되는 시간 값에 따라 양자 사이의 네거티브 지연 시간을 결정할 수 있다.

실제로 재생할 때, 유사 참조 신호는 오디오 데이터를 재생할 시 수집한 신호로서, 오디오 데이터를 재생할 시 발생된 반향 신호(즉, 마이크로폰 신호) 전에 발생되어야 하기에, 유사 참조 신호와 i번째 타임 슬라이스의 마이크로폰 신호 사이의 네거티브 지연 시간을 계산할 경우, 유사 참조 신호에 대응되는 시간 값에서 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 시간 값을 빼서 양자 사이의 네거티브 지연 시간을 획득할 수 있다. 또한, i번째 타임 슬라이스의 마이크로폰 신호는 미리 설정된 시간 동안 지연된 신호이므로, 이에 대응되는 유사 참조 신호가 i번째 타임 슬라이스의 참조 신호라 하더라도, 유사 참조 신호의 타임 슬라이스에 대응되는 시간 값은 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 시간 값보다 늦다. 이는 실제 재생 시 먼저 참조 신호가 발생된 다음 반향 신호가 발생되는 인과 관계와 분명히 어긋나므로, 유사 참조 신호에 대응되는 시간 값에서 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 시간 값을 빼서 계산하여 획득된 지연 값을 네거티브 지연 시간으로 사용함으로써, 네거티브 지연 검출을 구현한다.

또한, 본 출원의 실시예의 하나의 가능한 실시형태에서, 네거티브 지연 검출 결과의 신뢰성을 보장하기 위해, 복수 그룹의 데이터를 계산할 수 있는데, 즉 복수의 상이한 시각의 마이크로폰 신호와 대응되는 유사 참조 신호 사이의 네거티브 지연 시간을 계산할 수 있고, 각 그룹의 마이크로폰 신호와 대응되는 유사 참조 신호 사이의 유사도 값이 모두 미리 설정된 임계값보다 클 경우, 계산하여 획득된 네거티브 지연 시간을 신뢰할 수 있는 것으로 간주할 수 있다.

본 실시예에 따른 네거티브 지연 시간 검출 방법에서, i번째 타임 슬라이스의 마이크로폰 신호를 획득하고, i는 양의 정수이고, (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호를 획득하고, n은 i보다 작은 양의 정수이며, (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호를 제1 버퍼 영역에 저장하고, i번째 타임 슬라이스의 마이크로폰 신호를 제2 버퍼 영역에 저장하며, 제2 버퍼 영역에서 i번째 타임 슬라이스의 마이크로폰 신호를 미리 설정된 시간 동안 지연시키고, (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호로부터 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 선택하며, i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 시간 값 및 유사 참조 신호에 대응되는 시간 값에 따라 네거티브 지연 시간을 결정한다. 이로써, 네거티브 지연 검출을 구현하고, 기존의 알고리즘이 네거티브 지연 검출을 구현할 수 없는 단점을 보완하였다.

스마트 백미러, 휴대폰 등 기기의 오디오 데이터가 차량 내 음향 시스템을 이용하여 정상적으로 재생될 수 있도록 보장하기 위해, 반향 제거 모듈을 설치하여 오디오 데이터 전송 과정에서 발생되는 지연을 처리하는데, 마이크로폰 신호와 참조 신호 사이에 네거티브 지연이 발생될 경우, 반향 제거 모듈이 정상적으로 작동할 수 없으므로 지연 반향을 제거할 수 없다. 이로써, 반향 제거 모듈이 정상적으로 작동할 수 있도록, 본 출원의 실시예의 하나의 가능한 실시형태에서, 결정된 네거티브 지연 시간을 이용하여 참조 신호를 처리할 수 있으며, 아래 도 2를 참조하여 상세하게 설명한다.

도 2는 본 출원의 제2 실시예에 따른 네거티브 지연 시간 검출 방법의 개략적인 흐름도이다. 도2에 도시된 바와 같이, 도 1에 도시된 실시예의 기초상에서, 단계 106 이후, 하기와 같은 단계를 포함한다.

단계 107에서, 네거티브 지연 시간에 따라 유사 참조 신호를 네거티브 지연 시간 동안 앞당겨 네거티브 지연 시간을 제거한다.

실제적으로 오디오 데이터를 재생할 경우, 먼저 참조 신호가 발생된 다음 반향 신호(즉, 본 출원의 마이크로폰 신호)가 발생될 수 있으므로, 마이크로폰 신호와 참조 신호 사이에 네거티브 지연이 발생될 경우, 이는 실제의 인과 관계와 어긋나며, 반향 제거 모듈은 지연 반향 제거 처리를 수행할 수 없다. 따라서, 본 출원에서는 계산하여 획득된 네거티브 지연 시간에 따라 유사 참조 신호를 네거티브 지연 시간 동안 앞당겨 네거티브 지연 시간을 제거할 수 있다.

예를 들어, 계산하여 획득된 네거티브 지연 시간이 30 ms이고, 유사 참조 신호의 타임 슬라이스의 시작 시간이 96 ms라고 가정하면, 네거티브 지연 시간 동안 앞당긴 유사 참조 신호의 타임 슬라이스의 시작 시간은 66 ms로 변화한다.

네거티브 지연 시간은 유사 참조 신호가 대응되는 i번째 타임 슬라이스의 마이크로폰 신호보다 늦게 발생되는 시간을 의미할 수 있으므로, 유사 참조 신호를 네거티브 지연 시간 동안 앞당긴 후, 유사 참조 신호의 타임 슬라이스의 시작 시간이 지연된 i번째 타임 슬라이스의 마이크로폰 신호의 시작 시간과 동일하도록 함으로써, 지연 추정 알고리즘에 오차가 존재하더라도 마이크로폰 신호와 참조 신호가 정렬된 후 네거티브 지연이 발생되지 않으며, 정렬된 마이크로폰 신호와 참조 신호를 반향 제거 모듈에 송신한 후, 반향 제거 모듈은 지연 반향 처리를 수행할 수 있으므로, 반향 제거 모듈이 정상적으로 작동하도록 보장한다.

본 실시예에 따른 네거티브 지연 시간 검출 방법에서, 네거티브 지연 시간에 따라 유사 참조 신호를 네거티브 지연 시간 동안 앞당겨 네거티브 지연 시간을 제거하므로, 정렬 후의 마이크로폰 신호와 참조 신호 사이에 네거티브 지연이 발생되지 않도록 보장함으로써, 반향 제거 모듈이 정상적으로 작동하도록 보장하고, 지연 반향 처리를 완성하며, 차량 내 음향 시스템의 재생 효과를 보장하고, 사용자의 청각 체험을 향상시킨다.

전술한 실시예의 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호로부터 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 선택하는 구체적인 구현 과정을 더욱 명확하게 설명하기 위해, 아래 도 3을 결부하여 상세하게 설명한다.

도 3은 본 출원의 제3 실시예에 따른 네거티브 지연 시간 검출 방법의 개략적인 흐름도이다. 도3에 도시된 바와 같이, 도 1에 도시된 실시예의 기초상에서, 단계 105는 하기와 같은 단계를 포함할 수 있다.

단계 201에서, 제2 버퍼 영역의 i번째 타임 슬라이스의 마이크로폰 신호와 제1 버퍼 영역의 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호를 비교하여, i번째 타임 슬라이스의 마이크로폰 신호와 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호 사이의 유사도를 방한다.

일반적으로, 오디오 데이터는 주파수 스펙트럼의 형태로 존재하고, 본 출원의 실시예에서, 마이크로폰 신호와 참조 신호의 타임 슬라이스에 기록된 것은 모두 각 샘플링 포인트의 샘플링 값, 즉 이산 데이터이므로, 제2 버퍼 영역의 i번째 타임 슬라이스의 마이크로폰 신호와 제1 버퍼 영역의 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호를 비교하여 유사도를 계산할 경우, 기존의 유사도 계산 방법을 사용하여 i번째 타임 슬라이스의 마이크로폰 신호와 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호 중의 각 참조 신호 사이의 유사도를 계산할 수 있다.

예를 들어, 유클리드 거리 공식을 사용하여 i번째 타임 슬라이스의 마이크로폰 신호와 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호 중의 각 참조 신호 사이의 거리를 계산하고, 획득된 거리를 이용하여 i번째 타임 슬라이스의 마이크로폰 신호와 각 참조 신호 사이의 유사도를 나타낼 수 있다.

단계 202에서, i번째 타임 슬라이스의 마이크로폰 신호와 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호 사이의 유사도에 따라, i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 획득한다.

본 실시예에서, i번째 타임 슬라이스의 마이크로폰 신호와 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호 중 각 참조 신호 사이의 유사도를 계산하여 획득한 후, 각 유사도 값을 비교하여 각 유사도 값에 따라 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 결정할 수 있다.

하나의 예시로서, 각 유사도를 비교하여, 최대 유사도에 대응되는 참조 신호를 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호로 결정할 수 있다.

다른 예시로서, 계산하여 획득된 각 유사도와 미리 설정된 유사도 임계값을 비교하여, 유사도 임계값보다 큰 유사도가 존재하는지 여부를 판단하고, 존재하면, 유사도가 유사도 임계값을 초과한 참조 신호를 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호로 결정할 수 있다. 또한, 유사도가 유사도 임계값을 초과한 참조 신호의 개수가 둘 이상이면, 유사도 임계값을 초과한 복수의 유사도 중 최대 유사도에 대응되는 참조 신호를 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호로 결정한다. 다시 말하면, 본 예시에서, i번째 타임 슬라이스의 마이크로폰 신호와 유사 참조 신호의 타겟 유사도는 미리 설정된 유사도 임계값보다 크고, 타겟 유사도는 i번째 타임 슬라이스의 마이크로폰 신호와 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호 사이의 유사도 중 최대값이므로, 유사 참조 신호 선택의 정확성 및 신뢰성을 보장할 수 있음으로써, 네거티브 지연 검출의 정확성을 향상시키도록 조건을 제공한다.

본 실시예에 따른 네거티브 지연 시간 검출 방법에서, 제2 버퍼 영역의 i번째 타임 슬라이스의 마이크로폰 신호와 상기 제1 버퍼 영역의 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호를 비교하여, i번째 타임 슬라이스의 마이크로폰 신호와 상기 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호 사이의 유사도를 획득하고, i번째 타임 슬라이스의 마이크로폰 신호와 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호 사이의 유사도에 따라, i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 획득하므로, 유사 참조 신호의 선택을 구현하고, 참조 신호 선택의 정확성을 보장하며, 네거티브 지연 검출을 정확하게 수행하도록 기초를 마련하였다.

도 4는 본 출원의 구체적인 일 실시예에 따른 네거티브 지연 시간 검출의 과정 예시도이다. 도4에 도시된 바와 같이, 마이크로폰 신호 및 참조 신호는 버퍼 풀 A 및 버퍼 풀 B의 큐의 끝 부분에 각각 저장되고, 버퍼 풀 큐는 모두 선입 선출 큐이다. 버퍼 풀 A는 지연 큐인데, 즉 마이크로폰 신호가 버퍼 풀 A에 입력된 후, 마이크로폰 신호에 대응되는 녹음 데이터는 미리 설정된 시간 동안 지연되고, 버퍼 풀 A에 저장된 각 녹음 데이터는 지연된 데이터이다. 버퍼 풀 A에 저장된 녹음 데이터에 대해, 버퍼 풀 A로부터 하나의 녹음 데이터를 순차적으로 추출하여 버퍼 풀 B에 저장된 참조 데이터와 비교하여, 버퍼 풀 B에서 현재 비교된 녹음 데이터와 가장 유사한 유사 참조 신호를 선택함으로써, 현재의 녹음 데이터의 시간 값과 유사 참조 신호의 시간 값에 따라 양자 사이의 네거티브 지연 시간을 결정하고, 네거티브 지연 시간에 따라 유사 참조 신호를 네거티브 지연 시간 동안 앞당겨 네거티브 지연 시간을 제거한다. 예를 들어, 버퍼 풀 A에서 현재 큐의 끝 부분에 위치한 것이 m번째 녹음 데이터이면, m번째 녹음 데이터를 버퍼 풀 B의 각 참조 데이터와 비교하고, n번째 참조 데이터가 m번째 녹음 데이터에 대응되는 유사 참조 데이터라고 가정하면, n번째 참조 데이터의 시간 값 및 m번째 녹음 데이터의 시간 값에 따라 양자 사이의 네거티브 지연 시간을 결정한다. m번째 녹음 데이터 비교를 완성한 후, (m+1)번째 녹음 데이터를 버퍼 풀 B의 각 참조 데이터와 비교하며, 이와 같이, 버퍼 풀 A의 녹음 데이터가 모두 비교될 때까지 진행한다. 선택적으로, 하나의 녹음 데이터 비교를 완성한 후, 상기 녹음 데이터를 버퍼 풀 A에서 제거하여, 버퍼 풀 A의 저장 공간을 절약하고 새로운 녹음 데이터를 계속하여 수신할 수 있다.

버퍼 풀에 입력된 마이크로폰 신호에 대해 지연 처리를 수행한 후 다시 참조 신호와 비교하여, 대응되는 유사 참조 신호를 찾아 유사 참조 신호와 마이크로폰 신호의 시간차에 따라 네거티브 지연 시간을 계산함으로써, 네거티브 지연 검출을 구현하고, 기존의 알고리즘이 네거티브 지연 검출을 구현할 수 없는 단점을 보완하였다.

상기 실시예를 구현하기 위해, 본 출원은 네거티브 지연 시간 검출 장치를 더 제공한다.

도 5는 본 출원의 제4 실시예에 따른 네거티브 지연 시간 검출 장치의 개략적인 구조도이다. 도 5에 도시된 바와 같이, 상기 네거티브 지연 시간 검출 장치(50)는 제1 획득 모듈(510), 제2 획득 모듈(520), 제1 저장 모듈(530), 제2 저장 모듈(540), 선택 모듈(550) 및 결정 모듈(560)을 포함한다.

제1 획득 모듈(510)은, i번째 타임 슬라이스의 마이크로폰 신호를 획득하고, i는 양의 정수이다.

제2 획득 모듈(520)은, (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호를 획득하고, n은 i보다 작은 양의 정수이다.

제1 저장 모듈(530)은, (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호를 제1 버퍼 영역에 저장한다.

제2 저장 모듈(540)은, i번째 타임 슬라이스의 마이크로폰 신호를 제2 버퍼 영역에 저장하고, 제2 버퍼 영역에서 i번째 타임 슬라이스의 마이크로폰 신호를 미리 설정된 시간 동안 지연시킨다.

선택적으로, 제1 버퍼 영역의 길이는 상기 제2 버퍼 영역의 길이보다 크다.

선택 모듈(550)은, (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호로부터 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 선택한다.

결정 모듈(560)은, i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 시간 값 및 유사 참조 신호에 대응되는 시간 값에 따라 네거티브 지연 시간을 결정한다.

또한, 본 출원의 실시예의 하나의 가능한 실시형태에서, 도 6에 도시된 바와 같이, 도 5에 도시된 실시예의 기초상에서, 상기 네거티브 지연 시간 검출 장치(50)는,

네거티브 지연 시간에 따라 유사 참조 신호를 네거티브 지연 시간 동안 앞당겨 네거티브 지연 시간을 제거하는 처리 모듈(570)을 더 포함한다.

본 출원의 실시예의 하나의 가능한 실시형태에서, 도 7에 도시된 바와 같이, 도 5에 도시된 실시예의 기초상에서, 선택 모듈(550)은,

제2 버퍼 영역

i번째 타임 슬라이스의 마이크로폰 신호와 제1 버퍼 영역의 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호를 비교하여, i번째 타임 슬라이스의 마이크로폰 신호와 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호 사이의 유사도를 방하는 비교 유닛(551); 및

i번째 타임 슬라이스의 마이크로폰 신호와 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호 사이의 유사도에 따라, i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 획득하는 획득 유닛(552); 을 포함한다.

본 출원의 실시예의 하나의 가능한 실시형태에서, i번째 타임 슬라이스의 마이크로폰 신호와 유사 참조 신호의 타겟 유사도는 미리 설정된 유사도 임계값보다 크고, 타겟 유사도는 i번째 타임 슬라이스의 마이크로폰 신호와 (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호 사이의 유사도 중 최대값이다.

또한, 네거티브 지연 시간 검출 방법의 실시예에 대한 전술한 해석 및 설명은 본 실시예에 따른 네거티브 지연 시간 검출 장치에도 적용되며, 그 구현 원리는 유사하므로, 더 이상 설명하지 않는다.

본 출원의 실시예에 따른 네거티브 지연 시간 검출 장치에서, i번째 타임 슬라이스의 마이크로폰 신호를 획득하고, i는 양의 정수이고; (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호를 획득하고, n은 i보다 작은 양의 정수이며; 상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호를 제1 버퍼 영역에 저장하고; 상기 i번째 타임 슬라이스의 마이크로폰 신호를 제2 버퍼 영역에 저장하며, 상기 제2 버퍼 영역에서 상기 i번째 타임 슬라이스의 마이크로폰 신호를 미리 설정된 시간 동안 지연시키고; 상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호로부터 상기 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 선택하며; 상기 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 시간 값 및 상기 유사 참조 신호에 대응되는 시간 값에 따라 상기 네거티브 지연 시간을 결정함으로써, 네거티브 지연 검출을 구현하고, 기존의 알고리즘이 네거티브 지연 검출을 구현할 수 없는 단점을 보완하였다.

본 출원의 실시예에 따르면, 본 출원은 전자 기기, 및 컴퓨터 명령이 저장된 비일시적 컴퓨터 판독 가능 저장 매체를 더 제공한다.

본 출원의 실시예에 따르면, 본 출원은 비일시적 컴퓨터 판독 가능 저장 매체에 저장된 컴퓨터 프로그램을 더 제공하고, 상기 컴퓨터 프로그램은 상기 컴퓨터가 본 출원이 제공하는 네거티브 지연 시간 검출 방법을 수행하도록 한다.

도8은 본 출원의 실시예에 따른 네거티브 지연 시간 검출 방법을 구현하기 위한 전자 기기의 블록도이다. 전자 기기는 랩톱 컴퓨터, 데스크톱 컴퓨터, 워크스테이션, 개인용 정보 단말기, 서버, 블레이드 서버, 메인 프레임 컴퓨터 및 다른 적합한 컴퓨터 등의 다양한 형태의 디지털 컴퓨터를 가리킨다. 전자 기기는 또한 개인용 정보 단말기, 셀룰러 폰, 스마트 폰, 웨어러블 기기 및 다른 유사한 컴퓨팅 장치와 같은 다양한 형태의 모바일 장치를 나타낼 수 있다. 본 명세서에 도시된 구성 요소, 그들의 연결과 관계 및 그 기능은 단지 예시에 불과하며, 본 명세서에 기술되거나 청구된 본 출원의 구현을 한정하도록 의도되지 않는다.

도 8에 도시된 바와 같이, 상기 전자 기기는 하나 또는 복수의 프로세서(801), 메모리(802) 및 고속 인터페이스 및 저속 인터페이스를 포함하는 다양한 구성 요소를 연결하기 위한 인터페이스를 포함한다. 다양한 구성 요소는 서로 다른 버스를 사용하여 서로 연결되며, 공동 메인보드에 장착되거나 필요에 따라 다른 방식으로 장착될 수 있다. 프로세서는 외부 입력/출력 장치(예를 들어, 인터페이스에 연결된 디스플레이 기기)에 GUI의 그래픽 정보를 표시하기 위해 메모리 또는 메모리 상에 저장된 명령을 포함하여 전자 기기 내에서 실행되는 명령을 처리할 수 있다. 다른 실시형태에서, 필요한 경우, 복수의 프로세서 및/또는 복수의 버스를 복수의 메모리와 함께 사용할 수 있다. 마찬가지로, 복수의 전자 기기를 연결할 수 있고, 각 기기는 일부의 필요한 동작(예를 들어, 서버 어레이, 한그룹의 블레이드 서버 또는 멀티 프로세서 시스템)을 제공할 수 있다. 도 8은 프로세서(801)가 하나인 경우를 예를 들어 설명한다.

메모리(802)는 본 출원에 의해 제공된 비일시적 컴퓨터 판독 가능 저장 매체이다. 적어도 하나의 프로세서에 의해 본 출원이 제공하는 네거티브 지연 시간 검출 방법을 수행하도록, 상기 메모리에는 상기 적어도 하나의 프로세서에 의해 실행 가능한 명령이 저장된다. 본 출원의 비일시적 컴퓨터 판독 가능 저장 매체에는 컴퓨터가 본 출원이 제공하는 네거티브 지연 시간 검출 방법을 수행하도록 하는 컴퓨터 명령이 저장된다.

메모리(802)는 비일시적 컴퓨터 판독 가능 저장 매체로서, 비일시적 소프트웨어 프로그램, 비일시적 컴퓨터 실행 가능 프로그램, 본 출원의 실시예의 네거티브 지연 시간 검출 방법에 대응하는 프로그램 명령/모듈(예를 들어, 도 5에 도시된 제1 획득 모듈(510), 제2 획득 모듈(520), 제1 저장 모듈(530), 제2 저장 모듈(540), 선택 모듈(550) 및 결정 모듈(560))과 같은 모듈을 저장하기 위해 사용될 수 있다. 프로세서(801)는 메모리(802)에 저장된 비일시적 소프트웨어 프로그램, 명령 및 모듈을 실행하여 서버의 다양한 기능적 애플리케이션 및 데이터 처리를 실행하는데, 즉, 상기 방법 실시예의 네거티브 지연 시간 검출 방법을 구현한다.

메모리(802)는 프로그램 저장 영역 및 데이터 저장 영역을 포함할 수 있고, 프로그램 저장 영역은 운영 체제 및 적어도 하나의 기능에 필요한 응용 프로그램을 저장할 수 있고, 데이터 저장 영역은 네거티브 지연 시간 검출 방법을 수행하는 전자 기기를 사용하여 구축된 데이터 등을 저장할 수 있다. 이 밖에, 메모리(802)는 고속 랜덤 액세스 메모리를 포함할 수 있고, 또한 적어도 하나의 자기 디스크 저장 장치, 플래시 메모리 장치 또는 다른 비일시적 솔리드 스테이트 저장 장치와 같은 비일시적 메모리를 포함할 수 있다. 일부 실시예에서, 메모리(802)는 프로세서(801)에 대해 원격으로 설치된 메모리를 선택적으로 포함할 수 있고, 이러한 원격 메모리는 네트워크를 통해 네거티브 지연 시간 검출 방법을 수행하는 전자 기기에 연결될 수 있다. 상기 네트워크의 구현예는 인터넷, 인트라넷, 근거리 통신망, 이동 통신 네트워크 및 이들의 조합을 포함하지만 이에 한정되지 않는다.

네거티브 지연 시간 검출 방법을 수행하는 전자 기기는 입력 장치(803) 및 출력 장치(804)를 더 포함할 수 있다. 프로세서(801), 메모리(802), 입력 장치(803) 및 출력 장치(804)는 버스를 통해 연결되거나 또는 다른 방식으로 연결될 수 있으며, 도 8은 버스를 통한 연결을 예시한 것이다.

입력 장치(803)는 입력된 숫자 또는 문자 정보를 수신할 수 있고, 네거티브 지연 시간 검출 방법을 수행하는 전자 기기의 사용자 설정 및 기능 제어와 관련된 키 신호 입력을 생성할 수 있으며, 터치 스크린, 키패드, 마우스, 트랙 패드, 터치 패드, 포인팅 스틱, 하나 또는 복수의 마우스 버튼, 트랙 볼, 조이스틱 등 입력 장치일 수 있다. 출력 장치(804)는 디스플레이 기기, 보조 조명 장치(예를 들어, LED), 촉각 피드백 장치(예를 들어, 진동 모터) 등을 포함할 수 있다. 상기 디스플레이 기기는 액정 디스플레이(LCD), 발광 다이오드(LED) 디스플레이 및 플라즈마 디스플레이를 포함할 수 있지만, 이에 한정되지 않는다. 일부 실시형태에서, 디스플레이 기기는 터치 스크린일 수 있다.

여기서 설명된 시스템 및 기술의 다양한 실시형태는 디지털 전자 회로 시스템, 집적 회로 시스템, 전용 ASIC(특정 용도 지향 집적 회로), 컴퓨터 하드웨어, 펌웨어, 소프트웨어, 및/또는 이들의 조합에서 구현될 수 있다. 이러한 다양한 실시형태는 하나 또는 복수의 컴퓨터 프로그램에서의 구현을 포함할 수 있고, 상기 하나 또는 복수의 컴퓨터 프로그램은 적어도 하나의 프로그래밍 가능 프로세서를 포함하는 프로그래밍 가능 시스템에서 실행 및/또는 해석될 수 있으며, 상기 프로그래밍 가능 프로세서는 전용 또는 일반 프로그래밍 가능 프로세서일 수 있고, 저장 시스템, 적어도 하나의 입력 장치, 및 적어도 하나의 출력 장치로부터 데이터 및 명령을 수신할 수 있으며, 데이터 및 명령을 상기 저장 시스템, 상기 적어도 하나의 입력 장치, 및 상기 적어도 하나의 출력 장치에 전송할 수 있다.

이러한 컴퓨팅 프로그램(프로그램, 소프트웨어, 소프트웨어 애플리케이션, 또는 코드라고도 함)은 프로그래밍 가능 프로세서의 기계 명령을 포함하고, 場 프로세스 및/또는 객체 지향 프로그래밍 언어, 및/또는 어셈블리/기계 언어를 이용하여 이러한 컴퓨팅 프로그램을 실행할 수 있다. 본문에서 사용된 바와 같이, 용어 "기계 판독 가능 매체” 및 "컴퓨터 판독 가능 매체”는 기계 명령 및/또는 데이터를 프로그래밍 가능 프로세서에 제공하기 위한 임의의 컴퓨터 프로그램 제품, 기기, 및/또는 장치(예를 들어, 자기 디스크, 광 디스크, 메모리, 프로그래밍 가능 로직 장치(PLD))를 의미하고, 기계 판독 가능 신호인 기계 명령을 수신하는 기계 판독 가능 매체를 포함한다. 용어 "기계 판독 가능 신호”는 기계 명령 및/또는 데이터를 프로그래밍 가능 프로세서에 제공하기 위한 임의의 신호를 의미한다.

사용자와의 인터랙션을 제공하기 위해, 컴퓨터에서 여기서 설명된 시스템 및 기술을 실시할 수 있고, 상기 컴퓨터는 사용자에게 정보를 표시하기 위한 표시 장치(예를 들어, CRT(음극선관) 또는 LCD(액정 표시 장치) 모니터); 및 키보드 및 지향 장치(예를 들어, 마우스 또는 트랙 볼)를 구비하며, 사용자는 상기 키보드 및 상기 지향 장치를 통해 컴퓨터에 입력을 제공한다. 다른 타입의 장치도 또한 사용자와의 인터랙션을 제공할 수 있는데, 예를 들어, 사용자에게 제공된 피드백은 임의의 형태의 감각 피드백(예를 들어, 시각 피드백, 청각 피드백, 또는 촉각 피드백)일 수 있고, 임의의 형태(음향 입력, 음성 입력, 또는 촉각 입력)로 사용자로부터의 입력을 수신할 수 있다.

여기서 설명된 시스템 및 기술을 백그라운드 컴포넌트를 포함하는 컴퓨팅 시스템(예를 들어, 데이터 서버), 또는 미들웨어 컴포넌트를 포함하는 컴퓨팅 시스템(예를 들어, 애플리케이션 서버), 또는 프론트 엔드 컴포넌트를 포함하는 컴퓨팅 시스템(예를 들어, 그래픽 사용자 인터페이스 또는 웹 브라우저를 구비하는 사용자 컴퓨터이고, 사용자는 상기 그래픽 사용자 인터페이스 또는 웹 브라우저를 통해 여기서 설명된 시스템 및 기술의 실시형태와 인터랙션할 수 있음), 또는 이러한 백그라운드 컴포넌트, 미들웨어 컴포넌트, 또는 프론트 엔드 컴포넌트의 임의의 조합을 포함하는 컴퓨팅 시스템에서 실시할 수 있다. 임의의 형태 또는 매체의 디지털 데이터 통신(예를 들어, 통신 네트워크)을 통해 시스템의 컴포넌트를 서로 연결시킬 수 있다. 통신 네트워크의 예시로 근거리 통신망(LAN), 광역 통신망(WAN) 및 인터넷을 포함한다.

컴퓨터 시스템은 클라이언트 및 서버를 포함할 수 있다. 클라이언트 및 서버는 일반적으로 서로 멀리 떨어져 있고 일반적으로 통신 네트워크를 통해 서로 인터랙션한다. 대응되는 컴퓨터에서 실행되고 또한 서로 클라이언트-서버 관계를 가지는 컴퓨터 프로그램을 통해 클라이언트 및 서버의 관계를 생성한다.

본 출원의 실시예의 기술적 수단에 따르면, i번째 타임 슬라이스의 마이크로폰 신호를 획득하고, i는 양의 정수이고, (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호를 획득하고, n은 i보다 작은 양의 정수이며, (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호를 제1 버퍼 영역에 저장하고, i번째 타임 슬라이스의 마이크로폰 신호를 제2 버퍼 영역에 저장하며, 제2 버퍼 영역에서 i번째 타임 슬라이스의 마이크로폰 신호를 미리 설정된 시간 동안 지연시키고, (i-n)번째 타임 슬라이스 내지 i번째 타임 슬라이스의 참조 신호로부터 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 선택하며, i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 시간 값 및 유사 참조 신호에 대응되는 시간 값에 따라 네거티브 지연 시간을 결정함으로써, 네거티브 지연 검출을 구현하고, 기존의 알고리즘이 네거티브 지연 검출을 구현할 수 없는 단점을 보완하였다. 또한, 네거티브 지연 시간에 따라 유사 참조 신호를 네거티브 지연 시간 동안 앞당겨 네거티브 지연 시간을 제거하므로, 정렬 후의 마이크로폰 신호와 참조 신호 사이에 네거티브 지연이 발생되지 않도록 보장함으로써, 반향 제거 모듈이 정상적으로 작동하도록 보장하고, 지연 반향 처리를 완성하며, 차량 내 음향 시스템의 재생 효과를 보장하고, 사용자의 청각 체험을 향상시킨다.

상기에 도시된 다양한 형태의 프로세스를 사용하여 단계를 재정렬, 추가 또는 삭제할 수 있다는 것을 이해해야 한다. 예를 들어, 본 출원에 기재된 각 단계는 동시에 수행될 수 있거나 순차적으로 수행될 수 있거나 상이한 순서로 수행될 수 있고, 본 출원에 개시된 기술적 수단이 원하는 결과를 달성할 수만 있으면, 본문은 한정하지 않는다.

상기 구체적인 실시형태는 본 출원의 보호 범위에 대한 제한을 구성하지 않는다. 당업자는 설계 요건 및 다른 요인에 따라 다양한 수정, 조합, 하위 조합 및 대체가 이루어질 수 있다는 것을 이해해야 한다. 본 출원의 사상과 원칙 내에서 이루어진 모든 수정, 동등한 대체 및 개선은 모두 본 출원의 보호 범위에 포함되어야 한다.

Claims

i번째 타임 슬라이스의 마이크로폰 신호를 획득하는 단계- i는 양의 정수임- ;
(i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호를 획득하는 단계- n은 i보다 작은 양의 정수임- ;
상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호를 제1 버퍼 영역에 저장하는 단계;
상기 i번째 타임 슬라이스의 마이크로폰 신호를 제2 버퍼 영역에 저장하고, 상기 제2 버퍼 영역에서 상기 i번째 타임 슬라이스의 마이크로폰 신호를 미리 설정된 시간 동안 지연시키는 단계;
상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호로부터 상기 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 선택하는 단계; 및
상기 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 시간 값 및 상기 유사 참조 신호에 대응되는 시간 값에 따라, 상기 네거티브 지연 시간을 결정하는 단계; 를 포함하는,
것을 특징으로 하는 네거티브 지연 시간 검출 방법.
제1항에 있어서,
상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호로부터 상기 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 선택하는 단계는,
상기 제2 버퍼 영역의 상기 i번째 타임 슬라이스의 마이크로폰 신호와 상기 제1 버퍼 영역의 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호를 비교하여, 상기 i번째 타임 슬라이스의 마이크로폰 신호와 상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호 사이의 유사도를 획득하는 단계; 및
상기 i번째 타임 슬라이스의 마이크로폰 신호와 상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호 사이의 유사도에 따라, 상기 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 획득하는 단계; 를 포함하는,
것을 특징으로 하는 네거티브 지연 시간 검출 방법.
제2항에 있어서,
상기 i번째 타임 슬라이스의 마이크로폰 신호와 상기 유사 참조 신호의 타겟 유사도는 미리 설정된 유사도 임계값보다 크고, 상기 타겟 유사도는 상기 i번째 타임 슬라이스의 마이크로폰 신호와 상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호 사이의 유사도 중 최대값인,
것을 특징으로 하는 네거티브 지연 시간 검출 방법.
제1항에 있어서,
상기 제1 버퍼 영역의 길이는 상기 제2 버퍼 영역의 길이보다 큰,
것을 특징으로 하는 네거티브 지연 시간 검출 방법.
제1항에 있어서,
상기 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 시간 값 및 상기 유사 참조 신호에 대응되는 시간 값에 따라, 상기 네거티브 지연 시간을 결정하는 단계 이후,
상기 네거티브 지연 시간에 따라 상기 유사 참조 신호를 상기 네거티브 지연 시간 동안 앞당겨 상기 네거티브 지연 시간을 제거하는 단계를 더 포함하는,
것을 특징으로 하는 네거티브 지연 시간 검출 방법.
i번째 타임 슬라이스의 마이크로폰 신호를 획득하는 제1 획득 모듈 - i는 양의 정수임-;
(i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호를 획득하는 제2 획득 모듈- n은 i보다 작은 양의 정수임- ;
상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호를 제1 버퍼 영역에 저장하는 제1 저장 모듈;
상기 i번째 타임 슬라이스의 마이크로폰 신호를 제2 버퍼 영역에 저장하고, 상기 제2 버퍼 영역에서 상기 i번째 타임 슬라이스의 마이크로폰 신호를 미리 설정된 시간 동안 지연시키는 제2 저장 모듈;
상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호로부터 상기 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 선택하는 선택 모듈; 및
상기 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 시간 값 및 상기 유사 참조 신호에 대응되는 시간 값에 따라, 상기 네거티브 지연 시간을 결정하는 결정 모듈; 을 포함하는,
것을 특징으로 하는 네거티브 지연 시간 검출 장치.
제6항에 있어서,
상기 선택 모듈은,
상기 제2 버퍼 영역의 상기 i번째 타임 슬라이스의 마이크로폰 신호와 상기 제1 버퍼 영역의 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호를 비교하여, 상기 i번째 타임 슬라이스의 마이크로폰 신호와 상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호 사이의 유사도를 획득하는 비교 유닛; 및
상기 i번째 타임 슬라이스의 마이크로폰 신호와 상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호 사이의 유사도에 따라, 상기 i번째 타임 슬라이스의 마이크로폰 신호에 대응되는 유사 참조 신호를 획득하는 획득 유닛; 을 포함하는,
것을 특징으로 하는 네거티브 지연 시간 검출 장치.
제7항에 있어서,
상기 i번째 타임 슬라이스의 마이크로폰 신호와 상기 유사 참조 신호의 타겟 유사도는 미리 설정된 유사도 임계값보다 크고, 상기 타겟 유사도는 상기 i번째 타임 슬라이스의 마이크로폰 신호와 상기 (i-n)번째 타임 슬라이스 내지 상기 i번째 타임 슬라이스의 참조 신호 사이의 유사도 중 최대값인,
것을 특징으로 하는 네거티브 지연 시간 검출 장치.
제6항에 있어서,
상기 제1 버퍼 영역의 길이는 상기 제2 버퍼 영역의 길이보다 큰,
것을 특징으로 하는 네거티브 지연 시간 검출 장치.
제6항에 있어서,
상기 네거티브 지연 시간에 따라 상기 유사 참조 신호를 상기 네거티브 지연 시간 동안 앞당겨 상기 네거티브 지연 시간을 제거하는 처리 모듈을 더 포함하는,
것을 특징으로 하는 네거티브 지연 시간 검출 장치.
적어도 하나의 프로세서; 및
상기 적어도 하나의 프로세서와 통신 가능하게 연결되는 메모리를 포함하고,
상기 메모리에는 상기 적어도 하나의 프로세서에 의해 실행 가능한 명령이 저장되어 있고, 상기 명령은 상기 적어도 하나의 프로세서에 의해 실행되어, 상기 적어도 하나의 프로세서가 제1항 내지 제5항 중 어느 한 항에 따른 네거티브 지연 시간 검출 방법을 수행하도록 하는,
것을 특징으로 하는 전자 기기.
컴퓨터 명령이 저장된 비일시적 컴퓨터 판독 가능 저장 매체에 있어서,
상기 컴퓨터 명령은 상기 컴퓨터가 제1항 내지 제5항 중 어느 한 항에 따른 네거티브 지연 시간 검출 방법을 수행하도록 하는,
것을 특징으로 하는 비일시적 컴퓨터 판독 가능 저장 매체.
비일시적 컴퓨터 판독 가능 저장 매체에 저장된 컴퓨터 프로그램에 있어서,
상기 컴퓨터 프로그램은 상기 컴퓨터가 제1항 내지 제5항 중 어느 한 항에 따른 네거티브 지연 시간 검출 방법을 수행하도록 하는,
것을 특징으로 하는 비일시적 컴퓨터 판독 가능 저장 매체에 저장된 컴퓨터 프로그램.