KR102456748B1 - Settop terminal and operating method thereof - Google Patents

Settop terminal and operating method thereof Download PDF

Info

Publication number
KR102456748B1
KR102456748B1 KR1020200177256A KR20200177256A KR102456748B1 KR 102456748 B1 KR102456748 B1 KR 102456748B1 KR 1020200177256 A KR1020200177256 A KR 1020200177256A KR 20200177256 A KR20200177256 A KR 20200177256A KR 102456748 B1 KR102456748 B1 KR 102456748B1
Authority
KR
South Korea
Prior art keywords
audio signal
external speaker
speaker device
top terminal
output module
Prior art date
Application number
KR1020200177256A
Other languages
Korean (ko)
Other versions
KR20220086976A (en
Inventor
우장훈
임준순
Original Assignee
주식회사 엘지유플러스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엘지유플러스 filed Critical 주식회사 엘지유플러스
Priority to KR1020200177256A priority Critical patent/KR102456748B1/en
Publication of KR20220086976A publication Critical patent/KR20220086976A/en
Application granted granted Critical
Publication of KR102456748B1 publication Critical patent/KR102456748B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43632—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wired protocol, e.g. IEEE 1394
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43637—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]

Abstract

셋톱 단말이 개시된다. 일 실시예는 오디오 신호를 디코딩하는 오디오 디코더, 비디오 신호를 디코딩하는 비디오 디코더, 상기 디코딩된 비디오 신호를 디스플레이 장치로 출력하는 유선 출력 모듈, 외부 스피커 장치와 무선 연결하는 무선 출력 모듈, 및 컨트롤러를 포함한다. 컨트롤러는 상기 외부 스피커 장치와 상기 무선 출력 모듈 사이의 무선 연결을 감지하고, 상기 감지를 통해 상기 외부 스피커 장치의 정보를 획득하며, 상기 외부 스피커 장치로 전송될 연동 오디오 신호를 상기 디코딩된 오디오 신호와 상기 획득된 정보를 기초로 생성하고, 상기 무선 출력 모듈이 상기 생성된 연동 오디오 신호를 상기 외부 스피커 장치로 전송하도록 상기 생성된 연동 오디오 신호를 상기 무선 출력 모듈로 전달한다. A set-top terminal is disclosed. An embodiment includes an audio decoder for decoding an audio signal, a video decoder for decoding a video signal, a wired output module for outputting the decoded video signal to a display device, a wireless output module for wirelessly connecting to an external speaker device, and a controller do. The controller detects a wireless connection between the external speaker device and the wireless output module, obtains information of the external speaker device through the detection, and combines an interlocking audio signal to be transmitted to the external speaker device with the decoded audio signal It generates based on the obtained information, and transmits the generated interlocked audio signal to the wireless output module so that the wireless output module transmits the generated interlocked audio signal to the external speaker device.

Description

셋톱 단말 및 이의 동작 방법{SETTOP TERMINAL AND OPERATING METHOD THEREOF}Set-top terminal and its operating method {SETTOP TERMINAL AND OPERATING METHOD THEREOF}

아래 실시예들은 셋톱 단말에 관한 것이다.The following embodiments relate to a set-top terminal.

셋톱 단말은 TV에 콘텐츠를 출력할 수 있다. 이에 따라, 사용자는 콘텐츠를 감상할 수 있다. The set-top terminal may output content to the TV. Accordingly, the user can enjoy the content.

하지만, TV의 스피커만으로 오디오 신호의 음장 및 음역을 확장하기에는 어렵다.However, it is difficult to expand the sound field and sound range of an audio signal with only the speaker of the TV.

관련 선행기술로, 한국 공개실용신안공보 제10-2010-0002128호(발명의 명칭: TV 본체의 음향신호를 무선으로 수신하고 이를 내부에 장착된 스피커로 내보내는 스마트 리모콘, 출원인: 이병철)가 있다. 해당 공보에는 TV 콘트롤 리모콘이 개시되어 있다. 해당 TV 콘트롤 리모콘은 TV 본체로부터 음향신호를 무선으로 수신하는 기능과 이를 자체 내장된 스피커를 통해 재생시키는 기능을 구비한다.As a related prior art, there is a Korean Utility Model Publication No. 10-2010-0002128 (Title of the invention: a smart remote control that wirelessly receives an acoustic signal of a TV body and sends it out to a speaker mounted therein; Applicant: Lee Byung-cheol). The publication discloses a TV control remote control. The TV control remote controller has a function of wirelessly receiving a sound signal from the TV body and a function of playing it back through its own built-in speaker.

전술한 배경기술은 발명자가 본원의 개시 내용을 도출하는 과정에서 보유하거나 습득한 것으로서, 반드시 본 출원 전에 일반 공중에 공개된 공지기술이라고 할 수는 없다. The above-mentioned background art is possessed or acquired by the inventor in the process of deriving the disclosure of the present application, and it cannot necessarily be said to be a known technology disclosed to the general public prior to the present application.

일 측에 따른 셋톱 단말의 동작 방법은 오디오 신호와 비디오 신호를 디코딩하는 단계; 상기 디코딩된 비디오 신호를 디스플레이 장치로 출력하는 단계; 외부 스피커 장치와 무선으로 연결하는 단계; 상기 외부 스피커 장치와 무선 연결되는 경우, 상기 외부 스피커 장치의 정보를 획득하는 단계; 상기 디코딩된 오디오 신호와 상기 획득된 정보를 기초로 연동 오디오 신호를 생성하는 단계; 및 상기 생성된 연동 오디오 신호를 상기 외부 스피커 장치로 전송하는 단계를 포함한다.A method of operating a set-top terminal according to one side comprises the steps of: decoding an audio signal and a video signal; outputting the decoded video signal to a display device; wirelessly connecting with an external speaker device; acquiring information on the external speaker device when wirelessly connected to the external speaker device; generating a linked audio signal based on the decoded audio signal and the obtained information; and transmitting the generated interworking audio signal to the external speaker device.

상기 획득된 정보는 상기 외부 스피커 장치의 성능 정보, 위치, 및 지향 방향을 포함할 수 있다.The obtained information may include performance information, a location, and a direction of the external speaker device.

상기 생성하는 단계는 상기 디코딩된 오디오 신호, 상기 성능 정보, 상기 위치, 및 상기 지향 방향을 이용하여 상기 디코딩된 오디오 신호의 음장 보강을 위한 상기 연동 오디오 신호를 생성하는 단계를 포함할 수 있다.The generating may include generating the associated audio signal for sound field reinforcement of the decoded audio signal using the decoded audio signal, the performance information, the location, and the orientation direction.

상기 생성하는 단계는 상기 디코딩된 오디오 신호의 음성 대역을 분석하는 단계; 및 상기 분석 결과, 상기 성능 정보, 상기 위치, 및 상기 지향 방향을 이용하여 상기 음성 대역을 증강한 상기 연동 오디오 신호를 생성하는 단계를 포함할 수 있다.The generating may include: analyzing a voice band of the decoded audio signal; and generating the linked audio signal in which the voice band is augmented by using the analysis result, the performance information, the location, and the orientation direction.

상기 생성하는 단계는 상기 디코딩된 오디오 신호, 상기 성능 정보, 상기 위치, 및 상기 지향 방향을 이용하여 청취 공간 확장을 위한 상기 연동 오디오 신호를 생성하는 단계를 포함할 수 있다.The generating may include generating the associated audio signal for expanding a listening space using the decoded audio signal, the performance information, the location, and the orientation direction.

상기 성능 정보는 상기 외부 스피커 장치의 게인 및 출력 사운드 음색을 포함할 수 있다.The performance information may include a gain of the external speaker device and an output sound tone.

상기 획득하는 단계는 상기 외부 스피커 장치로부터 상기 정보를 수신하는 단계를 포함할 수 있다.The acquiring may include receiving the information from the external speaker device.

상기 외부 스피커 장치와 무선으로 연결하는 단계는 상기 외부 스피커 장치와 블루투스 통신 방식에 따라 연결하는 단계를 포함할 수 있다. The step of wirelessly connecting with the external speaker device may include connecting with the external speaker device according to a Bluetooth communication method.

일 측에 따른 셋톱 단말은 오디오 신호를 디코딩하는 오디오 디코더; 비디오 신호를 디코딩하는 비디오 디코더; 상기 디코딩된 비디오 신호를 디스플레이 장치로 출력하는 유선 출력 모듈; 외부 스피커 장치와 무선 연결하는 무선 출력 모듈; 및 상기 외부 스피커 장치와 상기 무선 출력 모듈 사이의 무선 연결을 감지하고, 상기 감지를 통해 상기 외부 스피커 장치의 정보를 획득하며, 상기 외부 스피커 장치로 전송될 연동 오디오 신호를 상기 디코딩된 오디오 신호와 상기 획득된 정보를 기초로 생성하고, 상기 무선 출력 모듈이 상기 생성된 연동 오디오 신호를 상기 외부 스피커 장치로 전송하도록 상기 생성된 연동 오디오 신호를 상기 무선 출력 모듈로 전달하는 컨트롤러를 포함한다.Set-top terminal according to one side of the audio decoder for decoding the audio signal; a video decoder for decoding a video signal; a wired output module for outputting the decoded video signal to a display device; a wireless output module for wirelessly connecting to an external speaker device; and detecting a wireless connection between the external speaker device and the wireless output module, acquiring information on the external speaker device through the detection, and combining an interlocking audio signal to be transmitted to the external speaker device with the decoded audio signal and the and a controller for generating based on the obtained information and transmitting the generated linked audio signal to the wireless output module so that the wireless output module transmits the generated linked audio signal to the external speaker device.

상기 획득된 정보는 상기 외부 스피커 장치의 성능 정보, 위치, 및 지향 방향을 포함할 수 있다.The obtained information may include performance information, a location, and a direction of the external speaker device.

상기 컨트롤러는 상기 디코딩된 오디오 신호, 상기 성능 정보, 상기 위치, 및 상기 지향 방향을 이용하여 상기 디코딩된 오디오 신호의 음장(sound field) 보강을 위한 상기 연동 오디오 신호를 생성할 수 있다.The controller may generate the associated audio signal for sound field reinforcement of the decoded audio signal using the decoded audio signal, the performance information, the position, and the orientation direction.

상기 컨트롤러는 상기 디코딩된 오디오 신호의 음성 대역을 분석하고, 상기 분석 결과, 상기 성능 정보, 상기 위치, 및 상기 지향 방향을 이용하여 상기 디코딩된 오디오 신호의 음성 대역을 증강한 상기 연동 오디오 신호를 생성할 수 있다.The controller analyzes a voice band of the decoded audio signal, and generates the linked audio signal in which the voice band of the decoded audio signal is enhanced by using the analysis result, the performance information, the location, and the orientation direction. can do.

상기 컨트롤러는 상기 디코딩된 오디오 신호, 상기 성능 정보, 상기 위치, 및 상기 지향 방향을 이용하여 청취 공간 확장을 위한 상기 연동 오디오 신호를 생성할 수 있다.The controller may use the decoded audio signal, the performance information, the location, and the orientation direction to generate the associated audio signal for expanding a listening space.

상기 성능 정보는 상기 외부 스피커 장치의 게인(gain) 및 출력 사운드 음색을 포함할 수 있다.The performance information may include a gain of the external speaker device and an output sound tone.

상기 무선 출력 모듈은 상기 외부 스피커 장치로부터 상기 정보를 수신하고, 상기 수신된 정보를 상기 컨트롤러로 전달할 수 있다.The wireless output module may receive the information from the external speaker device and transmit the received information to the controller.

상기 무선 출력 모듈은 블루투스 통신 모듈을 포함할 수 있다.The wireless output module may include a Bluetooth communication module.

실시예들은 별도의 스피커를 통해 셋톱 박스의 음장, 음역을 확장할 수 있다. Embodiments may extend the sound field and sound range of the set-top box through a separate speaker.

또한, 실시예들은 별도의 스피커를 활용하여 고객이 듣는 음장을 확대할 수 있어 실감 체험을 증가시킬 수 있다.In addition, the embodiments may expand the sound field heard by the customer by using a separate speaker, thereby increasing the sensory experience.

또한, 실시예들은 별도의 스피커를 활용하여 대사가 강화되어 증강된 음성대역을 제공함으로써 감상 편의를 사용자에게 제공할 수 있다. In addition, embodiments may provide a user with listening convenience by providing an enhanced voice band by using a separate speaker to enhance dialogue.

또한, 실시예들은 별도의 스피커를 활용하여 TV설치 공간 이외의 공간에서 사용자가 TV 오디오를 확장하여 들을 수 있게 할 수 있다.In addition, embodiments may allow a user to expand and listen to TV audio in a space other than the TV installation space by using a separate speaker.

도 1은 일 실시예에 따른 셋톱 단말과 디스플레이 장치를 설명하기 위한 도면이다.
도 2는 일 실시예에 따른 셋톱 단말의 구성을 설명하기 위한 블록도이다.
도 3 내지 도 4는 일 실시예에 따른 셋톱 단말의 동작을 설명하기 위한 도면이다.
도 5는 일 실시예에 따른 셋톱 단말의 동작 방법을 설명하기 위한 순서도이다. 1 is a view for explaining a set-top terminal and a display device according to an embodiment.
2 is a block diagram illustrating the configuration of a set-top terminal according to an embodiment.
3 to 4 are diagrams for explaining the operation of the set-top terminal according to an embodiment.
5 is a flowchart illustrating a method of operating a set-top terminal according to an embodiment.

실시예들에 대한 특정한 구조적 또는 기능적 설명들은 단지 예시를 위한 목적으로 개시된 것으로서, 다양한 형태로 변경되어 구현될 수 있다. 따라서, 실제 구현되는 형태는 개시된 특정 실시예로만 한정되는 것이 아니며, 본 명세서의 범위는 실시예들로 설명한 기술적 사상에 포함되는 변경, 균등물, 또는 대체물을 포함한다.Specific structural or functional descriptions of the embodiments are disclosed for purposes of illustration only, and may be changed and implemented in various forms. Accordingly, the actual implementation form is not limited to the specific embodiments disclosed, and the scope of the present specification includes changes, equivalents, or substitutes included in the technical spirit described in the embodiments.

제1 또는 제2 등의 용어를 다양한 구성요소들을 설명하는데 사용될 수 있지만, 이런 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 해석되어야 한다. 예를 들어, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소는 제1 구성요소로도 명명될 수 있다.Although terms such as first or second may be used to describe various elements, these terms should be interpreted only for the purpose of distinguishing one element from another. For example, a first component may be termed a second component, and similarly, a second component may also be termed a first component.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다.When a component is referred to as being “connected” to another component, it may be directly connected or connected to the other component, but it should be understood that another component may exist in between.

단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 설명된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함으로 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The singular expression includes the plural expression unless the context clearly dictates otherwise. In this specification, terms such as "comprise" or "have" are intended to designate that the described feature, number, step, operation, component, part, or combination thereof exists, and includes one or more other features or numbers, It should be understood that the possibility of the presence or addition of steps, operations, components, parts or combinations thereof is not precluded in advance.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 해당 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art. Terms such as those defined in a commonly used dictionary should be interpreted as having a meaning consistent with the meaning in the context of the related art, and should not be interpreted in an ideal or excessively formal meaning unless explicitly defined in the present specification. does not

이하, 실시예들을 첨부된 도면들을 참조하여 상세하게 설명한다. 첨부 도면을 참조하여 설명함에 있어, 도면 부호에 관계없이 동일한 구성 요소는 동일한 참조 부호를 부여하고, 이에 대한 중복되는 설명은 생략하기로 한다. Hereinafter, embodiments will be described in detail with reference to the accompanying drawings. In the description with reference to the accompanying drawings, the same components are assigned the same reference numerals regardless of the reference numerals, and the overlapping description thereof will be omitted.

도 1은 일 실시예에 따른 셋톱 단말과 디스플레이 장치를 설명하기 위한 도면이다. 1 is a view for explaining a set-top terminal and a display device according to an embodiment.

도 1을 참조하면, 셋톱 단말(110)은 서버로부터 미디어 신호를 수신할 수 있다. 미디어 신호는 오디오 신호와 비디오 신호를 포함할 수 있다. 여기서, 오디오 신호와 비디오 신호 각각은 인코딩(또는 압축)된 것일 수 있다.Referring to FIG. 1 , the set-top terminal 110 may receive a media signal from a server. The media signal may include an audio signal and a video signal. Here, each of the audio signal and the video signal may be encoded (or compressed).

셋톱 단말(110)은 셋톱 박스, 셋톱 장치, 수신 장치 등으로 다르게 표현될 수 있다.The set-top terminal 110 may be expressed differently as a set-top box, a set-top device, a receiving device, and the like.

셋톱 단말(110)은 오디오 신호와 비디오 신호 각각을 디코딩할 수 있고, 디코딩된 오디오 신호와 디코딩된 비디오 신호를 디스플레이 장치(120)에 출력할 수 있다. 일례로, 셋톱 단말(110)은 디스플레이 장치(120)와 HDMI(High Definition Multimedia Interface) 케이블을 통해 연결될 수 있고, 디코딩된 오디오 신호와 디코딩된 비디오 신호를 HDMI 케이블을 통해 디스플레이 장치(120)에 전송할 수 있다. The set-top terminal 110 may decode the audio signal and the video signal, respectively, and may output the decoded audio signal and the decoded video signal to the display device 120 . For example, the set-top terminal 110 may be connected to the display device 120 through a high definition multimedia interface (HDMI) cable, and transmits a decoded audio signal and a decoded video signal to the display device 120 through an HDMI cable. can

디스플레이 장치(120)는 스마트 TV 등을 포함할 수 있으나 이에 제한되지 않는다.The display device 120 may include, but is not limited to, a smart TV.

디스플레이 장치(120)는 셋탑 단말(110)로부터 수신한 디코딩된 오디오 신호를 자체 스피커를 통해 출력할 수 있고, 디코딩된 비디오 신호를 시각적으로 표시할 수 있다. 이에 따라, 사용자는 미디어를 시청 또는 감상할 수 있다.The display device 120 may output the decoded audio signal received from the set-top terminal 110 through its own speaker, and may visually display the decoded video signal. Accordingly, the user can watch or enjoy the media.

디스플레이 장치(120)의 자체 스피커는 입체 음장 및 실감나는 음장(sound field)을 구현하기 어려울 수 있고, 특정 음성 대역을 증강시키기 어려울 수 있으며, 특정 음색을 강화하기 어려울 수 있다. 일 실시예에 있어서, 셋톱 단말(110)은 외부 스피커 장치(예를 들어, 블루투스 스피커 장치)와 무선 연결될 수 있다. 셋톱 단말(110)은 해당 외부 스피커 장치에 맞는 가상 채널 신호를 해당 외부 스피커 장치에 제공할 수 있고, 해당 외부 스피커 장치는 가상 채널 신호를 출력할 수 있다. 이에 따라, 일 실시예는 보다 실감나는 음장과 입체 음장을 구현할 수 있고, 특정 음성 대역 및/또는 특정 음색을 강화할 수 있으며, 청취 공간을 확장할 수 있다. It may be difficult for the speaker of the display device 120 to implement a stereoscopic sound field and a realistic sound field, it may be difficult to enhance a specific voice band, and it may be difficult to enhance a specific tone. In an embodiment, the set-top terminal 110 may be wirelessly connected to an external speaker device (eg, a Bluetooth speaker device). The set-top terminal 110 may provide a virtual channel signal suitable for the corresponding external speaker device to the corresponding external speaker device, and the corresponding external speaker device may output the virtual channel signal. Accordingly, an embodiment may implement a more realistic sound field and a stereoscopic sound field, may enhance a specific voice band and/or a specific tone, and may expand a listening space.

도 2는 일 실시예에 따른 셋톱 단말의 구성을 설명하기 위한 블록도이다.2 is a block diagram illustrating the configuration of a set-top terminal according to an embodiment.

도 2를 참조하면, 셋톱 단말(110)은 비디오 디코더(210), 오디오 디코더(220), 유선 출력 모듈(230), 컨트롤러(240), 및 무선 출력 모듈(250)을 포함한다.Referring to FIG. 2 , the set-top terminal 110 includes a video decoder 210 , an audio decoder 220 , a wired output module 230 , a controller 240 , and a wireless output module 250 .

도 2에 도시되지 않았으나, 셋톱 단말(110)은 네트워크 인터페이스(예를 들어, 이더넷 인터페이스)를 포함할 수 있고, 네트워크 인터페이스를 통해 미디어 신호를 서버로부터 수신할 수 있다.Although not shown in FIG. 2 , the set-top terminal 110 may include a network interface (eg, an Ethernet interface), and may receive a media signal from a server through the network interface.

위에서 설명한 것과 같이, 미디어 신호는 비디오 신호와 오디오 신호를 포함할 수 있고, 비디오 신호와 오디오 신호 각각은 인코딩된 것일 수 있다.As described above, the media signal may include a video signal and an audio signal, and each of the video signal and the audio signal may be encoded.

비디오 디코더(210)는 비디오 신호를 디코딩할 수 있다.The video decoder 210 may decode a video signal.

오디오 디코더(220)는 오디오 신호를 디코딩할 수 있다.The audio decoder 220 may decode an audio signal.

유선 출력 모듈(230)은 HDMI 단자를 포함할 수 있고, HDMI 케이블을 통해 디스플레이 장치(120)와 연결될 수 있다. The wired output module 230 may include an HDMI terminal and may be connected to the display device 120 through an HDMI cable.

유선 출력 모듈(230)은 디스플레이 장치(120)에 디코딩된 비디오 신호와 디코딩된 오디오 신호를 출력 또는 전송할 수 있다.The wired output module 230 may output or transmit a decoded video signal and a decoded audio signal to the display device 120 .

무선 출력 모듈(250)은 리모컨 또는 무선 이어폰과 무선 연결될 수 있다. 무선 출력 모듈(250)이 리모컨과 무선 이어폰과 무선 연결되는 내용에 대해선 도 3을 통해 후술한다. The wireless output module 250 may be wirelessly connected to a remote control or wireless earphone. The content of the wireless output module 250 wirelessly connected to the remote control and the wireless earphone will be described later with reference to FIG. 3 .

무선 출력 모듈(250)은 하나 이상의 외부 스피커 장치와 무선 연결될 수 있다. 일례로, 무선 출력 모듈(250)은 블루투스 통신 모듈을 포함할 수 있고 블루투스 통신 방식을 통해 하나 이상의 외부 스피커 장치와 연결될 수 있다. 달리 표현하면, 무선 출력 모듈(250)은 하나 이상의 외부 스피커 장치와 페어링할 수 있다.The wireless output module 250 may be wirelessly connected to one or more external speaker devices. For example, the wireless output module 250 may include a Bluetooth communication module and may be connected to one or more external speaker devices through a Bluetooth communication method. In other words, the wireless output module 250 may pair with one or more external speaker devices.

컨트롤러(240)는 외부 스피커 장치와 무선 출력 모듈(250) 사이의 무선 연결을 감지할 수 있고, 이러한 감지를 통해 외부 스피커 장치의 정보를 획득할 수 있다. 외부 스피커 장치의 정보는, 예를 들어, 외부 스피커 장치의 성능 정보, 위치, 및 지향 방향을 포함할 수 있다. 성능 정보는, 예를 들어, 외부 스피커 장치의 게인 및 출력 사운드 음색을 포함할 수 있다. 여기서, 게인은 외부 스피커 장치의 입력 신호 대비 출력 신호가 증폭되는 정도를 나타낼 수 있다.The controller 240 may detect a wireless connection between the external speaker device and the wireless output module 250 , and may acquire information on the external speaker device through this detection. The information of the external speaker device may include, for example, performance information, location, and orientation direction of the external speaker device. The performance information may include, for example, a gain of an external speaker device and an output sound tone. Here, the gain may indicate a degree to which an output signal of the external speaker device is amplified compared to an input signal.

컨트롤러(240)는 디코딩된 오디오 신호와 외부 스피커 장치의 정보를 기초로 목적에 맞는 연동 오디오 신호를 생성할 수 있다. 일례로, 컨트롤러(240)는 음장 보강을 위한 목적, 대사 음성의 또렷한 청취를 위한 목적, 또는 청취 공간 연장을 위한 목적에 맞는 연동 오디오 신호를 생성할 수 있다. 컨트롤러(240)는 생성된 연동 오디오 신호를 무선 출력 모듈(250)로 전송할 수 있고, 무선 출력 모듈(250)은 생성된 연동 오디오 신호를 외부 스피커 장치로 전송할 수 있다. 외부 스피커 장치는 연동 오디오 신호를 출력할 수 있다. 외부 스피커 장치를 활용한 예에 대해선 도 4를 참조하면서 설명한다.The controller 240 may generate an interlocking audio signal suitable for a purpose based on the decoded audio signal and information on the external speaker device. For example, the controller 240 may generate an interlocking audio signal suitable for the purpose of reinforcing the sound field, the purpose of clearly listening to the dialogue voice, or the purpose of extending the listening space. The controller 240 may transmit the generated interworking audio signal to the wireless output module 250 , and the wireless output module 250 may transmit the generated interworking audio signal to an external speaker device. The external speaker device may output a linked audio signal. An example using an external speaker device will be described with reference to FIG. 4 .

도 3 내지 도 4는 일 실시예에 따른 셋톱 단말의 동작을 설명하기 위한 도면이다. 3 to 4 are diagrams for explaining the operation of the set-top terminal according to an embodiment.

도 3을 참조하면, 유선 출력 모듈(230)은 디스플레이 장치(120)에 디코딩된 오디오 신호와 디코딩된 비디오 신호를 출력할 수 있다. 디스플레이 장치(120)는 디코딩된 비디오 신호를 표시할 수 있다. 또한, 디스플레이 장치(120)는 디코딩된 오디오 신호를 자체 스피커를 통해 출력할 수 있다. 도 2에 도시된 예와 같이, 디스플레이 장치(120)는 2ch의 오디오 신호를 출력할 수 있다. 사용자는 디스플레이 장치(120)의 자체 스피커를 통해 출력된 오디오 신호를 들을 수 있다.Referring to FIG. 3 , the wired output module 230 may output a decoded audio signal and a decoded video signal to the display device 120 . The display device 120 may display the decoded video signal. Also, the display device 120 may output the decoded audio signal through its own speaker. As in the example shown in FIG. 2 , the display device 120 may output an audio signal of 2ch. A user may listen to an audio signal output through a speaker of the display device 120 .

구현에 따라, 리모컨(310)이 무선 출력 모듈(250)과 페어링될 수 있고, 리모컨(310)에 유선 이어폰(320)이 연결될 수 있다. 컨트롤러(240)는 디코딩된 오디오 신호를 무선 출력 모듈(250)로 전달할 수 있다. 무선 출력 모듈(250)은 디코딩된 오디오 신호를 리모컨(310)으로 전송할 수 있고 유선 이어폰(320)에서 디코딩된 오디오 신호가 출력될 수 있다. 사용자는 유선 이어폰(320)을 착용하여 오디오 신호를 들을 수 있다.Depending on the implementation, the remote control 310 may be paired with the wireless output module 250 , and the wired earphone 320 may be connected to the remote control 310 . The controller 240 may transmit the decoded audio signal to the wireless output module 250 . The wireless output module 250 may transmit the decoded audio signal to the remote control 310 and the decoded audio signal may be output from the wired earphone 320 . The user may listen to the audio signal by wearing the wired earphone 320 .

다른 구현에 따라, 무선 이어폰(330)이 무선 출력 모듈(250)과 페어링될 수 있다. 컨트롤러(240)는 디코딩된 오디오 신호를 무선 출력 모듈(250)로 전달할 수 있다. 무선 출력 모듈(250)은 디코딩된 오디오 신호를 무선 이어폰(330)으로 전송할 수 있고 무선 이어폰(330)은 오디오 신호를 출력할 수 있다. 사용자는 무선 이어폰(330)을 착용하여 오디오 신호를 들을 수 있다.According to another implementation, the wireless earphone 330 may be paired with the wireless output module 250 . The controller 240 may transmit the decoded audio signal to the wireless output module 250 . The wireless output module 250 may transmit the decoded audio signal to the wireless earphone 330 and the wireless earphone 330 may output the audio signal. The user may listen to the audio signal by wearing the wireless earphone 330 .

도 4를 참조하면, 유선 출력 모듈(230)은 디스플레이 장치(120)에 디코딩된 오디오 신호와 디코딩된 비디오 신호를 출력할 수 있다. 디스플레이 장치(120)는 디코딩된 비디오 신호를 표시할 수 있고 디코딩된 오디오 신호를 자체 스피커를 통해 출력할 수 있다. 사용자는 자체 스피커를 통해 출력된 오디오 신호를 들을 수 있다.Referring to FIG. 4 , the wired output module 230 may output a decoded audio signal and a decoded video signal to the display device 120 . The display device 120 may display the decoded video signal and output the decoded audio signal through its own speaker. A user can listen to an audio signal output through its own speaker.

도 4에는 무선 출력 모듈(250)이 외부 스피커 장치들(410 내지 430)과 페어링되는 것이 도시된다. 이는, 무선 출력 모듈(250)이 외부 스피커 장치들(410 내지 430) 각각과 동시에 페어링되는 것을 나타낼 수 있다. 이에 제한되는 것은 아니고, 무선 출력 모듈(250)이 외부 스피커 장치들(410 내지 430) 각각과 개별적으로 페어링되는 것을 나타낼 수 있다.4 shows that the wireless output module 250 is paired with the external speaker devices 410 to 430 . This may indicate that the wireless output module 250 is paired with each of the external speaker devices 410 to 430 at the same time. Without being limited thereto, it may indicate that the wireless output module 250 is individually paired with each of the external speaker devices 410 to 430 .

무선 출력 모듈(250)이 외부 스피커 장치들(410 내지 430) 중 하나 이상과 페어링된 상황에서 무선 출력 모듈(250)은 리모콘(310)과 페어링될 수 있다.In a situation where the wireless output module 250 is paired with one or more of the external speaker devices 410 to 430 , the wireless output module 250 may be paired with the remote controller 310 .

<음장 보강><Sound Field Reinforcement>

외부 스피커 장치(410)는 무선 출력 모듈(250)과 페어링될 수 있다. The external speaker device 410 may be paired with the wireless output module 250 .

일 실시예에 따르면, 무선 출력 모듈(250)은 외부 스피커 장치(410)로부터 외부 스피커 장치(410)의 성능 정보(예를 들어, 게인 및 출력 사운드 음색 등) 및 지향 방향을 수신할 수 있다. 지향 방향은, 예를 들어, 외부 스피커 장치(410)가 무지향성인지 지향성인지를 나타낼 수 있다. 무선 출력 모듈(250)은 외부 스피커 장치(410)의 지향 방향이 지향성을 나타내는 경우 외부 스피커 장치(410)의 지향각에 대한 정보도 외부 스피커 장치(410)로부터 수신할 수 있다. 실시예에 따르면, 외부 스피커 장치(410)는 자신의 위치 및/또는 지향각을 측정할 수 있다. 다른 실시예에 따르면, 컨트롤러(240)는 무선 출력 모듈(250)과 외부 스피커 장치(410)와 리모콘(310) 간의 무선 신호/음향 분석을 통해 외부 스피커 장치(410)의 위치 및/또는 지향각을 측정할 수 있다. According to an embodiment, the wireless output module 250 may receive performance information (eg, gain and output sound tone, etc.) of the external speaker device 410 and a direction of direction from the external speaker device 410 . The directivity direction may indicate, for example, whether the external speaker device 410 is omni-directional or directional. When the directivity direction of the external speaker device 410 indicates the directivity, the wireless output module 250 may also receive information about the directivity angle of the external speaker device 410 from the external speaker device 410 . According to an embodiment, the external speaker device 410 may measure its position and/or a directivity angle. According to another embodiment, the controller 240 performs the wireless signal/sound analysis between the wireless output module 250 and the external speaker device 410 and the remote controller 310 to determine the position and/or orientation angle of the external speaker device 410 . can be measured.

일 실시예에 따르면, 컨트롤러(240)는 무선 출력 모듈(250)이 외부 스피커 장치(410)로부터 수신한 무선 신호의 감도를 기초로 무선 출력 모듈(250)과 외부 스피커 장치(410) 사이의 거리 및/또는 해당 무선 신호의 도래각을 추정할 수 있다. 컨트롤러(240)는 무선 출력 모듈(250)이 리모콘(310)으로부터 수신한 무선 신호의 각도의 감도를 기초로 무선 출력 모듈(250)과 리모콘(310) 사이의 거리 및/또는 해당 무선 신호의 도래각을 추정할 수 있다. 컨트롤러(240)는 무선 출력 모듈(250)과 외부 스피커 장치(410) 사이의 거리 및/또는 무선 신호의 도래각, 무선 출력 모듈(250)과 리모콘(310) 사이의 거리 및/또는 무선 신호의 도래각 등을 고려하여 위치 측위(예를 들어, 삼각 측량, 삼변 측량 등)를 수행함으로써 외부 스피커 장치(410)의 위치를 추정 또는 측정할 수 있다. 이 때, 외부 스피커 장치(410)의 위치를 추정(또는 측정)하기 위해, 컨트롤러(240)는 사용자의 위치에 리모콘(310)이 있는 것으로 가정할 수 있고 외부 스피커 장치(410)가 사용자를 향하고 있는 것으로 가정할 수 있다.According to an embodiment, the controller 240 determines the distance between the wireless output module 250 and the external speaker device 410 based on the sensitivity of the wireless signal received by the wireless output module 250 from the external speaker device 410 . and/or an angle of arrival of the corresponding radio signal may be estimated. The controller 240 determines the distance between the wireless output module 250 and the remote controller 310 and/or the arrival of the corresponding wireless signal based on the sensitivity of the angle of the wireless signal received by the wireless output module 250 from the remote controller 310 . angle can be estimated. The controller 240 is the distance between the wireless output module 250 and the external speaker device 410 and / or the angle of arrival of the wireless signal, the distance between the wireless output module 250 and the remote control 310 and / or the wireless signal The position of the external speaker device 410 may be estimated or measured by performing positioning (eg, triangulation, trilateration, etc.) in consideration of the angle of arrival. At this time, in order to estimate (or measure) the location of the external speaker device 410, the controller 240 may assume that the remote control 310 is located at the user's location and the external speaker device 410 faces the user. It can be assumed that there is

일 실시예에 따르면, 오디오 디코더(220)는 무선 출력 모듈(250) 및 외부 스피커 장치(410)의 지연에 맞춰 유선 출력 모듈(230)의 출력과 동기화시킬 수 있다. 일례로, 외부 스피커 장치(410)에서 출력되는 오디오 신호와 디스플레이 장치(120)의 자체 스피커에서 출력되는 오디오 신호가 동기화되도록 오디오 디코더(220)는 무선 출력 모듈(250) 및 외부 스피커 장치(410)의 지연에 맞춰, 디코딩된 오디오 신호를 딜레이하여 유선 출력 모듈(230)로 전송할 수 있다.According to an embodiment, the audio decoder 220 may synchronize the output of the wired output module 230 according to the delay of the wireless output module 250 and the external speaker device 410 . For example, the audio decoder 220 may include the wireless output module 250 and the external speaker device 410 so that the audio signal output from the external speaker device 410 and the audio signal output from the speaker of the display device 120 are synchronized. In accordance with the delay of , the decoded audio signal may be delayed and transmitted to the wired output module 230 .

컨트롤러(240)는 외부 스피커 장치(410)의 성능 정보와 외부 스피커 장치(410)의 조건(예를 들어, 상술한 외부 스피커 장치(410)의 위치(또는 거리)와 및 지향 방향)을 무선 출력 모듈(250)로부터 수신 또는 획득할 수 있다.The controller 240 wirelessly outputs the performance information of the external speaker device 410 and the condition of the external speaker device 410 (eg, the position (or distance) and direction of the external speaker device 410 described above). It may be received or obtained from module 250 .

컨트롤러(240)는 디코딩된 오디오 신호, 외부 스피커 장치(410)의 성능 정보, 및 외부 스피커 장치(410)의 조건을 이용하여 음장 보강을 위한 연동 오디오 신호를 생성할 수 있다. 달리 표현하면, 컨트롤러(240)는 외부 스피커 장치(410)의 성능 정보와 조건에 맞는 음장 보강 채널 신호(또는 음장 보강을 위한 가상 채널 신호)를 생성할 수 있다. 일례로, 컨트롤러(240)는 디스플레이 장치(120)의 주파수 전달 특성과 외부 스피커 장치(410)의 주파수 전달 특성 사이의 차이를 보강하여 연동 오디오 신호를 생성할 수 있다. 다른 일례로, 컨트롤러(240)는 오디오 신호 내의 특정 음향(예: 목소리, 배경음, object 사운드)을 추출하여 연동 오디오 신호를 생성할 수 있다. 구현에 따라, 컨트롤러(240)는 음장 보강을 위한 연동 오디오 신호를 생성하기 위해 디코딩된 오디오 신호에 음장 효과를 적용할 수 있다. The controller 240 may generate an interlocking audio signal for sound field reinforcement by using the decoded audio signal, the performance information of the external speaker device 410 , and the condition of the external speaker device 410 . In other words, the controller 240 may generate a sound field reinforcement channel signal (or a virtual channel signal for sound field reinforcement) that meets the performance information and conditions of the external speaker device 410 . For example, the controller 240 may generate an interlocking audio signal by reinforcing a difference between the frequency transfer characteristics of the display device 120 and the frequency transfer characteristics of the external speaker device 410 . As another example, the controller 240 may generate a linked audio signal by extracting a specific sound (eg, a voice, a background sound, an object sound) in the audio signal. Depending on the implementation, the controller 240 may apply a sound field effect to the decoded audio signal to generate an interlocking audio signal for sound field reinforcement.

컨트롤러(240)는 연동 오디오 신호를 무선 출력 모듈(250)로 전달할 수 있다. The controller 240 may transmit the interworking audio signal to the wireless output module 250 .

무선 출력 모듈(250)은 연동 오디오 신호를 외부 스피커 장치(410)로 전송할 수 있고, 외부 스피커 장치(410)는 1ch의 연동 오디오 신호를 출력할 수 있다. 구현에 따라, 디스플레이 장치(120)의 자체 스피커에서 오디오 신호와 외부 스피커 장치(410)에서 연동 오디오 신호가 동시에 출력될 수 있지만 이에 제한되는 것은 아니며 외부 스피커 장치(410)에서 연동 오디오 신호만이 출력될 수 있다. 사용자는 외부 스피커 장치(410)에서 출력되는 연동 오디오 신호를 들을 수 있다. The wireless output module 250 may transmit an interworking audio signal to the external speaker device 410 , and the external speaker device 410 may output a 1-ch interworking audio signal. Depending on the implementation, the audio signal from the internal speaker of the display device 120 and the interworking audio signal from the external speaker device 410 may be simultaneously output, but the present invention is not limited thereto, and only the interworking audio signal is output from the external speaker device 410 . can be A user may listen to a linked audio signal output from the external speaker device 410 .

사용자가 듣는 음장이 확대될 수 있어 사용자의 실감 체험이 증가할 수 있고, 보다 실감나는 음장이 구현될 수 있으며, 입체 음장이 구현될 수 있다.The sound field heard by the user may be expanded, so that the user's sensory experience may increase, a more realistic sound field may be realized, and a stereoscopic sound field may be implemented.

<음성 대역 증강><Voice Band Enhancement>

외부 스피커 장치(420)는 무선 출력 모듈(250)과 페어링될 수 있다. The external speaker device 420 may be paired with the wireless output module 250 .

무선 출력 모듈(250)은 외부 스피커 장치(420)로부터 외부 스피커 장치(420)의 성능 정보(예를 들어, 게인 및 출력 사운드 음색) 및 지향 방향을 수신할 수 있다. 여기서, 지향 방향은, 예를 들어, 외부 스피커 장치(420)가 무지향성인지 지향성인지를 나타낼 수 있다. 무선 출력 모듈(250)은 외부 스피커 장치(420)의 지향 방향이 지향성을 나타내는 경우 외부 스피커 장치(420)의 지향각에 대한 정보도 외부 스피커 장치(420)로부터 수신할 수 있다.The wireless output module 250 may receive performance information (eg, gain and output sound tone) and direction of the external speaker device 420 from the external speaker device 420 . Here, the directivity direction may indicate, for example, whether the external speaker device 420 is omni-directional or directional. When the directivity direction of the external speaker device 420 indicates the directivity, the wireless output module 250 may also receive information about the directivity angle of the external speaker device 420 from the external speaker device 420 .

또한, 무선 출력 모듈(250)은 외부 스피커 장치(420)로부터 수신한 신호의 감도를 기초로 무선 출력 모듈(250)과 외부 스피커 장치(420) 사이의 거리 또는 외부 스피커 장치(420)의 위치를 추정할 수 있다. In addition, the wireless output module 250 determines the distance between the wireless output module 250 and the external speaker device 420 or the location of the external speaker device 420 based on the sensitivity of the signal received from the external speaker device 420 . can be estimated

오디오 디코더(220)는 디코딩된 오디오 신호를 기존 출력과 동기화하여 컨트롤러(240)로 전달할 수 있다. 일례로, 오디오 디코더(220)는 디코딩된 오디오 신호를 유선 출력 모듈(230)의 출력 오디오 신호와 동기화하여 컨트롤러(240)로 전달할 수 있다.The audio decoder 220 may transmit the decoded audio signal to the controller 240 in synchronization with the existing output. For example, the audio decoder 220 may transmit the decoded audio signal to the controller 240 in synchronization with the output audio signal of the wired output module 230 .

컨트롤러(240)는 외부 스피커 장치(420)의 성능 정보와 조건(예를 들어, 상술한 외부 스피커 장치(420)의 위치(또는 거리)와 지향 방향)을 무선 출력 모듈(250)로부터 수신 또는 획득할 수 있다. The controller 240 receives or obtains performance information and conditions of the external speaker device 420 (eg, the position (or distance) and orientation direction of the external speaker device 420 described above) from the wireless output module 250 . can do.

컨트롤러(240)는 디코딩된 오디오 신호의 음성 대역을 분석할 수 있고, 디코딩된 오디오 신호, 외부 스피커 장치(420)의 성능 정보, 및 조건을 이용하여 음성 대역이 확장된 연동 오디오 신호를 생성할 수 있다. 달리 표현하면, 컨트롤러(240)는 외부 스피커 장치(420)의 성능 정보와 조건에 맞는 증강 음성 채널 신호(또는 음성 대역이 증강된 가상 채널 신호)를 생성할 수 있다. 일례로, 컨트롤러(240)는 음성 주파수 대역을 필터링하여 증폭함으로써 음성을 강화할 수 있다. 다른 일례로, 컨트롤러(240)는 추론 모델을 통해 오디오 신호에서 목소리를 추출하여 이를 증폭함으로써 보다 명료한 음성 대역이 증강된 신호를 확보할 수 있다. 여기서, 추론 모델은 딥러닝을 이용하여 인간 음성 모델이 학습된 것일 수 있다.The controller 240 may analyze the voice band of the decoded audio signal, and use the decoded audio signal, the performance information of the external speaker device 420, and the condition to generate a linked audio signal with an extended voice band. have. In other words, the controller 240 may generate an augmented voice channel signal (or a virtual channel signal with an augmented voice band) matching the performance information and conditions of the external speaker device 420 . For example, the controller 240 may enhance the voice by filtering and amplifying the voice frequency band. As another example, the controller 240 extracts a voice from an audio signal through an inference model and amplifies it to secure a signal with a clearer voice band enhanced. Here, the inference model may be a human voice model trained using deep learning.

컨트롤러(240)는 연동 오디오 신호를 무선 출력 모듈(250)로 전달할 수 있다. The controller 240 may transmit the interworking audio signal to the wireless output module 250 .

무선 출력 모듈(250)은 연동 오디오 신호를 외부 스피커 장치(420)로 전송할 수 있고, 외부 스피커 장치(420)는 1ch의 연동 오디오 신호를 출력할 수 있다. 구현에 따라, 디스플레이 장치(120)의 자체 스피커에서 오디오 신호와 외부 스피커 장치(420)에서 연동 오디오 신호가 동시에 출력될 수 있지만 이에 제한되는 것은 아니며 외부 스피커 장치(420)에서 연동 오디오 신호만이 출력될 수 있다. The wireless output module 250 may transmit an interworking audio signal to the external speaker device 420 , and the external speaker device 420 may output a 1-ch interworking audio signal. Depending on the implementation, the audio signal from the internal speaker of the display device 120 and the interworking audio signal from the external speaker device 420 may be simultaneously output, but the present invention is not limited thereto, and only the interworking audio signal is output from the external speaker device 420 . can be

사용자는 외부 스피커 장치(420)에서 출력되는 연동 오디오 신호를 들을 수 있다. 다시 말해, 사용자는 대사가 강화되어 증강된 음성 대역을 외부 스피커 장치(420)를 통해 들을 수 있고, 대사 음성을 뚜렷하게 청취할 수 있다. 이로써, 일 실시예는 대사 음성의 전달률을 향상 또는 확대시킬 수 있고, 노인 등 난청인 사용자를 대상으로 감상 편의를 제공할 수 있다. A user may listen to a linked audio signal output from the external speaker device 420 . In other words, the user may listen to the voice band in which the dialogue is reinforced and augmented through the external speaker device 420 , and the dialogue voice may be clearly heard. Accordingly, according to an exemplary embodiment, it is possible to improve or expand the transfer rate of the dialogue voice, and to provide listening convenience to users with hearing loss such as the elderly.

<청취 공간 연장><Extended listening space>

외부 스피커 장치(430)는 무선 출력 모듈(250)과 페어링될 수 있다. The external speaker device 430 may be paired with the wireless output module 250 .

무선 출력 모듈(250)은 외부 스피커 장치(430)로부터 외부 스피커 장치(430)의 성능 정보(예를 들어, 게인 및 출력 사운드 음색) 및 지향 방향을 수신할 수 있다. 여기서, 지향 방향은, 예를 들어, 외부 스피커 장치(430)가 무지향성인지 지향성인지를 나타낼 수 있다. 무선 출력 모듈(250)은 외부 스피커 장치(430)의 지향 방향이 지향성을 나타내는 경우 외부 스피커 장치(430)의 지향각에 대한 정보도 외부 스피커 장치(430)로부터 수신할 수 있다.The wireless output module 250 may receive performance information (eg, gain and output sound tone) and direction direction of the external speaker device 430 from the external speaker device 430 . Here, the directivity direction may indicate, for example, whether the external speaker device 430 is omni-directional or directional. When the directivity direction of the external speaker device 430 indicates the directivity, the wireless output module 250 may also receive information about the directivity angle of the external speaker device 430 from the external speaker device 430 .

또한, 무선 출력 모듈(250)은 외부 스피커 장치(430)로부터 수신한 신호의 감도를 기초로 무선 출력 모듈(250)과 외부 스피커 장치(430) 사이의 거리 또는 외부 스피커 장치(430)의 위치를 추정할 수 있다. In addition, the wireless output module 250 determines the distance between the wireless output module 250 and the external speaker device 430 or the location of the external speaker device 430 based on the sensitivity of the signal received from the external speaker device 430 . can be estimated

오디오 디코더(220)는 디코딩된 오디오 신호를 기존 출력과 동기화하여 컨트롤러(240)로 전달할 수 있다. 일례로, 오디오 디코더(220)는 디코딩된 오디오 신호를 유선 출력 모듈(230)의 출력 오디오 신호와 동기화하여 컨트롤러(240)로 전달할 수 있다.The audio decoder 220 may transmit the decoded audio signal to the controller 240 in synchronization with the existing output. For example, the audio decoder 220 may transmit the decoded audio signal to the controller 240 in synchronization with the output audio signal of the wired output module 230 .

컨트롤러(240)는 외부 스피커 장치(430)의 성능 정보와 조건(예를 들어, 외부 스피커 장치(430)의 위치(또는 거리)와 지향 방향)을 무선 출력 모듈(250)로부터 수신 또는 획득할 수 있다. The controller 240 may receive or obtain performance information and conditions (eg, the location (or distance) and orientation direction of the external speaker device 430 ) of the external speaker device 430 from the wireless output module 250 . have.

컨트롤러(240)는 디코딩된 오디오 신호, 외부 스피커 장치(430)의 성능 정보, 및 조건을 이용하여 청취 공간 연장을 위한 연동 오디오 신호(또는 가상 채널 신호)를 생성할 수 있다. 디스플레이 장치(120)와 외부 스피커 장치(430)의 거리를 측정하여 거리 차이에 대한 싱크를 맞출 수 있고, 주파수 별 전달 특성을 고려하여 디스플레이 장치(120)의 음향의 감쇄치를 예상함으로써, 연동 오디오 신호를 생성할 수 있다. 이를 통해 외부 스피커 위치(430)는 좋은 음향을 사용자에게 제공할 수 있다.The controller 240 may generate an interlocking audio signal (or virtual channel signal) for extending the listening space by using the decoded audio signal, the performance information of the external speaker device 430 , and the condition. By measuring the distance between the display device 120 and the external speaker device 430 to match the distance difference, the interlocking audio signal can create Through this, the external speaker location 430 may provide a good sound to the user.

컨트롤러(240)는 연동 오디오 신호를 무선 출력 모듈(250)로 전달할 수 있다.The controller 240 may transmit the interworking audio signal to the wireless output module 250 .

무선 출력 모듈(250)은 연동 오디오 신호를 외부 스피커 장치(430)로 전송할 수 있고, 외부 스피커 장치(430)는 1ch의 연동 오디오 신호를 출력할 수 있다. 구현에 따라, 디스플레이 장치(120)의 자체 스피커에서 오디오 신호와 외부 스피커 장치(430)에서 연동 오디오 신호가 동시에 출력될 수 있지만 이에 제한되는 것은 아니며 외부 스피커 장치(430)에서 연동 오디오 신호만이 출력될 수 있다.The wireless output module 250 may transmit an interworking audio signal to the external speaker device 430 , and the external speaker device 430 may output a 1-ch interworking audio signal. Depending on the implementation, the audio signal from the internal speaker of the display device 120 and the interworking audio signal from the external speaker device 430 may be simultaneously output, but the present invention is not limited thereto, and only the interworking audio signal is output from the external speaker device 430 . can be

사용자는 디스플레이 장치(120) 설치 공간 이외의 공간에서 외부 스피커 장치(430)를 통해 출력되는 연동 오디오 신호를 들을 수 있다. 일례로, 사용자는 TV 설치 공간(예를 들어, 거실) 이외의 공간(예를 들어, 주방, 화장실 등)에서 TV 오디오를 확장하여 들을 수 있다. 이로써, 일 실시예는 청취 공간을 연장 또는 확장시킬 수 있어, TV 사용자에게 보다 나은 청취 편의성을 제공할 수 있다. The user may hear the interlocking audio signal output through the external speaker device 430 in a space other than the installation space of the display device 120 . For example, the user may expand and listen to TV audio in a space (eg, kitchen, bathroom, etc.) other than the TV installation space (eg, living room). Accordingly, one embodiment may extend or expand the listening space, thereby providing better listening convenience to TV users.

도 5는 일 실시예에 따른 셋톱 단말의 동작 방법을 설명하기 위한 순서도이다.5 is a flowchart illustrating a method of operating a set-top terminal according to an embodiment.

도 5를 참조하면, 셋톱 단말(110)은 오디오 신호와 비디오 신호를 디코딩한다(510).5, the set-top terminal 110 decodes an audio signal and a video signal (510).

셋톱 단말(110)은 디코딩된 비디오 신호를 디스플레이 장치(120)로 출력한다(520). The set-top terminal 110 outputs the decoded video signal to the display device 120 (operation 520).

셋톱 단말(110)은 외부 스피커 장치와 무선으로 연결한다(530). The set-top terminal 110 wirelessly connects to an external speaker device ( 530 ).

셋톱 단말(110)은 외부 스피커 장치와 무선 연결되는 경우, 외부 스피커 장치의 정보를 획득한다(540). 일례로, 셋톱 단말(110)은 외부 스피커 장치와 연결되는 경우, 외부 스피커 장치로부터 외부 스피커 장치의 성능 정보와 지향 방향을 수신할 수 있다. 또한, 셋톱 단말(110)은 외부 스피커 장치로부터 수신한 신호의 세기를 측정하여 셋톱 단말(110)과 외부 스피커 장치 사이의 거리(또는 외부 스피커 장치의 위치)를 추정할 수 있다.When the set-top terminal 110 is wirelessly connected to the external speaker device, it acquires information on the external speaker device ( 540 ). For example, when the set-top terminal 110 is connected to an external speaker device, the set-top terminal 110 may receive performance information and direction of the external speaker device from the external speaker device. In addition, the set-top terminal 110 may measure the strength of a signal received from the external speaker device to estimate the distance (or the location of the external speaker device) between the set-top terminal 110 and the external speaker device.

셋톱 단말(110)은 디코딩된 오디오 신호와 획득된 정보를 기초로 연동 오디오 신호를 생성한다(550). 셋톱 단말(110)은 목적에 맞는 연동 오디오 신호를 생성할 수 있다. 일례로, 셋톱 단말(110)은 디코딩된 오디오 신호, 외부 스피커 장치의 성능 정보, 위치(또는 거리), 및 지향 방향을 이용하여, 디코딩된 오디오 신호의 음장 보강을 위한 연동 오디오 신호를 생성할 수 있다. 다른 일례로, 셋톱 단말(110)은 디코딩된 오디오 신호의 음성 대역을 분석할 수 있다. 셋톱 단말(110)은 분석 결과, 외부 스피커 장치의 성능 정보, 위치, 및 지향 방향을 이용하여, 디코딩된 오디오 신호의 음성 대역을 증강시킨 연동 오디오 신호를 생성할 수 있다. 또 다른 일례로, 셋톱 단말(110)은 디코딩된 오디오 신호, 외부 스피커 장치의 성능 정보, 위치, 및 지향 방향을 이용하여 청취 공간 확장을 위한 연동 오디오 신호를 생성할 수 있다.The set-top terminal 110 generates a linked audio signal based on the decoded audio signal and the obtained information ( 550 ). The set-top terminal 110 may generate an interworking audio signal suitable for a purpose. As an example, the set-top terminal 110 may generate an interlocking audio signal for sound field reinforcement of the decoded audio signal using the decoded audio signal, the performance information of the external speaker device, the location (or distance), and the orientation direction. have. As another example, the set-top terminal 110 may analyze the voice band of the decoded audio signal. As a result of the analysis, the set-top terminal 110 may generate an interlocking audio signal in which the voice band of the decoded audio signal is enhanced by using the performance information, location, and orientation direction of the external speaker device. As another example, the set-top terminal 110 may generate an interlocking audio signal for expanding the listening space by using the decoded audio signal, performance information of the external speaker device, location, and orientation direction.

셋톱 단말(110)은 생성된 연동 오디오 신호를 외부 스피커 장치로 전송한다(560). 외부 스피커 장치는 연동 오디오 신호를 출력할 수 있다. The set-top terminal 110 transmits the generated interworking audio signal to an external speaker device (560). The external speaker device may output a linked audio signal.

도 1 내지 도 4를 통해 기술된 사항들은 도 5를 통해 기술된 사항에 적용될 수 있으므로, 상세한 설명을 생략한다.Since the matters described with reference to FIGS. 1 to 4 may be applied to the matters described with reference to FIG. 5 , a detailed description thereof will be omitted.

이상에서 설명된 실시예들은 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치, 방법 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 컨트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.The embodiments described above may be implemented by a hardware component, a software component, and/or a combination of a hardware component and a software component. For example, the apparatus, methods and components described in the embodiments may include, for example, a processor, a controller, an arithmetic logic unit (ALU), a digital signal processor, a microcomputer, a field programmable gate (FPGA). array), a programmable logic unit (PLU), a microprocessor, or any other device capable of executing and responding to instructions, may be implemented using a general purpose computer or special purpose computer. The processing device may execute an operating system (OS) and a software application running on the operating system. The processing device may also access, store, manipulate, process, and generate data in response to execution of the software. For convenience of understanding, although one processing device is sometimes described as being used, one of ordinary skill in the art will recognize that the processing device includes a plurality of processing elements and/or a plurality of types of processing elements. It can be seen that may include For example, the processing device may include a plurality of processors or one processor and one controller. Other processing configurations are also possible, such as parallel processors.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.The software may comprise a computer program, code, instructions, or a combination of one or more thereof, which configures a processing device to operate as desired or is independently or collectively processed You can command the device. The software and/or data may be any kind of machine, component, physical device, virtual equipment, computer storage medium or device, to be interpreted by or to provide instructions or data to the processing device. , or may be permanently or temporarily embody in a transmitted signal wave. The software may be distributed over networked computer systems and stored or executed in a distributed manner. Software and data may be stored in a computer-readable recording medium.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있으며 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. The method according to the embodiment may be implemented in the form of program instructions that can be executed through various computer means and recorded in a computer-readable medium. The computer readable medium may include program instructions, data files, data structures, etc. alone or in combination, and the program instructions recorded on the medium are specially designed and configured for the embodiment or may be known and available to those skilled in the art of computer software. may be Examples of the computer-readable recording medium include magnetic media such as hard disks, floppy disks and magnetic tapes, optical media such as CD-ROMs and DVDs, and magnetic such as floppy disks. - includes magneto-optical media, and hardware devices specially configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine language codes such as those generated by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like.

위에서 설명한 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 또는 복수의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The hardware devices described above may be configured to operate as one or a plurality of software modules to perform the operations of the embodiments, and vice versa.

이상과 같이 실시예들이 비록 한정된 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 이를 기초로 다양한 기술적 수정 및 변형을 적용할 수 있다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.As described above, although the embodiments have been described with reference to the limited drawings, a person skilled in the art may apply various technical modifications and variations based thereon. For example, the described techniques are performed in a different order than the described method, and/or the described components of the system, structure, apparatus, circuit, etc. are combined or combined in a different form than the described method, or other components Or substituted or substituted by equivalents may achieve an appropriate result.

그러므로, 다른 구현들, 다른 실시예들 및 청구범위와 균등한 것들도 후술하는 청구범위의 범위에 속한다. Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.

Claims (16)

셋톱 단말의 동작 방법에 있어서,
오디오 신호와 비디오 신호를 디코딩하는 단계;
상기 디코딩된 비디오 신호를 디스플레이 장치로 출력하는 단계;
외부 스피커 장치와 무선으로 연결하는 단계;
상기 외부 스피커 장치와 무선 연결되는 경우, 상기 외부 스피커 장치의 정보를 획득하는 단계;
상기 디코딩된 오디오 신호와 상기 획득된 정보를 기초로 연동 오디오 신호를 생성하는 단계; 및
상기 생성된 연동 오디오 신호를 상기 외부 스피커 장치로 전송하는 단계
를 포함하고,
상기 연동 오디오 신호를 생성하는 단계는,
인간 음성 모델이 학습된 추론 모델을 통해 상기 디코딩된 오디오 신호에서 목소리를 추출하고, 상기 추출된 목소리를 증폭하여 음성 대역이 확장된 연동 오디오 신호를 생성하는 단계
를 포함하고,
상기 셋톱 단말은,
상기 디스플레이 장치의 자체 스피커를 통해 상기 디코딩된 오디오 신호를 출력하되, 상기 외부 스피커 장치에 의해 출력되는 상기 생성된 연동 오디오 신호와 상기 자체 스피커를 통해 출력되는 상기 디코딩된 오디오 신호가 동기화되도록 상기 디코딩된 오디오 신호를 딜레이하여 상기 자체 스피커를 통해 출력하는,
셋톱 단말의 동작 방법.
In the method of operating a set-top terminal,
decoding the audio signal and the video signal;
outputting the decoded video signal to a display device;
wirelessly connecting with an external speaker device;
acquiring information on the external speaker device when wirelessly connected to the external speaker device;
generating a linked audio signal based on the decoded audio signal and the obtained information; and
transmitting the generated interworking audio signal to the external speaker device
including,
The step of generating the interlocking audio signal comprises:
extracting a voice from the decoded audio signal through an inference model trained by the human voice model, and amplifying the extracted voice to generate a linked audio signal with an extended voice band
including,
The set-top terminal,
The decoded audio signal is output through an own speaker of the display device, but the decoded audio signal output through the internal speaker is synchronized with the generated interlocking audio signal output by the external speaker device Delaying the audio signal and outputting it through the speaker itself,
How to operate a set-top terminal.
 제1항에 있어서,
상기 획득된 정보는 상기 외부 스피커 장치의 성능 정보, 위치, 및 지향 방향을 포함하는,
셋톱 단말의 동작 방법.
According to claim 1,
The obtained information includes performance information, location, and orientation direction of the external speaker device,
How to operate a set-top terminal.
 제2항에 있어서,
상기 생성하는 단계는,
상기 디코딩된 오디오 신호, 상기 성능 정보, 상기 위치, 및 상기 지향 방향을 이용하여 상기 디코딩된 오디오 신호의 음장 보강을 위한 연동 오디오 신호를 생성하는 단계
를 포함하는,
셋톱 단말의 동작 방법.
3. The method of claim 2,
The generating step is
generating an associated audio signal for sound field reinforcement of the decoded audio signal using the decoded audio signal, the performance information, the position, and the orientation direction;
containing,
How to operate a set-top terminal.
 삭제delete 제2항에 있어서,
상기 생성하는 단계는,
상기 디코딩된 오디오 신호, 상기 성능 정보, 상기 위치, 및 상기 지향 방향을 이용하여 청취 공간 확장을 위한 연동 오디오 신호를 생성하는 단계
를 포함하는,
셋톱 단말의 동작 방법.
3. The method of claim 2,
The generating step is
generating an associated audio signal for expanding a listening space using the decoded audio signal, the performance information, the location, and the orientation direction;
containing,
How to operate a set-top terminal.
 제2항에 있어서,
상기 성능 정보는,
상기 외부 스피커 장치의 게인 및 출력 사운드 음색을 포함하는,
셋톱 단말의 동작 방법.
3. The method of claim 2,
The performance information is
including the gain and output sound tone of the external speaker device,
How to operate a set-top terminal.
 제1항에 있어서,
상기 획득하는 단계는,
상기 외부 스피커 장치로부터 상기 정보를 수신하는 단계
를 포함하는,
셋톱 단말의 동작 방법.
According to claim 1,
The obtaining step is
Receiving the information from the external speaker device
containing,
How to operate a set-top terminal.
 제1항에 있어서,
상기 외부 스피커 장치와 무선으로 연결하는 단계는,
상기 외부 스피커 장치와 블루투스 통신 방식에 따라 연결하는 단계
를 포함하는,
셋톱 단말의 동작 방법.
According to claim 1,
The step of wirelessly connecting with the external speaker device,
Connecting to the external speaker device according to a Bluetooth communication method
containing,
How to operate a set-top terminal.
 셋톱 단말에 있어서,
오디오 신호를 디코딩하는 오디오 디코더;
비디오 신호를 디코딩하는 비디오 디코더;
상기 디코딩된 비디오 신호를 디스플레이 장치로 출력하는 유선 출력 모듈;
외부 스피커 장치와 무선 연결하는 무선 출력 모듈; 및
상기 외부 스피커 장치와 상기 무선 출력 모듈 사이의 무선 연결을 감지하고, 상기 감지를 통해 상기 외부 스피커 장치의 정보를 획득하며, 상기 외부 스피커 장치로 전송될 연동 오디오 신호를 상기 디코딩된 오디오 신호와 상기 획득된 정보를 기초로 생성하고, 상기 무선 출력 모듈이 상기 생성된 연동 오디오 신호를 상기 외부 스피커 장치로 전송하도록 상기 생성된 연동 오디오 신호를 상기 무선 출력 모듈로 전달하는 컨트롤러
를 포함하고,
상기 컨트롤러는,
인간 음성 모델이 학습된 추론 모델을 통해 상기 디코딩된 오디오 신호에서 목소리를 추출하고, 상기 추출된 목소리를 증폭하여 음성 대역이 확장된 연동 오디오 신호를 생성하며,
상기 셋톱 단말은,
상기 디스플레이 장치의 자체 스피커를 통해 상기 디코딩된 오디오 신호를 출력하되, 상기 외부 스피커 장치에 의해 출력되는 상기 생성된 연동 오디오 신호와 상기 자체 스피커를 통해 출력되는 상기 디코딩된 오디오 신호가 동기화되도록 상기 디코딩된 오디오 신호를 딜레이하여 상기 자체 스피커를 통해 출력하는,
셋톱 단말.
In a set-top terminal,
an audio decoder for decoding an audio signal;
a video decoder for decoding a video signal;
a wired output module for outputting the decoded video signal to a display device;
a wireless output module for wirelessly connecting to an external speaker device; and
Detects a wireless connection between the external speaker device and the wireless output module, obtains information of the external speaker device through the detection, and obtains an interlocking audio signal to be transmitted to the external speaker device with the decoded audio signal a controller for generating based on the received information and transmitting the generated interlocking audio signal to the wireless output module so that the wireless output module transmits the generated interlocking audio signal to the external speaker device
including,
The controller is
Extracting a voice from the decoded audio signal through an inference model trained by a human voice model, and amplifying the extracted voice to generate a linked audio signal with an extended voice band,
The set-top terminal,
The decoded audio signal is output through an own speaker of the display device, but the decoded audio signal output through the internal speaker is synchronized with the generated interlocking audio signal output by the external speaker device Delaying the audio signal and outputting it through the speaker itself,
set-top terminal.
 제9항에 있어서,
상기 획득된 정보는 상기 외부 스피커 장치의 성능 정보, 위치, 및 지향 방향을 포함하는,
셋톱 단말.
10. The method of claim 9,
The obtained information includes performance information, location, and orientation direction of the external speaker device,
set-top terminal.
 제10항에 있어서,
상기 컨트롤러는,
상기 디코딩된 오디오 신호, 상기 성능 정보, 상기 위치, 및 상기 지향 방향을 이용하여 상기 디코딩된 오디오 신호의 음장(sound field) 보강을 위한 연동 오디오 신호를 생성하는,
셋톱 단말.
11. The method of claim 10,
The controller is
generating an associated audio signal for sound field reinforcement of the decoded audio signal using the decoded audio signal, the performance information, the location, and the orientation direction;
set-top terminal.
 삭제delete 제10항에 있어서,
상기 컨트롤러는,
상기 디코딩된 오디오 신호, 상기 성능 정보, 상기 위치, 및 상기 지향 방향을 이용하여 청취 공간 확장을 위한 연동 오디오 신호를 생성하는,
셋톱 단말.
11. The method of claim 10,
The controller is
generating an associated audio signal for listening space extension using the decoded audio signal, the performance information, the location, and the orientation direction;
set-top terminal.
 제10항에 있어서,
상기 성능 정보는,
상기 외부 스피커 장치의 게인(gain) 및 출력 사운드 음색을 포함하는,
셋톱 단말.
11. The method of claim 10,
The performance information is
including a gain and an output sound tone of the external speaker device,
set-top terminal.
 제9항에 있어서,
상기 무선 출력 모듈은,
상기 외부 스피커 장치로부터 상기 정보를 수신하고, 상기 수신된 정보를 상기 컨트롤러로 전달하는,
셋톱 단말.
10. The method of claim 9,
The wireless output module,
receiving the information from the external speaker device and transmitting the received information to the controller,
set-top terminal.
 제9항에 있어서,
상기 무선 출력 모듈은,
블루투스 통신 모듈을 포함하는,
셋톱 단말.10. The method of claim 9,
The wireless output module,
comprising a Bluetooth communication module,
set-top terminal.
KR1020200177256A 2020-12-17 2020-12-17 Settop terminal and operating method thereof KR102456748B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200177256A KR102456748B1 (en) 2020-12-17 2020-12-17 Settop terminal and operating method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200177256A KR102456748B1 (en) 2020-12-17 2020-12-17 Settop terminal and operating method thereof

Publications (2)

Publication Number Publication Date
KR20220086976A KR20220086976A (en) 2022-06-24
KR102456748B1 true KR102456748B1 (en) 2022-10-20

Family

ID=82215762

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200177256A KR102456748B1 (en) 2020-12-17 2020-12-17 Settop terminal and operating method thereof

Country Status (1)

Country Link
KR (1) KR102456748B1 (en)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150101902A (en) * 2014-02-27 2015-09-04 엘지전자 주식회사 Digital device and method of controlling thereof
WO2016089049A1 (en) * 2014-12-01 2016-06-09 삼성전자 주식회사 Method and device for outputting audio signal on basis of location information of speaker
KR102222912B1 (en) * 2018-10-10 2021-03-04 엔에이치엔 주식회사 Device and method to control plurality of speakers through short range wireless communication

Also Published As

Publication number Publication date
KR20220086976A (en) 2022-06-24

Similar Documents

Publication Publication Date Title
US20170330565A1 (en) Handling Responses to Speech Processing
US10311881B2 (en) Determining the inter-channel time difference of a multi-channel audio signal
US20170332168A1 (en) Processing Speech from Distributed Microphones
KR101471798B1 (en) Apparatus and method for decomposing an input signal using downmixer
US20180295463A1 (en) Distributed Audio Capture and Mixing
US9818423B2 (en) Method of improving sound quality and headset thereof
US10524077B2 (en) Method and apparatus for processing audio signal based on speaker location information
TWI429302B (en) A method and an apparatus for processing an audio signal
KR102343330B1 (en) Method and device for outputting an audio signal based on location information of a speaker
KR102060949B1 (en) Method and apparatus of low power operation of hearing assistance
US9955277B1 (en) Spatial sound characterization apparatuses, methods and systems
EP3836136B1 (en) Azimuth estimation method, device, and storage medium
US20190279655A1 (en) Detection of tv state using sub-audible signal
WO2017043309A1 (en) Speech processing device and method, encoding device, and program
US20230026347A1 (en) Methods for reducing error in environmental noise compensation systems
EP4032324A1 (en) Direction estimation enhancement for parametric spatial audio capture using broadband estimates
KR102070360B1 (en) Apparatus for Stereophonic Sound Service, Driving Method of Apparatus for Stereophonic Sound Service and Computer Readable Recording Medium
KR102456748B1 (en) Settop terminal and operating method thereof
US20200278832A1 (en) Voice activation for computing devices
US11937069B2 (en) Audio system, audio reproduction apparatus, server apparatus, audio reproduction method, and audio reproduction program
KR102301149B1 (en) Method, computer program and system for amplification of speech
JP6442768B2 (en) Electronic equipment and control program
JP2019537071A (en) Processing sound from distributed microphones
JP6748678B2 (en) Information processing apparatus, information processing system, control program, information processing method
KR20150128616A (en) Apparatus and method for transforming audio signal using location of the user and the speaker

Legal Events

Date Code Title Description
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant