KR20150027592A - Speech recognition apparatus and method thereof - Google Patents
Speech recognition apparatus and method thereof Download PDFInfo
- Publication number
- KR20150027592A KR20150027592A KR20130106218A KR20130106218A KR20150027592A KR 20150027592 A KR20150027592 A KR 20150027592A KR 20130106218 A KR20130106218 A KR 20130106218A KR 20130106218 A KR20130106218 A KR 20130106218A KR 20150027592 A KR20150027592 A KR 20150027592A
- Authority
- KR
- South Korea
- Prior art keywords
- user
- voice
- signal
- recognized
- unit
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 40
- 230000001965 increasing effect Effects 0.000 claims description 15
- 230000003247 decreasing effect Effects 0.000 claims description 10
- 230000006870 function Effects 0.000 description 43
- 238000004891 communication Methods 0.000 description 34
- 230000006854 communication Effects 0.000 description 34
- 230000005236 sound signal Effects 0.000 description 19
- 238000010295 mobile communication Methods 0.000 description 13
- 239000011521 glass Substances 0.000 description 12
- 238000010586 diagram Methods 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 5
- 239000000470 constituent Substances 0.000 description 4
- 239000004973 liquid crystal related substance Substances 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 230000007423 decrease Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000004888 barrier function Effects 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 241000593989 Scardinius erythrophthalmus Species 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 239000000969 carrier Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000010408 film Substances 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 230000006386 memory function Effects 0.000 description 1
- 201000005111 ocular hyperemia Diseases 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
- 239000010454 slate Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
- 210000000857 visual cortex Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/14—Speech classification or search using statistical models, e.g. Hidden Markov Models [HMMs]
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/28—Constructional details of speech recognition systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/78—Detection of presence or absence of voice signals
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/78—Detection of presence or absence of voice signals
- G10L2025/783—Detection of presence or absence of voice signals based on threshold decision
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Probability & Statistics with Applications (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
Description
본 명세서는 음성 인식 장치 및 그 방법에 관한 것이다. The present invention relates to a speech recognition apparatus and a method thereof.
일반적으로, 종래 기술에 따른 음성 인식 장치는 사용자가 발성(utterance)했을 때 그 발성된 음성 신호를 수신하고, 그 수신된 음성 신호와 미리결정된 모델을 비교하고, 그 비교 결과에 따라 사용자 음성을 인식한다. 즉, 종래 기술에 따른 음성 인식 시스템은 신뢰도(confidence) 측정 방법을 통해 사용자 음성을 인식하였다. 종래 기술에 따른 음성 인식 장치는 한국 특허 출원 번호 10-2009-0057093에 개시되어 있다. In general, a speech recognition apparatus according to the related art receives a voiced speech signal when the user utterances, compares the received speech signal with a predetermined model, and recognizes the user speech according to the comparison result do. That is, the speech recognition system according to the prior art recognized a user's voice through a confidence measurement method. The speech recognition apparatus according to the prior art is disclosed in Korean Patent Application No. 10-2009-0057093.
본 명세서는 사용자 사용 패턴에 따라 임계치를 변경함으로써 사용자 음성을 정확히 인식할 수 있는 음성 인식 장치 및 그 방법을 제공하는 데 그 목적이 있다.It is an object of the present invention to provide a speech recognition apparatus and method which can accurately recognize a user's voice by changing a threshold according to a pattern of user's use.
본 명세서에 개시된 실시예에 따른 음성 인식 장치는, 신뢰도 점수를 제공하는 미리결정된 음성 모델들을 근거로 사용자 음성을 인식하는 음성 인식부와; 상기 인식된 사용자 음성의 신뢰도 점수와 임계치를 근거로 상기 인식된 사용자 음성을 허용 또는 거절하는 제어부를 포함하며, 상기 제어부는 사용자 사용 음성 패턴에 따라 상기 임계치를 변경할 수 있다.A speech recognition apparatus according to an embodiment disclosed herein includes a speech recognition unit that recognizes a user speech based on predetermined speech models that provide a reliability score; And a control unit for allowing or rejecting the recognized user voice based on the reliability score and the threshold of the recognized user voice, and the control unit can change the threshold value according to the user-used voice pattern.
본 명세서와 관련된 일 예로서, 상기 제어부는 상기 사용자 사용 음성 패턴에 따라 상기 임계치를 증가시키거나 감소시킬 수 있다.As an example related to the present specification, the control unit may increase or decrease the threshold value according to the user-used voice pattern.
본 명세서와 관련된 일 예로서, 상기 제어부는 상기 인식된 사용자 음성의 신뢰도 점수가 상기 증가 또는 감소한 임계치보다 높으면 상기 인식된 사용자 음성을 허용할 수 있다.As an example related to the present specification, the control unit may allow the recognized user voice if the reliability score of the recognized user voice is higher than the increased or decreased threshold.
본 명세서와 관련된 일 예로서, 상기 제어부는 상기 인식된 사용자 음성의 신뢰도 점수가 상기 증가 또는 감소한 임계치보다 낮으면 상기 인식된 사용자 음성을 거절할 수 있다.As an example related to the present specification, the control unit may reject the recognized user voice if the reliability score of the recognized user voice is lower than the increased or decreased threshold.
본 명세서와 관련된 일 예로서, 상기 제어부는 영상 표시 장치의 기능에 따라 미리 분류된 상기 사용자 사용 음성 패턴을 근거로 상기 임계치를 변경할 수 있다. According to an embodiment of the present invention, the controller may change the threshold value based on the user-used voice pattern classified in advance according to the function of the video display device.
본 명세서와 관련된 일 예로서, 상기 미리 분류된 사용자 사용 음성 패턴은, 상기 영상 표시 장치의 채널 및 볼륨을 제어하기 위한 제1 사용자 음성의 사용률, 상기 영상 표시 장치를 통해 웹 브라우저를 실행시키기 위한 제2 사용자 음성의 사용률, 상기 영상 표시 장치를 통해 응용 프로그램을 실행시키기 위한 제3 사용자 음성의 사용률, 상기 영상 표시 장치의 방송 프로그램 검색을 위한 제4 사용자 음성의 사용률 중에서 적어도 어느 하나 이상을 포함하는 것을 특징으로 하는 음성 처리 장치.As one example related to the present specification, the pre-classified voice pattern for user use includes a usage rate of a first user voice for controlling a channel and a volume of the video display device, At least one of a usage rate of two user's voice, a usage rate of a third user's voice for executing an application program through the video display device, and a usage rate of a fourth user's voice for searching for a broadcast program of the video display device Wherein the voice processing apparatus comprises:
본 명세서와 관련된 일 예로서, 상기 제어부는 상기 사용자 사용 음성 패턴을 미리 설정할 수 있다. As an example related to the present specification, the controller may set the user-used voice pattern in advance.
본 명세서와 관련된 일 예로서, 상기 제어부는 서버로부터 상기 사용자 사용 음성 패턴을 수신할 수 있다. As an example related to the present specification, the control unit may receive the user use voice pattern from the server.
본 명세서와 관련된 일 예로서, 상기 사용자 음성의 사용률은 사용자 평균 사용 음성의 사용률일 수 있다. As an example related to the present specification, the usage rate of the user voice may be the usage rate of the user average usage voice.
본 명세서와 관련된 일 예로서, 상기 제어부는 유사 발음을 갖는 다수의 사용자 음성이 인식되면 상기 임계치를 증가시킴으로써 상기 유사 발음을 갖는 다수의 사용자 음성의 인식 확률을 증가시킬 수 있다.As an example related to the present specification, when a plurality of user's voices having similar pronunciation are recognized, the control unit can increase the recognition probability of a plurality of user voices having the similar pronunciation by increasing the threshold.
본 명세서에 개시된 실시예에 따른 음성 인식 방법은, 신뢰도 점수를 제공하는 미리결정된 음성 모델들을 근거로 사용자 음성을 인식하는 단계와; 사용자 사용 음성 패턴에 따라 임계치를 변경하는 단계와; 상기 인식된 사용자 음성의 신뢰도 점수와 상기 임계치를 근거로 상기 인식된 사용자 음성을 허용 또는 거절하는 단계를 포함할 수 있다. A speech recognition method according to an embodiment disclosed herein includes recognizing a user speech based on predetermined speech models providing a confidence score; Changing a threshold value according to a user-used voice pattern; And allowing or rejecting the recognized user voice based on the reliability score of the recognized user voice and the threshold value.
본 발명의 실시예들에 따른 음성 인식 장치 및 그 방법은, 사용자 사용 패턴(영상 표시기기, 이동 통신 단말기 등의 전자 장치의 기능들에 따라 미리 분류된 각 사용자 음성의 사용률)에 따라 임계치를 변경함으로써 사용자 음성을 정확히 인식할 수 있다. The speech recognition apparatus and method according to the embodiments of the present invention change a threshold value according to a pattern of user use (a usage rate of each user voice classified in advance according to functions of an electronic device such as a video display device or a mobile communication terminal) The user's voice can be accurately recognized.
본 발명의 실시예들에 따른 음성 인식 장치 및 그 방법은, 사용자 사용 기능 패턴(영상 표시기기, 이동 통신 단말기 등의 전자 장치의 각 기능들의 사용률)에 따라 임계치를 변경함으로써 사용자 음성을 정확히 인식할 수 있다. The speech recognition apparatus and method according to embodiments of the present invention can recognize a user's voice accurately by changing a threshold value according to a function pattern of a user using function (a usage rate of each function of an electronic device such as a video display device or a mobile communication terminal) .
도 1은 본 발명과 관련된 영상 표시 장치 및 외부 입력 장치를 보여주는 블록도이다.
도 2는 본 발명의 실시예들에 따른 영상 처리 장치가 적용된 3D 영상 표시 장치의 구성을 나타낸 구성도이다.
도 3은 본 발명의 실시예에 따른 음성 인식 방법을 나타낸 흐름도이다.
도 4는 본 발명의 실시예에 따른 사용자 사용 음성 패턴을 나타낸 예시도이다.
도 5는 본 발명의 다른 실시예에 따른 음성 인식 방법을 나타낸 흐름도이다.
도 6은 본 발명의 실시예에 따른 사용자 사용 기능 패턴을 나타낸 예시도이다.1 is a block diagram showing an image display apparatus and an external input apparatus according to the present invention.
2 is a block diagram illustrating the configuration of a 3D image display apparatus to which an image processing apparatus according to embodiments of the present invention is applied.
3 is a flowchart illustrating a speech recognition method according to an embodiment of the present invention.
4 is a diagram illustrating an example of a voice pattern used by a user according to an embodiment of the present invention.
5 is a flowchart illustrating a speech recognition method according to another embodiment of the present invention.
FIG. 6 is a view illustrating an example of a user-using function pattern according to an embodiment of the present invention.
본 명세서에서 사용되는 기술적 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아님을 유의해야 한다. 또한, 본 명세서에서 사용되는 기술적 용어는 본 명세서에서 특별히 다른 의미로 정의되지 않는 한, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 의미로 해석되어야 하며, 과도하게 포괄적인 의미로 해석되거나, 과도하게 축소된 의미로 해석되지 않아야 한다. 또한, 본 명세서에서 사용되는 기술적인 용어가 본 발명의 사상을 정확하게 표현하지 못하는 잘못된 기술적 용어일 때에는, 당업자가 올바르게 이해할 수 있는 기술적 용어로 대체되어 이해되어야 할 것이다. 또한, 본 발명에서 사용되는 일반적인 용어는 사전에 정의되어 있는 바에 따라, 또는 전후 문맥상에 따라 해석되어야 하며, 과도하게 축소된 의미로 해석되지 않아야 한다. It is noted that the technical terms used herein are used only to describe specific embodiments and are not intended to limit the invention. It is also to be understood that the technical terms used herein are to be interpreted in a sense generally understood by a person skilled in the art to which the present invention belongs, Should not be construed to mean, or be interpreted in an excessively reduced sense. Further, when a technical term used herein is an erroneous technical term that does not accurately express the spirit of the present invention, it should be understood that technical terms that can be understood by a person skilled in the art are replaced. In addition, the general terms used in the present invention should be interpreted according to a predefined or prior context, and should not be construed as being excessively reduced.
또한, 본 명세서에서 사용되는 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "구성된다" 또는 "포함한다" 등의 용어는 명세서 상에 기재된 여러 구성 요소들, 또는 여러 단계들을 반드시 모두 포함하는 것으로 해석되지 않아야 하며, 그 중 일부 구성 요소들 또는 일부 단계들은 포함되지 않을 수도 있고, 또는 추가적인 구성 요소 또는 단계들을 더 포함할 수 있는 것으로 해석되어야 한다. Also, the singular forms "as used herein include plural referents unless the context clearly dictates otherwise. In the present application, the term "comprising" or "comprising" or the like should not be construed as necessarily including the various elements or steps described in the specification, Or may be further comprised of additional components or steps.
또한, 본 명세서에서 사용되는 제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 상기 구성 요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성 요소로 명명될 수 있고, 유사하게 제2 구성 요소도 제1 구성 요소로 명명될 수 있다. Furthermore, terms including ordinals such as first, second, etc. used in this specification can be used to describe various elements, but the elements should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from another. For example, without departing from the scope of the present invention, the first component may be referred to as a second component, and similarly, the second component may also be referred to as a first component.
이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성 요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings, wherein like reference numerals refer to like or similar elements throughout the several views, and redundant description thereof will be omitted.
또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 발명의 사상을 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명의 사상이 제한되는 것으로 해석되어서는 아니 됨을 유의해야 한다. In the following description, well-known functions or constructions are not described in detail since they would obscure the invention in unnecessary detail. It is to be noted that the accompanying drawings are only for the purpose of facilitating understanding of the present invention, and should not be construed as limiting the scope of the present invention with reference to the accompanying drawings.
본 명세서에서, 영상 표시 장치는 방송을 수신하여 표시하거나, 동영상을 기록 및 재생하는 장치와 오디오를 기록 및 재생하는 장치를 모두 포함한다. 이하, 이러한 예로서, 텔레비전을 예를 들어 설명한다.In this specification, an image display apparatus includes both a device for receiving and displaying a broadcast, a device for recording and reproducing a moving image, and a device for recording and reproducing audio. Hereinafter, as an example of this, a television will be described as an example.
도 1은 본 발명과 관련된 영상 표시 장치(100) 및 외부 입력 장치(190)를 보여주는 블록도이다. 영상 표시 장치(100)는, 튜너(110), 복조부(120), 신호 입출력부(130), 인터페이스부(140), 제어부(150), 저장부(160), 디스플레이부(170) 및 오디오 출력부(180)를 포함한다. 다만, 외부 입력 장치(190)는 영상 표시 장치(100)와 별도의 장치이나, 영상 표시 장치(100)의 일 구성요소로 포함될 수도 있다.1 is a block diagram showing an
도 1을 참조하면, 튜너(110)는 안테나를 통해 수신되는 RF(Radio Frequency) 방송 신호 중 사용자에 의해 선택된 채널에 대응하는 RF 방송 신호를 선택하고, RF 방송 신호를 중간 주파수 신호 또는 베이스 밴드 영상/음성 신호로 변환한다. 예를 들어, RF 방송 신호가 디지털 방송 신호이면, 튜너(110)는 RF 방송 신호를 디지털 IF 신호(DIF)로 변환한다. 반면, RF 방송 신호가 아날로그 방송 신호이면, 튜너(110)는 RF 방송 신호를 아날로그 베이스 밴드 영상/음성신호(CVBS/SIF)로 변환된다. 이와 같이, 튜너(110)는 디지털 방송 신호와 아날로그 방송 신호를 처리할 수 있는 하이브리드 튜너일 수 있다.1, a
튜너(110)에서 출력되는 디지털 IF 신호(DIF)는 복조부(120)로 입력되고, 튜너(110)에서 출력되는 아날로그 베이스 밴드 영상/음성신호(CVBS/SIF)는 제어부(160)로 입력될 수 있다. 튜너(120)는 ATSC(Advanced Television Systems Committee) 방식에 따른 단일 캐리어의 RF 방송 신호 또는 DVB(Digital Video Broadcasting) 방식에 따른 복수 캐리어의 RF 방송 신호를 수신할 수 있다.The digital IF signal DIF output from the
비록 도면에는 하나의 튜너(110)가 도시되나, 이에 한정되지 않고, 영상 표시 장치(100)는 다수의 튜너, 예를 들어, 제 1 및 제 2 튜너를 구비할 수 있다. 이런 경우, 제 1 튜너는 사용자가 선택한 방송 채널에 대응하는 제 1 RF 방송 신호를 수신하고, 제 2 튜너는 기저장된 방송 채널에 대응하는 제 2 RF 방송 신호를 순차적으로 또는 주기적으로 수신할 수 있다. 제 2 튜너는 제 1 튜너와 마찬가지 방식으로 RF 방송 신호를 디지털 IF 신호(DIF) 또는 아날로그 베이스 밴드 영상/음성신호(CVBS/SIF)로 변환할 수 있다. 본 발명의 실시예들에서는 하나의 튜너(110)만을 사용함으로써 이에 따른 제조 비용을 절감할 수 있다.Although one
복조부(120)는 튜너(110)에서 변환되는 디지털 IF 신호(DIF)를 수신하여 복조 동작을 수행한다. 예를 들어, 튜너(110)에서 출력되는 디지털 IF 신호(DIF)가 ATSC 방식이면, 복조부(120)는 8-VSB(8-Vestigal Side Band) 복조를 수행한다. 이때, 복조부(120)는 트렐리스 복호화, 디인터리빙(de-interleaving), 리드 솔로몬 복호화 등의 채널 복호화를 수행할 수도 있다. 이를 위해, 복조부(120)는 트렐리스 디코더(Trellis decoder), 디인터리버(de-interleaver) 및 리드 솔로몬 디코더(Reed Solomon decoder) 등을 구비할 수 있다.The
다른 예를 들어, 튜너(110)에서 출력되는 디지털 IF 신호(DIF)가 DVB 방식이면, 복조부(120)는 COFDMA(Coded Orthogonal Frequency Division Modulation) 복조를 수행한다. 이때, 복조부(120)는 컨벌루션 복호화, 디인터리빙, 리드 솔로몬 복호화 등의 채널 복호화를 수행할 수도 있다. 이를 위해, 복조부(120)는 컨벌루션 디코더(convolution decoder), 디인터리버 및 리드-솔로몬 디코더 등을 구비할 수 있다.For example, if the digital IF signal DIF output from the
신호 입출력부(130)는 외부 기기와 연결되어 신호 입력 및 출력 동작을 수행하고, 이를 위해, A/V 입출력부 및 무선 통신부를 포함할 수 있다.The signal input /
A/V 입출력부는 이더넷(Ethernet) 단자, USB 단자, CVBS(Composite Video Banking Sync) 단자, 컴포넌트 단자, S-비디오 단자(아날로그), DVI(Digital Visual Interface) 단자, HDMI(High Definition Multimedia Interface) 단자, MHL (Mobile High-definition Link) 단자, RGB 단자, D-SUB 단자, IEEE 1394 단자, SPDIF 단자, 리퀴드(Liquid) HD 단자 등을 포함할 수 있다. 이러한 단자들을 통해 입력되는 디지털 신호는 제어부(150)에 전달될 수 있다. 이때, CVBS 단자 및 S-비디오 단자를 통해 입력되는 아날로그 신호는 아날로그-디지털 변환부(미도시)를 통해 디지털 신호로 변환되어 제어부(150)로 전달될 수 있다.The A / V I / O section is composed of an Ethernet terminal, a USB terminal, a CVBS (Composite Video Banking Sync) terminal, a component terminal, an S- video terminal (analog), a DVI (digital visual interface) terminal, , A Mobile High-definition Link (MHL) terminal, an RGB terminal, a D-SUB terminal, an IEEE 1394 terminal, a SPDIF terminal, and a liquid HD terminal. The digital signal input through these terminals may be transmitted to the
무선 통신부는 무선 인터넷 접속을 수행할 수 있다. 예를 들어, 무선 통신부는 WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 등을 이용하여 무선 인터넷 접속을 수행할 수 있다. 또한, 무선 통신부는 다른 전자기기와 근거리 무선 통신을 수행할 수 있다. 예를 들어, 무선 통신부는 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(ZigBee) 등을 이용하여 근거리 무선 통신을 수행할 수 있다.The wireless communication unit can perform a wireless Internet connection. For example, the wireless communication unit performs wireless Internet access using a WLAN (Wi-Fi), a Wibro (wireless broadband), a Wimax (World Interoperability for Microwave Access), HSDPA (High Speed Downlink Packet Access) can do. In addition, the wireless communication unit can perform short-range wireless communication with other electronic devices. For example, the wireless communication unit can perform near field wireless communication using Bluetooth, Radio Frequency Identification (RFID), infrared data association (IrDA), Ultra Wideband (UWB), ZigBee have.
신호 입출력부(130)는 DVD(Digital Versatile Disk) 플레이어, 블루레이(Blu-ray) 플레이어, 게임기기, 캠코더, 컴퓨터(노트북), 휴대기기, 스마트 폰 등과 같은 외부 기기로부터 제공되는 영상 신호, 음성 신호 및 데이터 신호를 제어부(150)로 전달할 수 있다. 또한, 메모리장치, 하드디스크 등과 같은 외부 저장 장치에 저장된 다양한 미디어 파일의 영상 신호, 음성 신호 및 데이터 신호를 제어부(150)로 전달할 수 있다. 또한, 제어부(150)에 의해 처리된 영상 신호, 음성 신호 및 데이터 신호를 다른 외부 기기로 출력할 수 있다.The signal input /
신호 입출력부(130)는 상술한 각종 단자 중 적어도 하나를 통해 셋톱 박스, 예를 들어, IPTV(Internet Protocol TV)용 셋톱 박스와 연결되어 신호 입력 및 출력 동작을 수행할 수 있다. 예를 들어, 신호 입출력부(130)는 양방향 통신이 가능하도록 IPTV용 셋톱 박스에 의해 처리된 영상 신호, 음성 신호 및 데이터 신호를 제어부(150)로 전달할 수 있고, 제어부(150)에 의해 처리된 신호들을 IPTV용 셋톱 박스로 전달할 수도 있다. 여기서, IPTV는 전송 네트워크에 따라 구분되는 ADSL-TV, VDSL-TV, FTTH-TV 등을 포함할 수 있다.The signal input /
복조부(120) 및 신호 출력부(130)에서 출력되는 디지털 신호는 스트림 신호(TS)를 포함할 수 있다. 스트림 신호(TS)는 영상 신호, 음성 신호 및 데이터 신호가 다중화된 신호일 수 있다. 예를 들어, 스트림 신호(TS)는 MPEG-2 규격의 영상 신호, 돌비(Dolby) AC-3 규격의 음성 신호 등이 다중화된 MPEG-2 TS(Transprt Stream)일 수 있다. 여기서, MPEG-2 TS는 4 바이트(byte)의 헤더와 184 바이트의 페이로드(payload)를 포함할 수 있다.The digital signal output from the
인터페이스부(140)는 외부 입력 장치(190)로부터 전원 제어, 채널 선택, 화면 설정 등을 위한 입력 신호를 수신하거나, 제어부(160)에 의해 처리된 신호를 외부 입력 장치(190)로 전송할 수 있다. 인터페이스부(140)와 외부 입력 장치(190)는 유선 또는 무선으로 연결될 수 있다.The
상기 인터페이스부(140)의 일 예로서, 센서부가 구비될 수 있으며, 센서부는 원격조정기, 예를 들어 리모컨으로부터 상기 입력 신호를 감지하도록 이루어진다. As an example of the
네트워크 인터페이스부(미도시)는, 영상 표시 장치(100)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공한다. 네트워크 인터페이스부는, 유선 네트워크와의 접속을 위해, 이더넷(Ethernet) 단자 등을 구비할 수 있으며, 무선 네트워크와의 접속을 위해, WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 통신 규격 등이 이용될 수 있다. The network interface unit (not shown) provides an interface for connecting the
네트워크 인터페이스부(미도시)는, 네트워크를 통해, 소정 웹 페이지에 접속할 수 있다. 즉, 네트워크를 통해 소정 웹 페이지에 접속하여, 해당 서버와 데이터를 송신 또는 수신할 수 있다. 그 외, 콘텐츠 제공자 또는 네트워크 운영자가 제공하는 컨텐츠 또는 데이터들을 수신할 수 있다. 즉, 네트워크를 통하여 컨텐츠 제공자 또는 네트워크 제공자로부터 제공되는 영화, 광고, 게임, VOD, 방송 신호 등의 컨텐츠 및 그와 관련된 정보를 수신할 수 있다. 또한, 네트워크 운영자가 제공하는 펌웨어의 업데이트 정보 및 업데이트 파일을 수신할 수 있다. 또한, 인터넷 또는 컨텐츠 제공자 또는 네트워크 운영자에게 데이터들을 송신할 수 있다.A network interface unit (not shown) can access a predetermined web page via a network. That is, it is possible to access a predetermined web page through a network and transmit or receive data with the server. In addition, content or data provided by a content provider or a network operator can be received. That is, it can receive contents such as a movie, an advertisement, a game, a VOD, a broadcast signal, and related information provided from a content provider or a network provider through a network. In addition, the update information and the update file of the firmware provided by the network operator can be received. It may also transmit data to the Internet or a content provider or network operator.
또한, 네트워크 인터페이스부(미도시)는, 네트워크를 통해, 공중에 공개(open)된 애플리케이션들 중 원하는 애플리케이션을 선택하여 수신할 수 있다. Also, the network interface unit (not shown) can select and receive a desired application among the applications open to the public via the network.
제어부(150)는 영상 표시 장치(100)의 전반적인 동작을 제어할 수 있다. 보다 구체적으로, 제어부(150)는 영상의 생성 및 출력을 제어하도록 형성된다. 예를 들어, 제어부(150)는 사용자가 선택한 채널 또는 기저장된 채널에 대응하는 RF 방송 신호를 튜닝(tuning)하도록 튜너(110)를 제어할 수 있다. 비록 도면에는 도시되지 않았으나, 제어부(150)는 역다중화부, 영상 처리부, 음성 처리부, 데이터 처리부, OSD(On Screen Display) 생성부 등을 포함할 수 있다. 또한, 제어부(150)는 하드웨어적으로 CPU 나 주변기기 등을 포함할 수 있다.The
제어부(150)는 스트림 신호(TS), 예를 들어, MPEG-2 TS를 역다중화하여 영상 신호, 음성 신호 및 데이터 신호로 분리할 수 있다.The
제어부(150)는 역다중화된 영상 신호에 대한 영상 처리, 예를 들어, 복호화를 수행할 수 있다. 좀더 상세하게, 제어부(150)는 MPEG-2 디코더를 이용하여 MPEG-2 규격의 부호화된 영상 신호를 복호화하고, H.264 디코더를 이용하여 DMB(Digital Multimedia Broadcasting) 방식 또는 DVB-H에 따른 H.264 규격의 부호화된 영상 신호를 복호화할 수 있다. 또한, 제어부(150)는 영상 신호의 밝기(brightness), 틴트(tint) 및 색조(color) 등이 조절되도록 영상 처리할 수 있다. 제어부(150)에 의해 영상 처리된 영상 신호는 디스플레이부(170)로 전달되거나, 외부 출력 단자를 통해 외부 출력 장치(미도시)로 전달될 수 있다.The
제어부(150)는 역다중화된 음성 신호에 대한 음성 처리, 예를 들어, 복호화를 수행할 수 있다. 좀더 상세하게, 제어부(150)는 MPEG-2 디코더를 이용하여 MPEG-2 규격의 부호화된 음성 신호를 복호화하고, MPEG 4 디코더를 이용하여 DMB 방식에 따른 MPEG 4 BSAC(Bit Sliced Arithmetic Coding) 규격의 부호화된 음성 신호를 복호화하며, AAC 디코더를 이용하여 위성 DMB 방식 또는 DVB-H에 따른 MPEG 2의 AAC(Advanced Audio Codec) 규격의 부호화된 음성 신호를 복호화할 수 있다. 또한, 제어부(150)는 베이스(Base), 트레블(Treble), 음량 조절 등을 처리할 수 있다. 제어부(150)에서 처리된 음성 신호는 오디오 출력부(180), 예를 들어, 스피커로 전달되거나, 외부 출력 장치로 전달될 수 있다.The
제어부(150)는 아날로그 베이스 밴드 영상/음성신호(CVBS/SIF)에 대한 신호 처리를 수행할 수 있다. 여기서, 제어부(150)에 입력되는 아날로그 베이스 밴드 영상/음성신호(CVBS/SIF)는 튜너(110) 또는 신호 입출력부(130)에서 출력된 아날로그 베이스 밴드 영상/음성신호일 수 있다. 신호 처리된 영상 신호는 디스플레이부(170)를 통해 표시되고, 신호 처리된 음성 신호는 오디오 출력부(180)를 통해 출력된다.The
제어부(150)는 역다중화된 데이터 신호에 대한 데이터 처리, 예를 들어, 복호화를 수행할 수 있다. 여기서, 데이터 신호는 각각의 채널에서 방영되는 방송프로그램의 시작시간, 종료시간 등의 방송정보를 포함하는 EPG(Electronic Program Guide) 정보를 포함할 수 있다. EPG 정보는, 예를 들어, ATSC 방식에서는 TSC-PSIP(ATSC-Program and System Information Protocol) 정보를 포함하고, DVB 방식에서는 DVB-SI(DVB-Service Information) 정보를 포함할 수 있다. ATSC-PSIP 정보 또는 DVB-SI 정보는 MPEG-2 TS의 헤더(4 byte)에 포함될 수 있다.The
제어부(150)는 OSD 처리를 위한 제어 동작을 수행할 수 있다. 좀더 상세하게, 제어부(150)는 영상 신호 및 데이터 신호 중 적어도 하나 또는 외부 입력 장치(190)로부터 수신되는 입력 신호에 근거하여 각종 정보를 그래픽(Graphic)이나 텍스트(Text) 형태로 표시하기 위한 OSD 신호를 생성할 수 있다. OSD 신호는 영상 표시 장치(100)의 사용자 인터페이스 화면, 메뉴 화면, 위젯, 아이콘 등의 다양한 데이터를 포함할 수 있다.The
저장부(160)는 제어부(150)의 신호 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 신호 처리된 영상 신호, 음성 신호 및 데이터 신호를 저장할 수도 있다. 저장부(160)는 플래시 메모리(flash memory), 하드디스크(hard disk), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(random access memory; RAM), SRAM(static random access memory), 롬(read-only memory; ROM), EEPROM(electrically erasable programmable read-only memory), PROM(programmable read-only memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 저장매체를 포함할 수 있다.The
디스플레이부(170)는 제어부(150)에 의해 처리된 영상 신호, 데이터 신호, OSD 신호 등을 RGB 신호로 변환하여 구동 신호를 생성할 수 있다. 이를 통하여, 디스플레이부(170)는 영상을 출력하게 된다. 디스플레이부(170)는 플라즈마 디스플레이 패널(Plasma Display Panel: PDP), 액정 디스플레이(Liquid Crystal Display: LCD), 박막 트랜지스터 액정 디스플레이(Thin Film Transistor-Liquid Crystal Display: TFT- LCD), 유기 발광 다이오드(Organic Light Emitting Diode: OLED), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display), 전자잉크 디스플레이(e-ink display) 등의 다양한 형태로 구현될 수 있다. 또한, 디스플레이(180)는 터치 스크린으로 구현되어 입력 장치의 기능도 수행할 수 있다.The
오디오 출력부(180)는 제어부(150)에 의해 처리된 음성 신호, 예를 들어, 스테레오 신호 또는 5.1 채 신호를 출력한다. 오디오 출력부(180)는 다양한 형태의 스피커로 구현될 수 있다.The
한편, 사용자를 촬영하는 촬영부(미도시)를 더 구비할 수 있다. 촬영부(미도시)는 1 개의 카메라로 구현되는 것이 가능하나, 이에 한정되지 않으며, 복수 개의 카메라로 구현되는 것도 가능하다. 촬영부(미도시)에서 촬영된 영상 정보는 제어부(150)에 입력된다.On the other hand, a photographing unit (not shown) for photographing a user can be further provided. The photographing unit (not shown) may be implemented by a single camera, but the present invention is not limited thereto, and may be implemented by a plurality of cameras. The image information photographed by the photographing unit (not shown) is input to the
한편, 사용자의 제스처를 감지하기 위해, 상술한 바와 같이, 터치 센서, 음성 센서, 위치 센서, 동작 센서 중 적어도 하나를 구비하는 센싱부(미도시)가 영상 표시 장치(100)에 더 구비될 수 있다. 센싱부(미도시)에서 감지된 신호는 사용자입력 인터페이스부(140)를 통해 제어부(150)로 전달될 수 있다. In order to detect a user's gesture, a sensing unit (not shown) having at least one of a touch sensor, a voice sensor, a position sensor, and an operation sensor may be further provided in the
제어부(150)는, 촬영부(미도시)로부터 촬영된 영상, 또는 센싱부(미도시)로부터의 감지된 신호를 각각 또는 조합하여 사용자의 제스처를 감지할 수도 있다. The
전원 공급부(미도시)는, 영상 표시 장치(100) 전반에 걸쳐 해당 전원을 공급한다. 특히, 시스템 온 칩(System On Chip,SOC)의 형태로 구현될 수 있는 제어부(150)와, 영상 표시를 위한 디스플레이부(170), 및 오디오 출력을 위한 오디오 출력부(180)에 전원을 공급할 수 있다. A power supply unit (not shown) supplies power to the entire
이를 위해, 전원 공급부(미도시)는, 교류 전원을 직류 전원으로 변환하는 컨버터(미도시)를 구비할 수 있다. 한편, 예를 들어, 디스플레이부(170)가 다수의 백라이트 램프를 구비하는 액정패널로서 구현되는 경우, 휘도 가변 또는 디밍(dimming) 구동을 위해, PWM 동작이 가능한 인버터(미도시)를 더 구비할 수도 있다.To this end, the power supply unit (not shown) may include a converter (not shown) for converting AC power to DC power. Meanwhile, for example, when the
외부 입력 장치(190)는 유선 또는 무선으로 인터페이스부(140)와 연결되며,사용자 입력에 따라 생성되는 입력 신호를 인터페이스부(140)로 전송한다. 외부 입력 장치(190)는 원격조정기, 마우스, 키보드 등을 포함할 수 있다. 원격조정기는 블루투스(Bluetooth), RF 통신, 적외선 통신, UWB(Ultra Wideband), 지그비(ZigBee) 방식 등을 통해 입력 신호를 인터페이스부(140)로 전송할 수 있다. 원격조정기는 공간 원격 제어 장치로서 구현될 수 있다. 공간 원격 제어 장치는 공간에서 본체의 동작을 감지하여 입력 신호를 생성할 수 있다.The
영상 표시 장치(100)는 ATSC 방식(8-VSB 방식)의 디지털 방송, DVB-T 방식(COFDM 방식)의 디지털 방송, DVB-C 방식(QAM 방식)의 디지털 방송, DVB-S 방식(QPSK 방식)의 디지털 방송, ISDB-T 방식(BST-OFDM방식)의 디지털 방송 등 중 적어도 하나를 수신 가능한 고정형 디지털 방송 수신기로 구현될 수 있다. 또한, 영상 표시 장치(100)는 지상파 DMB 방식의 디지털 방송, 위성 DMB 방식의 디지털 방송, ATSC-M/H 방식의 디지털 방송, DVB-H 방식(COFDM 방식)의 디지털 방송, 미디어플로(Media Foward Link Only) 방식의 디지털 방송 등 중 적어도 하나를 수신 가능한 이동형 디지털 방송 수신기로 구현될 수 있다. 또한, 영상 표시 장치(100)는 케이블, 위성통신, IPTV용 디지털 방송 수신기로 구현될 수 있다.The
한편, 본 발명의 영상 표시 장치는 입체영상을 제공하도록 이루어진다. 3-D 또는 3D 라는 용어는 깊이의 착시 효과를 갖는 입체영상(이하, '3D 영상'이라 한다)을 재생하려고 하는 시각적 표현 또는 표시 기술을 설명하는데 사용된다. 좌안 영상과 우안 영상에 대해, 관찰자의 시각 피질(visual cortex)은 두 영상을 하나의 3D 영상으로 해석한다.Meanwhile, the video display device of the present invention is configured to provide a stereoscopic image. The term 3-D or 3D is used to describe a visual representation or display technique that attempts to reproduce a stereoscopic image (hereinafter, referred to as '3D image') having an optical illusion of depth. For the left eye and right eye images, the visual cortex of the observer interprets the two images as a single 3D image.
3차원(3D) 표시기술은 3D 영상 표시가 가능한 장치에 대해 3D 영상 처리 및 표현의 기술을 채용한다. 선택적으로는, 3D 영상 표시가 가능한 장치는 관찰자에게 3차원 영상을 효과적으로 제공하기 위해 특수한 관찰장치를 사용해야 할 수 있다.Three-dimensional (3D) display technology employs 3D image processing and representation techniques for devices capable of displaying 3D images. Alternatively, a device capable of 3D image display may have to use a special viewing device to effectively provide a three-dimensional image to an observer.
3D 영상 처리 및 표현의 예로는 스테레오스코픽 영상/비디오 캡처, 다수의 카메라를 이용한 다시점 영상/비디오 캡처, 이차원 영상과 깊이 정보의 처리 등이 있다. 3D 영상 표시가 가능한 표시 장치의 예로는, 3D 영상 표시기술을 지원하는 적절한 하드웨어 및/또는 소프트웨어를 구비한 LCD(Liquid Crystal Display), 디지털 TV 화면, 컴퓨터 모니터 등이 있다. 특수한 관찰장치의 예로는, 특수화 안경, 고글, 헤드기어, 안경류(eyewear) 등이 있다.Examples of 3D image processing and representation include stereoscopic image / video capture, multi-view video / video capture using multiple cameras, and processing of two-dimensional images and depth information. Examples of the display device capable of 3D image display include an LCD (Liquid Crystal Display), a digital TV screen, and a computer monitor with appropriate hardware and / or software supporting 3D image display technology. Examples of special viewing devices include specialized glasses, goggles, headgear, and eyewear.
구체적으로, 3D 영상 표시기술은, 애너글리프(anaglyph) 입체영상(통상적으로 수동형 적청 안경을 함께 사용), 편광 입체영상(통상적으로 수동형 편광 안경과 함께 사용), 프레임-교대 시퀀싱(alternate-frame sequencing)(통상적으로 능동형 셔터 안경/헤드기어와 함께 사용), 렌티큘러(lenticular) 또는 배리어(barrier) 스크린을 사용한 오토스테레오스코픽 디스플레이(autostereoscopic display) 등이 있다. Specifically, the 3D image display technology can be applied to anaglyph stereoscopic images (commonly used with passive red-eye glasses), polarized stereoscopic images (commonly used with passive polarized glasses), alternate-frame sequencing ) (Commonly used with active shutter glasses / headgear), autostereoscopic displays using lenticular or barrier screens, and the like.
3D 영상 처리를 위하여, 스테레오 영상 또는 다시점 영상은 MPEG(Moving Picture Experts Group)을 포함하는 여러가지 방법으로 압축 부호화되어 전송될 수 있다. 예를 들어, 스테레오 영상 또는 다시점 영상은 H.264/AVC(Advanced Video Coding) 방식으로 압축 부호화되어 전송될 수 있다. 이때 수신 시스템은 H.264/AVC 코딩 방식의 역으로 수신 영상을 복호하여 3D 영상을 얻을 수 있다. 이 경우에, 상기 수신 시스템은 3D 입체 영상 표시 장치의 일 구성으로서 구비될 수 있다. For 3D image processing, a stereo image or multi-view image can be compression-coded and transmitted in various ways including MPEG (Moving Picture Experts Group). For example, a stereo image or a multi-view image may be compression-coded and transmitted by the H.264 / AVC (Advanced Video Coding) method. At this time, the receiving system can obtain the 3D image by decoding the reception image inversely to the H.264 / AVC coding scheme. In this case, the receiving system may be provided as one configuration of the 3D stereoscopic image display apparatus.
이하에서는, 3D 입체 영상 표시 장치(200)의 구성을 도 2를 참조하여 설명한다. Hereinafter, the configuration of the 3D stereoscopic
도 2는 본 발명의 실시예들에 따른 영상 처리 장치가 적용된 3D 영상 표시 장치의 구성을 나타낸 구성도이다.2 is a block diagram illustrating the configuration of a 3D image display apparatus to which an image processing apparatus according to embodiments of the present invention is applied.
도 2에 도시한 바와 같이, 본 발명의 실시예들에 의한 3D 영상 표시 장치(200)는 튜너(210), 복조부(220), 외부장치 인터페이스부(230), 네트워크 인터페이스부(235), 저장부(240), 사용자입력 인터페이스부(250), 제어부(270), 디스플레이부(280), 오디오 출력부(285), 및 3D 시청장치(295)를 포함할 수 있다. 이하, 도 1과 동일한 구성에 대하여는 3D 영상의 출력과 관련된 부분을 중점으로 설명하며, 전술한 부분과 중복되는 부분은 생략한다.2, the 3D
튜너(튜너부)(210)는, 방송 신호를 수신하여 해당 신호를 검파하고 오류를 정정하여 좌안 및 우안 영상에 대한, 트랜스포트 스트림(Trasport Stream)을 생성한다. The tuner (tuner unit) 210 receives the broadcast signal, detects the signal, corrects the error, and generates a transport stream for the left eye and right eye images.
복조부(220)는 기준시점 비디오를 디코딩하는 제1 디코더이고, 확장시점 비디오를 디코딩하는 제2 디코더로 이루어질 수 있다. 이 경우에, 역다중화부에 의하여, 비디오 스트림은 기준시점 비디오에 해당하면 제1 디코더로 출력되고, 확장시점 비디오에 해당하면 제2 디코더로 출력된다.The
외부장치 인터페이스부(230)는, 접속된 외부 장치와 데이터를 송신 또는 수신할 수 있다. 이를 위해, 외부장치 인터페이스부(230)는, A/V 입출력부(도시하지 않음) 또는 무선 통신부(도시하지 않음)를 포함할 수 있다. The external
외부장치 인터페이스부(230)는, DVD(Digital Versatile Disk), 블루레이(Blu ray), 게임기기, 카메라, 캠코더, 컴퓨터(노트북) 등과 같은 외부 장치(도시하지 않음)와 유/무선으로 접속될 수 있다. 외부장치 인터페이스부(230)는 접속된 외부 장치를 통하여 외부에서 입력되는 영상, 음성 또는 데이터 신호를 영상표시장치(200)의 제어부(270)로 전달한다. 또한, 제어부(270)에서 처리된 영상, 음성 또는 데이터 신호를 연결된 외부 장치로 출력할 수 있다. 이를 위해, 외부장치 인터페이스부(230)는, A/V 입출력부(도시하지 않음) 또는 무선 통신부(도시하지 않음)를 포함할 수 있다. The external
A/V 입출력부는, 외부 장치의 영상 및 음성 신호를 영상표시장치(200)로 입력할 수 있도록, USB 단자, CVBS(Composite Video Banking Sync) 단자, 컴포넌트 단자, S-비디오 단자(아날로그), DVI(Digital Visual Interface) 단자, HDMI(High Definition Multimedia Interface) 단자, RGB 단자, D-SUB 단자 등을 포함할 수 있다. A / V input / output unit includes a USB terminal, a CVBS (Composite Video Banking Sync) terminal, a component terminal, an S-video terminal (analog), a DVI (Digital Visual Interface) terminal, an HDMI (High Definition Multimedia Interface) terminal, an RGB terminal, a D-SUB terminal, and the like.
무선 통신부는, 다른 전자기기와 근거리 무선 통신을 수행할 수 있다. 영상표시장치(200)는 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), 지그비(ZigBee), DLNA(Digital Living Network Alliance) 등의 통신 규격에 따라 다른 전자기기와 네트워크 연결될 수 있다. The wireless communication unit can perform short-range wireless communication with other electronic devices. The
또한, 외부장치 인터페이스부(230)는, 다양한 셋탑 박스와 상술한 각종 단자 중 적어도 하나를 통해 접속되어, 셋탑 박스와 입력/출력 동작을 수행할 수도 있다. Also, the external
한편, 외부장치 인터페이스부(230)는, 3D 시청장치(295)와 데이터를 송수신할 수 있다. On the other hand, the external
네트워크 인터페이스부(235)는, 영상표시장치(200)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공한다. 네트워크 인터페이스부(235)는, 유선 네트워크와의 접속을 위해, 이더넷(Ethernet) 단자 등을 구비할 수 있으며, 무선 네트워크와의 접속을 위해, WLAN(Wireless LAN)(Wi-Fi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 통신 규격 등이 이용될 수 있다. The
네트워크 인터페이스부(235)는, 네트워크를 통해, 인터넷 또는 콘텐츠 제공자 또는 네트워크 운영자가 제공하는 콘텐츠 또는 데이터들을 수신할 수 있다. 즉, 네트워크를 통하여 인터넷, 콘텐츠 제공자 등으로부터 제공되는 영화, 광고, 게임, VOD, 방송 신호 등의 콘텐츠 및 그와 관련된 정보를 수신할 수 있다. 또한, 네트워크 운영자가 제공하는 펌웨어의 업데이트 정보 및 업데이트 파일을 수신할 수 있다. 또한, 인터넷 또는 콘텐츠 제공자 또는 네트워크 운영자에게 데이터들을 송신할 수 있다. The
또한, 네트워크 인터페이스부(235)는, 예를 들어, IP(internet Protocol) TV와 접속되어, 양방향 통신이 가능하도록, IPTV용 셋탑 박스에서 처리된 영상, 음성 또는 데이터 신호를 수신하여 제어부(270)로 전달할 수 있으며, 제어부(270)에서 처리된 신호들을 IPTV용 셋탑 박스로 전달할 수 있다.The
한편, 상술한 IPTV는, 전송네트워크의 종류에 따라 ADSL-TV, VDSL-TV, FTTH-TV 등을 포함하는 의미일 수 있으며, TV over DSL, Video over DSL, TV overIP(TVIP), Broadband TV(BTV) 등을 포함하는 의미일 수 있다. 또한, IPTV는 인터넷 접속이 가능한 인터넷 TV, 풀브라우징 TV를 포함하는 의미일 수도 있다.Meanwhile, the IPTV may include ADSL-TV, VDSL-TV, FTTH-TV and the like depending on the type of the transmission network. The IPTV may include a TV over DSL, a video over DSL, a TV over IP BTV), and the like. In addition, IPTV may also mean an Internet TV capable of accessing the Internet, or a full browsing TV.
저장부(240)는, 제어부(270) 내의 각 신호 처리 및 제어를 위한 프로그램이 저장될 수도 있고, 신호 처리된 영상, 음성 또는 데이터 신호를 저장할 수도 있다. The
또한, 저장부(240)는 외부장치 인터페이스부(230)로 입력되는 영상, 음성 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있다. 또한, 저장부(240)는, 채널 맵 등의 채널 기억 기능을 통하여 소정 방송 채널에 관한 정보를 저장할 수 있다. In addition, the
저장부(240)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램, 롬(EEPROM 등) 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 영상표시장치(200)는, 저장부(240) 내에 저장되어 있는 파일(동영상 파일, 정지영상 파일, 음악 파일, 문서 파일 등)을 재생하여 사용자에게 제공할 수 있다. 도 2는 저장부(240)가 제어부(270)와 별도로 구비된 실시예를 도시하고 있으나, 본 발명의 범위는 이에 한정되지 않는다. 저장부(240)는 제어부(270) 내에 포함될 수 있다. The
사용자입력 인터페이스부(250)에 대한 설명은 도 1을 참조하여, 전술한 인터페이스부(140)의 설명으로 대체한다.The description of the user
제어부(270)는, 튜너(210) 또는 복조부(220) 또는 외부장치 인터페이스부(230)를 통하여, 입력되는 스트림을 역다중화하거나, 역다중화된 신호들을 처리하여, 영상 또는 음성 출력을 위한 신호를 생성 및 출력할 수 있다. The
제어부(270)에서 영상 처리된 영상 신호는 디스플레이부(280)로 입력되어, 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 제어부(270)에서 영상 처리된 영상 신호는 외부장치 인터페이스부(230)를 통하여 외부 출력장치로 입력될 수 있다. The image signal processed by the
제어부(270)에서 처리된 음성 신호는 오디오 출력부(285)로 음향 출력될 수 있다. 또한, 제어부(270)에서 처리된 음성 신호는 외부장치 인터페이스부(230)를 통하여 외부 출력장치로 입력될 수 있다. The audio signal processed by the
제어부(270)는 역다중화부, 영상처리부 등을 포함할 수 있다. 제어부(270)는, 영상표시장치(200) 내의 전반적인 동작을 제어할 수 있다. 예를 들어, 제어부(270)는 튜너(210)를 제어하여, 사용자가 선택한 채널 또는 기저장된 채널에 해당하는 RF 방송을 선택(Tuning)하도록 제어할 수 있다. The
또한, 제어부(270)는 사용자입력 인터페이스부(250)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 영상표시장치(200)를 제어할 수 있다. In addition, the
예를 들어, 제어부(270)는, 사용자입력 인터페이스부(250)를 통하여 수신한 소정 채널 선택 명령에 따라 선택한 채널의 신호가 입력되도록 튜너(210)를 제어한다. 그리고, 선택한 채널의 영상, 음성 또는 데이터 신호를 처리한다. 제어부(270)는, 사용자가 선택한 채널 정보 등이 처리한 영상 또는 음성신호와 함께 디스플레이부(280) 또는 오디오 출력부(285)를 통하여 출력될 수 있도록 한다. For example, the
다른 예로, 제어부(270)는, 사용자입력 인터페이스부(250)를 통하여 수신한 외부장치 영상 재생 명령에 따라, 외부장치 인터페이스부(230)를 통하여 입력되는 외부 장치, 예를 들어, 카메라 또는 캠코더로부터의 영상 신호 또는 음성 신호가 디스플레이부(280) 또는 오디오 출력부(285)를 통해 출력될 수 있도록 한다. For example, the
제어부(270)는, 영상을 표시하도록 디스플레이부(280)를 제어할 수 있다. 예를 들어, 튜너(210)를 통해 입력되는 방송 영상, 외부장치 인터페이스부(230)를 통해 입력되는 외부 입력 영상 또는 네트워크 인터페이스부(235)를 통해 입력되는 영상 또는 저장부(240)에 저장된 영상을 디스플레이부(280)에 표시하도록 제어할 수 있다. 이때, 디스플레이부(280)에 표시되는 영상은, 정지 영상 또는 동영상일 수 있으며, 2D 영상 또는 3D 영상일 수 있다.The
제어부(270)는 디스플레이부(280)에 표시되는 영상 중에, 소정 오브젝트에 대해 3D 오브젝트로 생성하여 표시되도록 한다. 예를 들어, 오브젝트는, 접속된 웹 화면(신문, 잡지 등), EPG(Electronic Program Guide), 다양한 메뉴, 위젯, 아이콘, 정지 영상, 동영상, 텍스트 중 적어도 하나일 수 있다. 이러한 3D 오브젝트는, 디스플레이부(280)에 표시되는 영상과 다른 깊이를 가지도록 처리될 수 있다. 제어부(270)는 3D 오브젝트가 디스플레이부(280)에 표시되는 영상에 비해 돌출되어 보이도록 처리할 수 있다. The
제어부(270)는, 촬영부(도시하지 않음)로부터 촬영된 영상에 기초하여, 사용자의 위치를 인식한다. 예를 들어, 사용자와 영상표시장치(200)간의 거리(z축 좌표)를 파악할 수 있다. 그 외, 사용자 위치에 대응하는 디스플레이부(280) 내의 x축 좌표, 및 y축 좌표를 파악할 수 있다.The
한편, 도 2에 도시하지 않았지만, 채널 신호 또는 외부 입력 신호에 대응하는 썸네일 영상을 생성하는 채널 브라우징 처리부가 더 구비되는 것도 가능하다. 채널 브라우징 처리부는, 복조부(220)에서 출력한 스트림 신호(TS) 또는 외부장치 인터페이스부(230)에서 출력한 스트림 신호 등을 입력받아, 입력되는 스트림 신호로부터 영상을 추출하여 썸네일 영상을 생성할 수 있다. 생성된 썸네일 영상은 그대로 또는 부호화되어 제어부(270)로 입력될 수 있다. 또한, 생성된 썸네일 영상은 스트림 형태로 부호화되어 제어부(270)로 입력되는 것도 가능하다. Although not shown in FIG. 2, it is also possible to provide a channel browsing processing unit for generating a channel signal or a thumbnail image corresponding to an external input signal. The channel browsing processing unit receives a stream signal TS output from the
제어부(270)는 입력된 썸네일 영상을 이용하여 복수의 썸네일 영상을 구비하는 썸네일 리스트를 디스플레이부(280)에 표시할 수 있다. 이때의 썸네일 리스트는, 디스플레이부(280)에 소정 영상을 표시한 상태에서 일부 영역에 표시되는 간편 보기 방식으로 표시되거나, 디스플레이부(280)의 대부분 영역에 표시되는 전체 보기 방식으로 표시될 수 있다. 이러한 썸네일 리스트 내의 썸네일 영상은 순차적으로 업데이트 될 수 있다. The
디스플레이부(280)는, 제어부(270)에서 처리된 영상 신호, 데이터 신호, OSD 신호, 제어 신호 또는 외부장치 인터페이스부(230)에서 수신되는 영상 신호, 데이터 신호, 제어 신호 등을 변환하여 구동 신호를 생성한다. The
디스플레이부(280)는 PDP, LCD, OLED, 플렉시블 디스플레이(flexible display)등이 가능하며, 특히, 본 발명의 실시예에 따라, 3차원 디스플레이(3D display)가 가능할 수 있다. The
3차원 영상 시청을 위해 디스플레이부(280)는, 추가 디스플레이 방식과 단독 디스플레이 방식으로 나뉠 수 있다. 단독 디스플레이 방식은, 별도의 추가 디스플레이, 예를 들어 안경(glass) 등이 없이, 디스플레이부(280)(무안경 3D 디스플레이) 단독으로 3D 영상을 구현할 수 있는 것으로서, 그 예로, 렌티큘라 방식, 파라랙스 베리어(parallax barrier) 등 다양한 방식이 적용될 수 있다. 상기 추가 디스플레이 방식은, 디스플레이부(280) 외에 추가 디스플레이를 사용하여 3D 영상을 구현할 수 있는 것으로서, 그 예로, 헤드 마운트 디스플레이(HMD) 타입, 안경 타입 등 다양한 방식이 적용될 수 있다. The
상기 안경 타입은, 편광 안경 타입 등의 패시브(passive) 방식과, 셔터 글래스(ShutterGlass) 타입 등의 액티브(active) 방식으로 다시 나뉠 수 있다. 한편, 헤드 마운트 디스플레이 타입에서도 패시브 방식과 액티브 방식으로 나뉠 수 있다.The glasses type can be further divided into a passive type such as a polarizing glasses type and an active type such as a shutter glass type. On the other hand, head-mounted display type can be divided into a passive type and an active type.
입체 영상을 시청하기 위한 3D 시청 장치(3D용 글래스)(295)는, 패시브 방식의 편광 글래스 또는 액티브 방식의 셔트 글래스를 포함할 수 있으며, 상술한 헤드 마운트 타입도 포함하는 개념으로 기술된다. A 3D viewing apparatus (glass for 3D) 295 for viewing a stereoscopic image can include a passive polarizing glass or an active shutter glass, and is described as a concept including the above-described head mount type.
한편, 디스플레이부(280)는, 터치 스크린으로 구성되어 출력 장치 이외에 입력 장치로 사용되는 것도 가능하다.Meanwhile, the
오디오 출력부(285)는, 제어부(270)에서 음성 처리된 신호, 예를 들어, 스테레오 신호, 3.1 채널 신호 또는 5.1 채널 신호를 입력 받아 음성으로 출력한다. 음성 출력부(185)는 다양한 형태의 스피커로 구현될 수 있다.The
한편, 사용자의 제스처를 감지하기 위해, 상술한 바와 같이, 터치 센서, 음성 센서, 위치 센서, 동작 센서 중 적어도 하나를 구비하는 센싱부(도시하지 않음)가 영상표시장치(200)에 더 구비될 수 있다. 센싱부(도시하지 않음)에서 감지된 신호는 사용자입력 인터페이스부(150)를 통해 제어부(170)로 전달된다. Meanwhile, in order to detect the user's gesture, a sensing unit (not shown) having at least one of a touch sensor, a voice sensor, a position sensor, and an operation sensor may be further included in the
제어부(270)는, 촬영부(도시하지 않음)로부터 촬영된 영상, 또는 센싱부(도시하지 않음)로부터의 감지된 신호를 각각 또는 조합하여 사용자의 제스처를 감지할 수 있다. The
원격제어장치(260)는, 사용자 입력을 사용자입력 인터페이스부(250)로 송신한다. 이를 위해, 원격제어장치(260)는, 블루투스(Bluetooth), RF(Radio Frequency) 통신, 적외선(IR) 통신, UWB(Ultra Wideband), 지그비(ZigBee) 방식 등을 사용할 수 있다. 또한, 원격제어장치(260)는, 사용자입력 인터페이스부(250)에서 출력한 영상, 음성 또는 데이터 신호 등을 수신하여, 이를 원격제어장치(260)에서 표시하거나 음성 출력할 수 있다.The
상술한 영상표시장치(200)는, 고정형으로서 ATSC 방식(7-VSB 방식)의 디지털 방송, DVB-T 방식(COFDM 방식)의 디지털 방송, ISDB-T 방식(BST-OFDM방식)의 디지털 방송 등 중 적어도 하나를 수신 가능한 디지털 방송 수신기일 수 있다. 또한, 이동형으로서 지상파 DMB 방식의 디지털 방송, 위성 DMB 방식의 디지털 방송, ATSC-M/H 방식의 디지털 방송, DVB-H 방식(COFDM 방식)의 디지털 방송, 미디어플로(Media Foward Link Only) 방식의 디지털 방송 등 중 적어도 하나를 수신 가능한 디지털 방송 수신기일 수 있다. 또한, 케이블, 위성통신, IPTV 용 디지털 방송 수신기일 수도 있다.The
본 명세서에서 기술되는 영상표시장치는, TV 수상기, 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(notebook computer), 디지털 방송용 단말기, PDA(Personal Digital Assistants), PMP(Portable Multimedia Player) 등이 포함될 수 있다.The video display device described herein may include a TV receiver, a mobile phone, a smart phone, a notebook computer, a digital broadcasting terminal, a PDA (Personal Digital Assistants), a PMP (Portable Multimedia Player) have.
도 2에 도시된 영상표시장치(200)의 구성도는 본 발명의 실시예들을 위한 구성도이다. 구성도의 각 구성요소는 실제 구현되는 영상표시장치(200)의 사양에 따라 통합, 추가, 또는 생략될 수 있다. 즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.The configuration of the
상기 영상 표시 장치(200)에서 복호화된 영상 신호는, 다양한 포맷의 3D 영상 신호일 수 있다. 예를 들면, 색차 영상(color image) 및 깊이 영상(depth image)으로 이루어진 3D 영상 신호일 수 있으며, 또는 복수 시점 영상 신호로 이루어진 3D 영상 신호 등일 수 있다. 복수 시점 영상 신호는, 예를 들어, 좌안 영상 신호와 우안 영상 신호를 포함할 수 있다. 여기서, 3D 영상 신호의 포맷은, 좌안 영상 신호(L)와 우안 영상 신호(R)를 좌,우로 배치하는 사이드 바이 사이드(Side by Side) 포맷, 상,하로 배치하는 탑 다운(Top / Down) 포맷, 시분할로 배치하는 프레임 시퀀셜(Frame Sequential) 포맷, 좌안 영상 신호와 우안 영상 신호를 라인 별로 혼합하는 인터레이스 (Interlaced) 포맷, 좌안 영상 신호와 우안 영상 신호를 박스 별로 혼합하는 체커 박스(Checker Box) 포맷 등일 수 있다. The video signal decoded by the
또한, 상기에서 설명된 영상 표시 장치는 이동 단말기에도 적용될 수 있다. 상기 이동 단말기에는 휴대폰, 스마트 폰(smart phone), 노트북 컴퓨터(laptop computer), 디지털방송용 단말기, PDA(personal digital assistants), PMP(portable multimedia player), 네비게이션, 슬레이트 PC(slate PC), 태블릿 PC(tablet PC), 울트라북(ultrabook) 등이 포함될 수 있다. Also, the video display device described above can be applied to a mobile terminal. The mobile terminal may be a mobile phone, a smart phone, a laptop computer, a digital broadcasting terminal, a personal digital assistant (PDA), a portable multimedia player (PMP), a navigation device, a slate PC, tablet PCs, ultrabooks, and the like.
영상 표시 장치가 이동 단말기로서 사용되는 경우에는 무선 통신부가 추가될 수 있다.When a video display device is used as a mobile terminal, a wireless communication unit may be added.
무선 통신부는 영상 표시 장치(100)와 무선 통신 시스템 사이 또는 이동 단말기와 이동 단말기가 위치한 네트워크 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 예를 들어, 무선 통신부는 방송 수신 모듈, 이동통신 모듈 무선 인터넷 모듈, 근거리 통신 모듈 및 위치정보 모듈 중 적어도 하나를 포함할 수 있다.The wireless communication unit may include one or more modules that enable wireless communication between the
방송 수신 모듈은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. The broadcast receiving module receives broadcast signals and / or broadcast-related information from an external broadcast management server through a broadcast channel.
상기 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 상기 방송 관리 서버는, 방송 신호 및/또는 방송 관련 정보를 생성하여 송신하는 서버 또는 기 생성된 방송 신호 및/또는 방송 관련 정보를 제공받아 단말기에 송신하는 서버를 의미할 수 있다. 상기 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데이터 방송 신호가 결합한 형태의 방송 신호도 포함할 수 있다. The broadcast channel may include a satellite channel and a terrestrial channel. The broadcast management server may refer to a server for generating and transmitting broadcast signals and / or broadcast related information, or a server for receiving broadcast signals and / or broadcast related information generated by the broadcast management server and transmitting the generated broadcast signals and / or broadcast related information. The broadcast signal may include a TV broadcast signal, a radio broadcast signal, a data broadcast signal, and a broadcast signal in which a data broadcast signal is combined with a TV broadcast signal or a radio broadcast signal.
상기 방송 관련 정보는, 방송 채널, 방송 프로그램 또는 방송 서비스 제공자에 관련한 정보를 의미할 수 있다. 상기 방송 관련 정보는, 이동통신망을 통하여도 제공될 수 있다. 이러한 경우에는 상기 이동통신 모듈(112)에 의해 수신될 수 있다. The broadcast-related information may refer to a broadcast channel, a broadcast program, or information related to a broadcast service provider. The broadcast-related information may also be provided through a mobile communication network. In this case, it may be received by the mobile communication module 112.
상기 방송 관련 정보는 다양한 형태로 존재할 수 있다. 예를 들어, DMB(Digital Multimedia Broadcasting)의 EPG(Electronic Program Guide) 또는 DVB-H(Digital Video Broadcast-Handheld)의 ESG(Electronic Service Guide) 등의 형태로 존재할 수 있다.The broadcast-related information may exist in various forms. For example, an EPG (Electronic Program Guide) of DMB (Digital Multimedia Broadcasting) or an ESG (Electronic Service Guide) of Digital Video Broadcast-Handheld (DVB-H).
상기 방송 수신 모듈은, 예를 들어, DMB-T(Digital Multimedia Broadcasting-Terrestrial), DMB-S(Digital Multimedia Broadcasting-Satellite), MediaFLO(Media Forward Link Only), DVB-H(Digital Video Broadcast-Handheld), ISDB-T(Integrated Services Digital Broadcast-Terrestrial) 등의 디지털 방송 시스템을 이용하여 디지털 방송 신호를 수신할 수 있다. 물론, 상기 방송 수신 모듈(111)은, 상술한 디지털 방송 시스템뿐만 아니라 다른 방송 시스템에 적합하도록 구성될 수도 있다.For example, the broadcast receiving module may be a Digital Multimedia Broadcasting-Terrestrial (DMB-T), a Digital Multimedia Broadcasting-Satellite (DMB-S), a Media Forward Link Only (DVF-H), a Digital Video Broadcast- , Integrated Services Digital Broadcast-Terrestrial (ISDB-T), or the like. Of course, the broadcast receiving module 111 may be adapted to other broadcasting systems as well as the digital broadcasting system described above.
방송 수신 모듈을 통해 수신된 방송 신호 및/또는 방송 관련 정보는 메모리에 저장될 수 있다.The broadcast signal and / or broadcast related information received through the broadcast receiving module may be stored in a memory.
이동통신 모듈은, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다. The mobile communication module transmits and receives radio signals to and from at least one of a base station, an external terminal, and a server on a mobile communication network. The wireless signal may include various types of data depending on a voice call signal, a video call signal or a text / multimedia message transmission / reception.
상기 이동통신 모듈은 화상통화모드 및 음성통화모드를 구현하도록 이루어진다. 화상통화모드는 상대방의 영상을 보면서 통화하는 상태를 지칭하고, 음성통화모드는 상대방의 영상을 보지 않으면서 통화를 하는 상태를 지칭한다. 화상통화모드 및 음성통화모드를 구현하기 위하여 이동통신 모듈(112)은 음성 및 영상 중 적어도 하나를 송수신하도록 형성된다.The mobile communication module is configured to implement a video communication mode and a voice communication mode. The video call mode refers to a state of talking while viewing a video of the other party, and the voice call mode refers to a state in which a call is made without viewing the other party's video. In order to implement the video communication mode and the voice communication mode, the mobile communication module 112 is configured to transmit and receive at least one of voice and image.
무선 인터넷 모듈은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 이동 단말기(100)에 내장되거나 외장될 수 있다. 무선 인터넷 기술로는 WLAN(Wireless LAN), WiFi(Wireless Fidelity) Direct, DLNA(Digital Living Network Alliance), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 등이 이용될 수 있다. The wireless Internet module refers to a module for wireless Internet access, and may be built in or enclosed in the
근거리 통신 모듈은 근거리 통신을 위한 모듈을 말한다. 근거리 통신(short range communication) 기술로 블루투스(Bluetooth™), RFID(Radio Frequency Identification), 적외선 통신(Infrared Data Association; IrDA), UWB(Ultra Wideband), ZigBee, NFC(Near Field Communication), 와이-파이 다이렉트 등이 이용될 수 있다.The short-range communication module is a module for short-range communication. As a short range communication technology, Bluetooth ™, Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee, Near Field Communication (NFC) Direct or the like may be used.
위치정보 모듈은 이동 단말기의 위치를 획득하기 위한 모듈로서, 그의 대표적인 예로는 GPS(Global Position System) 모듈 또는 WiFi(Wireless Fidelity) 모듈이 있다.The location information module is a module for acquiring the location of the mobile terminal, and representative examples thereof include a Global Position System (GPS) module or a Wireless Fidelity (WiFi) module.
한편, 디스플레이부와 터치 동작을 감지하는 센서(이하, '터치 센서'라 함)가 상호 레이어 구조를 이루는 경우(이하, '터치 스크린'이라 함)에, 디스플레이부(151)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 터치 센서는, 예를 들어, 터치 필름, 터치 시트, 터치 패드 등의 형태를 가질 수 있다.Meanwhile, when the display unit and a sensor (hereinafter, referred to as a 'touch sensor') that detects a touch operation form a mutual layer structure (hereinafter referred to as a 'touch screen'), It can also be used as a device. The touch sensor may have the form of, for example, a touch film, a touch sheet, a touch pad, or the like.
터치 센서는 디스플레이부의 특정 부위에 가해진 압력 또는 디스플레이부의 특정 부위에 발생하는 정전 용량 등의 변화를 전기적인 입력신호로 변환하도록 구성될 수 있다. 터치 센서는 터치 대상체가 터치 센서 상에 터치 되는 위치 및 면적뿐만 아니라, 터치 시의 압력까지도 검출할 수 있도록 구성될 수 있다. 여기에서, 터치 대상체는 상기 터치 센서에 터치를 인가하는 물체로서, 예를 들어, 손가락, 터치펜 또는 스타일러스 펜(Stylus pen), 포인터 등이 될 수 있다.The touch sensor may be configured to convert a change in a pressure applied to a specific portion of the display portion or a capacitance occurring in a specific portion of the display portion into an electrical input signal. The touch sensor can be configured to detect not only the position and area where the touch object is touched on the touch sensor but also the pressure at the time of touch. Here, the touch object may be a finger, a touch pen, a stylus pen, a pointer, or the like as an object to which a touch is applied to the touch sensor.
터치 센서에 대한 터치 입력이 있는 경우, 그에 대응하는 신호(들)는 터치 제어기로 보내진다. 터치 제어기는 그 신호(들)를 처리한 다음 대응하는 데이터를 제어부로 전송한다. 이로써, 제어부는 디스플레이부(151)의 어느 영역이 터치 되었는지 여부 등을 알 수 있게 된다.If there is a touch input to the touch sensor, the corresponding signal (s) is sent to the touch controller. The touch controller processes the signal (s) and then transmits the corresponding data to the controller. Thus, the control unit can know which area of the display unit 151 is touched or the like.
위치 검출부(291)는 헤드 트래킹(Head tracking) 기법을 통해 사용자의 위치를 검출하고, 그 검출한 사용자 위치를 제어부(270)에 출력한다. 예를 들면, 상기 위치 검출부(291)는 카메라(293)를 통해 촬영된 영상으로부터 사용자의 헤드를 검출 및 추적함으로써 사용자의 위치를 검출할 수 있다.The
음성 인식부(292)는 사용자 음성을 인식하고, 그 인식된 사용자 음성을 제어부(270)에 출력한다. 상기 음성 인식부(292)는 마이크로 폰을 포함할 수 있다.The
이하에서는, 사용자 음성 패턴에 따라 임계치를 변경함으로써 사용자 음성을 정확히 인식할 수 있는 음성 인식 장치 및 그 방법을 설명한다.Hereinafter, a speech recognition apparatus and method capable of accurately recognizing a user's voice by changing a threshold value according to a user speech pattern will be described.
도 3은 본 발명의 실시예에 따른 음성 인식 방법을 나타낸 흐름도이다.3 is a flowchart illustrating a speech recognition method according to an embodiment of the present invention.
먼저, 상기 음성 인식부(292)는 사용자 발화에 따른 사용자 음성을 수신한다(S11). First, the
상기 음성 인식부(292)는 입력 음성과 다수의 음성 모델들 간의 유사도를 나타내는 신뢰도 점수들(confidence scores)을 제공하는 미리결정된 모델들과 상기 사용자의 발성에 의해 입력되는 사용자 음성을 비교함으로써, 상기 사용자 음성을 인식하고, 그 인식된 결과를 상기 제어부(270)에 출력한다(S12). 상기 인식된 사용자 음성은 신뢰도 점수를 포함한다. 예를 들면, 사용자 발화에 따른 사용자 음성이 채널 올려, 채널 내려, 볼륨 올려, 등이라고 가정할 때, 상기 채널 올려는 6252 신뢰도 점수를 가질 수 있으며, 채널 내려는 8242 신뢰도 점수를 가질 수 있으며, 볼륨 올려는 2024 신뢰도 점수를 가질 수 있다. 여기서, 상기 신뢰도 점수를 이용하여 사용자 음성을 인식하는 방법은 미국 특허 번호 6,735,562에도 개시되어 있다.The
상기 제어부(270)는 상기 인식된 사용자 음성이 임계치(threshold value)보다 높은 신뢰도 점수에 해당되는지를 결정하고, 상기 인식된 사용자 음성이 임계치(threshold value)보다 높은 신뢰도 점수에 해당되면 상기 사용자 음성을 허용(accpept)한다. The
반면, 상기 제어부(270)는, 상기 인식된 사용자 음성이 상기 임계치보다 낮은 신뢰도 점수에 해당되면 상기 인식된 사용자 음성 신호를 거절(reject)한 후, 미리설정된 안내 메시지(예를 들면, 조금 천천히 이야기 해 주십시오)를 제공하여 음성 인식을 재유도한다. 예를 들면, 상기 제어부(270)는, 상기 임계치(threshold value)가 6000 이라고 가정할 때, 상기 6252 신뢰도 점수를 갖는 "채널 올려"와 상기 8242 신뢰도 점수를 갖는 "채널 내려"를 상기 사용자 음성으로 인식하고, 상기 2024 신뢰도 점수를 갖는 "볼륨 올려"를 사용자 음성으로 인식하지 않고 거절한다.On the other hand, if the recognized user voice corresponds to a reliability score lower than the threshold value, the
상기 제어부(270)는 상기 임계치(threshold value) 이상에 해당하는 사용자 음성을 신뢰도 점수 순서대로 나열한다. 예를 들면, 상기 제어부(270)는 상기 8242 신뢰도 점수를 갖는 "채널 내려", 상기 6252 신뢰도 점수를 갖는 "채널 올려" 순서대로 나열할 수도 있다.The
상기 제어부(270)는 상기 임계치(threshold value)를 사용자 음성 사용률(사용자 음성 사용 패턴)에 따라 변경할 수도 있다(S13). 상기 사용자 사용 음성 패턴은, 상기 영상 표시 장치의 채널 및 볼륨을 제어하기 위한 제1 사용자 음성의 사용률, 상기 영상 표시 장치를 통해 웹 브라우저를 실행시키기 위한 제2 사용자 음성의 사용률, 상기 영상 표시 장치를 통해 응용 프로그램을 실행시키기 위한 제3 사용자 음성의 사용률, 상기 영상 표시 장치의 방송 프로그램 검색을 위한 제4 사용자 음성의 사용률 중에서 적어도 어느 하나 이상을 포함할 수 있다.The
상기 제어부(270)는 상기 영상 표시 장치(200)의 기능에 따라 미리 분류된(Categorized) 사용자 음성 사용률(사용자 사용 음성 패턴)을 근거로 상기 임계치를 변경함으로써 사용자 음성 인식 확률을 증가시킬 수 있다. 예를 들면, 상기 제어부(270)는, 상기 영상 표시 장치(200)의 채널 및 볼륨을 제어하기 위한 제1 사용자 음성(예를 들면, 채널 올려, 채널 내려, 볼륨 내려, 볼륨 올려 등), 상기 영상 표시 장치(200)를 통해 웹 브라우저를 실행시키기 위한 제2 사용자 음성(예를 들면, 인터넷, 웹 사이트, 등), 상기 영상 표시 장치(200)를 통해 다양한 응용 프로그램(예를 들면, 메신저, 메일 응용 프로그램 등)을 실행시키기 위한 제3 사용자 음성(예를 들면, 메신저, 메일 등), 상기 영상 표시 장치(200)의 방송 프로그램 검색을 위한 제4 사용자 음성(예를 들면, 드라마 이름, 예능 프로그램 이름 등)으로 분류할 수 있다. 상기 제1 내지 제4 사용자 음성은 미리 정의되거나, 서버로부터 수신될 수 있다. The
도 4는 본 발명의 실시예에 따른 사용자 사용 음성 패턴을 나타낸 예시도이다.4 is a diagram illustrating an example of a voice pattern used by a user according to an embodiment of the present invention.
도 4에 도시한 바와 같이, 상기 제1 사용자 음성의 사용률이 전체(100%) 중에서 60%(4-1)이고, 상기 제2 사용자 음성의 사용률이 전체(100%) 중에서 10%(4-2)이고, 상기 제3 사용자 음성의 사용률이 전체(100%) 중에서 20%(4-3)이고, 상기 제4 사용자 음성의 사용률이 전체(100%) 중에서 10%(4-4)라고 가정할 때, 상기 제어부(270)는, 상기 제1 사용자 음성(예를 들면, 채널 올려, 채널 내려, 볼륨 내려, 볼륨 올려 등)이 상기 음성 인식부(292)에 의해 인식되면 상기 임계치를 6000에서 6500으로 증가시킴으로써, 발음상 비슷한 발화(예를 들면, 채널 올려, 채널 내려, 볼륨 내려, 볼륨 올려 등)에 대한 사용자 음성 인식률을 높인다. 상기 제어부(270)는, 상기 제4 사용자 음성(예를 들면, 드라마 이름, 예능 프로그램 이름 등)이 상기 음성 인식부(292)에 의해 인식되면 상기 임계치를 6000에서 5000으로 감소시킴으로써, 자주 사용하지 않는 사용자 음성에 대한 사용자 음성 인식률을 높인다. 상기 제1 내지 제4 사용자 음성의 사용률은 사용자가 평균적으로 사용하는 음성의 사용률일 수도 있다.4, the usage rate of the first user's voice is 60% (4-1) of the whole (100%) and the usage rate of the second user's voice is 10% (4- 2), the use rate of the third user voice is 20% (4-3) of the whole (100%), and the usage rate of the fourth user voice is 10% (4-4) The
따라서, 상기 제어부(270)는, 상기 제1 사용자 음성(예를 들면, 채널 올려, 채널 내려, 볼륨 내려, 볼륨 올려 등)과 같이 사용률이 높은 경우 유사한 발음을 갖는 음성(예를 들면, 채널 올려, 채널 내려, 볼륨 내려, 볼륨 올려 등)이 다수 존재할 가능성이 높으므로, 상기 임계치를 증가시킴으로써 발음상 비슷한 발화(예를 들면, 채널 올려, 채널 내려, 볼륨 내려, 볼륨 올려 등)에 대한 사용자 음성 인식률을 높인다. 상기 제어부(270)는, 상기 제4 사용자 음성(예를 들면, 드라마 이름, 예능 프로그램 이름 등)과 같이 사용률이 낮은 경우 유사한 발음을 갖는 음성(예를 들면, 드라마 이름, 예능 프로그램 이름 등)이 다수 존재할 가능성이 낮으므로, 상기 임계치를 감소시킴으로써 상기 제4 사용자 음성에 대한 사용자 음성 인식률을 높인다. 상기 제어부(270)는 유사한 발음을 갖는 다수의 사용자 음성이 인식되면 상기 임계치를 증가시킴으로써 상기 유사한 발음을 갖는 다수의 사용자 음성의 인식 확률을 높일 수 있다.Accordingly, when the usage rate is high, such as the first user voice (for example, channel up, channel down, volume down, volume up, etc.) (For example, channel up, channel down, volume down, volume up, etc.) by increasing the threshold, since there is a high possibility that many channels exist, Increase recognition rate. The
상기 제어부(270)는 다양한 사용자 음성이 인식될 때마다 상기 다양한 사용자 음성의 사용 횟수(발화 횟수)를 카운트함으로써 상기 다양한 사용자 음성 각각의 사용률을 계산하고, 상기 계산된 각 사용자 음성 사용률에 따라 상기 임계치를 변경할 수도 있다.The
상기 제어부(270)는 상기 인식된 사용자 음성이 상기 변경된 임계치(threshold value)보다 높은 신뢰도 점수에 해당되는지를 결정하고(S14), 상기 인식된 사용자 음성이 임계치(threshold value)보다 높은 신뢰도 점수에 해당되면 상기 사용자 음성을 허용(accpept)한다(S15). The
반면, 상기 제어부(270)는, 상기 인식된 사용자 음성이 상기 변경된 임계치보다 낮은 신뢰도 점수에 해당되면 상기 인식된 사용자 음성 신호를 거절(reject)한 후(S16), 미리설정된 안내 메시지(예를 들면, 조금 천천히 이야기 해 주십시오)를 제공하여 음성 인식을 재유도한다. On the other hand, if the recognized user voice corresponds to a reliability score lower than the changed threshold value, the
따라서, 본 발명의 실시예에 따른 음성 인식 장치 및 그 방법은, 사용자 음성 패턴(영상 표시기기, 이동 통신 단말기 등의 전자 장치의 기능들에 따라 미리 분류된 각 사용자 음성의 사용률)에 따라 임계치를 변경함으로써 사용자 음성을 정확히 인식할 수 있다. Therefore, the speech recognition apparatus and method according to the embodiment of the present invention can reduce a threshold value according to a user's voice pattern (a usage rate of each user's voice classified in advance according to functions of an electronic device such as a video display device or a mobile communication terminal) The user's voice can be accurately recognized.
도 5는 본 발명의 다른 실시예에 따른 음성 인식 방법을 나타낸 흐름도이다.5 is a flowchart illustrating a speech recognition method according to another embodiment of the present invention.
먼저, 상기 음성 인식부(292)는 사용자 발화에 따른 사용자 음성을 수신한다(S21). First, the
상기 음성 인식부(292)는 입력 음성과 다수의 음성 모델들 간의 유사도를 나타내는 신뢰도 점수들(confidence scores)을 제공하는 미리결정된 모델들과 상기 사용자의 발성에 의해 입력되는 사용자 음성을 비교함으로써, 상기 사용자 음성을 인식하고, 그 인식된 결과를 상기 제어부(270)에 출력한다(S22). 상기 인식된 사용자 음성은 신뢰도 점수를 포함한다. 예를 들면, 사용자 발화에 따른 사용자 음성이 채널 올려, 채널 내려, 볼륨 올려, 등이라고 가정할 때, 상기 채널 올려는 6252 신뢰도 점수를 가질 수 있으며, 채널 내려는 8242 신뢰도 점수를 가질 수 있으며, 볼륨 올려는 2024 신뢰도 점수를 가질 수 있다. The
상기 제어부(270)는 상기 인식된 사용자 음성이 임계치(threshold value)보다 높은 신뢰도 점수에 해당되는지를 결정하고, 상기 인식된 사용자 음성이 임계치(threshold value)보다 높은 신뢰도 점수에 해당되면 상기 사용자 음성을 허용(accpept)한다. The
반면, 상기 제어부(270)는, 상기 인식된 사용자 음성이 상기 임계치보다 낮은 신뢰도 점수에 해당되면 상기 인식된 사용자 음성 신호를 거절(reject)한 후, 미리설정된 안내 메시지(예를 들면, 조금 천천히 이야기 해 주십시오)를 제공하여 음성 인식을 재유도한다. 예를 들면, 상기 제어부(270)는, 상기 임계치(threshold value)가 6000 이라고 가정할 때, 상기 6252 신뢰도 점수를 갖는 "채널 올려"와 상기 8242 신뢰도 점수를 갖는 "채널 내려"를 상기 사용자 음성으로 인식하고, 상기 2024 신뢰도 점수를 갖는 "볼륨 올려"를 사용자 음성으로 인식하지 않고 거절한다.On the other hand, if the recognized user voice corresponds to a reliability score lower than the threshold value, the
상기 제어부(270)는 상기 임계치(threshold value) 이상에 해당하는 사용자 음성을 신뢰도 점수 순서대로 나열한다. 예를 들면, 상기 제어부(270)는 상기 8242 신뢰도 점수를 갖는 "채널 내려", 상기 6252 신뢰도 점수를 갖는 "채널 올려" 순서대로 나열할 수도 있다.The
상기 제어부(270)는 상기 임계치(threshold value)를 사용자의 사용 기능 패턴(예를 들면, 영상 표시 기기, 이동 통신 단말기 등과 같은 전자 기기의 각 기능의 사용률)에 따라 변경할 수도 있다(S23). 상기 사용 기능 패턴은, 상기 영상 표시 장치의 채널 및 볼륨을 제어하기 위한 제1 사용자 사용 기능의 사용률, 상기 영상 표시 장치를 통해 웹 브라우저를 실행시키기 위한 제2 사용자 사용 기능의 사용률, 상기 영상 표시 장치를 통해 응용 프로그램을 실행시키기 위한 제3 사용자 사용 기능의 사용률, 상기 영상 표시 장치의 방송 프로그램 검색을 위한 제4 사용자 사용 기능의 사용률 중에서 적어도 어느 하나 이상을 포함할 수 있다.The
상기 제어부(270)는 상기 영상 표시 장치(200)의 기능에 따라 미리 분류된(Categorized) 사용자 사용 기능 패턴을 근거로 상기 임계치를 변경함으로써 사용자 음성 인식 확률을 증가시킬 수 있다. 예를 들면, 상기 제어부(270)는, 상기 영상 표시 장치(200)의 채널 및 볼륨을 제어하기 위한 제1 사용자 사용 기능(예를 들면, 채널 올림 버튼, 채널 내림 버튼, 볼륨 내림 버튼, 볼륨 올림 버튼 등), 상기 영상 표시 장치(200)를 통해 웹 브라우저를 실행시키기 위한 제2 사용자 사용 기능(예를 들면, 인터넷, 웹 사이트, 등), 상기 영상 표시 장치(200)를 통해 다양한 응용 프로그램(예를 들면, 메신저, 메일 응용 프로그램 등)을 실행시키기 위한 제3 사용자 사용 기능(예를 들면, 메신저, 메일 등), 상기 영상 표시 장치(200)의 방송 프로그램 검색을 위한 제4 사용자 사용 기능(예를 들면, 드라마 이름 검색, 예능 프로그램 이름 검색 등)으로 분류할 수 있다. 상기 제1 내지 제4 사용자 사용 기능은, 각 사용자에 따라 수집되어 정의될 수 있다. The
도 6은 본 발명의 실시예에 따른 사용자 사용 기능 패턴을 나타낸 예시도이다.FIG. 6 is a view illustrating an example of a user-using function pattern according to an embodiment of the present invention.
도 6에 도시한 바와 같이, 상기 제1 사용자 사용 기능의 사용률이 전체(100%) 중에서 60%(6-1)이고, 상기 제2 사용자 사용 기능의 사용률이 전체(100%) 중에서 10%(6-2)이고, 상기 제3 사용자 사용 기능의 사용률이 전체(100%) 중에서 20%(6-3)이고, 상기 제4 사용자 사용 기능의 사용률이 전체(100%) 중에서 10%(6-4)라고 가정할 때, 상기 제어부(270)는, 상기 제1 사용자 사용 기능(예를 들면, 채널 올림 버튼, 채널 내림 버튼, 볼륨 내림 버튼, 볼륨 올림 버튼 등)이 검출되면 상기 임계치를 6000에서 6500으로 증가시킴으로써, 발음상 비슷한 발화(예를 들면, 채널 올려, 채널 내려, 볼륨 내려, 볼륨 올려 등)에 대한 사용자 음성 인식률을 높인다. 상기 제어부(270)는, 상기 제4 사용자 사용 기능(예를 들면, 드라마 이름 검색, 예능 프로그램 이름 검색 등)이 검출되면 상기 임계치를 6000에서 5000으로 감소시킴으로써, 자주 사용하지 않는 사용자 음성에 대한 사용자 음성 인식률을 높인다. 상기 제1 내지 제4 사용자 사용 기능의 사용률은 사용자가 평균적으로 사용하는 기능의 사용률이거나, 평균 사용자 사용 기능의 사용률일 수도 있다. 상기 제어부(270)는 상기 사용자 사용 기능 패턴(제1 내지 제4 사용자 사용 기능의 사용률)을 서버에 전송한 후 서버로부터 상기 사용자 사용 기능 패턴에 대응하는 임계치를 수신하고, 그 수신된 임계치를 수신할 수도 있다. 6, the usage rate of the first user use function is 60% (6-1) of the total (100%), the usage rate of the second user use function is 10% (100% 6-2), the usage rate of the third user use function is 20% (6-3) of the total (100%), the usage rate of the fourth user use function is 10% 4), when the first user using function (for example, a channel up button, a channel down button, a volume down button, a volume up button, etc.) is detected, the
따라서, 상기 제어부(270)는, 상기 제1 사용자 사용 기능(예를 들면, 채널 올림 버튼, 채널 내림 버튼, 볼륨 내림 버튼, 볼륨 올림 버튼 등)과 같이 사용률이 높은 경우 유사한 발음을 갖는 음성(예를 들면, 채널 올려, 채널 내려, 볼륨 내려, 볼륨 올려 등)이 다수 존재할 가능성이 높으므로, 상기 임계치를 증가시킴으로써 발음상 비슷한 발화(예를 들면, 채널 올려, 채널 내려, 볼륨 내려, 볼륨 올려 등)에 대한 사용자 음성 인식률을 높인다. 상기 제어부(270)는, 상기 제4 사용자 사용 기능(예를 들면, 드라마 이름 검색, 예능 프로그램 이름 검색 등)과 같이 사용률이 낮은 경우 유사한 발음을 갖는 음성(예를 들면, 드라마 이름, 예능 프로그램 이름 등)이 다수 존재할 가능성이 낮으므로, 상기 임계치를 감소시킴으로써 상기 제4 사용자 사용 기능에 대한 사용자 음성 인식률을 높인다. 상기 제어부(270)는 유사한 발음을 갖는 다수의 사용자 음성이 인식되면 상기 임계치를 증가시킴으로써 상기 유사한 발음을 갖는 다수의 사용자 음성의 인식 확률을 높일 수 있다.Accordingly, the
상기 제어부(270)는 다양한 사용자 음성이 인식될 때마다 상기 다양한 사용자 음성의 사용 횟수(발화 횟수)를 카운트함으로써 상기 다양한 사용자 음성 각각의 사용률을 계산하고, 상기 계산된 각 사용자 음성 사용률에 따라 상기 임계치를 변경할 수도 있다.The
상기 제어부(270)는 상기 인식된 사용자 음성이 상기 변경된 임계치(threshold value)보다 높은 신뢰도 점수에 해당되는지를 결정하고(S14), 상기 인식된 사용자 음성이 임계치(threshold value)보다 높은 신뢰도 점수에 해당되면 상기 사용자 음성을 허용(accpept)한다(S15). 상기 제어부(270)는 상기 인식된 사용자 음성이 상기 서버로부터 수신된 임계치(threshold value)보다 높은 신뢰도 점수에 해당되는지를 결정하고, 상기 인식된 사용자 음성이 상기 서버로부터 수신된임계치보다 높은 신뢰도 점수에 해당되면 상기 사용자 음성을 허용(accpept)할 수도 있다. The
반면, 상기 제어부(270)는, 상기 인식된 사용자 음성이 상기 변경된 임계치보다 낮은 신뢰도 점수에 해당되면 상기 인식된 사용자 음성 신호를 거절(reject)한 후(S16), 미리설정된 안내 메시지(예를 들면, 조금 천천히 이야기 해 주십시오)를 제공하여 음성 인식을 재유도한다. 상기 제어부(270)는, 상기 인식된 사용자 음성이 상기 서버로부터 수신된 임계치보다 낮은 신뢰도 점수에 해당되면 상기 인식된 사용자 음성 신호를 거절(reject)한 후, 미리설정된 안내 메시지(예를 들면, 조금 천천히 이야기 해 주십시오)를 제공하여 음성 인식을 재유도할 수도 있다. On the other hand, if the recognized user voice corresponds to a reliability score lower than the changed threshold value, the
따라서, 본 발명의 다른 실시예에 따른 음성 인식 장치 및 그 방법은, 사용자 사용 기능 패턴(영상 표시기기, 이동 통신 단말기 등의 전자 장치의 각 기능들의 사용률)에 따라 임계치를 변경함으로써 사용자 음성을 정확히 인식할 수 있다. Therefore, the speech recognition apparatus and method according to another embodiment of the present invention can accurately determine the user's voice by changing the threshold value according to the pattern of the user's use function (the usage rate of each function of the electronic display device such as the video display device or the mobile communication terminal) Can be recognized.
이상에서 설명한 바와 같이, 본 발명의 실시예들에 따른 음성 인식 장치 및 그 방법은, 사용자 음성 패턴(영상 표시기기, 이동 통신 단말기 등의 전자 장치의 기능들에 따라 미리 분류된 각 사용자 음성의 사용률)에 따라 임계치를 변경함으로써 사용자 음성을 정확히 인식할 수 있다. As described above, the speech recognition apparatus and the method according to the embodiments of the present invention can be applied to a speech recognition apparatus, a speech recognition apparatus, a speech recognition apparatus, The user's voice can be correctly recognized by changing the threshold value.
본 발명의 실시예들에 따른 음성 인식 장치 및 그 방법은, 사용자 사용 기능 패턴(영상 표시기기, 이동 통신 단말기 등의 전자 장치의 각 기능들의 사용률)에 따라 임계치를 변경함으로써 사용자 음성을 정확히 인식할 수 있다. The speech recognition apparatus and method according to embodiments of the present invention can recognize a user's voice accurately by changing a threshold value according to a function pattern of a user using function (a usage rate of each function of an electronic device such as a video display device or a mobile communication terminal) .
본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다. It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims. Therefore, the embodiments disclosed in the present invention are intended to illustrate rather than limit the scope of the present invention, and the scope of the technical idea of the present invention is not limited by these embodiments. The scope of protection of the present invention should be construed according to the following claims, and all technical ideas within the scope of equivalents should be construed as falling within the scope of the present invention.
270: 제어부 292: 음성 인식부270: control unit 292:
Claims (16)
상기 인식된 사용자 음성의 신뢰도 점수와 임계치를 근거로 상기 인식된 사용자 음성을 허용 또는 거절하는 제어부를 포함하며, 상기 제어부는 사용자 사용 음성 패턴에 따라 상기 임계치를 변경하는 것을 특징으로 하는 음성 처리 장치.A speech recognition unit for recognizing a user speech based on predetermined speech models providing reliability scores;
And a control unit for allowing or rejecting the recognized user voice based on the reliability score and the threshold of the recognized user voice, wherein the control unit changes the threshold value according to a user-used voice pattern.
상기 사용자 사용 음성 패턴에 따라 상기 임계치를 증가시키거나 감소시키는 것을 특징으로 하는 음성 처리 장치.The apparatus of claim 1,
Wherein the threshold value is increased or decreased according to the user-used voice pattern.
상기 인식된 사용자 음성의 신뢰도 점수가 상기 증가 또는 감소한 임계치보다 높으면 상기 인식된 사용자 음성을 허용하는 것을 특징으로 하는 음성 처리 장치.3. The apparatus of claim 2,
And permits the recognized user voice if the reliability score of the recognized user voice is higher than the increased or decreased threshold value.
상기 인식된 사용자 음성의 신뢰도 점수가 상기 증가 또는 감소한 임계치보다 낮으면 상기 인식된 사용자 음성을 거절하는 것을 특징으로 하는 음성 처리 장치.3. The apparatus of claim 2,
And rejects the recognized user voice if the reliability score of the recognized user voice is lower than the increased or decreased threshold value.
영상 표시 장치의 기능에 따라 미리 분류된 상기 사용자 사용 음성 패턴을 근거로 상기 임계치를 변경하는 것을 특징으로 하는 음성 처리 장치.3. The apparatus of claim 2,
Wherein the threshold value is changed based on the user-used voice pattern classified in advance according to the function of the video display device.
상기 영상 표시 장치의 채널 및 볼륨을 제어하기 위한 제1 사용자 음성의 사용률, 상기 영상 표시 장치를 통해 웹 브라우저를 실행시키기 위한 제2 사용자 음성의 사용률, 상기 영상 표시 장치를 통해 응용 프로그램을 실행시키기 위한 제3 사용자 음성의 사용률, 상기 영상 표시 장치의 방송 프로그램 검색을 위한 제4 사용자 음성의 사용률 중에서 적어도 어느 하나 이상을 포함하는 것을 특징으로 하는 음성 처리 장치.6. The method of claim 5, wherein the pre-
A usage rate of a first user voice for controlling a channel and a volume of the video display device, a usage rate of a second user voice for executing a web browser through the video display device, The rate of use of the third user's voice, and the rate of use of the fourth user's voice for searching the broadcast program of the video display device.
상기 사용자 사용 음성 패턴을 미리 설정하는 것을 특징으로 하는 음성 처리 장치.7. The apparatus of claim 6,
And the user-used voice pattern is set in advance.
서버로부터 상기 사용자 사용 음성 패턴을 수신하는 것을 특징으로 하는 음성 처리 장치.7. The apparatus of claim 6,
And the user-used voice pattern is received from the server.
사용자 평균 사용 음성의 사용률인 것을 특징으로 하는 음성 처리 장치.7. The method of claim 6,
And the usage rate of the average user-used voice.
유사 발음을 갖는 다수의 사용자 음성이 인식되면 상기 임계치를 증가시킴으로써 상기 유사 발음을 갖는 다수의 사용자 음성의 인식 확률을 증가시키는 것을 특징으로 하는 음성 처리 장치.The apparatus of claim 1,
And increases the recognition probability of a plurality of user voices having the similar pronunciation by increasing the threshold when a plurality of user voices having similar pronunciation are recognized.
사용자 사용 음성 패턴에 따라 임계치를 변경하는 단계와;
상기 인식된 사용자 음성의 신뢰도 점수와 상기 임계치를 근거로 상기 인식된 사용자 음성을 허용 또는 거절하는 단계를 포함하는 것을 특징으로 하는 음성 처리 방법.Recognizing the user speech based on predetermined speech models providing confidence scores;
Changing a threshold value according to a user-used voice pattern;
And allowing or rejecting the recognized user voice based on the reliability score of the recognized user voice and the threshold value.
상기 사용자 사용 음성 패턴에 따라 상기 임계치를 증가시키거나 감소시키는 단계인 것을 특징으로 하는 음성 처리 방법.12. The method of claim 11, wherein changing the threshold comprises:
And increasing or decreasing the threshold according to the user-used speech pattern.
상기 인식된 사용자 음성의 신뢰도 점수가 상기 증가 또는 감소한 임계치보다 높으면 상기 인식된 사용자 음성을 허용하는 단계인 것을 특징으로 하는 음성 처리 방법.13. The method of claim 12, wherein allowing the recognized user voice comprises:
And allowing the recognized user voice if the reliability score of the recognized user voice is higher than the increased or decreased threshold.
상기 인식된 사용자 음성의 신뢰도 점수가 상기 증가 또는 감소한 임계치보다 낮으면 상기 인식된 사용자 음성을 거절하는 단계인 것을 특징으로 하는 음성 처리 방법.13. The method of claim 12, wherein rejecting the recognized user voice comprises:
And rejecting the recognized user voice if the reliability score of the recognized user voice is lower than the increased or decreased threshold.
영상 표시 장치의 기능에 따라 미리 분류된 상기 사용자 사용 음성 패턴을 근거로 상기 임계치를 변경하는 단계인 것을 특징으로 하는 음성 처리 방법.13. The method of claim 12, wherein changing the threshold comprises:
And changing the threshold value based on the user-used voice pattern classified in advance according to the function of the video display device.
상기 영상 표시 장치의 채널 및 볼륨을 제어하기 위한 제1 사용자 음성의 사용률, 상기 영상 표시 장치를 통해 웹 브라우저를 실행시키기 위한 제2 사용자 음성의 사용률, 상기 영상 표시 장치를 통해 응용 프로그램을 실행시키기 위한 제3 사용자 음성의 사용률, 상기 영상 표시 장치의 방송 프로그램 검색을 위한 제4 사용자 음성의 사용률 중에서 적어도 어느 하나 이상을 포함하는 것을 특징으로 하는 음성 처리 방법.16. The method of claim 15, wherein the pre-
A usage rate of a first user voice for controlling a channel and a volume of the video display device, a usage rate of a second user voice for executing a web browser through the video display device, A usage rate of a third user voice, and a usage rate of a fourth user voice for searching a broadcast program of the video display device.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020130106218A KR102158210B1 (en) | 2013-09-04 | 2013-09-04 | Speech recognition apparatus and method thereof |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020130106218A KR102158210B1 (en) | 2013-09-04 | 2013-09-04 | Speech recognition apparatus and method thereof |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20150027592A true KR20150027592A (en) | 2015-03-12 |
KR102158210B1 KR102158210B1 (en) | 2020-09-22 |
Family
ID=53022892
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020130106218A KR102158210B1 (en) | 2013-09-04 | 2013-09-04 | Speech recognition apparatus and method thereof |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102158210B1 (en) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018021750A1 (en) * | 2016-07-27 | 2018-02-01 | 삼성전자 주식회사 | Electronic device and voice recognition method thereof |
KR102093851B1 (en) * | 2018-11-30 | 2020-03-26 | 엘지전자 주식회사 | Method of increasing speech recognition and device of implementing thereof |
CN111583907A (en) * | 2020-04-15 | 2020-08-25 | 北京小米松果电子有限公司 | Information processing method, device and storage medium |
WO2022169039A1 (en) * | 2021-02-02 | 2022-08-11 | 삼성전자주식회사 | Electronic apparatus and controlling method thereof |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS58189697A (en) * | 1982-04-30 | 1983-11-05 | 日産自動車株式会社 | Voice recognition equipment for vehicle |
JP2009205178A (en) * | 2003-10-03 | 2009-09-10 | Asahi Kasei Corp | Data process unit, data process unit control program, data processing method, and specific pattern model providing system |
KR20120010433A (en) * | 2010-07-26 | 2012-02-03 | 엘지전자 주식회사 | Method for operating an apparatus for displaying image |
KR20120059235A (en) * | 2010-11-30 | 2012-06-08 | 엘지전자 주식회사 | Input apparatus and input method of image display device |
-
2013
- 2013-09-04 KR KR1020130106218A patent/KR102158210B1/en active IP Right Grant
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS58189697A (en) * | 1982-04-30 | 1983-11-05 | 日産自動車株式会社 | Voice recognition equipment for vehicle |
JP2009205178A (en) * | 2003-10-03 | 2009-09-10 | Asahi Kasei Corp | Data process unit, data process unit control program, data processing method, and specific pattern model providing system |
KR20120010433A (en) * | 2010-07-26 | 2012-02-03 | 엘지전자 주식회사 | Method for operating an apparatus for displaying image |
KR20120059235A (en) * | 2010-11-30 | 2012-06-08 | 엘지전자 주식회사 | Input apparatus and input method of image display device |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018021750A1 (en) * | 2016-07-27 | 2018-02-01 | 삼성전자 주식회사 | Electronic device and voice recognition method thereof |
US12094460B2 (en) | 2016-07-27 | 2024-09-17 | Samsung Electronics Co., Ltd. | Electronic device and voice recognition method thereof |
KR102093851B1 (en) * | 2018-11-30 | 2020-03-26 | 엘지전자 주식회사 | Method of increasing speech recognition and device of implementing thereof |
CN111583907A (en) * | 2020-04-15 | 2020-08-25 | 北京小米松果电子有限公司 | Information processing method, device and storage medium |
CN111583907B (en) * | 2020-04-15 | 2023-08-15 | 北京小米松果电子有限公司 | Information processing method, device and storage medium |
WO2022169039A1 (en) * | 2021-02-02 | 2022-08-11 | 삼성전자주식회사 | Electronic apparatus and controlling method thereof |
US11929081B2 (en) | 2021-02-02 | 2024-03-12 | Samsung Electronics Co., Ltd. | Electronic apparatus and controlling method thereof |
Also Published As
Publication number | Publication date |
---|---|
KR102158210B1 (en) | 2020-09-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107211020B (en) | Sink device and control method thereof | |
KR101631451B1 (en) | Image Display Device and Operating Method for the Same | |
KR101349276B1 (en) | Video display device and operating method therefor | |
EP2393081A2 (en) | Method for operating an image display apparatus and an image display apparatus | |
EP2424264A2 (en) | Method for operating image display apparatus | |
US9191651B2 (en) | Video display apparatus and operating method therefor | |
KR20140109168A (en) | Image controlling apparatus and method thereof | |
KR20140120211A (en) | Image display device and control method thereof | |
KR20110082380A (en) | Apparatus for displaying image and method for operating the same | |
KR102158210B1 (en) | Speech recognition apparatus and method thereof | |
KR102065047B1 (en) | Mobile terminal and control method thereof | |
KR20120034996A (en) | Image display apparatus, and method for operating the same | |
KR20140130904A (en) | Image displaying apparatus and method thereof | |
KR101861697B1 (en) | Apparatus of broadcasting program recording reservation for mobile communication terminal and method thereof | |
KR101668250B1 (en) | Apparatus for displaying image and method for operating the same | |
KR20170025562A (en) | Image display device and method for controlling | |
KR102369588B1 (en) | Digital device and method of processing data the same | |
KR20150024198A (en) | Image controlling apparatus and method thereof | |
KR20150051770A (en) | Apparatus and method for controlling of image display device | |
KR101832332B1 (en) | Liquid crystal display panel | |
KR20150031080A (en) | Video processing apparatus and method thereof | |
KR20140131797A (en) | Image controlling apparatus and method thereof | |
KR20150021399A (en) | Video processing apparatus and method thereof | |
KR101832965B1 (en) | Back light unit for lcd pannel | |
KR20160008893A (en) | Apparatus for controlling image display and method thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |