KR20210104420A - Display apparatus for using microphone of rotating display and controlling method thereof - Google Patents

Display apparatus for using microphone of rotating display and controlling method thereof Download PDF

Info

Publication number
KR20210104420A
KR20210104420A KR1020200019131A KR20200019131A KR20210104420A KR 20210104420 A KR20210104420 A KR 20210104420A KR 1020200019131 A KR1020200019131 A KR 1020200019131A KR 20200019131 A KR20200019131 A KR 20200019131A KR 20210104420 A KR20210104420 A KR 20210104420A
Authority
KR
South Korea
Prior art keywords
display
microphone set
microphones
microphone
processor
Prior art date
Application number
KR1020200019131A
Other languages
Korean (ko)
Inventor
박창현
김경환
오정일
이상호
이선관
조수호
황재연
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020200019131A priority Critical patent/KR20210104420A/en
Priority to PCT/KR2021/001743 priority patent/WO2021167285A1/en
Publication of KR20210104420A publication Critical patent/KR20210104420A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1601—Constructional details related to the housing of computer displays, e.g. of CRT monitors, of flat displays
    • G06F1/1605—Multimedia displays, e.g. with integrated or attached speakers, cameras, microphones
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/027—Spatial or constructional arrangements of microphones, e.g. in dummy heads

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Otolaryngology (AREA)
  • Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

A display device is disclosed. The display device includes: a rotatable display; a first microphone set including a plurality of microphones arranged in one direction on the display; a second microphone set including a plurality of microphones arranged in a direction perpendicular to the one direction on the display; and a processor which selects one microphone set from the first microphone set and the second microphone set on the basis of the rotation of the display, and performs at least one operation on the basis of user speech received through the selected microphone set. The present invention provides the display device which prevents a recognition rate of a user's voice from falling even when the display is rotated.

Description

회전하는 디스플레이 상의 마이크를 이용하는 디스플레이 장치 및 그 제어 방법 { DISPLAY APPARATUS FOR USING MICROPHONE OF ROTATING DISPLAY AND CONTROLLING METHOD THEREOF }A display device using a microphone on a rotating display and a control method therefor { DISPLAY APPARATUS FOR USING MICROPHONE OF ROTATING DISPLAY AND CONTROLLING METHOD THEREOF }

본 개시는 회전 가능한 디스플레이를 포함하는 디스플레이 장치에 관한 것이다. 보다 상세하게는, 회전 가능한 디스플레이 상에 부착된 하나 이상의 마이크 셋을 이용하는 디스플레이 장치에 관한 것이다.The present disclosure relates to a display device including a rotatable display. More particularly, it relates to a display device using one or more sets of microphones attached to a rotatable display.

빔포밍(Beamforming)은 일정한 배열의 수신기(ex. 마이크)를 이용하여 무선 신호를 수신하는 경우, 방향성을 부여하기 위한 기술이다. 각 수신기에 도달하는 신호들에 대한 가중치 및 지연시간을 조정하고, 조정된 신호들을 더함으로써 원하는 방향의 신호만을 상대적으로 크게 받아들일 수 있다.Beamforming is a technique for imparting directionality when a wireless signal is received using a receiver (eg, a microphone) of a predetermined arrangement. By adjusting the weight and delay time of the signals arriving at each receiver, and adding the adjusted signals, only a signal in a desired direction can be relatively large.

구체적인 예로, 복수의 마이크를 포함하는 전자 장치는, 두 개의 마이크를 이용하여 음성의 소스인 사용자의 방향을 식별하고, 식별된 방향의 신호만을 상대적으로 크게 받아들일 수 있다. 이렇듯, 적어도 두 개의 마이크를 통해 수신되는 오디오 신호와 관련하여, 빔포밍 기술이 적용된 다양한 제품들이 출시 내지는 공개된바 있다.As a specific example, an electronic device including a plurality of microphones may use two microphones to identify a direction of a user, which is a source of a voice, and may receive only a signal in the identified direction to a relatively large extent. As such, in relation to an audio signal received through at least two microphones, various products to which beamforming technology is applied have been released or disclosed.

본 개시는, 디스플레이 상에 부착된 복수의 마이크를 이용함에 있어, 디스플레이가 회전하더라도 사용자 음성에 대한 인식률이 떨어지지 않도록 하는 디스플레이 장치를 제공한다.The present disclosure provides a display device that prevents a recognition rate of a user's voice from falling even when the display rotates when using a plurality of microphones attached to a display.

본 개시의 일 실시 예에 따른 디스플레이 장치는, 회전 가능한 디스플레이, 상기 디스플레이 상에서 일 방향으로 배열된 복수의 마이크를 포함하는 제1 마이크 셋, 상기 디스플레이 상에서 상기 일 방향과 수직한 방향으로 배열된 복수의 마이크를 포함하는 제2 마이크 셋, 상기 디스플레이의 회전에 기초하여 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 하나의 마이크 셋을 선택하고, 상기 선택된 마이크 셋을 통해 수신된 사용자 음성을 기반으로 적어도 하나의 동작을 수행하는 프로세서를 포함한다.A display apparatus according to an embodiment of the present disclosure includes a rotatable display, a first microphone set including a plurality of microphones arranged in one direction on the display, and a plurality of microphones arranged in a direction perpendicular to the one direction on the display. A second microphone set including a microphone, one microphone set from among the first microphone set and the second microphone set is selected based on rotation of the display, and at least based on a user voice received through the selected microphone set It includes a processor that performs one operation.

이때, 상기 디스플레이가 세로 방향으로 배치된 경우, 상기 제1 마이크 셋에 포함된 상기 복수의 마이크는 상기 가로 방향으로 배열되고, 상기 제2 마이크 셋에 포함된 상기 복수의 마이크는 세로 방향으로 배열되고, 상기 디스플레이가 가로 방향으로 배치된 경우, 상기 제1 마이크 셋에 포함된 상기 복수의 마이크는 상기 세로 방향으로 배열되고, 상기 제2 마이크 셋에 포함된 상기 복수의 마이크는 상기 가로 방향으로 배열될 수 있다.In this case, when the display is arranged in the vertical direction, the plurality of microphones included in the first microphone set are arranged in the horizontal direction, and the plurality of microphones included in the second microphone set are arranged in the vertical direction, , when the display is arranged in the horizontal direction, the plurality of microphones included in the first set of microphones are arranged in the vertical direction, and the plurality of microphones included in the second set of microphones are arranged in the horizontal direction. can

여기서, 상기 프로세서는, 상기 디스플레이의 회전에 따라 상기 디스플레이가 상기 세로 방향으로 배치된 경우, 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 상기 제1 마이크 셋을 선택할 수 있다.Here, when the display is arranged in the vertical direction according to rotation of the display, the processor may select the first microphone set from among the first microphone set and the second microphone set.

또한, 상기 프로세서는, 상기 디스플레이의 회전에 따라 상기 디스플레이가 상기 가로 방향으로 배치된 경우, 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 상기 제2 마이크 셋을 선택할 수 있다.In addition, the processor may select the second microphone set from among the first microphone set and the second microphone set when the display is arranged in the horizontal direction according to rotation of the display.

한편, 상기 제1 마이크 셋에 포함된 상기 복수의 마이크는, 상기 디스플레이 상에서 제1 측에 인접한 영역에 배치되고, 상기 제2 마이크 셋에 포함된 상기 복수의 마이크는, 상기 디스플레이 상에서 상기 제1 측과 수직한 제2 측에 인접한 영역에 배치될 수 있다.Meanwhile, the plurality of microphones included in the first microphone set are disposed in an area adjacent to the first side on the display, and the plurality of microphones included in the second microphone set are disposed on the first side on the display It may be disposed in a region adjacent to the second side perpendicular to the .

한편, 상기 디스플레이 장치는, 상기 디스플레이를 회전시키기 위한 회전부를 더 포함할 수 있다. 이 경우, 상기 프로세서는, 상기 디스플레이를 회전시키기 위한 사용자 명령이 입력되면, 상기 사용자 명령에 따라 상기 디스플레이를 회전시키도록 상기 회전부를 제어할 수 있다. 그리고, 상기 프로세서는 상기 사용자 명령에 대응되는 상기 디스플레이의 배치 상태를 기반으로, 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 하나의 마이크 셋을 선택할 수 있다.Meanwhile, the display device may further include a rotating unit for rotating the display. In this case, when a user command for rotating the display is input, the processor may control the rotating unit to rotate the display according to the user command. In addition, the processor may select one of the first microphone set and the second microphone set based on an arrangement state of the display corresponding to the user command.

또한, 상기 디스플레이 장치는, 상기 디스플레이의 회전을 감지하기 위한 센서를 더 포함할 수 있다. 이 경우, 상기 프로세서는, 상기 센서를 통해 수신된 센싱 데이터를 기반으로 상기 디스플레이의 배치 상태를 감지하고, 상기 감지된 배치 상태를 기반으로 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 하나의 마이크 셋을 선택할 수도 있다.Also, the display device may further include a sensor for detecting rotation of the display. In this case, the processor detects an arrangement state of the display based on the sensed data received through the sensor, and based on the sensed arrangement state, one of the first microphone set and the second microphone set You can also choose three.

본 개시의 일 실시 예에 따라 회전 가능한 디스플레이를 포함하는 디스플레이 장치의 제어 방법은, 상기 디스플레이를 회전시키는 단계, 상기 디스플레이의 회전에 기초하여 상기 디스플레이에 부착된 제1 마이크 셋 및 제2 마이크 셋 중 하나의 마이크 셋을 선택하는 단계, 상기 선택된 마이크 셋을 통해 수신된 사용자 음성을 기반으로 적어도 하나의 동작을 수행하는 단계를 포함한다. 이때, 상기 제1 마이크 셋은 상기 디스플레이 상에서 일 방향으로 배열된 복수의 마이크를 포함하고, 상기 제2 마이크 셋은 상기 디스플레이 상에서 상기 일 방향과 수직한 방향으로 배열된 복수의 마이크를 포함한다.According to an embodiment of the present disclosure, a method of controlling a display device including a rotatable display includes rotating the display, one of a first microphone set and a second microphone set attached to the display based on the rotation of the display. and selecting one microphone set, and performing at least one operation based on a user voice received through the selected microphone set. In this case, the first microphone set includes a plurality of microphones arranged in one direction on the display, and the second microphone set includes a plurality of microphones arranged in a direction perpendicular to the one direction on the display.

여기서, 상기 디스플레이가 세로 방향으로 배치된 경우, 상기 제1 마이크 셋에 포함된 상기 복수의 마이크는 상기 가로 방향으로 배열되고, 상기 제2 마이크 셋에 포함된 상기 복수의 마이크는 세로 방향으로 배열될 수 있다. 그리고, 상기 디스플레이가 가로 방향으로 배치된 경우, 상기 제1 마이크 셋에 포함된 상기 복수의 마이크는 상기 세로 방향으로 배열되고, 상기 제2 마이크 셋에 포함된 상기 복수의 마이크는 상기 가로 방향으로 배열될 수 있다.Here, when the display is arranged in the vertical direction, the plurality of microphones included in the first microphone set are arranged in the horizontal direction, and the plurality of microphones included in the second microphone set are arranged in the vertical direction. can And, when the display is arranged in the horizontal direction, the plurality of microphones included in the first microphone set are arranged in the vertical direction, and the plurality of microphones included in the second microphone set are arranged in the horizontal direction can be

이때, 상기 선택하는 단계는, 상기 디스플레이의 회전에 따라 상기 디스플레이가 상기 세로 방향으로 배치된 경우, 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 상기 제1 마이크 셋을 선택할 수 있다.In this case, the selecting may include selecting the first microphone set from among the first microphone set and the second microphone set when the display is arranged in the vertical direction according to rotation of the display.

또한, 상기 선택하는 단계는, 상기 디스플레이의 회전에 따라 상기 디스플레이가 상기 가로 방향으로 배치된 경우, 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 상기 제2 마이크 셋을 선택할 수 있다.In addition, the selecting may include selecting the second microphone set from among the first microphone set and the second microphone set when the display is arranged in the horizontal direction according to rotation of the display.

한편, 상기 회전시키는 단계는, 상기 디스플레이를 회전시키기 위한 사용자 명령이 입력되면, 상기 사용자 명령에 따라 상기 디스플레이를 회전시킬 수 있다. 이 경우, 상기 선택하는 단계는, 상기 사용자 명령에 대응되는 상기 디스플레이의 배치 상태를 기반으로, 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 하나의 마이크 셋을 선택할 수 있다.Meanwhile, in the rotating step, when a user command for rotating the display is input, the display may be rotated according to the user command. In this case, the selecting may include selecting one of the first microphone set and the second microphone set based on an arrangement state of the display corresponding to the user command.

또한, 본 제어 방법은, 상기 센서를 통해 수신된 센싱 데이터를 기반으로 상기 디스플레이의 배치 상태를 감지하는 단계를 더 포함할 수도 있다. 이 경우, 상기 선택하는 단계는, 상기 감지된 배치 상태를 기반으로 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 하나의 마이크 셋을 선택할 수 있다.Also, the control method may further include detecting an arrangement state of the display based on the sensed data received through the sensor. In this case, the selecting may include selecting one of the first microphone set and the second microphone set based on the sensed arrangement state.

본 개시의 디스플레이 장치는, 디스플레이에 부착된 복수의 마이크를 포함하기 때문에, 디스플레이에 표시된 정보를 통해 디스플레이 장치를 조작하는 사용자의 음성을 보다 효과적으로 수신할 수 있다.Since the display device of the present disclosure includes a plurality of microphones attached to the display, a voice of a user operating the display device may be more effectively received through information displayed on the display.

또한, 본 개시의 디스플레이 장치는, 복수의 마이크 셋들 중 하나의 마이크 셋만을 이용하여 사용자 음성을 처리하기 때문에, 전력 소모 및 로드를 줄일 수 있다는 장점이 있다. In addition, since the display apparatus of the present disclosure processes a user's voice using only one microphone set among a plurality of microphone sets, power consumption and load can be reduced.

즉, 본 개시의 디스플레이 장치는, 최적의 위치 및 배열을 가진 최소한의 마이크들만을 이용하여, 넓은 음성 인식 반경을 확보하고, 빔포밍 처리를 수행할 수 있는 환경을 유지할 수 있다는 효과가 있다.That is, the display apparatus of the present disclosure has an effect of securing a wide voice recognition radius and maintaining an environment in which beamforming processing can be performed by using only a minimum of microphones having an optimal position and arrangement.

도 1은 복수의 마이크가 부착된 디스플레이가 회전하는 경우 본 개시에 따른 디스플레이 장치의 동작을 개략적으로 설명하기 위한 도면,
도 2는 본 개시의 일 실시 예에 따른 디스플레이 장치의 구성을 설명하기 위한 블록도,
도 3은 냉장고로 구현된 디스플레이 장치의 동작 예를 설명하기 위한 도면,
도 4는 본 개시의 다양한 실시 예에 따른 디스플레이 장치의 상세한 구성을 설명하기 위한 블록도, 그리고
도 5는 본 개시의 일 실시 예에 따른 디스플레이 장치의 제어 방법을 설명하기 위한 순서도이다.1 is a view for schematically explaining the operation of a display device according to the present disclosure when a display to which a plurality of microphones are attached rotates;
2 is a block diagram illustrating a configuration of a display device according to an embodiment of the present disclosure;
3 is a view for explaining an operation example of a display device implemented as a refrigerator;
4 is a block diagram illustrating a detailed configuration of a display device according to various embodiments of the present disclosure;
5 is a flowchart illustrating a method of controlling a display apparatus according to an embodiment of the present disclosure.

본 개시에 대하여 구체적으로 설명하기에 앞서, 본 명세서 및 도면의 기재 방법에 대하여 설명한다.Before describing the present disclosure in detail, a description will be given of the description of the present specification and drawings.

먼저, 본 명세서 및 청구범위에서 사용되는 용어는 본 개시의 다양한 실시 예들에서의 기능을 고려하여 일반적인 용어들을 선택하였다 하지만, 이러한 용어들은 당해 기술 분야에 종사하는 기술자의 의도나 법률적 또는 기술적 해석 및 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 일부 용어는 출원인이 임의로 선정한 용어도 있다. 이러한 용어에 대해서는 본 명세서에서 정의된 의미로 해석될 수 있으며, 구체적인 용어 정의가 없으면 본 명세서의 전반적인 내용 및 당해 기술 분야의 통상적인 기술 상식을 토대로 해석될 수도 있다. First, the terms used in the present specification and claims are general terms selected in consideration of the functions in various embodiments of the present disclosure, but these terms are not intended to be used in terms of the intention or legal or technical interpretation of those of ordinary skill in the art; It may vary depending on the emergence of new technologies, etc. Also, some terms are arbitrarily selected by the applicant. These terms may be interpreted in the meaning defined in the present specification, and if there is no specific term definition, it may be interpreted based on the general content of the present specification and common technical common sense in the art.

또한, 본 명세서에 첨부된 각 도면에 기재된 동일한 참조번호 또는 부호는 실질적으로 동일한 기능을 수행하는 부품 또는 구성요소를 나타낸다. 설명 및 이해의 편의를 위해서 서로 다른 실시 예들에서도 동일한 참조번호 또는 부호를 사용하여 설명한다. 즉, 복수의 도면에서 동일한 참조 번호를 가지는 구성요소를 모두 도시되어 있다고 하더라도, 복수의 도면들이 하나의 실시 예를 의미하는 것은 아니다. Also, the same reference numerals or reference numerals in each drawing attached to this specification indicate parts or components that perform substantially the same functions. For convenience of description and understanding, the same reference numerals or reference numerals are used in different embodiments. That is, even though all components having the same reference number are illustrated in a plurality of drawings, the plurality of drawings do not mean one embodiment.

또한, 본 명세서 및 청구범위에서는 구성요소들 간의 구별을 위하여 "제1", "제2" 등과 같이 서수를 포함하는 용어가 사용될 수 있다. 이러한 서수는 동일 또는 유사한 구성요소들을 서로 구별하기 위하여 사용하는 것이며 이러한 서수 사용으로 인하여 용어의 의미가 한정 해석되어서는 안 된다. 일 예로, 이러한 서수와 결합된 구성요소는 그 숫자에 의해 사용 순서나 배치 순서 등이 제한되어서는 안 된다. 필요에 따라서는, 각 서수들은 서로 교체되어 사용될 수도 있다. In addition, in this specification and claims, terms including an ordinal number such as “first” and “second” may be used to distinguish between elements. This ordinal number is used to distinguish the same or similar elements from each other, and the meaning of the term should not be construed as limited due to the use of the ordinal number. As an example, the use order or arrangement order of the components combined with the ordinal number should not be limited by the number. If necessary, each ordinal number may be used interchangeably.

본 명세서에서 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "구성되다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.In this specification, the singular expression includes the plural expression unless the context clearly dictates otherwise. In the present application, terms such as "comprises" or "consisting of" are intended to designate that the features, numbers, steps, operations, components, parts, or combinations thereof described in the specification exist, and are intended to indicate that one or more other It is to be understood that this does not preclude the possibility of addition or presence of features or numbers, steps, operations, components, parts, or combinations thereof.

본 개시의 실시 예에서 "모듈", "유닛", "부(part)" 등과 같은 용어는 적어도 하나의 기능이나 동작을 수행하는 구성요소를 지칭하기 위한 용어이며, 이러한 구성요소는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다. 또한, 복수의 "모듈", "유닛", "부(part)" 등은 각각이 개별적인 특정한 하드웨어로 구현될 필요가 있는 경우를 제외하고는, 적어도 하나의 모듈이나 칩으로 일체화되어 적어도 하나의 프로세서로 구현될 수 있다.In an embodiment of the present disclosure, terms such as “module”, “unit”, “part”, etc. are terms used to refer to a component that performs at least one function or operation, and these components are hardware or software. It may be implemented or implemented as a combination of hardware and software. In addition, a plurality of "modules", "units", "parts", etc. are integrated into at least one module or chip, and are integrated into at least one processor, except when each needs to be implemented in individual specific hardware. can be implemented as

또한, 본 개시의 실시 예에서, 어떤 부분이 다른 부분과 연결되어 있다고 할 때, 이는 직접적인 연결뿐 아니라, 다른 매체를 통한 간접적인 연결의 경우도 포함한다. 또한, 어떤 부분이 어떤 구성요소를 포함한다는 의미는, 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.In addition, in an embodiment of the present disclosure, when it is said that a certain part is connected to another part, this includes not only direct connection but also indirect connection through another medium. In addition, the meaning that a certain part includes a certain component means that other components may be further included, rather than excluding other components, unless otherwise stated.

본 개시의 실시 예에서, "제1 구성, 제2 구성 및 제3 구성 중 적어도 하나"(at least one of configuration 1, configuration 2 or configuration 3)의 의미는, "오직 제1 구성", "오직 제2 구성", "오직 제3구성", "제1 구성과 제2 구성", "제2 구성과 제3 구성", "제1 구성과 제3 구성", "제1 구성과 제2 구성과 제3 구성 모두"인 경우를 모두 포함할 수 있다.In an embodiment of the present disclosure, the meaning of "at least one of configuration 1, configuration 2 or configuration 3" is "only the first configuration", "only Second configuration", "third configuration only", "first configuration and second configuration", "second configuration and third configuration", "first configuration and third configuration", "first configuration and second configuration" and all of the third configuration".

도 1은 복수의 마이크가 부착된 디스플레이가 회전하는 경우 본 개시에 따른 디스플레이 장치의 동작을 개략적으로 설명하기 위한 도면이다.1 is a diagram schematically illustrating an operation of a display apparatus according to the present disclosure when a display to which a plurality of microphones are attached rotates; FIG.

도 1은 디스플레이 장치의 디스플레이(1)를 도시한다. 도 1을 참조하면, 디스플레이(1)는 회전할 수 있으며 네 개의 마이크(11-1, 11-2, 12-1, 12-2)를 포함한다.1 shows a display 1 of a display device. Referring to FIG. 1 , the display 1 is rotatable and includes four microphones 11-1, 11-2, 12-1, and 12-2.

디스플레이 장치는, 상술한 네 개의 마이크(11-1, 11-2, 12-1, 12-2) 중 적어도 하나를 통해 수신된 사용자 음성을 기반으로 다양한 동작을 수행할 수 있다.The display apparatus may perform various operations based on a user's voice received through at least one of the above-described four microphones 11-1, 11-2, 12-1, and 12-2.

도 1을 참조하면, 디스플레이(1)가 가로 방향으로 배열된 경우(: 도 1에서는 디스플레이(1)의 장축이 가로 방향으로 배열된 경우), 디스플레이 장치는 가로 방향으로 배열된 마이크(11-1) 및 마이크(11-2)를 통해 수신된 음성을 통해 적어도 하나의 동작을 수행할 수 있다.Referring to FIG. 1 , when the display 1 is arranged in the horizontal direction (in FIG. 1 , when the long axis of the display 1 is arranged in the horizontal direction), the display device includes the horizontally arranged microphones 11-1. ) and a voice received through the microphone 11 - 2 may perform at least one operation.

이때, 마이크(12-1) 및 마이크(12-2)는 비활성화될 수 있다.In this case, the microphone 12-1 and the microphone 12-2 may be deactivated.

반면, 디스플레이(1)가 세로 방향으로 배열된 경우(: 도 1에서는 디스플레이(1)의 장축이 세로 방향으로 배열된 경우), 디스플레이 장치는 가로 방향으로 배열된 마이크(12-1) 및 마이크(12-2)를 통해 수신된 음성을 통해 적어도 하나의 동작을 수행할 수 있다.On the other hand, when the display 1 is arranged in the vertical direction (in FIG. 1 , when the long axis of the display 1 is arranged in the vertical direction), the display device includes a horizontally arranged microphone 12-1 and a microphone ( At least one operation may be performed through the voice received through 12-2).

이렇듯, 본 개시의 디스플레이 장치에서는 회전한 디스플레이(1)의 방향에 따라 일부 마이크들만 이용되므로, 마이크들을 모두 이용하는 경우에 비해 신호 처리량이 줄어들어 소비 전력 및 로드가 줄어들 수 있다.As such, in the display device of the present disclosure, only some microphones are used according to the direction of the rotated display 1, so that the signal processing amount is reduced compared to the case where all the microphones are used, so that power consumption and load can be reduced.

또한, 본 개시의 디스플레이 장치는 비교적 적은 수의 마이크만 선택 및 이용하면서도 넓은 음성 인식 반경을 유지할 수 있다. 일반적으로 사용자는 지면을 기준으로 수평한 방향으로 움직이기 때문에, 가로 방향으로 배열된 마이크들이 이용된 결과 넓은 음성 인식 반경이 제공될 수 있다.In addition, the display device of the present disclosure can select and use only a relatively small number of microphones while maintaining a wide voice recognition radius. In general, since the user moves in a horizontal direction with respect to the ground, a wide voice recognition radius may be provided as a result of using the horizontally arranged microphones.

아울러, 본 개시의 디스플레이 장치는 가로로 배열된 마이크들을 통해 사용자의 방향을 식별할 수 있는바, 사용자의 (수평 방향) 움직임에 따라 오디오 신호를 달리 처리하는 빔포밍 기반 음성 인식을 수행함에도 무리가 없다.In addition, since the display device of the present disclosure can identify the user's direction through the horizontally arranged microphones, it is difficult to perform beamforming-based voice recognition that processes audio signals differently according to the user's (horizontal direction) movement. none.

이하 도면들을 통해 본 개시의 디스플레이 장치에 대해 보다 구체적으로 설명한다.Hereinafter, a display device of the present disclosure will be described in more detail with reference to the drawings.

도 2는 본 개시의 일 실시 예에 따른 디스플레이 장치의 구성을 설명하기 위한 블록도이다.2 is a block diagram illustrating a configuration of a display apparatus according to an embodiment of the present disclosure.

도 2를 참조하면, 디스플레이 장치(100)는 디스플레이(110), 제1 마이크 셋(121), 제2 마이크 셋(122) 및 프로세서(130)를 포함한다.Referring to FIG. 2 , the display apparatus 100 includes a display 110 , a first microphone set 121 , a second microphone set 122 , and a processor 130 .

디스플레이 장치(100)는, 일 예로 디스플레이를 포함하는 냉장고로 구현될 수 있다. 다만, 디스플레이 장치(100)는 이밖에도 디스플레이를 포함하는 세탁기, 식기세척기 등 다양한 가전 기기에 해당할 수 있다. The display apparatus 100 may be implemented as a refrigerator including a display, for example. However, the display apparatus 100 may also correspond to various home appliances such as a washing machine and a dishwasher including a display.

또한, 디스플레이 장치(100)는 TV, 데스크탑 PC, 태블릿 PC, 노트북 PC, 스마트폰 등으로 구현될 수도 있다.In addition, the display apparatus 100 may be implemented as a TV, a desktop PC, a tablet PC, a notebook PC, a smart phone, or the like.

디스플레이(110)는 프로세서(130)의 제어에 따라 하나 이상의 이미지를 표시하기 위한 구성이다. The display 110 is configured to display one or more images under the control of the processor 130 .

디스플레이(110)는 LCD(Liquid Crystal Display), PDP(Plasma Display Panel), OLED(Organic Light Emitting Diodes), TOLED(Transparent OLED) 등으로 구현될 수 있다. 디스플레이(110) 내에는 a-si TFT, LTPS(low temperature poly silicon) TFT, OTFT(organic TFT) 등과 같은 형태로 구현될 수 있는 구동 회로(도시되지 않음), 백라이트 유닛(도시되지 않음) 등도 함께 포함될 수 있다. The display 110 may be implemented as a liquid crystal display (LCD), a plasma display panel (PDP), an organic light emitting diode (OLED), a transparent OLED (TOLED), or the like. In the display 110, a driving circuit (not shown), a backlight unit (not shown), etc. that may be implemented in the form of an a-si TFT, a low temperature poly silicon (LTPS) TFT, or an organic TFT (OTFT) are also included. may be included.

디스플레이(110)는 플렉서블 디스플레이 또는 폴더블(foldable) 디스플레이로 구현될 수도 있다. 이를 위해, 디스플레이(110)는 외부 압력에 의해 변형될 수 있는 플라스틱 기판(가령, 고분자 필름)이나 유리 박막(thin glass) 또는 금속 박막(metal foil) 등과 같이 플렉서블한 특성을 갖는 소재로 구현될 수도 있다.The display 110 may be implemented as a flexible display or a foldable display. To this end, the display 110 may be implemented with a material having flexible characteristics, such as a plastic substrate (eg, a polymer film) that can be deformed by external pressure, a thin glass, or a metal foil. have.

본 개시의 디스플레이(110)는, 상술한 도 1과 같이 디스플레이 장치(100) 상에서 회전할 수 있다. 이때, 디스플레이(110)는 디스플레이 장치(100) 상에 회전 가능하도록 부착되어 사용자의 힘에 의해 회전할 수 있다. 또는, 디스플레이 장치(100)는 디스플레이(110)를 회전시키는 회전부 등을 전자적으로 제어하여 디스플레이(100)를 회전시킬 수도 있는바 도 4를 통해 후술한다.The display 110 of the present disclosure may rotate on the display apparatus 100 as shown in FIG. 1 described above. In this case, the display 110 may be rotatably attached to the display apparatus 100 and rotated by a user's force. Alternatively, the display apparatus 100 may rotate the display 100 by electronically controlling a rotating unit that rotates the display 110 , which will be described later with reference to FIG. 4 .

한편, 디스플레이(110)는 사용자의 터치 조작을 감지할 수 있는 터치 패널이 포함된 터치스크린 형태로 구현될 수도 있다.Meanwhile, the display 110 may be implemented in the form of a touch screen including a touch panel capable of detecting a user's touch manipulation.

제1 마이크 셋(121) 및 제2 마이크 셋(122) 각각은, 오디오 신호를 수신하기 위한 마이크를 두 개 이상 포함한다.Each of the first microphone set 121 and the second microphone set 122 includes two or more microphones for receiving an audio signal.

구체적으로, 제1 마이크 셋(121)은 디스플레이(110) 상에서 일 방향으로 배열된 복수의 마이크를 포함할 수 있다. 그리고, 제2 마이크 셋(122)은 디스플레이(110) 상에서 상술한 일 방향과 수직한 방향으로 배열된 복수의 마이크를 포함할 수 있다.Specifically, the first microphone set 121 may include a plurality of microphones arranged in one direction on the display 110 . In addition, the second microphone set 122 may include a plurality of microphones arranged in a direction perpendicular to the above-described one direction on the display 110 .

일 예로, 디스플레이(110)가 세로 방향으로 배치된 경우, 제1 마이크 셋(121)에 포함된 복수의 마이크는 가로 방향으로 배열되고, 제2 마이크 셋(122)에 포함된 복수의 마이크는 세로 방향으로 배열될 수 있다. 여기서, 디스플레이(110)가 회전 등을 통해 가로 방향으로 배치되는 경우, 제1 마이크 셋(121)에 포함된 복수의 마이크는 세로 방향으로 배열되고, 제2 마이크 셋(122)에 포함된 복수의 마이크는 가로 방향으로 배열될 수 있다.For example, when the display 110 is vertically arranged, the plurality of microphones included in the first microphone set 121 are horizontally arranged, and the plurality of microphones included in the second microphone set 122 are vertically aligned. direction can be arranged. Here, when the display 110 is horizontally arranged through rotation, etc., the plurality of microphones included in the first microphone set 121 are arranged in the vertical direction, and the plurality of microphones included in the second microphone set 122 are arranged in a vertical direction. The microphone may be arranged in a horizontal direction.

한편, 제1 마이크 셋(121) 및 제2 마이크 셋(122)은 각각 디스플레이(110)의 서로 다른 측에 인접하여 형성될 수 있다.Meanwhile, the first microphone set 121 and the second microphone set 122 may be formed adjacent to different sides of the display 110 , respectively.

구체적으로, 디스플레이(110)의 전면이 사각형인 경우, 제1 마이크 셋(121)에 포함된 복수의 마이크는 디스플레이(110)의 전면 상에서 디스플레이(110)의 제1 측에 인접한 영역에 배치되고, 제2 마이크 셋(122)에 포함된 복수의 마이크는, 디스플레이(110)의 전면 상에서 제1 측과 수직한 제2 측에 인접한 영역에 배치될 수 있다.Specifically, when the front surface of the display 110 is rectangular, the plurality of microphones included in the first microphone set 121 are disposed in an area adjacent to the first side of the display 110 on the front surface of the display 110, The plurality of microphones included in the second microphone set 122 may be disposed in an area adjacent to the second side perpendicular to the first side on the front surface of the display 110 .

예로, 디스플레이(110)의 전면이 이미지가 표시되는 디스플레이 영역 및 이미지가 표시되지 않는 베젤(bezel) 영역으로 구분되는 경우, 제1 마이크 셋(121) 및 제2 마이크 셋(122)은 베젤 영역에 형성될 수 있다.For example, when the front surface of the display 110 is divided into a display area in which an image is displayed and a bezel area in which an image is not displayed, the first microphone set 121 and the second microphone set 122 are in the bezel area. can be formed.

디스플레이 영역이 4각형인 경우, 베젤 영역은 디스플레이 영역의 4개의 측을 각각 둘러싸는 4개의 파트로 구성될 수 있다. 이 경우, 제1 마이크 셋(121)은 4개의 파트 중 가로 방향으로 놓인 파트에 가로 방향으로 배열될 수 있고, 제2 마이크 셋(122)은 4개의 측 중 세로 방향으로 놓인 일 측에 세로 방향으로 배열될 수 있다.When the display area is a quadrilateral, the bezel area may be composed of four parts each surrounding four sides of the display area. In this case, the first microphone set 121 may be arranged in a horizontal direction on a part placed in a horizontal direction among the four parts, and the second microphone set 122 may have a vertical direction on one side of the four sides placed in the vertical direction. can be arranged as

다만, 제1 마이크 셋(121) 및 제2 마이크 셋(122) 중 적어도 하나의 셋은, 상술한 바와 같이 디스플레이 전면의 가장 자리가 아닌 측면에 형성될 수도 있음은 물론이다.However, it goes without saying that at least one set of the first microphone set 121 and the second microphone set 122 may be formed on a side surface other than the edge of the front surface of the display as described above.

한편, 디스플레이(110)가 회전하여 가로 방향 또는 세로 방향으로 배치되는 경우에 대해서만 상술하였으나, 이밖에도 다양한 각도 및 형태의 회전이 가능하다. 아울러, 마이크 셋들 각각에 포함된 마이크들의 배열 및 위치 역시 다양할 수 있음은 물론이다.Meanwhile, only the case where the display 110 is rotated to be disposed in the horizontal or vertical direction has been described above, but other rotations of various angles and shapes are possible. In addition, it goes without saying that the arrangement and position of the microphones included in each of the microphone sets may also vary.

한편, 디스플레이 장치(100)는 상술한 제1 마이크 셋(121) 및 제2 마이크 셋(122) 외에도 하나 이상의 마이크 셋을 더 포함할 수 있음은 물론이다. Meanwhile, it goes without saying that the display apparatus 100 may further include one or more microphone sets in addition to the first microphone set 121 and the second microphone set 122 described above.

프로세서(130)는 디스플레이 장치(100)의 전반적인 동작을 제어하기 위한 구성이다.The processor 130 is a component for controlling the overall operation of the display apparatus 100 .

프로세서(130)는 CPU(Central Processing Unit), AP(Application Processor) 등과 같은 범용 프로세서, GPU(Graphic Processing Unit), VPU(Vision Processing Unit) 등과 같은 그래픽 전용 프로세서 또는 NPU(Neural Processing Unit)와 같은 인공지능 전용 프로세서 등으로 구현될 수 있다. 또한, 프로세서(130)는 SRAM 등의 휘발성 메모리를 포함할 수 있다.The processor 130 is a general-purpose processor such as a central processing unit (CPU), an application processor (AP), etc., a graphics-only processor such as a graphic processing unit (GPU), a vision processing unit (VPU), or the like, or artificial It may be implemented as an intelligence-only processor or the like. In addition, the processor 130 may include a volatile memory such as SRAM.

프로세서(130)는 디스플레이 장치(100)의 메모리에 저장된 하나 이상의 명령어를 실행시켜 디스플레이 장치(100)에 포함된 하나 이상의 구성요소들을 제어하거나, 하드웨어적인 회로 내지는 칩으로서 하나 이상의 구성요소들을 제어하거나, 또는 소프트웨어 및 하드웨어의 결합으로서 하나 이상의 구성요소들을 제어할 수 있다.The processor 130 executes one or more instructions stored in the memory of the display apparatus 100 to control one or more components included in the display apparatus 100, or controls one or more components as a hardware circuit or chip, Alternatively, one or more components may be controlled as a combination of software and hardware.

본 개시의 일 실시 예에 따른 프로세서(130)는, 디스플레이(110)의 회전에 기초하여 제1 마이크 셋(121) 및 상기 제2 마이크 셋 중 하나의 마이크 셋을 선택할 수 있다. The processor 130 according to an embodiment of the present disclosure may select one of the first microphone set 121 and the second microphone set based on the rotation of the display 110 .

이때, 프로세서(130)는 디스플레이(110)가 가로 방향인지 세로 방향인지에 따라 다른 마이크 셋을 선택할 수 있다.In this case, the processor 130 may select a different microphone set according to whether the display 110 is in a horizontal direction or a vertical direction.

구체적인 예로, 디스플레이(110)의 회전에 따라 디스플레이(110)가 세로 방향으로 배치된 경우, 프로세서(130)는 제1 마이크 셋(121) 및 제2 마이크 셋(122) 중 제1 마이크 셋을 선택할 수 있다.As a specific example, when the display 110 is vertically arranged according to the rotation of the display 110 , the processor 130 selects the first microphone set among the first microphone set 121 and the second microphone set 122 . can

이 경우, 프로세서(130)는 제1 마이크 셋(121)을 활성화시키는 한편 제2 마이크 셋(122)은 비활성화시킬 수 있다.In this case, the processor 130 may activate the first microphone set 121 while inactivating the second microphone set 122 .

또한, 디스플레이(110)의 회전에 따라 디스플레이(110)가 가로 방향으로 배치된 경우, 프로세서(130)는 제1 마이크 셋(121) 및 제2 마이크 셋(122) 중 제2 마이크 셋(122)을 선택할 수 있다.In addition, when the display 110 is horizontally arranged according to the rotation of the display 110 , the processor 130 performs the second microphone set 122 among the first microphone set 121 and the second microphone set 122 . can be selected.

한편, 만약 디스플레이 장치(100)가 제1 마이크 셋(121) 및 제2 마이크 셋(122) 외에 하나 이상의 마이크 셋을 더 포함하는 경우, 프로세서(130)는 디스플레이 장치(100)에 구비된 마이크 셋들 중 하나의 마이크 셋을 선택할 수 있다.On the other hand, if the display apparatus 100 further includes one or more microphone sets in addition to the first microphone set 121 and the second microphone set 122 , the processor 130 selects the microphone sets provided in the display apparatus 100 . You can choose one of the microphone sets.

프로세서(130)는 선택된 마이크 셋을 통해 수신된 사용자 음성을 기반으로 적어도 하나의 동작을 수행할 수 있다.The processor 130 may perform at least one operation based on the user's voice received through the selected microphone set.

여기서, 프로세서(130)는 선택된 마이크 셋을 통해 수신된 사용자 음성을 인식하고, 인식 결과를 기반으로 디스플레이 장치(100)의 적어도 하나의 기능을 수행할 수 있다.Here, the processor 130 may recognize the user's voice received through the selected microphone set, and perform at least one function of the display apparatus 100 based on the recognition result.

구체적인 예로, 프로세서(130)는 Speech to Text 모듈을 이용하여, 수신된 사용자 음성을 텍스트로 변환할 수 있다. 이때, Speech to Text 모듈은 음향 모델 및 언어 모델을 이용할 수 있다. 그리고, 프로세서(130)는 자연어 처리 모듈을 이용하여 변환된 텍스트의 의미를 식별할 수 있으며, 식별된 의미에 대응되는 기능을 수행할 수 있다.As a specific example, the processor 130 may convert the received user's voice into text using the Speech to Text module. In this case, the Speech to Text module may use an acoustic model and a language model. In addition, the processor 130 may identify the meaning of the converted text using the natural language processing module, and may perform a function corresponding to the identified meaning.

이렇듯, 본 개시의 프로세서(130)는 복수의 마이크 셋 중 하나의 마이크 셋만을 이용하여 사용자 음성을 인식할 수 있기 때문에, 신호 처리량이 줄어들어 전력 소모 및 로드가 줄어든다는 장점이 있다. 아울러, 줄어든 신호 처리량에도 불구하고, 넓은 음성 인식 반경 및 빔포밍 처리 환경이 유지된다는 점에서도 의미가 있다.As such, since the processor 130 of the present disclosure can recognize a user's voice using only one microphone set among the plurality of microphone sets, the amount of signal processing is reduced, thereby reducing power consumption and load. In addition, it is also meaningful in that a wide speech recognition radius and a beamforming processing environment are maintained despite the reduced signal throughput.

도 3은 냉장고로 구현된 디스플레이 장치의 동작 예를 설명하기 위한 도면이다. 도 3을 참조하면, 냉장고로 구현된 디스플레이 장치(100)는, 회전 가능한 디스플레이(110) 및 디스플레이(110)의 전면 상에 부착된 복수의 마이크 셋(121, 122)을 포함한다.3 is a view for explaining an operation example of a display device implemented as a refrigerator. Referring to FIG. 3 , the display apparatus 100 implemented as a refrigerator includes a rotatable display 110 and a plurality of microphone sets 121 and 122 attached to the front surface of the display 110 .

도 3을 참조하면, 제1 마이크 셋(121)은 디스플레이(110)의 전면 상의 일 측에 인접하여 배열되었고, 제2 마이크 셋(122)은 제1 마이크 셋(121)이 인접한 일 측에 수직한 다른 측에 인접하여 배열되었다.Referring to FIG. 3 , the first microphone set 121 is arranged adjacent to one side on the front surface of the display 110 , and the second microphone set 122 is perpendicular to one side adjacent to the first microphone set 121 . arranged adjacent to one other side.

도 3을 참조하면, 제1 마이크 셋(121)은 마이크(121-1) 및 마이크(121-2)를 포함하고, 제2 마이크 셋(122)은 마이크(122-1) 및 마이크(122-2)를 포함한다.Referring to FIG. 3 , the first microphone set 121 includes a microphone 121-1 and a microphone 121-2, and the second microphone set 122 includes a microphone 122-1 and a microphone 122- 2) is included.

도 3을 참조하면, 디스플레이(110)가 (장축이) 세로 방향으로 배치된 경우 제1 마이크 셋(121)에 포함된 마이크들(121-1, 2)은 가로로 배열된다. 반면, 디스플레이(110)가 회전하여 (장축이) 가로 방향으로 배치된 경우 제2 마이크 셋(122)에 포함된 마이크들(122-1, 2)이 가로로 배열된다.Referring to FIG. 3 , when the display 110 is vertically arranged (the long axis), the microphones 121-1 and 2 included in the first microphone set 121 are horizontally arranged. On the other hand, when the display 110 is rotated (the long axis) to be horizontally arranged, the microphones 122-1 and 2 included in the second microphone set 122 are horizontally arranged.

여기서, 프로세서(130)는, 디스플레이(110)가 세로 방향으로 배치된 경우 제1 마이크 셋(121)을 선택하고, 디스플레이(110)가 가로 방향으로 배치된 경우 제2 마이크 셋(122)을 선택할 수 있다. Here, the processor 130 selects the first microphone set 121 when the display 110 is arranged in the vertical direction, and selects the second microphone set 122 when the display 110 is arranged in the horizontal direction. can

즉, 프로세서(130)는 디스플레이(110)의 회전에 따라 가로로 배열된 마이크들을 포함하는 마이크 셋을 선택할 수 있다.That is, the processor 130 may select a microphone set including horizontally arranged microphones according to the rotation of the display 110 .

도 3에서, 제1 마이크 셋(121)이 선택된 경우, 프로세서(130)는 제1 마이크 셋(121)을 활성화시키고 제2 마이크 셋(122)은 비활성화시킬 수 있다.3 , when the first microphone set 121 is selected, the processor 130 may activate the first microphone set 121 and deactivate the second microphone set 122 .

구체적으로, 프로세서(130)는 활성화된 제1 마이크 셋(121)을 통해 수신된 사용자 음성을 기반으로 적어도 하나의 동작을 수행할 수 있다.Specifically, the processor 130 may perform at least one operation based on the user's voice received through the activated first microphone set 121 .

여기서, 프로세서(130)는 제1 마이크 셋(121)에 포함되고 가로로 배열된 마이크들(121-1, 2) 각각에 수신되는 사용자 음성의 도달 시간 차이를 이용하여 사용자의 방향을 식별할 수 있다.Here, the processor 130 may identify the direction of the user using the difference in arrival time of the user's voice included in the first microphone set 121 and received by each of the horizontally arranged microphones 121-1 and 2 have.

그리고, 프로세서(130)는 수신되는 오디오 신호들 중 식별된 사용자의 방향에 대응되는 오디오 신호를 강화하여 수신할 수 있다. 이때, 프로세서(130)는 빔포밍 기술을 이용하여 식별된 방향의 오디오 신호는 강화하고 다른 신호는 억제할 수 있다.In addition, the processor 130 may reinforce and receive an audio signal corresponding to the identified user's direction among the received audio signals. In this case, the processor 130 may enhance the audio signal in the identified direction using the beamforming technology and suppress other signals.

반면, 제2 마이크 셋(122)이 선택된 경우, 프로세서(130)는 제2 마이크 셋(122)을 활성화시키고 제1 마이크 셋(122)은 비활성화시킬 수 있다.On the other hand, when the second microphone set 122 is selected, the processor 130 may activate the second microphone set 122 and deactivate the first microphone set 122 .

구체적으로, 프로세서(130)는 활성화된 제2 마이크 셋(121)을 통해 수신된 사용자 음성을 기반으로 적어도 하나의 동작을 수행할 수 있다.Specifically, the processor 130 may perform at least one operation based on the user's voice received through the activated second microphone set 121 .

한편, 냉장고로 구현된 디스플레이 장치(100)는 내부를 개폐하기 위한 손잡이를 더 포함할 수 있다. 손잡이는 사용자로 하여금 냉장고에 구비된 적어도 하나의 도어를 열거나 닫을 수 있게 하는 구성이다.Meanwhile, the display device 100 implemented as a refrigerator may further include a handle for opening and closing the inside. The handle is a configuration that allows a user to open or close at least one door provided in the refrigerator.

여기서, 프로세서(130)는, 디스플레이(110)의 배치 상태 및 손잡이의 위치에 따라, 제1 마이크 셋(121) 및 제2 마이크 셋(122) 중 하나의 마이크 셋을 선택할 수도 있다.Here, the processor 130 may select one of the first microphone set 121 and the second microphone set 122 according to the arrangement state of the display 110 and the position of the handle.

구체적으로, 도 3을 참조하면, 디스플레이(110)가 세로 방향으로 배치된 경우, 프로세서(130)는 제1 마이크 셋(121) 및 제2 마이크 셋(122) 중 손잡이와 더 가까운 제1 마이크 셋(121)을 선택할 수 있다. 반면, 디스플레이(110)가 가로 방향으로 배치된 경우, 프로세서(130)는 제1 마이크 셋(121) 및 제2 마이크 셋(122) 중 손잡이와 더 멀리 위치한 제2 마이크 셋(122)을 선택할 수 있다.Specifically, referring to FIG. 3 , when the display 110 is vertically arranged, the processor 130 sets the first microphone set closer to the handle among the first microphone set 121 and the second microphone set 122 . (121) can be chosen. On the other hand, when the display 110 is arranged in the horizontal direction, the processor 130 may select the second microphone set 122 located farther from the handle among the first microphone set 121 and the second microphone set 122 . have.

한편, 만약 손잡이가 냉장고 전면의 특정 높이를 갖는 지점에 위치한 경우(도 3과 무관), 프로세서(130)는 디스플레이(110)의 배치 상태에 따라, 제1 마이크 셋(121) 및 제2 마이크 셋(122) 중 손잡이보다 높은 위치에 있는 하나의 마이크 셋을 선택할 수도 있다.On the other hand, if the handle is located at a point having a specific height on the front of the refrigerator (regardless of FIG. 3 ), the processor 130 sets the first microphone set 121 and the second microphone set according to the arrangement state of the display 110 . Among (122), one microphone set at a position higher than the handle may be selected.

도 4는 본 개시의 다양한 실시 예에 따른 디스플레이 장치의 상세한 구성을 설명하기 위한 블록도이다.4 is a block diagram illustrating a detailed configuration of a display device according to various embodiments of the present disclosure.

도 4를 참조하면, 디스플레이 장치(100)는 디스플레이(110), 제1 마이크 셋(121), 제2 마이크 셋(122), 프로세서(130) 외에도 회전부(140), 센서(150), 통신부(160), 사용자 입력부(170), 오디오 출력부(180) 중 적어도 하나를 더 포함할 수 있다.Referring to FIG. 4 , the display device 100 includes a display 110 , a first microphone set 121 , a second microphone set 122 , and a rotation unit 140 , a sensor 150 , and a communication unit ( 160 ), the user input unit 170 , and at least one of the audio output unit 180 may be further included.

회전부(140)는 프로세서(130)의 제어를 기반으로 디스플레이(110)를 회전시키기 위한 구성이다. 회전부(140)는 모터를 통한 휠 구동 방식으로 디스플레이(110)를 회전시킬 수 있으나, 이밖에도 종래 알려진 다양한 방식으로 디스플레이(110)를 회전시킬 수 있다.The rotating unit 140 is configured to rotate the display 110 based on the control of the processor 130 . The rotating unit 140 may rotate the display 110 by a wheel driving method through a motor, but may also rotate the display 110 in various conventionally known methods.

프로세서(130)는 기설정된 이벤트가 발생하면 디스플레이(110)를 회전시키도록 회전부(140)를 제어할 수 있다.The processor 130 may control the rotating unit 140 to rotate the display 110 when a preset event occurs.

기설정된 이벤트는, 디스플레이 장치(100)의 특정한 모드가 활성화되는 이벤트, 디스플레이 장치(100)의 전원이 ON 되는 이벤트, 디스플레이(110)를 회전시키기 위한 사용자 명령이 수신(입력)되는 이벤트 등일 수 있으나 이에 한정되지 않는다.The preset event may be an event in which a specific mode of the display apparatus 100 is activated, an event in which the power of the display apparatus 100 is turned on, an event in which a user command to rotate the display 110 is received (input), etc. However, the present invention is not limited thereto.

사용자 명령에 따라 디스플레이(110)가 회전하는 경우, 프로세서(130)는 사용자 명령에 대응되는 디스플레이(110)의 배치 상태(ex. 가로 방향/세로 방향)를 기반으로, 제1 마이크 셋(121) 및 제2 마이크 셋(122) 중 하나의 마이크 셋을 선택할 수 있다.When the display 110 is rotated according to a user command, the processor 130 performs the first microphone set 121 based on the arrangement state (eg, horizontal direction/vertical direction) of the display 110 corresponding to the user command. and one of the second microphone sets 122 may be selected.

센서(150)는 디스플레이(110)의 회전을 감지하기 위한 구성이다. 센서(150)는 자이로 센서, 홀 센서 등으로 구현될 수 있으며, 이밖에도 디스플레이(110)의 회전을 감지하기 위한 다양한 센서로 구현될 수 있다.The sensor 150 is configured to detect the rotation of the display 110 . The sensor 150 may be implemented as a gyro sensor, a Hall sensor, or the like, and may be implemented as various sensors for detecting the rotation of the display 110 .

프로세서(130)는 센서(150)를 통해 수신된 센싱 데이터를 기반으로 디스플레이(110)의 배치 상태를 감지할 수도 있다.The processor 130 may detect the arrangement state of the display 110 based on the sensed data received through the sensor 150 .

구체적으로, 프로세서(130)는 센서(150)를 통해 수신되는 센싱 데이터를 기반으로 디스플레이(110)의 회전 방향 내지는 각 속도/각 가속도 등을 식별할 수 있다. 그리고, 프로세서(130)는 식별된 회전 방향 내지는 각 속도 등을 기반으로 디스플레이(110)의 배치 상태(ex. 가로 방향/세로 방향 등)를 판단할 수 있다.Specifically, the processor 130 may identify the rotation direction or angular velocity/angular acceleration of the display 110 based on the sensed data received through the sensor 150 . In addition, the processor 130 may determine the arrangement state (eg, horizontal direction/vertical direction, etc.) of the display 110 based on the identified rotation direction or angular speed.

그리고, 프로세서(130)는 감지된 배치 상태를 기반으로 제1 마이크 셋(121) 및 제2 마이크 셋(122) 중 하나의 마이크 셋을 선택할 수 있다.In addition, the processor 130 may select one microphone set from among the first microphone set 121 and the second microphone set 122 based on the sensed arrangement state.

통신부(160)는 외부 장치(도시되지 않음)와 무선 혹은 유선으로 데이터 통신을 수행하기 위한 수단이다. 프로세서(130)는 통신부(160)를 이용하여 각종 외부 기기와 통신을 수행할 수 있다.The communication unit 160 is a means for performing data communication with an external device (not shown) wirelessly or by wire. The processor 130 may communicate with various external devices using the communication unit 160 .

무선 통신 방식으로 외부 장치와 데이터 통신을 수행할 경우, 통신부(160)는 와이파이 다이렉트(WIFI DIRECT) 통신 모듈, 블루투스(bluetooth)모듈, 적외선 통신(IrDA, infrared data association)모듈, NFC(Near Field Communication)모듈, 지그비(Zigbee) 모듈, 셀룰러 통신모듈, 3G(3세대) 이동통신 모듈, 4G(4세대) 이동통신 모듈, 4세대 LTE(Long Term Evolution) 통신 모듈, 5세대 이동 통신 모듈 중 적어도 하나를 포함할 수 있다.When performing data communication with an external device through a wireless communication method, the communication unit 160 may include a Wi-Fi Direct communication module, a Bluetooth module, an infrared data association (IrDA) module, and a Near Field Communication (NFC) module. ) module, Zigbee module, cellular communication module, 3G (3rd generation) mobile communication module, 4G (4th generation) mobile communication module, 4th generation LTE (Long Term Evolution) communication module, at least one of 5th generation mobile communication module may include.

유선 통신 방식으로 외부 장치와 데이터 통신을 수행할 경우, 통신부(160)는 동축 케이블, 광섬유 케이블 등과 연결되어 LAN(Local Area Network) 통신을 수행함으로써 다양한 데이터를 송수신할 수도 있다.When data communication is performed with an external device through a wired communication method, the communication unit 160 may transmit/receive various data by performing LAN (Local Area Network) communication by being connected to a coaxial cable, an optical fiber cable, or the like.

사용자 입력부(170)는 사용자 명령을 입력받기 위한 구성이다. 예를 들어, 프로세서(130)는 사용자 입력부(170)를 통해 디스플레이(110)를 특정 방향으로 회전하기 위한 사용자 명령을 수신할 수 있다.The user input unit 170 is configured to receive a user command. For example, the processor 130 may receive a user command for rotating the display 110 in a specific direction through the user input unit 170 .

사용자 입력부(170)는 하나 이상의 버튼, 키보드, 마우스 등을 포함할 수 있으며, 사용자 명령을 모션 형태로 입력받기 위한 카메라를 포함할 수도 있다.The user input unit 170 may include one or more buttons, a keyboard, a mouse, and the like, and may include a camera for receiving a user command in the form of a motion.

상술한 디스플레이(110)가 터치 패드 또는 터치 패널로 구현된 경우, 디스플레이(110)는 사용자 명령을 터치 형태로 수신한다는 점에서 사용자 입력부(170)에 포함된다고 할 수 있다.When the above-described display 110 is implemented as a touch pad or a touch panel, the display 110 may be said to be included in the user input unit 170 in that it receives a user command in the form of a touch.

상술한 제1 마이크 셋(121) 및 제2 마이크 셋(122) 역시 사용자 명령을 음성 형태로 수신한다는 점에서 사용자 입력부(170)에 포함된다고 할 수도 있다.The first microphone set 121 and the second microphone set 122 described above may also be included in the user input unit 170 in that they receive a user command in the form of a voice.

오디오 출력부(180)는 프로세서(130)의 제어에 따라 오디오 신호를 출력하기 위한 구성으로 스피커를 포함할 수 있다.The audio output unit 180 is configured to output an audio signal under the control of the processor 130 and may include a speaker.

예를 들어, 프로세서(130)는 '안내' 또는 수신된 사용자 음성에 대한 '답변'에 해당하는 음성을 출력하도록 오디오 출력부(180)를 제어할 수 있다.For example, the processor 130 may control the audio output unit 180 to output a voice corresponding to 'guide' or 'answer' to the received user voice.

이하 도 5를 통해서는, 본 개시에 따른 디스플레이 장치의 제어 방법을 설명한다.Hereinafter, a method of controlling a display apparatus according to the present disclosure will be described with reference to FIG. 5 .

도 5는 본 개시의 일 실시 예에 따라 회전 가능한 디스플레이를 포함하는 디스플레이 장치의 제어 방법을 설명하기 위한 순서도이다.5 is a flowchart illustrating a method of controlling a display device including a rotatable display according to an embodiment of the present disclosure.

도 5를 참조하면, 본 제어 방법은, 디스플레이를 회전시킬 수 있다(S510). Referring to FIG. 5 , the present control method may rotate the display ( S510 ).

이때, 디스플레이를 회전시키기 위한 사용자 명령이 수신되는 경우 디스플레이를 회전시킬 수 있다. 또는, 그밖에 다른 기설정된 이벤트가 발생하는 경우 디스플레이를 회전시킬 수도 있다. In this case, when a user command for rotating the display is received, the display may be rotated. Alternatively, the display may be rotated when other predetermined events occur.

그리고, 디스플레이의 회전에 기초하여 디스플레이에 부착된 제1 마이크 셋 및 제2 마이크 셋 중 하나의 마이크 셋을 선택할 수 있다(S520).Then, one of the first microphone set and the second microphone set attached to the display may be selected based on the rotation of the display ( S520 ).

여기서, 제1 마이크 셋은 디스플레이 상에서 일 방향으로 배열된 복수의 마이크를 포함하고, 제2 마이크 셋은 디스플레이 상에서 상술한 일 방향과 수직한 방향으로 배열된 복수의 마이크를 포함할 수 있다.Here, the first microphone set may include a plurality of microphones arranged in one direction on the display, and the second microphone set may include a plurality of microphones arranged in a direction perpendicular to the aforementioned one direction on the display.

구체적인 예로, 디스플레이가 세로 방향으로 배치된 경우, 제1 마이크 셋에 포함된 복수의 마이크는 가로 방향으로 배열되고, 제2 마이크 셋에 포함된 복수의 마이크는 세로 방향으로 배열될 수 있다. 여기서, 만약 디스플레이가 가로 방향으로 배치된 경우, 제1 마이크 셋에 포함된 복수의 마이크는 세로 방향으로 배열되고, 제2 마이크 셋에 포함된 복수의 마이크는 가로 방향으로 배열될 수 있다.As a specific example, when the display is arranged in a vertical direction, a plurality of microphones included in the first microphone set may be arranged in a horizontal direction, and a plurality of microphones included in the second microphone set may be arranged in a vertical direction. Here, if the display is arranged in a horizontal direction, a plurality of microphones included in the first microphone set may be arranged in a vertical direction, and a plurality of microphones included in the second microphone set may be arranged in a horizontal direction.

이때, 디스플레이의 회전에 따라 디스플레이가 세로 방향으로 배치된 경우, 제1 마이크 셋 및 제2 마이크 셋 중 제1 마이크 셋을 선택할 수 있다.In this case, when the display is vertically arranged according to the rotation of the display, the first microphone set among the first microphone set and the second microphone set may be selected.

반면, 디스플레이의 회전에 따라 디스플레이가 가로 방향으로 배치된 경우, 제1 마이크 셋 및 제2 마이크 셋 중 제2 마이크 셋을 선택할 수 있다.On the other hand, when the display is horizontally arranged according to rotation of the display, the second microphone set among the first microphone set and the second microphone set may be selected.

한편, 만약 사용자 명령에 따라 디스플레이가 회전된 경우, 사용자 명령에 대응되는 디스플레이의 배치 상태를 기반으로, 제1 마이크 셋 및 제2 마이크 셋 중 하나의 마이크 셋을 선택할 수 있다.Meanwhile, if the display is rotated according to a user command, one of the first microphone set and the second microphone set may be selected based on an arrangement state of the display corresponding to the user command.

또는, 센서를 통해 수신된 센싱 데이터를 기반으로 디스플레이의 배치 상태를 감지하고, 감지된 배치 상태를 기반으로 제1 마이크 셋 및 제2 마이크 셋 중 하나의 마이크 셋을 선택할 수도 있다.Alternatively, the arrangement state of the display may be detected based on the sensed data received through the sensor, and one microphone set among the first microphone set and the second microphone set may be selected based on the detected arrangement state.

그리고, 선택된 마이크 셋을 통해 수신된 사용자 음성을 기반으로 적어도 하나의 동작을 수행할 수 있다(S530).Then, at least one operation may be performed based on the user's voice received through the selected microphone set (S530).

한편, 도 5를 통해 설명한 제어 방법은, 도 2 및 도 4의 디스플레이 장치(100)를 통해 구현될 수 있다. 또는, 도 5를 통해 설명한 제어 방법은, 디스플레이 장치(100) 및 적어도 하나의 외부 장치를 포함하는 시스템을 통해 구현될 수도 있다.Meanwhile, the control method described with reference to FIG. 5 may be implemented through the display apparatus 100 of FIGS. 2 and 4 . Alternatively, the control method described with reference to FIG. 5 may be implemented through a system including the display apparatus 100 and at least one external device.

한편, 이상에서 설명된 다양한 실시 예들은 소프트웨어(software), 하드웨어(hardware) 또는 이들의 조합된 것을 이용하여 컴퓨터 또는 이와 유사한 장치로 읽을 수 있는 기록 매체 내에서 구현될 수 있다.Meanwhile, the various embodiments described above may be implemented in a recording medium readable by a computer or a similar device using software, hardware, or a combination thereof.

하드웨어적인 구현에 의하면, 본 개시에서 설명되는 실시 예들은 ASICs(Application Specific Integrated Circuits), DSPs(digital signal processors), DSPDs(digital signal processing devices), PLDs(Programmable logic devices), FPGAs(field programmable gate arrays), 프로세서(processor), 제어기(controller), 마이크로 컨트롤러(micro-controllers), 마이크로 프로세서(microprocessor), 기타 기능 수행을 위한 전기적인 유닛(unit) 중 적어도 하나를 이용하여 구현될 수 있다.According to the hardware implementation, the embodiments described in the present disclosure are ASICs (Application Specific Integrated Circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (Programmable logic devices), FPGAs (field programmable gate arrays) ), a processor, a controller, a micro-controller, a microprocessor, and may be implemented using at least one of an electrical unit for performing other functions.

일부의 경우에 본 명세서에서 설명되는 실시 예들이 프로세서(130) 자체로 구현될 수 있다. 소프트웨어적인 구현에 의하면 본 명세서에서 설명되는 절차 및 기능과 같은 실시 예들은 별도의 소프트웨어 모듈들로 구현될 수 있다. 상술한 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 작동을 수행할 수 있다.In some cases, the embodiments described herein may be implemented by the processor 130 itself. According to the software implementation, embodiments such as the procedures and functions described in this specification may be implemented as separate software modules. Each of the above-described software modules may perform one or more functions and operations described herein.

한편, 상술한 본 개시의 다양한 실시 예들에 따른 디스플레이 장치(100)에서의 처리동작을 수행하기 위한 컴퓨터 명령어(computer instructions)는 비일시적 컴퓨터 판독 가능 매체(non-transitory computer-readable medium)에 저장될 수 있다. 이러한 비일시적 컴퓨터 판독 가능 매체에 저장된 컴퓨터 명령어는 특정 기기의 프로세서에 의해 실행되었을 때 상술한 다양한 실시 예에 따른 디스플레이 장치(100)의 처리 동작을 상술한 특정 기기가 수행하도록 한다.Meanwhile, computer instructions for performing a processing operation in the display apparatus 100 according to various embodiments of the present disclosure described above may be stored in a non-transitory computer-readable medium. can When the computer instructions stored in the non-transitory computer-readable medium are executed by the processor of the specific device, the specific device performs the processing operation of the display apparatus 100 according to the various embodiments described above.

비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다. The non-transitory readable medium refers to a medium that stores data semi-permanently, rather than a medium that stores data for a short moment, such as a register, cache, memory, etc., and can be read by a device. Specifically, the above-described various applications or programs may be provided by being stored in a non-transitory readable medium such as a CD, DVD, hard disk, Blu-ray disk, USB, memory card, ROM, and the like.

또한, 이상에서는 본 발명의 바람직한 실시 예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해돼서는 안 될 것이다.In addition, although preferred embodiments of the present invention have been illustrated and described above, the present invention is not limited to the specific embodiments described above, and the technical field to which the present invention pertains without departing from the gist of the present invention as claimed in the claims In addition, various modifications are possible by those of ordinary skill in the art, and these modifications should not be individually understood from the technical spirit or prospect of the present invention.

100: 디스플레이 장치 110: 디스플레이
121: 제1 마이크 셋 122: 제2 마이크 셋
130: 프로세서100: display device 110: display
121: first microphone set 122: second microphone set
130: processor

Claims (14)

디스플레이 장치에 있어서,
회전 가능한 디스플레이;
상기 디스플레이 상에서 일 방향으로 배열된 복수의 마이크를 포함하는 제1 마이크 셋;
상기 디스플레이 상에서 상기 일 방향과 수직한 방향으로 배열된 복수의 마이크를 포함하는 제2 마이크 셋; 및
상기 디스플레이의 회전에 기초하여 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 하나의 마이크 셋을 선택하고, 상기 선택된 마이크 셋을 통해 수신된 사용자 음성을 기반으로 적어도 하나의 동작을 수행하는 프로세서;를 포함하는, 디스플레이 장치.In the display device,
rotatable display;
a first microphone set including a plurality of microphones arranged in one direction on the display;
a second microphone set including a plurality of microphones arranged in a direction perpendicular to the one direction on the display; and
a processor for selecting one microphone set from among the first microphone set and the second microphone set based on rotation of the display, and performing at least one operation based on a user voice received through the selected microphone set; comprising, a display device. 제1항에 있어서,
상기 디스플레이가 세로 방향으로 배치된 경우, 상기 제1 마이크 셋에 포함된 상기 복수의 마이크는 상기 가로 방향으로 배열되고, 상기 제2 마이크 셋에 포함된 상기 복수의 마이크는 세로 방향으로 배열되고,
상기 디스플레이가 가로 방향으로 배치된 경우, 상기 제1 마이크 셋에 포함된 상기 복수의 마이크는 상기 세로 방향으로 배열되고, 상기 제2 마이크 셋에 포함된 상기 복수의 마이크는 상기 가로 방향으로 배열되는, 디스플레이 장치.According to claim 1,
When the display is arranged in the vertical direction, the plurality of microphones included in the first set of microphones are arranged in the horizontal direction, the plurality of microphones included in the second set of microphones are arranged in the vertical direction,
When the display is arranged in the horizontal direction, the plurality of microphones included in the first set of microphones are arranged in the vertical direction, and the plurality of microphones included in the second set of microphones are arranged in the horizontal direction, display device. 제2항에 있어서,
상기 프로세서는,
상기 디스플레이의 회전에 따라 상기 디스플레이가 상기 세로 방향으로 배치된 경우, 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 상기 제1 마이크 셋을 선택하는, 디스플레이 장치.3. The method of claim 2,
The processor is
When the display is arranged in the vertical direction according to rotation of the display, the first microphone set among the first microphone set and the second microphone set is selected. 제2항에 있어서,
상기 프로세서는,
상기 디스플레이의 회전에 따라 상기 디스플레이가 상기 가로 방향으로 배치된 경우, 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 상기 제2 마이크 셋을 선택하는, 디스플레이 장치.3. The method of claim 2,
The processor is
When the display is arranged in the horizontal direction according to rotation of the display, the second microphone set among the first microphone set and the second microphone set is selected. 제1항에 있어서,
상기 제1 마이크 셋에 포함된 상기 복수의 마이크는, 상기 디스플레이의 전면 상에서 상기 디스플레이의 제1 측에 인접한 영역에 배치되고,
상기 제2 마이크 셋에 포함된 상기 복수의 마이크는, 상기 디스플레이의 전면 상에서 상기 제1 측과 수직한 제2 측에 인접한 영역에 배치되는, 디스플레이 장치.According to claim 1,
The plurality of microphones included in the first microphone set are disposed in an area adjacent to the first side of the display on the front surface of the display,
The plurality of microphones included in the second microphone set are disposed in an area adjacent to a second side perpendicular to the first side on the front surface of the display. 제1항에 있어서,
상기 디스플레이를 회전시키기 위한 회전부;를 더 포함하고,
상기 프로세서는,
상기 디스플레이를 회전시키기 위한 사용자 명령이 입력되면, 상기 사용자 명령에 따라 상기 디스플레이를 회전시키도록 상기 회전부를 제어하고,
상기 사용자 명령에 대응되는 상기 디스플레이의 배치 상태를 기반으로, 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 하나의 마이크 셋을 선택하는, 디스플레이 장치.According to claim 1,
It further comprises; a rotating unit for rotating the display;
The processor is
When a user command for rotating the display is input, controlling the rotating unit to rotate the display according to the user command,
and selecting one of the first microphone set and the second microphone set based on an arrangement state of the display corresponding to the user command. 제1항에 있어서,
상기 디스플레이의 회전을 감지하기 위한 센서;를 더 포함하고,
상기 프로세서는,
상기 센서를 통해 수신된 센싱 데이터를 기반으로 상기 디스플레이의 배치 상태를 감지하고, 상기 감지된 배치 상태를 기반으로 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 하나의 마이크 셋을 선택하는, 디스플레이 장치.According to claim 1,
A sensor for detecting the rotation of the display; further comprising,
The processor is
A display device for detecting an arrangement state of the display based on the sensed data received through the sensor, and selecting one of the first microphone set and the second microphone set based on the detected arrangement state . 제2항에 있어서,
상기 디스플레이 장치는, 내부를 개폐하기 위한 손잡이를 포함하는 냉장고이고,
상기 프로세서는,
상기 디스플레이가 세로 방향으로 배치된 경우, 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 상기 손잡이와 더 근접한 하나의 마이크 셋을 선택하는, 디스플레이 장치.3. The method of claim 2,
The display device is a refrigerator including a handle for opening and closing the inside,
The processor is
When the display is arranged in the vertical direction, the display device for selecting one microphone set closer to the handle from among the first microphone set and the second microphone set. 회전 가능한 디스플레이를 포함하는 디스플레이 장치의 제어 방법에 있어서,
상기 디스플레이를 회전시키는 단계;
상기 디스플레이의 회전에 기초하여 상기 디스플레이에 부착된 제1 마이크 셋 및 제2 마이크 셋 중 하나의 마이크 셋을 선택하는 단계; 및
상기 선택된 마이크 셋을 통해 수신된 사용자 음성을 기반으로 적어도 하나의 동작을 수행하는 단계;를 포함하고,
상기 제1 마이크 셋은 상기 디스플레이 상에서 일 방향으로 배열된 복수의 마이크를 포함하고,
상기 제2 마이크 셋은 상기 디스플레이 상에서 상기 일 방향과 수직한 방향으로 배열된 복수의 마이크를 포함하는, 제어 방법.A method of controlling a display device including a rotatable display, the method comprising:
rotating the display;
selecting one of the first microphone set and the second microphone set attached to the display based on the rotation of the display; and
Including; performing at least one operation based on the user's voice received through the selected microphone set;
The first microphone set includes a plurality of microphones arranged in one direction on the display,
The second microphone set includes a plurality of microphones arranged in a direction perpendicular to the one direction on the display. 제9항에 있어서,
상기 디스플레이가 세로 방향으로 배치된 경우, 상기 제1 마이크 셋에 포함된 상기 복수의 마이크는 상기 가로 방향으로 배열되고, 상기 제2 마이크 셋에 포함된 상기 복수의 마이크는 세로 방향으로 배열되고,
상기 디스플레이가 가로 방향으로 배치된 경우, 상기 제1 마이크 셋에 포함된 상기 복수의 마이크는 상기 세로 방향으로 배열되고, 상기 제2 마이크 셋에 포함된 상기 복수의 마이크는 상기 가로 방향으로 배열되는, 제어 방법.10. The method of claim 9,
When the display is arranged in the vertical direction, the plurality of microphones included in the first set of microphones are arranged in the horizontal direction, the plurality of microphones included in the second set of microphones are arranged in the vertical direction,
When the display is arranged in the horizontal direction, the plurality of microphones included in the first set of microphones are arranged in the vertical direction, and the plurality of microphones included in the second set of microphones are arranged in the horizontal direction, control method. 제10항에 있어서,
상기 선택하는 단계는,
상기 디스플레이의 회전에 따라 상기 디스플레이가 상기 세로 방향으로 배치된 경우, 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 상기 제1 마이크 셋을 선택하는, 제어 방법.11. The method of claim 10,
The selecting step is
When the display is arranged in the vertical direction according to rotation of the display, the control method of selecting the first microphone set from among the first microphone set and the second microphone set. 제10항에 있어서,
상기 선택하는 단계는,
상기 디스플레이의 회전에 따라 상기 디스플레이가 상기 가로 방향으로 배치된 경우, 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 상기 제2 마이크 셋을 선택하는, 제어 방법.11. The method of claim 10,
The selecting step is
When the display is arranged in the horizontal direction according to rotation of the display, the second microphone set among the first microphone set and the second microphone set is selected. 제9항에 있어서,
상기 회전시키는 단계는,
상기 디스플레이를 회전시키기 위한 사용자 명령이 입력되면, 상기 사용자 명령에 따라 상기 디스플레이를 회전시키고,
상기 선택하는 단계는,
상기 사용자 명령에 대응되는 상기 디스플레이의 배치 상태를 기반으로, 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 하나의 마이크 셋을 선택하는, 제어 방법.10. The method of claim 9,
The rotating step is
When a user command for rotating the display is input, rotating the display according to the user command,
The selecting step is
A control method of selecting one of the first microphone set and the second microphone set based on an arrangement state of the display corresponding to the user command. 제9항에 있어서,
상기 센서를 통해 수신된 센싱 데이터를 기반으로 상기 디스플레이의 배치 상태를 감지하는 단계;를 더 포함하고,
상기 선택하는 단계는,
상기 감지된 배치 상태를 기반으로 상기 제1 마이크 셋 및 상기 제2 마이크 셋 중 하나의 마이크 셋을 선택하는, 제어 방법.10. The method of claim 9,
Detecting the arrangement state of the display based on the sensed data received through the sensor; further comprising,
The selecting step is
A control method of selecting one of the first microphone set and the second microphone set based on the sensed arrangement state.
KR1020200019131A 2020-02-17 2020-02-17 Display apparatus for using microphone of rotating display and controlling method thereof KR20210104420A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020200019131A KR20210104420A (en) 2020-02-17 2020-02-17 Display apparatus for using microphone of rotating display and controlling method thereof
PCT/KR2021/001743 WO2021167285A1 (en) 2020-02-17 2021-02-09 Display device using microphones on rotating display, and method for controlling same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200019131A KR20210104420A (en) 2020-02-17 2020-02-17 Display apparatus for using microphone of rotating display and controlling method thereof

Publications (1)

Publication Number Publication Date
KR20210104420A true KR20210104420A (en) 2021-08-25

Family

ID=77391588

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200019131A KR20210104420A (en) 2020-02-17 2020-02-17 Display apparatus for using microphone of rotating display and controlling method thereof

Country Status (2)

Country Link
KR (1) KR20210104420A (en)
WO (1) WO2021167285A1 (en)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100983270B1 (en) * 2003-09-04 2010-09-24 엘지전자 주식회사 Mobile phone
JP4266148B2 (en) * 2003-09-30 2009-05-20 株式会社東芝 Electronics
US9658652B2 (en) * 2014-01-21 2017-05-23 Dell Products L.P. Convertible information handling system input device surface and support
KR102030000B1 (en) * 2018-02-19 2019-11-08 엠빅 주식회사 Smart Lectern
JP2019153049A (en) * 2018-03-02 2019-09-12 パナソニックＩｐマネジメント株式会社 Display device, display control method and control program

Also Published As

Publication number Publication date
WO2021167285A1 (en) 2021-08-26

Similar Documents

Publication Publication Date Title
CN107390779B (en) Computing device with swipe interface and method of operation thereof
KR102427833B1 (en) User terminal device and method for display thereof
EP3069219B1 (en) Dynamic hover sensitivity in a dual display system
US11237710B2 (en) Multi-function slide control
US20180329523A1 (en) Automatic selection of a wireless connectivity protocol for an input device
US10061509B2 (en) Keypad control
US10831307B2 (en) Multi-form factor information handling system (IHS) with automatically reconfigurable palm rejection
CN113168321B (en) Multi-form factor information processing system (IHS) with automatically configurable hardware keys
US20190012000A1 (en) Deformable Electronic Device with Methods and Systems for Controlling the Deformed User Interface
US20130300668A1 (en) Grip-Based Device Adaptations
US20140168118A1 (en) Touch display device and control method thereof
KR20150049045A (en) Method and apparautus for controlling the brightness of the screen in portable device
JP6239796B1 (en) Electronics
US9235238B2 (en) Mobile electronic device with dual touch displays and multitasking function, control method, and storage medium storing control program
KR20170060353A (en) Electronic apparatus, distance measurement sensor and control method for electronic apparatus and distance measurement sensor
WO2021083040A1 (en) Message viewing method and terminal
KR20160115330A (en) Method and electronic device for providing content
US20150169218A1 (en) Switching an interface mode using an input gesture
WO2016153467A1 (en) Display with adjustable transparency
KR20180006614A (en) Multi-touch display pannel and method of controlling the same
JP6360112B2 (en) Electronics
KR102247667B1 (en) Method of controlling a flexible display device and a flexible display device
JP7037646B2 (en) Display with movable privacy gate
KR20210104420A (en) Display apparatus for using microphone of rotating display and controlling method thereof
KR102327139B1 (en) Portable Device and Method for controlling brightness in portable device

Legal Events

Date Code Title Description
A201 Request for examination