KR20180043620A - Smart mirror system - Google Patents

Smart mirror system Download PDF

Info

Publication number
KR20180043620A
KR20180043620A KR1020160136564A KR20160136564A KR20180043620A KR 20180043620 A KR20180043620 A KR 20180043620A KR 1020160136564 A KR1020160136564 A KR 1020160136564A KR 20160136564 A KR20160136564 A KR 20160136564A KR 20180043620 A KR20180043620 A KR 20180043620A
Authority
KR
South Korea
Prior art keywords
information
user
unit
voice
providing
Prior art date
Application number
KR1020160136564A
Other languages
Korean (ko)
Inventor
김영종
Original Assignee
비비엠씨 (주)
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 비비엠씨 (주) filed Critical 비비엠씨 (주)
Priority to KR1020160136564A priority Critical patent/KR20180043620A/en
Publication of KR20180043620A publication Critical patent/KR20180043620A/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47GHOUSEHOLD OR TABLE EQUIPMENT
    • A47G1/00Mirrors; Picture frames or the like, e.g. provided with heating, lighting or ventilating means
    • A47G1/02Mirrors used as equipment
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005Input arrangements through a video camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/22Social work
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47GHOUSEHOLD OR TABLE EQUIPMENT
    • A47G2200/00Details not otherwise provided for in A47G
    • A47G2200/14Sound
    • A47G2200/146Sound recording or detecting means
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Abstract

Disclosed is a smart mirror system which detects the intention of a user through the voice of the user to process a command. According to the present invention, the smart mirror system comprises: a voice receiving part; a display par; and an audio output part; and a control part which detects the intention of a user from the voice information to provide request information, and transmits a command to a home network according to the request information or provides image output information or audio output information corresponding to information provided from the Internet.

Description

스마트 미러 시스템{SMART MIRROR SYSTEM}[0001] SMART MIRROR SYSTEM [0002]

본 발명은 스마트 미러 시스템에 관한 것으로서, 보다 상세하게는 사용자의 음성을 인식하여 사용자의 요청을 수행하는 스마트 미러 시스템에 관한 것이다.The present invention relates to a smart mirror system, and more particularly, to a smart mirror system for recognizing a voice of a user and performing a user's request.

홈 네트워크(Home Network)란, 사용자가 집안 또는 집밖에서 생활 서비스를 즐길 수 있도록 다양한 디지털 가전기기들이 서로 연결된 네트워크를 의미하는 것으로, 디지털 신호 처리 기술의 발전으로 인해 냉장고 또는 세탁기 등과 같은 다양한 유형의 가전기기들이 점차 디지털화되고 있다. 또한, 가전기기용 운영체제(Operation System) 기술과 고속 멀티 미디어(Multi-Media) 통신 기술 등이 디지털 가전기기에 접목됨과 아울러, 새로운 형태의 정보 가전기기들이 등장함에 따라 홈 네트워크 시스템이 더욱 발전하고 있다. Home network refers to a network in which various digital home appliances are connected to each other so that a user can enjoy living services at home or outside the home. Due to the development of digital signal processing technology, various types of household appliances such as a refrigerator or a washing machine Devices are increasingly being digitized. In addition, operating system for home appliances and high-speed multi-media communication technologies are combined with digital home appliances, and home network systems are further developed as new types of information appliances are introduced .

상기 홈 네트워크 시스템을 제어하는 홈 서버(Home Server)에는 냉장고, 에어컨, 세탁기, 그리고 조명 등과 같은 다양한 가전기기들이, 전력선 제어(PLC: Power Line Control)나 블루투스(Bluetooth) 방식 등을 통해 서로 통신할 수 있으며, 디지털 텔레비전(D-TV) 또는 비디오 도어 폰(Video Door Phone) 등과 같은 다양한 A/V 기기들이 TCP/IP 또는 A/V 신호 라인을 통해 홈 서버와 통신할 수 있다.Various home appliances such as a refrigerator, an air conditioner, a washing machine, and a lighting are communicated with each other through a power line control (PLC) or a Bluetooth (Bluetooth) system in a home server for controlling the home network system And various A / V devices such as a digital television (D-TV) or a video door phone can communicate with a home server via a TCP / IP or A / V signal line.

그리고 홈 서버는 인터넷을 통해 다양한 정보를 제공하는 콘텐츠 제공 서버(Contents Provide Server)와 연결 접속될 수 있다. 따라서 홈 네트워크 시스템에 설치된 가정 내에 거주하는 사용자는 홈 서버를 통해 자신이 원하는 임의의 가전기기들을 원격 제어할 수 있게 되고, 콘텐츠 서버와의 인터페이스를 통해 원하는 다양한 콘텐츠 정보를 검색할 수 있게 된다.The home server can be connected to a contents providing server that provides various information through the Internet. Accordingly, a user residing in the home installed in the home network system can remotely control any home appliances desired by the user through the home server, and can search various contents information desired through the interface with the contents server.

최근에는 홈 네트워크를 구성하는 장치 중 하나로서 현관, 화장실, 화장대 등에 설치되어 거울과 스마트 디바이스의 기능을 같이 수행할 수 있는 스마트 미러(Smart mirror)가 사용된다. In recent years, a smart mirror, which is installed in an entrance hall, a toilet, a dressing table, etc., and can perform the functions of a mirror and a smart device, is used as one of devices constituting a home network.

그러나 종래의 스마트 미러를 사용하기 위해서는 입력 패드를 직접 누르거나 거울을 터치함으로써 스마트 미러를 조작해야한다. 따라서 스마트 미러의 조작을 위해서는 사용자가 거울로부터 일정한 거리 내에서 손과 팔을 이용해야 하기 때문에, 사용자가 양손을 모두 이용한 다른 행위 중인 경우 스마트 미러의 조작이 불편할 수 있다. 또한, 사용자의 조작에 의해 사용자를 비추는 거울 면이 지문 등으로 오염될 수 있는 문제점이 있다. However, in order to use a conventional smart mirror, a smart mirror must be operated by directly pressing the input pad or touching the mirror. Therefore, in order to manipulate the smart mirror, the user must use the hand and the arm within a certain distance from the mirror. Therefore, the manipulation of the smart mirror may be inconvenient when the user is performing other operations using both hands. In addition, there is a problem that a mirror surface illuminating the user may be contaminated with fingerprints or the like by a user's operation.

또한, 종래의 스마트 미러는 일측에 설치된 카메라를 통해 획득된 이미지를 디스플레이함으로써 거울 기능을 수행하는데, 이러한 경우 카메라로 촬영하고 촬영된 이미지를 처리하여 디스플레이하기 위한 지연 시간이 발생된다. 또한, 영상이 출력되는 과정에서 프레임 단위로 화면이 끊기게 되므로 스마트 미러 사용자는 일반적인 거울을 사용하는 것에 비해 이질감을 느끼게 되는 문제점이 있다.In addition, a conventional smart mirror performs a mirror function by displaying an image obtained through a camera installed on one side. In this case, a delay time occurs for processing the image taken by the camera and displaying the processed image. In addition, since the screen is cut off frame by frame in the process of outputting the image, the smart mirror user has a problem of feeling a sense of heterogeneity as compared with using a general mirror.

한편, 사용자가 거울을 보며 외출을 준비하기 위한 코디네이션을 선택하고자 하는 경우, 외출의 목적과 외출 장소의 기상 조건에 따라 사용자가 착용한 악세서리나 의류와 같은 패션 아이템이 달라질 수 있다. 하지만, 종래의 스마트 미러 시스템은 외부의 상황이나 사용자의 외출 목적을 고려하지 못하므로 사용자가 필요로 하는 코디네이션을 상황에 어울리게 추천하기 힘든 문제점이 있다.On the other hand, if the user wishes to select a coordination to prepare for going out while watching a mirror, fashion items such as accessories and clothing worn by the user can be changed according to the purpose of going out and the weather conditions of the outing place. However, since the conventional smart mirror system can not consider the external situation or the purpose of going out of the user, there is a problem that it is difficult to recommend the coordination required by the user to match the situation.

한편, 사용자가 거울을 보며 양치를 하거나 치아 상태를 확인하고자 하는 경우, 양치 횟수나 양치 시간에 대한 정보가 필요할 수 있다. 하지만, 종래의 스마트 미러 시스템은 사용자가 직접 양치 횟수나 시간에 대한 정보를 입력하여야 하므로, 그 과정이 번거롭고 부정확한 문제점이 있다. On the other hand, when the user views the mirror and wants to brush teeth or check the tooth condition, information on the number of brushing times and brushing time may be required. However, in the conventional smart mirror system, since the user must directly input information on the number of brushing teeth and time, the process is cumbersome and inaccurate.

한편, 사용자가 숙박업소 등에서 룸서비스를 이용하고자 할 때, 종래에는 객실내에 비치된 설명서를 참고하여 룸서비스에 대한 정보를 파악하고, 객실에 별도로 설치된 제공되는 전화기를 이용하여 사용자가 원하는 서비스를 주문하는 형태가 주를 이루었다. 그러나 이러한 과정에서 사용자가 필요로 하는 룸서비스 정보를 확인하고, 주문을 위해 통화하기 위하여 시간이 많이 소요되고 번거로운 문제점이 있다.On the other hand, when a user desires to use a room service at a hotel or the like, conventionally, information on the room service is obtained by referring to the manual provided in the room, and the user is requested to use the provided telephone The main form of However, in this process, there is a problem that it takes a long time and troublesome to confirm the room service information required by the user and to make a call for ordering.

본 발명이 해결하고자 하는 과제는 사용자의 팔과 손을 사용하지 않고도 조작할 수 있는 스마트 미러 시스템을 제공하는 것에 있다.A problem to be solved by the present invention is to provide a smart mirror system which can be operated without using a user's arm and hand.

본 발명이 해결하고자 하는 다른 과제는 거울에 직접 반사되어 나타나는 사용자의 모습에 이미지나 영상을 중첩하여 표현함으로써 거울 상에 표현되는 사용자의 모습이 지연되어 표현되지 않고, 일반적인 거울의 용도로도 자연스럽게 활용할 수 있도록 하는 것에 있다.Another problem to be solved by the present invention is to provide an image display apparatus and a method for displaying the image by superimposing an image or an image on a user's appearance reflected directly on a mirror, To be able to do.

본 발명이 해결하고자 하는 또 다른 과제는 사용자가 거울을 보며 외출을 준비하기 위한 코디네이션을 선택하고자 하는 경우, 외출의 목적과 외출 장소의 기상 조건에 따라 사용자가 필요로 하는 코디네이션을 추천할 수 있는 스마트 미러 시스템을 제공하는 것에 있다, Another object of the present invention is to provide a smartphone which can recommend a coordination required by a user according to a weather condition of a place and a purpose of going out when a user wants to select a coordination to prepare for going out to look at a mirror, Mirror system,

본 발명이 해결하고자 하는 또 다른 과제는 사용자가 거울을 보며 양치를 하거나 치아 상태를 확인하고자 하는 경우, 양치 횟수나 양치 시간에 대한 정보를 간단하고 정확히 확인할 수 있도록 하는 스마트 미러 시스템을 제공하는 것에 있다. Another object of the present invention is to provide a smart mirror system that allows a user to easily and accurately check information on the number of brushing times and brushing time in the case of brushing a mirror and checking a tooth condition .

본 발명이 해결하고자 하는 또 다른 과제는 사용자가 숙박업소 등에서 룸서비스를 이용하고자 할 때, 룸서비스 주문을 단순화하고 단시간에 진행할 수 있도록 하는 스마트 미러 시스템을 제공하는 것에 있다.Another object of the present invention is to provide a smart mirror system in which a user can simplify the order of room service and proceed in a short time when he or she wants to use the room service in a hotel or the like.

본 발명에 따른 스마트 미러 시스템은 상기한 과제를 해결하기 위하여 사용자의 음성을 수신하여 음성 정보를 제공하는 음성 수신부; 영상 출력 정보에 대응하는 영상을 디스플레이하는 디스플레이부; 오디오 출력 정보에 대응하는 오디오를 출력하는 오디오 출력부; 및 상기 음성 정보로부터 상기 사용자의 의도를 검출하여 요청 정보를 제공하고, 상기 요청 정보에 따라 홈 네트워크로 명령을 전달하거나 인터넷으로부터 제공되는 정보에 대응하여 상기 영상 출력 정보 또는 상기 오디오 출력 정보를 제공하는 제어부; 를 포함한다. A smart mirror system according to the present invention includes: a voice receiving unit for receiving a voice of a user and providing voice information; A display unit for displaying an image corresponding to the video output information; An audio output unit for outputting audio corresponding to audio output information; And transmitting the command to the home network according to the request information or providing the video output information or the audio output information in response to information provided from the Internet A control unit; .

또한, 본 발명에 따른 스마트 미러 시스템은 상기한 과제를 해결하기 위하여 사용자의 음성을 수신하여 음성 정보를 제공하는 음성 수신부; 영상 출력 정보에 대응하는 영상을 디스플레이하는 디스플레이부; 오디오 출력 정보에 대응하는 오디오를 출력하는 오디오 출력부; 및 상기 음성 정보로부터 이벤트 정보와 장소 정보를 검출하며, 상기 장소 정보를 이용하여 인터넷에 연결되어 기상 정보를 수신하고, 상기 이벤트 정보와 상기 기상 정보를 이용하여 드레스 코드 정보를 생성하며, 상기 드레스 코드 정보와 사전에 상기 사용자에 의해 저장된 코디네이션 정보를 이용하여 상기 사용자에게 추천할 코디네이션에 대한 상기 영상 출력 정보 또는 상기 오디오 출력 정보를 제공하는 제어부; 를 포한다.According to another aspect of the present invention, there is provided a smart mirror system including a voice receiving unit for receiving a voice of a user and providing voice information; A display unit for displaying an image corresponding to the video output information; An audio output unit for outputting audio corresponding to audio output information; And receiving event information and place information from the voice information, receiving weather information by being connected to the Internet using the place information, generating dress code information using the event information and the weather information, A control unit for providing the video output information or the audio output information for the coordination to be recommended to the user using the coordination information stored by the user in advance; .

또한, 본 발명에 따른 스마트 미러 시스템은 상기한 과제를 해결하기 위하여 거치된 칫솔을 서로 구분하여 탈착 여부를 감지함으로써 칫솔 탈착 정보를 제공하는 칫솔 관리부; 사용자의 음성을 수신하여 음성 정보를 제공하는 음성 수신부; 영상 출력 정보에 대응하는 영상을 디스플레이하는 디스플레이부; 오디오 출력 정보에 대응하는 오디오를 출력하는 오디오 출력부; 및 상기 음성 정보로부터 상기 사용자의 의도를 검출하여 요청 정보를 제공하고, 상기 탈착 정보, 상기 요청 정보 및 상기 사용자의 치아 관리를 위한 진료 정보 중 어느 하나 이상에 대응하여 상기 사용자의 치아 관리 상태에 대한 상기 영상 출력 정보 또는 상기 오디오 출력 정보를 제공하며, 상기 요청 정보에 대응하여 인터넷에 연결되어 상기 사용자의 진료 정보를 수신하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided a smart mirror system comprising: a toothbrush managing unit for detecting whether or not a toothbrush mounted on a toothbrush is separated from a toothbrush, A voice receiving unit for receiving voice of a user and providing voice information; A display unit for displaying an image corresponding to the video output information; An audio output unit for outputting audio corresponding to audio output information; And a control unit that detects the user's intention from the voice information and provides the request information, and determines whether or not the user's dental care state corresponds to one or more of the removable information, the request information, And provides the video output information or the audio output information, and is connected to the Internet in response to the request information to receive the user's care information.

또한, 본 발명에 따른 스마트 미러 시스템은 상기한 과제를 해결하기 위하여 사용자의 음성을 수신하여 음성 정보를 제공하는 음성 수신부; 영상 출력 정보에 대응하는 영상을 디스플레이하는 디스플레이부; 오디오 출력 정보에 대응하는 오디오를 출력하는 오디오 출력부; 및 상기 음성 정보로부터 상기 사용자의 의도를 검출하여 요청 정보를 제공하고, 상기 요청 정보에 대응하여 상기 사용자에게 서비스 메뉴를 상기 오디오 출력 정보 또는 상기 영상 출력 정보로 변환하여 제공하며, 상기 사용자에 의해 선택된 서비스를 서버에 알리는 제어부; 를 포함한다.According to another aspect of the present invention, there is provided a smart mirror system including a voice receiving unit for receiving a voice of a user and providing voice information; A display unit for displaying an image corresponding to the video output information; An audio output unit for outputting audio corresponding to audio output information; And providing the request information by detecting the intention of the user from the voice information, converting the service menu to the audio output information or the video output information to the user in response to the request information, A control unit for informing the server of the service; .

본 발명의 실시예에 따른 스마트 미러 시스템은 사용자의 팔과 손을 사용하지도 않고 조작할 수 있어 조작 방법이 간편해지는 효과가 있다.The smart mirror system according to the embodiment of the present invention can be operated without using the user's arm and hand, thereby simplifying the operation method.

또한, 본 발명은 거울에 직접 반사되어 나타나는 사용자의 모습에 이미지나 영상을 중첩하여 표현함으로써 거울 상에 표현되는 사용자의 모습이 지연되어 표현되지 않고, 일반적인 거울의 용도로도 자연스럽게 활용할 수 있는 효과가 있다.In addition, the present invention does not delay the appearance of a user displayed on a mirror by expressing an image or an image superimposed on a user's appearance reflected directly on a mirror, and can be used naturally even for general mirror use have.

또한, 본 발명을 이용하는 사용자는 거울을 보며 외출을 준비하기 위한 코디네이션을 선택하고자 하는 경우, 외출의 목적과 외출 장소의 기상 조건에 따라 사용자가 필요로 하는 코디네이션을 추천받을 수 있게 된다. In addition, when a user using the present invention wishes to select a coordination to prepare for going out while looking at a mirror, coordination required by the user can be recommended according to the purpose of going out and the weather conditions of the outgoing place.

또한, 본 발명은 사용자가 거울을 보며 양치를 하거나 치아 상태를 확인하고자 하는 경우, 양치 횟수나 양치 시간에 대한 정보를 간단하고 정확히 확인할 수 있는 스마트 미러 시스템을 제공한다. In addition, the present invention provides a smart mirror system that can easily and accurately confirm information on the number of brushing teeth and toothbrushing time when a user looks at a mirror and wants to brush teeth or check a tooth condition.

또한, 본 발명은 사용자가 숙박업소 등에서 룸서비스를 이용하고자 할 때, 룸서비스 주문을 단순화하고 단시간에 진행할 수 있도록 하는 효과가 있다.Further, the present invention has the effect of simplifying the order of the room service and proceeding in a short time when the user wants to use the room service at the accommodation or the like.

도 1은 본 발명의 스마트 미러 시스템의 일 실시예를 나타내는 도면이다.
도 2는 도 1의 실시예를 블록도로 나타낸 도면이다.
도 3은 도 1의 스마트 미러 시스템이 동작되는 순서를 나타낸 순서도이다.
도 4는 본 발명의 스마트 미러 시스템의 다른 실시예를 나타내는 블록도이다.
도 5는 본 발명의 스마트 미러 시스템의 또 다른 실시예를 나타내는 블록도이다.
도 6은 본 발명의 스마트 미러 시스템의 또 다른 실시예를 나타내는 블록도이다.
1 is a diagram showing an embodiment of a smart mirror system according to the present invention.
2 is a block diagram of the embodiment of FIG.
FIG. 3 is a flowchart showing the sequence in which the smart mirror system of FIG. 1 operates.
4 is a block diagram showing another embodiment of the smart mirror system of the present invention.
5 is a block diagram showing another embodiment of the smart mirror system of the present invention.
6 is a block diagram showing another embodiment of the smart mirror system of the present invention.

이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세하게 설명한다. 본 명세서 및 특허청구범위에 사용된 용어는 통상적이거나 사전적 의미로 한정되어 해석되지 아니하며, 본 발명의 기술적 사항에 부합하는 의미와 개념으로 해석되어야 한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. It is to be understood that the terminology used herein is for the purpose of description and should not be interpreted as limiting the scope of the present invention.

본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 바람직한 실시예이며, 본 발명의 기술적 사상을 모두 대변하는 것이 아니므로, 본 출원 시점에서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있다.The embodiments described in the present specification and the configurations shown in the drawings are preferred embodiments of the present invention and are not intended to represent all of the technical ideas of the present invention and thus various equivalents and modifications Can be.

도 1은 본 발명의 스마트 미러 시스템(10)의 일 실시예를 나타내는 도면이고, 도 2는 도 1의 실시예를 블록도로 나타낸 도면이다.FIG. 1 is a view showing an embodiment of a smart mirror system 10 of the present invention, and FIG. 2 is a block diagram of the embodiment of FIG.

도 1과 도 2를 참조하면, 본 발명의 일 실시예에 따른 스마트 미러 시스템(10)은 음성 수신부(100), 디스플레이부(200), 오디오 출력부(300) 및 제어부(400)를 포함한다.1 and 2, a smart mirror system 10 according to an embodiment of the present invention includes a voice receiving unit 100, a display unit 200, an audio output unit 300, and a control unit 400 .

상기한 각 구성들은 유선의 라인 또는 무선 통신을 통하여 서로 데이터를 송수신할 수 있도록 구성될 수 있고, 상기한 구성 중 하나 이상은 하나의 장치에 인접하여 형성되거나 별도의 전원이 연결된 독립된 장치로 스마트 미러 시스템(10)에 설치될 수 있다.Each of the above-described configurations may be configured to transmit and receive data to / from each other via wire lines or wireless communication, and at least one of the configurations may be formed adjacent to one device or may be a separate device connected to a separate power source. And may be installed in the system 10.

도 1과 도 2의 실시예에서 스마트 미러 시스템(10)은 사용자(1)의 모습이 반사되어 비춰지는 거울(11)에 설치되는 스마트 디바이스들을 포함할 수 있다. In the embodiment of Figures 1 and 2, the smart mirror system 10 may include smart devices that are installed in the mirror 11 where the appearance of the user 1 is reflected and mirrored.

여기서, 거울(11)은 유리판으로 구성될 수 있고, 유리판의 후면에는 반사 물질이 코팅될 수 있다. 이러한 반사 물질은 유리판의 전면에서 투과되는 빛을 반사하고, 유리판의 후면에서 방사되는 빛을 유리판의 전면으로 투과시킬 수 있는 알루미늄 필름과 같은 반사물질이 예시될 수 있다. 본 발명의 실시예에 따른 거울(11)은 용도에 따라서 설치되는 장소나 모양, 크기가 다양할 수 있다.Here, the mirror 11 may be formed of a glass plate, and a reflective material may be coated on the rear surface of the glass plate. Such a reflective material may be a reflective material such as an aluminum film that reflects light transmitted through the front surface of the glass plate and transmits the light emitted from the rear surface of the glass plate to the front surface of the glass plate. The mirror 11 according to the embodiment of the present invention may have a variety of places, shapes, and sizes to be installed according to applications.

음성 수신부(100)는 스마트 미러 시스템(10)의 거울(11) 전면에 위치한 사용자(1)로부터 발성되는 음성을 수신하여 제어부(400)에 음성 정보를 제공할 수 있다.The voice receiving unit 100 may receive voice from the user 1 located on the front face of the mirror 11 of the smart mirror system 10 and provide voice information to the control unit 400. [

도면에 도시되진 않았으나 음성 수신부(100)는 마이크로폰(Microphone)과 ADC(Analog Digital Converter)를 포함하여 구성될 수 있다. 그리고, 음성 수신부(100)는 거울(11)의 일면에 설치된 바운더리 마이크로폰(Boundary Microphone)과 같은 평면형 마이크로폰을 통하여 사용자(1)의 음성을 수신할 수 있다.Although not shown in the figure, the voice receiving unit 100 may include a microphone and an analog digital converter (ADC). The voice receiving unit 100 can receive the voice of the user 1 through a planar microphone such as a boundary microphone installed on one side of the mirror 11.

마이크로폰을 통하여 수신된 음성은 마이크로폰 내부에 배치된 소자의 진동에 의해 아날로그 성분의 음성 신호로 변환되고, 해당 아날로그 음성 신호는 다시 음성 수신부(100)의 내부에 설치된 ADC(Analog Digital Converter)를 통해 디지털 성분으로 변환될 수 있다. 이하, 음성 수신부(100)에 의하여 변환된 디지털 성분의 음성 신호를 음성 정보로 지칭한다.The voice received through the microphone is converted into a voice signal of an analog component by the vibration of the elements arranged in the microphone, and the analog voice signal is transmitted to the digital ≪ / RTI > Hereinafter, the voice signal of the digital component converted by the voice receiving unit 100 is referred to as voice information.

사용자(1)의 음성을 보다 정확히 처리하기 위하여 음성 수신부(100)는 여러가지 소리가 혼재된 수신음으로부터 거울(11)에서 일정한 거리 내에 있는 사용자(1)의 음성만을 구분할 필요성이 있다. 이를 위하여 음성 수신부(100)에는 근거리 음성 추출 알고리즘이 사용될 수 있다. 근거리 음성 추출 알고리즘은 마이크로폰과 음원으로부터의 거리에 따른 음성 크기의 차이를 구분하여 수신되는 소리 중 일정 거리 내의 음성만을 추출하는 알고리즘이다. In order to more accurately process the voice of the user 1, the voice receiving unit 100 needs to distinguish only the voice of the user 1 within a certain distance from the mirror 11 from the received voice with various sounds. For this purpose, a near-field speech extraction algorithm may be used for the speech receiver 100. The near-field speech extraction algorithm is an algorithm that extracts only the speech within a certain distance of the received sound by classifying the difference in the speech size according to the distance from the microphone and the sound source.

디스플레이부(200)는 거울(11)의 후면에 배치될 수 있고, 거울(11)의 전면을 향해 유리판을 투과하여 영상 출력 정보에 대응하는 영상을 사용자(1)에게 디스플레이할 수 있다.The display unit 200 may be disposed on the rear surface of the mirror 11 and may transmit the image corresponding to the video output information to the user 1 through the glass plate toward the front surface of the mirror 11.

디스플레이부(200)에서 출력되는 영상은 거울(11)에 반사되는 사용자(1)의 모습에 중첩되어 표시될 수 있다. 따라서, 사용자(1)는 유리판 후면의 반사물질을 통해 비춰지는 자신의 모습에 더하여 디스플레이부(200)에서 출력되는 이미지 또는 영상을 같이 볼 수 있게 된다.The image output from the display unit 200 can be superimposed on the image of the user 1 reflected by the mirror 11. Accordingly, the user 1 can view the image or image output from the display unit 200 in addition to the image of the user 1 that is reflected through the reflective material on the rear surface of the glass plate.

여기서 영상 출력 정보는 하기할 제어부(400)에서 생성되며, 디스플레이부(200)가 출력할 텍스트나 이미지에 대한 정보가 포함될 수 있다. Here, the video output information may be generated by the controller 400 and may include information on a text or an image to be output by the display unit 200. [

오디오 출력부(300)는 오디오 출력 정보에 대응하는 오디오를 출력할 수 있다. 보다 상세하게, 오디오 출력부(300)는 DAC(Digital Analog Converter)와 스피커 같은 오디오 출력 장치를 포함할 수 있다. DAC는 오디오 출력 정보를 아날로그 신호로 변환하고, 스피커는 아날로그 신호를 사용자(1)가 청취할 수 있도록 진동을 통해 소리로 변환하여 외부에 출력한다. The audio output unit 300 may output audio corresponding to the audio output information. In more detail, the audio output unit 300 may include an audio output device such as a digital analog converter (DAC) and a speaker. The DAC converts the audio output information into an analog signal, and the speaker converts the analog signal into sound through vibration so that the user 1 can listen to it and outputs it to the outside.

여기서 오디오 출력 정보는 하기할 제어부(400)에서 생성되며, 오디오 출력부(300)가 출력할 소리에 대한 정보가 포함될 수 있다.Here, the audio output information is generated by the controller 400 to be performed, and information about the sound to be output by the audio output unit 300 may be included.

제어부(400)는 음성 정보로부터 사용자(1)의 의도를 검출하여 요청 정보를 제공하고, 요청 정보에 따라 홈 네트워크(20)로 명령을 전달하거나 인터넷(21)으로부터 제공되는 정보에 대응하여 상기 영상 출력 정보 또는 상기 오디오 출력 정보를 제공할 수 있다.The control unit 400 detects the intention of the user 1 from the voice information and provides the request information and transmits the command to the home network 20 according to the request information, Output information or the audio output information.

보다 상세하게, 제어부(400)는 검출부(410), 판단부(420), 통신부(430) 및 데이터베이스(440)를 포함할 수 있다.The control unit 400 may include a detecting unit 410, a determining unit 420, a communication unit 430, and a database 440.

검출부(410)는 음성 정보로부터 상기 사용자(1)의 의도를 검출하여 요청 정보를 제공할 수 있다. 보다 상세하게, 검출부(410)는 음성 수신부(100)로부터 음성 정보를 수신하고, 해당 정보로부터 사용자(1)의 의도를 검출한다. 여기서 사용자(1)의 의도는 사용자(1)가 스마트 미러 시스템(10)에 내리는 명령을 일컫는다. 즉, 검출부(410)는 음성 정보에 포함된 자연어를 검출하고, 해당 자연어가 어떤 명령을 포함하고 있는지 분석함으로써 사용자(1)의 음성 정보와 제일 유사한 것으로 판단되는 명령어를 요청 정보로 생성하여 판단부(420)에 제공한다. 자연어를 컴퓨터에서 해석할 수 있는 언어로 변환하는 통상의 자연어 인식 알고리즘이 사용될 수 있다.The detection unit 410 may detect the intention of the user 1 from the voice information and provide the request information. More specifically, the detecting unit 410 receives voice information from the voice receiving unit 100, and detects the intention of the user 1 from the information. Here, the intention of the user (1) refers to an instruction that the user (1) makes to the smart mirror system (10). That is, the detection unit 410 detects a natural word included in the voice information, analyzes the natural language to include a command, generates a command word that is determined to be closest to the voice information of the user 1 as request information, (420). Conventional natural language recognition algorithms that convert natural language into computer interpretable language can be used.

예를 들어, 사용자(1)가 “가스불을 꺼” 나 “뉴스를 검색해” 나 “지금이 몇시지” 라고 발음하면 음성 수신부(100)는 해당 음성을 인식하여 음성 정보로 변환하고, 검출부(410)는 변환된 음성 정보를 수신하여 판단부(420)가 처리하기 위한 명령어를 포함하는 요청 정보로 변환하게 된다.For example, when the user 1 pronounces "turn off the gas light" or "search for news" or "what time is now", the voice receiving unit 100 recognizes the voice and converts it into voice information, 410 receives the converted voice information and converts the converted voice information into request information including a command for processing by the determination unit 420.

판단부(420)는 요청 정보에 대응하여 홈 네트워크(20)에 전달할 명령을 제공하거나 인터넷(21)으로부터 제공되는 정보에 대응하여 영상 출력 정보 또는 오디오 출력 정보를 제공할 수 있다.The determination unit 420 may provide a command to be transmitted to the home network 20 in response to the request information or may provide video output information or audio output information in accordance with information provided from the Internet 21. [

보다 구체적으로, 판단부(420)는 검출부(410)에서 제공된 요청 정보에 대응하여 해당 요청 정보가 홈 네트워크(20)를 통해 처리되어야 하는 것, 인터넷(21)을 통해 처리되어야 하는 것 또는 홈 네트워크(20)와 인터넷(21)에 접속될 필요없이 제어부(400) 내에서 처리할 수 있는 것을 구분한다.More specifically, the determination unit 420 determines that the corresponding request information is to be processed through the home network 20 in response to the request information provided by the detection unit 410, that the request information should be processed through the Internet 21, It is not necessary to be connected to the Internet 20 and the Internet 21, and it can be processed in the control unit 400.

예를 들어, 사용자(1)가 상기한 예시와 같이 “가스불을 꺼” 라고 발음한 경우, 판단부(420)는 해당 음성이 변환된 요청 정보를 통해, 홈 네트워크(20)에 접속하여 연동된 가스 레인지에 가스불을 끄라는 명령을 전달할 수 있다. For example, when the user 1 pronounces " turn off the gas light " as in the above example, the determination unit 420 accesses the home network 20 through the request information in which the voice is converted, A command to turn off the gas fire can be transmitted to the gas range.

또한, 사용자(1)가 상기한 예시와 같이 “뉴스를 검색해” 라고 발음한 경우, 판단부(420)는 해당 음성이 변환된 요청 정보를 통해, 인터넷(21)에 접속하여 사전에 지정된 사이트로부터 검색된 뉴스 기사들의 텍스트로부터 자연어를 합성하여 오디오 출력 정보로 생성함으로써 오디오 출력부(300)를 통해 사용자(1)가 청취할 수 있게 하거나 검색된 뉴스 기사를 텍스트나 이미지의 형태로 디스플레이하기 위한 영상 출력 정보를 생성함으로써 디스플레이부(200)를 통해 사용자(1)가 검색된 뉴스를 볼 수 있도록 할 수 있다. When the user 1 pronounces " search news " as in the above example, the determination unit 420 accesses the Internet 21 through the request information in which the voice is converted, And synthesizes the natural language from the text of the searched news articles to generate audio output information, thereby enabling the user 1 to listen through the audio output unit 300 or to display the retrieved news articles in text or image form So that the user 1 can view the searched news through the display unit 200. [

또한, 사용자(1)가 상기한 예시와 같이 “지금이 몇시지” 라고 발음한 경우, 판단부(420)는 해당 음성이 변환된 요청 정보를 통해 데이터베이스(440)에 저장된 시간 정보를 통해 별도의 외부 연결 없이 바로 사용자(1)에게 현재 시간에 대한 정보를 디스플레이하거나 합성된 자연어로 출력할 수 있다.When the user 1 pronounces " What is the present time? &Quot; as in the above example, the judging unit 420 judges whether or not the voice is converted by using the time information stored in the database 440, It is possible to display the information on the current time to the user 1 immediately without external connection or to output the synthesized natural language.

판단부(420)는 상기 한 것과 같이 요청 정보가 홈 네트워크(20)나 인터넷(21)에 접속되어 처리되어야 하는 경우를 분류하기 위해 데이터베이스(440)에 저장된 요청 정보 분류 기준을 사용할 수 있다. 이러한 요청 정보 분류 기준은 스마트 미러 시스템(10)의 설계자에 의하여 사전에 데이터베이스(440)에 저장될 수 있다. The determination unit 420 may use the request information classification criteria stored in the database 440 to classify the cases in which the request information is connected to the home network 20 or the Internet 21 and processed. The request information classification criteria may be stored in the database 440 in advance by the designer of the smart mirror system 10. [

스마트 미러 시스템(10)은 제어부(400)를 통하여 상기한 예시 외에도 홈 네트워크(20)나 인터넷(21)을 통한 다양한 명령을 처리하여 사용자(1)에게 그 결과물을 출력할 수 있다.The smart mirror system 10 can process various commands through the home network 20 or the Internet 21 and output the result to the user 1 through the control unit 400. [

통신부(430)는 판단부(420)가 홈 네트워크(20)나 인터넷(21)과 같이 다른 서버에 접속하고자 할 때, 스마트 미러 시스템(10)에 접속 환경을 유지할 수 있다. 이를 통하여, 통신부(430)는 판단부(420)의 요청에 따라 명령을 전달하기 위해 홈 네트워크(20)에 접속하거나 사용자(1)가 원하는 정보를 검색하기 위해 상기 인터넷(21)에 접속할 수 있다. The communication unit 430 can maintain the connection environment to the smart mirror system 10 when the determination unit 420 accesses another server such as the home network 20 or the Internet 21. [ The communication unit 430 can access the home network 20 to transmit the command at the request of the determination unit 420 or access the Internet 21 to search for information desired by the user 1 .

통신부(430)에는 홈 네트워크(20)나 인터넷(21)에 연결되어 판단부(420)로부터 제공되는 정보를 외부로 전송하고, 외부에서 전송되는 정보를 판단부(420)에 전달하기 위해 유선 또는 무선의 랜(LAN) 환경이나 블루투스(Bluetooth) 환경이 구축될 수 있다.The communication unit 430 may be connected to the home network 20 or the Internet 21 to transmit information provided from the determination unit 420 to the outside and to transmit information externally transmitted to the determination unit 420, A wireless LAN environment or a Bluetooth environment can be established.

데이터베이스(440)는 판단부(420)가 요청 정보에 대응하여 영상 출력 정보나 오디오 출력 정보를 생성하거나 요청 정보를 처리함에 있어서 필요한 정보를 저장하고, 해당 정보를 판단부(420)의 요청에 따라 제공할 수 있다.The database 440 stores information necessary for the determination unit 420 to generate video output information or audio output information in response to the request information or to process the request information and transmits the information to the determination unit 420 in response to a request from the determination unit 420 .

도 3은 도 1의 스마트 미러 시스템이 동작되는 순서를 나타낸 순서도이다. FIG. 3 is a flowchart showing the sequence in which the smart mirror system of FIG. 1 operates.

도 3을 참조하면, 스마트 미러 시스템(10)은 음성 수신부(100)를 통해 사용자의 음성을 수신하고(S10), 해당 음성을 전자 기기에서 처리 가능한 디지털 음성 정보로 변환한다(S12). 생성된 음성 정보는 제어부(400)의 검출부(410)로 제공되어 요청 정보로 변환된다(S14). 판단부(420)는 요청 정보를 분류 한다(S16). Referring to FIG. 3, the smart mirror system 10 receives a user's voice through the voice receiving unit 100 (S10), and converts the voice into digital voice information that can be processed by the electronic device (S12). The generated voice information is provided to the detection unit 410 of the control unit 400 and converted into request information (S14). The determination unit 420 classifies the request information (S16).

이 때, 판단부(420)는 분류된 요청 정보의 처리를 위해 홈 네트워크(20)를 이용해야 하는 경우(S18), 통신부(430)를 통해 홈 네트워크(20)에 접속하여 요청 정보에 포함된 명령을 홈 네트워크(20)에 전달한다(S20). 이후, 판단부(420)는 디스플레이부(200)나 오디오 출력부(300)를 통해 홈 네트워크(20)에 전달된 명령의 처리 결과를 사용자에게 출력할 수 있다(S26).In this case, if the home network 20 is to be used for processing the classified request information (S18), the determination unit 420 accesses the home network 20 through the communication unit 430, Command to the home network 20 (S20). The determination unit 420 may output the processing result of the command transmitted to the home network 20 to the user through the display unit 200 or the audio output unit 300 at step S26.

또한, 판단부(420)는 분류된 요청 정보의 처리를 위해 인터넷(21)을 이용해야 하는 경우(S22), 통신부(430)를 통해 인터넷(21)에 접속하여 요청 정보에 포함된 명령을 처리한다(S24). 이후, 판단부(420)는 디스플레이부(200)나 오디오 출력부(300)를 통해 인터넷으로부터 수집된 결과를 사용자에게 출력할 수 있다(S26).If the determination unit 420 determines to use the Internet 21 for processing the classified request information in step S22, the determination unit 420 accesses the Internet 21 through the communication unit 430 and processes a command included in the request information (S24). Thereafter, the determination unit 420 may output the result collected from the Internet to the user through the display unit 200 or the audio output unit 300 (S26).

또한, 판단부(420)는 분류된 요청 정보의 처리를 위해 홈 네트워크(20)나 인터넷(21)을 사용할 필요 없이 내부적으로 처리가 가능한 경우, 해당 요청 정보에 포함되는 명령을 처리하여 처리 결과를 사용자에게 출력할 수 있다(S26).If it is possible to perform processing internally without using the home network 20 or the Internet 21 for processing the classified request information, the determination unit 420 processes the command included in the request information and outputs the processing result And output it to the user (S26).

도 4는 본 발명의 스마트 미러 시스템의 다른 실시예를 나타내는 블록도이다.4 is a block diagram showing another embodiment of the smart mirror system of the present invention.

도 4의 실시예에 따른 구성 중, 도 2의 실시예와 동일한 기능을 수행하는 구성에 대한 설명은 생략한다.Among the configurations according to the embodiment of FIG. 4, the description of configurations that perform the same functions as the embodiment of FIG. 2 will be omitted.

도 4의 실시예는 사용자가 외출 시 착용할 코디네이션을 추천하기 위한 스마트 미러 시스템(30)이다. 이를 위하여, 스마트 미러 시스템(30)은 도 2의 스마트 미러 시스템(10)과 달리, 촬영부(500)가 더 구비될 수 있고, 검출부(410)가 음성 정보로부터 이벤트 정보와 장소 정보를 검출할 수 있다.The embodiment of FIG. 4 is a smart mirror system 30 for recommending a coordination to be worn by a user when going out. Unlike the smart mirror system 10 of FIG. 2, the smart mirror system 30 may further include a photographing unit 500, and the detecting unit 410 may detect event information and place information from the voice information .

여기서 이벤트 정보는 사용자의 외출의 목적에 대한 정보로서, 음성 정보로부터 검출될 수 있다. 사용자의 외출 목적은 나들이, 산책, 파티, 출근, 출장, 운동 등 미리 데이터베이스(440)에 저장된 다양한 외출 목적 중 하나일 수 있다. 각각의 외출 목적에 따라 사용자가 스마트 미러 시스템(30)으로부터 추천 받는 코디네이션도 달라질 수 있다. Here, the event information can be detected from the voice information as information on the purpose of the user's going out. The user's outgoing goal can be one of a variety of outgoing goals stored in the database 440 in advance such as outings, walks, parties, work, travel, The coordination recommended by the user from the smart mirror system 30 may be different according to each outgoing purpose.

또한, 장소 정보는 사용자가 외출하고자 하는 장소의 위치에 대한 정보로서, 이벤트 정보와 마찬가지로 음성 정보로부터 검출될 수 있다. 사용자가 외출하고자 하는 장소의 위치에 따라 기상 상황이나 기온이 다를 수 있고, 기상 상황이나 기온에 사용자가 스마트 미러 시스템(30)으로부터 추천 받는 코디네이션도 달라질 수 있다. Also, the place information can be detected from the voice information in the same manner as the event information, as information on the position of the place to which the user wants to go out. Depending on the location of the place where the user wants to go out, the weather condition or the temperature may be different, and the coordination recommended by the user from the smart mirror system 30 to the weather condition or the temperature may be changed.

이러한 이벤트 정보나 장소 정보를 사용자의 음성 정보로부터 검출하기 위해서 스마트 미러 시스템(30)은 사용자에게 디스플레이부(200)나 오디오 출력부(300)를 통하여 어떤 장소에 어떤 목적으로 가는지 질의할 수 있고, 해당 질의에 대한 사용자의 답변을 음성 수신부(100)를 통해 수신할 수 있다.In order to detect the event information and the place information from the user's voice information, the smart mirror system 30 can inquire the user about a certain place through which the user goes through the display unit 200 or the audio output unit 300, And can receive the user's answer to the inquiry through the voice receiving unit 100.

사용자의 음성 정보로부터 이벤트 정보와 장소 정보의 검출이 이루어지면, 판단부(420)는 통신부(430)를 통해 인터넷(21)에 접속하여 사전에 설정된 기상 정보 웹사이트로부터 해당 지역의 기상 정보를 수신할 수 있다. 이러한 기상 정보에는 해당 지역의 기상 상황과 기온에 대한 정보가 포함될 수 있다. When the event information and the place information are detected from the user's voice information, the determination unit 420 accesses the Internet 21 through the communication unit 430 and receives weather information of the corresponding area from the preset weather information website can do. Such weather information may include information about weather conditions and temperature in the area.

이후, 판단부(420)는 데이터베이스(440)에 포함된 코디네이션 정보와 기상 정보, 이벤트 정보를 조합하여 사용자에게 추천할 코디네이션을 선정한다. 여기서, 코디네이션 정보는 사용자가 보유한 의류나 악세서리의 종류, 색상, 크기, 용도 중 적어도 어느 하나 이상의 패션 아이템에 대한 정보가 포함될 수 있다. 또한, 패션 아이템을 분류하기 위한 다양한 태그 정보가 사용될 수 있고, 하나의 패션 아이템이라도 복수의 태그에 속하도록 분류될 수 있다. Then, the determination unit 420 combines the coordination information, the weather information, and the event information included in the database 440 to select a coordination to be recommended to the user. Here, the coordination information may include information on at least one of fashion, item, color, size, and usage of the clothing or accessories held by the user. Also, various tag information for classifying fashion items can be used, and even one fashion item can be classified to belong to a plurality of tags.

예를 들어, 임의의 패션 아이템 A의 코디네이션 정보는 종류 태그 중 원피스로 분류되고, 색깔 태그 중 노란색으로 분류되며, 크기 태그 중 라지 사이즈로 분류되고, 용도 태그 중 파티용으로 분류될 수 있다.For example, coordination information of an arbitrary fashion item A is classified into one piece of category tags, yellow among color tags, large size tags of size tags, and classified as a party among usage tags.

또 다른 예를 들면, 임의의 아이템 B의 코디네이션 정보는 종류 태그 중 가방으로 분류되고, 색깔 태그 중 파란색으로 분류되며, 크기 태그 중 미디엄 사이즈로 분류되며, 용도 태그 중 외출 또는 운동용으로 분류될 수 있다.In another example, the coordination information of an arbitrary item B is classified into a bag among the category tags, blue among the color tags, medium size among the size tags, have.

태그 정보는 상기한 것 이외에도 기상 상황에 따른 사용 여부나 사용되는 계절, 재질등 다양한 태그 정보를 포함할 수 있다.In addition to the above, the tag information may include various tag information such as whether to use according to a weather condition or a season and materials to be used.

판단부(420)는 데이터베이스(440)에 저장된 복수의 아이템에 대한 코디네이션 정보 중 이벤트 정보와 기상 정보에 매칭되는 코디네이션 정보를 가진 아이템을 선택할 수 있다. 예를 들어, 외출하고자 하는 장소에 비가 오는 경우 우산이나 우의, 또는 방수 재질을 가지는 아이템을 사용자에게 추천할 수 있고, 외출하고자 하는 장소의 기온이 낮은 경우, 체온 유지가 잘되는 종류의 아이템을 추천할 수 있다.The determination unit 420 may select an item having coordination information matching the event information and the weather information among the coordination information for the plurality of items stored in the database 440. [ For example, when rain comes from a place to go out, an item having an umbrella, a right or a waterproof material can be recommended to the user, and when the temperature of the place to go out is low, .

통신부(430)에는 인터넷(21)에 연결되기 위해 유선 또는 무선의 랜(LAN) 환경이나 블루투스(Bluetooth) 환경이 구축될 수 있다.A wired or wireless LAN environment or a Bluetooth environment may be established in the communication unit 430 to be connected to the Internet 21.

데이터베이스(440)는 사용자의 아이템에 대한 종류, 색상, 크기, 용도, 재질 중 적어도 어느 하나 이상에 대한 정보가 포함된 코디네이션 정보를 저장하고, 판단부(420)의 요청에 따라 필요한 정보를 제공할 수 있다. The database 440 stores coordination information including information on at least one of a type, a color, a size, an application, and a material of a user item, and provides necessary information according to a request of the determination unit 420 .

도 4의 실시예에 따른 스마트 미러 시스템(30)은 데이터베이스(440)에 코디네이션 정보를 저장하기 위해 사용자를 촬영하여 촬영 정보를 제공하는 촬영부(500) 를 더 포함할 수 있다. 또한, 제어부(400)는 촬영 정보로부터 사용자가 착용한 아이템을 인식하며, 상기 아이템의 태그 정보로서 종류, 색상, 크기, 용도, 재질 중 적어도 어느 하나 이상에 대한 정보를 입력받아 아이템과 매칭시킴으로써 코디네이션 정보를 형성하고, 코디네이션 정보를 상기 데이터베이스(440)에 저장할 수 있다.The smart mirror system 30 according to the embodiment of FIG. 4 may further include a photographing unit 500 that photographs a user and provides photographing information in order to store coordinate information in the database 440. In addition, the control unit 400 recognizes the item worn by the user from the shooting information, receives information on at least one of the type, color, size, use, and material as the tag information of the item and matches with the item, Information, and store the coordination information in the database 440.

보다 상세하게, 촬영부(500)는 사용자를 촬영하기 위한 카메라를 포함할 수 있고, 사용자를 촬영할 수 있도록 카메라가 사용자를 바라보는 방향으로 거울(11)의 일면에 설치될 수 있다.More specifically, the photographing unit 500 may include a camera for photographing a user, and may be installed on one side of the mirror 11 in a direction in which the camera looks at the user so that the user can photograph the photograph.

촬영부(500)는 사용자가 음성으로 촬영 요청을 하는 경우, 이를 인식하는 제어부(400)에 의하여 사용자를 촬영할 수 있다. 촬영부(500)는 사용자를 촬영하여 촬영 정보를 생성하고, 생성된 촬영 정보를 판단부(420)에 제공한다.When the user makes a photographing request by voice, the photographing unit 500 can photograph the user by the control unit 400 that recognizes the photographing. The photographing unit 500 photographs a user to generate photographing information, and provides the photographing information to the judging unit 420.

판단부(420)에 촬영 정보가 입력되면, 판단부(420)는 사용자에게 해당 촬영 정보에 포함된 아이템의 태그 정보를 형성하기 위해 사전에 설정된 다양한 태그 정보 중 하나 이상을 사용자에게 제시하며, 사용자가 제시한 패션 아이템이 해당 태그 정보의 어떤 범주에 포함되는 것인지 질의 한다. 이 때의 질의 과정은 디스플레이부(200) 또는 오디오 출력부(300)를 통하여 이루어질 수 있고, 질의에 대한 사용자의 답변은 음성 수신부(100)를 통해 판단부(420)에 입력될 수 있다. 사용자의 답변으로 형성되는 패션 아이템에 대한 태그 정보는 해당 촬영 정보와 매칭되어 데이터베이스(440)에 저장될 수 있다.When the photographing information is inputted to the judging unit 420, the judging unit 420 presents to the user at least one of various preset tag information to form the tag information of the item included in the photographing information, To which category of the tag information the tagged fashion item is included. The query process at this time may be performed through the display unit 200 or the audio output unit 300 and the user's answer to the query may be input to the determination unit 420 through the voice receiving unit 100. [ The tag information of the fashion item formed by the user's answer may be stored in the database 440 matching the corresponding photographing information.

상기한 방법으로, 사용자에 대한 코디네이션 추천에 앞서 사용자가 보유한 아이템에 대한 코디네이션 정보를 확보할 수 있게 된다.With the above-described method, it is possible to acquire the coordination information for the item held by the user prior to the coordination recommendation for the user.

판단부(420)에 의한 의류 추천이 종료되면, 판단부(420)는 사용자에게 추천된 코디네이션 정보를 SNS(Social Network Serveice)에 업로드 할 것인지 질의할 수 있고, 사용자의 답변에 대응하여 해당 코디네이션 정보를 인터넷(21)을 통해 SNS 서버에 업로드 할 수 있다.When the recommendation by the judging unit 420 is completed, the judging unit 420 can inquire whether the user is to upload the recommended coordination information to the social network server (SNS), and the corresponding coordination information Can be uploaded to the SNS server via the Internet 21.

도 5는 본 발명의 스마트 미러 시스템의 다른 실시예를 나타내는 블록도이다.5 is a block diagram showing another embodiment of the smart mirror system of the present invention.

도 5의 실시예에 따른 구성 중, 도 2의 실시예와 동일한 기능을 수행하는 구성에 대한 설명은 생략한다.Among the configurations according to the embodiment of FIG. 5, the description of configurations that perform the same functions as the embodiment of FIG. 2 will be omitted.

도 5의 실시예는 사용자의 치아 관리를 위한 스마트 미러 시스템(40)이다. The embodiment of FIG. 5 is a smart mirror system 40 for the dental care of a user.

이를 위하여, 스마트 미러 시스템(40)은 도 2의 스마트 미러 시스템(10)과 달리, 칫솔 관리부(600)가 더 구비될 수 있다. To this end, the smart mirror system 40 may be further provided with a toothbrush management unit 600, unlike the smart mirror system 10 of FIG.

칫솔 관리부(600)는 거치된 칫솔을 서로 구분하여 탈착 여부를 감지함으로써 칫솔 탈착 정보를 제공한다. 도면에 구체적으로 도시되진 않았으나, 칫솔 관리부(600)는 여러 개의 칫솔이 거치될 수 있는 거치대를 포함하며, 거치대에 거치되는 칫솔은 거치된 위치에 따라 다른 번호로 분류되어 관리될 수 있다. The toothbrush managing unit 600 separates the mounted toothbrushes from each other and detects whether the toothbrushes are detached or not, thereby providing toothbrush detachment information. Although not specifically shown in the drawings, the toothbrush managing unit 600 includes a holder on which a plurality of toothbrushes can be mounted, and the toothbrushes mounted on the holder can be classified and managed according to different positions.

칫솔 탈착 정보는 거치대 별로 거치된 칫솔이 분리되거나 다시 거치된 시간에 따른 양치 시간의 정보나 하루 동안 칫솔이 거치대로부터 분리된 횟수로부터 계산될 수 있는 양치 횟수에 대한 정보를 포함할 수 있다.The toothbrush detachment information may include information on a toothbrush time according to the time when the toothbrush mounted on a cradle is separated or re-mounted, or information on the number of tooth brushes that can be calculated from the number of times the toothbrush is separated from the cradle during one day.

제어부(400)의 판단부(420)는 양치 시간이나 양치 횟수를 출력하라는 사용자의 요청 정보에 대응하여 칫솔 관리부로부터 제공받은 칫솔 탈착 정보를 디스플레이부(200) 또는 오디오 출력부(300)에 제공할 수 있다.The determining unit 420 of the control unit 400 provides the toothbrush detachment information provided from the toothbrush managing unit to the display unit 200 or the audio output unit 300 in response to the request information of the user to output the brushing time or the brushing frequency .

또한, 판단부(420)는 치과 진료를 예약하거나 예약된 진료의 진료 시간을 확인해달라는 사용자의 요청 정보에 대응하여 통신부(430)를 통해 인터넷(21)에 접속할 수 있다. 이 때 접속되는 인터넷(21) 사이트는 사전에 지정된 치과 병원의 홈페이지 또는 치과 진료의 목적을 위한 웹사이트일 수 있다.In addition, the determination unit 420 may access the Internet 21 through the communication unit 430 in response to the user's request information for reserving the dental care or checking the scheduled time of the consultation. The Internet 21 site to be connected at this time may be a homepage of a previously designated dental hospital or a website for the purpose of dental care.

도 6은 본 발명의 스마트 미러 시스템의 또 다른 실시예를 나타내는 블록도이다.6 is a block diagram showing another embodiment of the smart mirror system of the present invention.

도 6의 실시예에 따른 구성 중, 도 2의 실시예와 동일한 기능을 수행하는 구성에 대한 설명은 생략한다.Among the configurations according to the embodiment of FIG. 6, the description of configurations that perform the same functions as the embodiment of FIG. 2 will be omitted.

도 6의 실시예는 객실에 설치된 거울(11)을 통하여 숙박업소의 룸서비스를 주문할 수 있도록 하는 스마트 미러 시스템(50)이다.The embodiment of FIG. 6 is a smart mirror system 50 that enables a guest room service of an accommodation business to be ordered through a mirror 11 installed in the guest room.

음성 수신부(100)가 사용자로부터 룸서비스 주문에 대한 음성을 수신하면, 이를 음성 정보로 변환하여 제어부(400)의 검출부(410)에 제공한다. 검출부(410)는 해당 음성 정보를 요청 정보로 변환하고, 판단부(420)는 요청 정보에 대응하여 데이터베이스(440)에 저장된 룸 서비스 메뉴를 불러온다. 룸 서비스 메뉴는 판단부(420)에 의하여 영상 출력 정보로 변환되어 디스플레이부(200)를 통해 사용자에게 제시되거나 또는 오디오 출력 정보로 변환되어 오디오 출력부(300)를 통해 사용자에게 제시될 수 있다.When the voice receiving unit 100 receives a voice for a room service order from the user, the voice receiving unit 100 converts the voice to voice information and provides the voice information to the detecting unit 410 of the control unit 400. The detecting unit 410 converts the voice information into the request information, and the determining unit 420 retrieves the room service menu stored in the database 440 in response to the request information. The room service menu may be converted into video output information by the determination unit 420 and presented to the user through the display unit 200 or converted to audio output information and presented to the user through the audio output unit 300. [

룸 서비스 메뉴 정보에는 시간대에 따른 다양한 음식 주문 정보, 간식, 음료의 주문, 각종 비품의 추가 주문, 서비스 문의를 위한 정보 중 어느 하나 이상 일 수 있다.The room service menu information may include at least one of various food order information according to the time zone, snacks, order of drinks, additional order of various fixtures, and information for service inquiry.

이후, 사용자의 선택에 대응하여 판단부(420)는 통신부(430)를 통하여 사용자가 선택한 룸서비스를 인터넷 또는 내부 네트워크를 통해 숙박업소의 서버(23)에 전송한다. 이 때, 사용자가 룸서비스를 선택하는 과정은 사용자의 음성을 통해 진행될 수 있고, 사용자의 선택 음성은 음성 수신부(100)를 통해 제어부(400)에서 처리되어 숙박업소의 서버(23)로 전달될 수 있다. Then, in response to the user's selection, the determination unit 420 transmits the room service selected by the user through the communication unit 430 to the server 23 of the lodging company through the Internet or the internal network. At this time, the process of selecting the room service by the user can be performed through the voice of the user, and the user's selected voice is processed by the control unit 400 through the voice receiving unit 100 and transmitted to the server 23 of the lodging company .

상기한 바와 같이 본 발명의 실시예에 따른 스마트 미러 시스템은 사용자의 팔과 손을 사용하지도 않고 조작할 수 있어 조작 방법이 간편해지는 효과가 있다.As described above, the smart mirror system according to the embodiment of the present invention can operate without using the user's arms and hands, thereby simplifying the operation method.

또한, 본 발명은 거울에 직접 반사되어 나타나는 사용자의 모습에 이미지나 영상을 중첩하여 표현함으로써 거울 상에 표현되는 사용자의 모습이 지연되어 표현되지 않고, 일반적인 거울의 용도로도 자연스럽게 활용할 수 있는 효과가 있다.In addition, the present invention does not delay the appearance of a user displayed on a mirror by expressing an image or an image superimposed on a user's appearance reflected directly on a mirror, and can be used naturally even for general mirror use have.

또한, 본 발명을 이용하는 사용자는 거울을 보며 외출을 준비하기 위한 코디네이션을 선택하고자 하는 경우, 외출의 목적과 외출 장소의 기상 조건에 따라 사용자가 필요로 하는 코디네이션을 추천받을 수 있게 된다. In addition, when a user using the present invention wishes to select a coordination to prepare for going out while looking at a mirror, coordination required by the user can be recommended according to the purpose of going out and the weather conditions of the outgoing place.

또한, 본 발명은 사용자가 거울을 보며 양치를 하거나 치아 상태를 확인하고자 하는 경우, 양치 횟수나 양치 시간에 대한 정보를 간단하고 정확히 확인할 수 있는 스마트 미러 시스템을 제공한다. In addition, the present invention provides a smart mirror system that can easily and accurately confirm information on the number of brushing teeth and toothbrushing time when a user looks at a mirror and wants to brush teeth or check a tooth condition.

또한, 본 발명은 사용자가 숙박업소 등에서 룸서비스를 이용하고자 할 때, 룸서비스 주문을 단순화하고 단시간에 진행할 수 있도록 하는 효과가 있다.Further, the present invention has the effect of simplifying the order of the room service and proceeding in a short time when the user wants to use the room service at the accommodation or the like.

Claims (10)

사용자의 음성을 수신하여 음성 정보를 제공하는 음성 수신부;
영상 출력 정보에 대응하는 영상을 디스플레이하는 디스플레이부;
오디오 출력 정보에 대응하는 오디오를 출력하는 오디오 출력부; 및
상기 음성 정보로부터 상기 사용자의 의도를 검출하여 요청 정보를 제공하고, 상기 요청 정보에 따라 홈 네트워크로 명령을 전달하거나 인터넷으로부터 제공되는 정보에 대응하여 상기 영상 출력 정보 또는 상기 오디오 출력 정보를 제공하는 제어부; 를 포함하는 스마트 미러 시스템.
A voice receiving unit for receiving voice of a user and providing voice information;
A display unit for displaying an image corresponding to the video output information;
An audio output unit for outputting audio corresponding to audio output information; And
A controller for detecting the intention of the user based on the voice information and providing the request information, transmitting the command to the home network according to the request information, or providing the video output information or the audio output information in response to information provided from the Internet, ; And a smart mirror system.
제1 항에 있어서, 상기 음성 수신부는
거울로부터 소정 거리 이내의 근거리 음성을 구분하고, 상기 근거리 음성을 상기 음성 정보로 제공하는 근거리 음성 추출 알고리즘을 이용하는 스마트 미러 시스템.
The apparatus of claim 1, wherein the voice receiving unit
A smart mirror system using a near-field speech extraction algorithm that distinguishes near-field speech within a predetermined distance from a mirror and provides the near-field speech as the speech information.
제1 항에 있어서, 제어부는
상기 음성 정보로부터 상기 사용자의 의도를 검출하여 상기 요청 정보를 제공하는 검출부;
상기 요청 정보에 대응하여 상기 홈 네트워크에 전달할 명령을 제공하거나 상기 인터넷으로부터 제공되는 정보에 대응하여 상기 영상 출력 정보 또는 상기 오디오 출력 정보를 제공하는 판단부;
상기 판단부의 요청에 따라 명령을 전달하기 위해 상기 홈 네트워크에 접속하거나 상기 사용자가 원하는 정보를 검색하기 위해 상기 인터넷에 접속하는 통신부; 및
상기 영상 출력 정보와 상기 오디오 출력 정보의 제공에 필요한 정보를 저장하고, 상기 판단부의 요청에 따라 해당되는 정보를 제공하는 데이터베이스; 를 포함하는 스마트 미러 시스템.
2. The apparatus of claim 1, wherein the control unit
A detecting unit detecting the user's intention from the voice information and providing the request information;
A determining unit for providing a command to be transmitted to the home network corresponding to the request information or providing the video output information or the audio output information in correspondence with information provided from the Internet;
A communication unit for accessing the home network to transmit an instruction according to a request of the determination unit or accessing the Internet to search for information desired by the user; And
A database for storing information necessary for providing the video output information and the audio output information and providing corresponding information at the request of the determination unit; And a smart mirror system.
사용자의 음성을 수신하여 음성 정보를 제공하는 음성 수신부;
영상 출력 정보에 대응하는 영상을 디스플레이하는 디스플레이부;
오디오 출력 정보에 대응하는 오디오를 출력하는 오디오 출력부; 및
상기 음성 정보로부터 이벤트 정보와 장소 정보를 검출하며, 상기 장소 정보를 이용하여 인터넷에 연결되어 기상 정보를 수신하고, 상기 이벤트 정보와 상기 기상 정보를 이용하여 드레스 코드 정보를 생성하며, 상기 드레스 코드 정보와 사전에 상기 사용자에 의해 저장된 코디네이션 정보를 이용하여 상기 사용자에게 추천할 코디네이션에 대한 상기 영상 출력 정보 또는 상기 오디오 출력 정보를 제공하는 제어부; 를 포함하는 스마트 미러 시스템.
A voice receiving unit for receiving voice of a user and providing voice information;
A display unit for displaying an image corresponding to the video output information;
An audio output unit for outputting audio corresponding to audio output information; And
The method includes detecting event information and place information from the voice information, receiving weather information connected to the Internet using the place information, generating dress code information using the event information and the weather information, And a controller for providing the video output information or the audio output information for the coordination to be recommended to the user using the coordination information stored by the user in advance; And a smart mirror system.
제4 항에 있어서, 상기 제어부는
상기 음성 정보로부터 상기 이벤트 정보와 상기 장소 정보를 검출하는 검출부;
상기 장소 정보에 대응되는 상기 기상 정보를 수신하고, 상기 기상 정보, 상기 이벤트 정보를 이용하여 상기 드레스 코드 정보를 생성하고, 사전에 저장된 코디네이션 정보와 상기 드레스 코드 정보를 매칭시킴으로써 상기 사용자에게 추천할 코디네이션에 대한 상기 영상 출력 정보 또는 상기 오디오 출력 정보를 제공하는 판단부;
상기 판단부의 요청에 따라 상기 인터넷에 연결되어 상기 기상 정보를 수신하는 통신부; 및
상기 사용자의 아이템에 대한 종류, 색상, 크기, 용도, 재질 중 적어도 어느 하나 이상에 대한 정보가 포함된 상기 코디네이션 정보를 저장하고, 상기 판단부의 요청에 따라 필요한 정보를 제공하는 데이터베이스; 를 포함하는 스마트 미러 시스템.
5. The apparatus of claim 4, wherein the control unit
A detecting unit detecting the event information and the place information from the audio information;
Wherein the game information generating unit generates the dress code information by using the weather information and the event information, matches the dress code information stored in advance with the dress code information, A determination unit for providing the video output information or the audio output information to the video output unit;
A communication unit connected to the Internet and receiving the weather information at the request of the determination unit; And
A database for storing the coordination information including information on at least one of a type, a color, a size, an application, and a material of the item of the user, and providing necessary information according to a request of the determination unit; And a smart mirror system.
제5 항에 있어서,
상기 사용자를 촬영하여 촬영 정보를 제공하는 촬영부; 를 더 포함하고,
상기 판단부는
상기 촬영 정보로부터 상기 사용자가 착용한 상기 아이템을 인식하고, 상기 아이템의 태그 정보로서 종류, 색상, 크기, 용도, 재질 중 적어도 어느 하나 이상에 대한 정보를 입력받아 상기 아이템과 매칭시킴으로써 상기 코디네이션 정보를 형성하며, 상기 코디네이션 정보를 상기 데이터베이스에 저장하는 스마트 미러 시스템.
6. The method of claim 5,
A photographing unit photographing the user and providing photographing information; Further comprising:
The determination unit
Recognizing the item worn by the user from the shooting information, receiving information on at least one of a type, a color, a size, an application, and a material as tag information of the item and matching the item with the item by receiving the coordination information And stores the coordination information in the database.
제6 항에 있어서,
상기 태그 정보는 상기 판단부의 질의에 대응하여 상기 사용자로부터 제공되는 음성을 분석함으로써 입력되는 스마트 미러 시스템.
The method according to claim 6,
Wherein the tag information is input by analyzing a voice provided from the user corresponding to the query of the determination unit.
거치된 칫솔을 서로 구분하여 탈착 여부를 감지함으로써 칫솔 탈착 정보를 제공하는 칫솔 관리부;
사용자의 음성을 수신하여 음성 정보를 제공하는 음성 수신부;
영상 출력 정보에 대응하는 영상을 디스플레이하는 디스플레이부;
오디오 출력 정보에 대응하는 오디오를 출력하는 오디오 출력부; 및
상기 음성 정보로부터 상기 사용자의 의도를 검출하여 요청 정보를 제공하고, 상기 탈착 정보, 상기 요청 정보 및 상기 사용자의 치아 관리를 위한 진료 정보 중 어느 하나 이상에 대응하여 상기 사용자의 치아 관리 상태에 대한 상기 영상 출력 정보 또는 상기 오디오 출력 정보를 제공하며, 상기 요청 정보에 대응하여 인터넷에 연결되어 상기 사용자의 진료 정보를 수신하는 것을 특징으로 하는 스마트 미러 시스템.
A toothbrush managing unit for providing toothbrush detachment information by sensing whether the toothbrush is detached and detached;
A voice receiving unit for receiving voice of a user and providing voice information;
A display unit for displaying an image corresponding to the video output information;
An audio output unit for outputting audio corresponding to audio output information; And
The user's intention of the user is detected from the voice information, and the request information is provided, and the user's dental care state of the user corresponding to at least one of the detachment information, the request information, And outputs the video output information or the audio output information. The smart mirror system is connected to the Internet in response to the request information, and receives the user's care information.
제8 항에 있어서, 상기 제어부는
상기 음성 정보로부터 상기 사용자의 의도를 검출하여 상기 요청 정보를 제공하는 검출부;
상기 탈착 정보, 상기 요청 정보 및 상기 사용자의 치아 관리를 위한 진료 정보 중 어느 하나 이상에 대응하여 상기 사용자의 치아 관리 상태에 대한 상기 영상 출력 정보 또는 상기 오디오 출력 정보를 제공하는 판단부;
상기 판단부의 요청에 따라 상기 인터넷에 접속하여 상기 진료 정보를 수신하는 통신부; 및
상기 영상 출력 정보와 상기 오디오 출력 정보의 제공에 필요한 정보를 저장하고, 상기 판단부의 요청에 따라 해당되는 정보를 제공하는 데이터베이스; 를 포함하는 스마트 미러 시스템.
9. The apparatus of claim 8, wherein the control unit
A detecting unit detecting the user's intention from the voice information and providing the request information;
A determining unit for providing the image output information or the audio output information for the tooth management state of the user corresponding to at least one of the removable information, the request information, and the medical care information for managing the teeth of the user;
A communication unit for accessing the Internet and receiving the medical care information at the request of the determination unit; And
A database for storing information necessary for providing the video output information and the audio output information and providing corresponding information at the request of the determination unit; And a smart mirror system.
사용자의 음성을 수신하여 음성 정보를 제공하는 음성 수신부;
영상 출력 정보에 대응하는 영상을 디스플레이하는 디스플레이부;
오디오 출력 정보에 대응하는 오디오를 출력하는 오디오 출력부; 및
상기 음성 정보로부터 상기 사용자의 의도를 검출하여 요청 정보를 제공하고, 상기 요청 정보에 대응하여 상기 사용자에게 서비스 메뉴를 상기 오디오 출력 정보 또는 상기 영상 출력 정보로 변환하여 제공하며, 상기 사용자에 의해 선택된 서비스를 서버에 알리는 제어부; 를 포함하는 스마트 미러 시스템.
A voice receiving unit for receiving voice of a user and providing voice information;
A display unit for displaying an image corresponding to the video output information;
An audio output unit for outputting audio corresponding to audio output information; And
Detecting a user's intention from the audio information to provide request information, converting the service menu to the audio output information or the video output information to provide the user with the service information selected by the user, To the server; And a smart mirror system.
KR1020160136564A 2016-10-20 2016-10-20 Smart mirror system KR20180043620A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160136564A KR20180043620A (en) 2016-10-20 2016-10-20 Smart mirror system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160136564A KR20180043620A (en) 2016-10-20 2016-10-20 Smart mirror system

Publications (1)

Publication Number Publication Date
KR20180043620A true KR20180043620A (en) 2018-04-30

Family

ID=62081216

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160136564A KR20180043620A (en) 2016-10-20 2016-10-20 Smart mirror system

Country Status (1)

Country Link
KR (1) KR20180043620A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109190065A (en) * 2018-09-13 2019-01-11 珠海格力电器股份有限公司 Show the method and air-conditioning of information
CN110992950A (en) * 2019-11-30 2020-04-10 嘉兴市成泰镜业有限公司 Household lamp mirror voice control system
KR20210078592A (en) 2019-12-18 2021-06-29 충북대학교 산학협력단 Personalized information providing method using smart mirror system
KR20220141655A (en) * 2021-04-13 2022-10-20 (주) 플래누리 Smart mirror-based concierge service platform device using deep learning-based face recognition and voice recognition technology and its operation method

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109190065A (en) * 2018-09-13 2019-01-11 珠海格力电器股份有限公司 Show the method and air-conditioning of information
CN110992950A (en) * 2019-11-30 2020-04-10 嘉兴市成泰镜业有限公司 Household lamp mirror voice control system
KR20210078592A (en) 2019-12-18 2021-06-29 충북대학교 산학협력단 Personalized information providing method using smart mirror system
KR20220141655A (en) * 2021-04-13 2022-10-20 (주) 플래누리 Smart mirror-based concierge service platform device using deep learning-based face recognition and voice recognition technology and its operation method

Similar Documents

Publication Publication Date Title
US10992491B2 (en) Smart home automation systems and methods
CN107703872B (en) Terminal control method and device of household appliance and terminal
US9949351B2 (en) Method for controlling mobile terminal and program for controlling mobile terminal
JP6534926B2 (en) Speaker identification method, speaker identification device and speaker identification system
CN110914878A (en) System and method for detecting and responding to visitors of a smart home environment
US7349758B2 (en) Interactive personalized robot for home use
US11893795B2 (en) Interacting with visitors of a connected home environment
KR20180043620A (en) Smart mirror system
US11237794B2 (en) Information processing device and information processing method
US11532227B2 (en) Discovery of and connection to remote devices
WO2020044099A1 (en) Service processing method and apparatus based on object recognition
US11303955B2 (en) Video integration with home assistant
CN107038214A (en) Expression information processing method and processing device
CN109474658A (en) Electronic equipment, server and the recording medium of task run are supported with external equipment
KR20070011398A (en) Method and system for control of an application
KR20190134975A (en) Augmented realtity device for rendering a list of apps or skills of artificial intelligence system and method of operating the same
KR20150018663A (en) A system and method for personalized living services by identification and positioning by image processing
FR2898719A1 (en) Control interface e.g. portable telephone type mobile terminal, adapting method for controlling e.g. lighting system, involves displaying list of equipments to be controlled by user, if user is located in predefined zone e.g. road
JP7452524B2 (en) Information processing device and information processing method
CN111081240B (en) Voice ordering method, device and system and computer readable storage medium
WO2008104912A2 (en) Method of locating objects using an autonomously moveable device
TWM482779U (en) Object information retrieval system
US20210208550A1 (en) Information processing apparatus and information processing method
KR20140109276A (en) Smart restaurant table system for interlocking control sensibility lighting apparatus and sound apparatus
CN111177540A (en) Information recommendation method and device