KR20180087033A - 제스쳐 기반의 가전제품 제어 시스템 및 방법, 이를 수행하기 위한 기록매체 - Google Patents

제스쳐 기반의 가전제품 제어 시스템 및 방법, 이를 수행하기 위한 기록매체 Download PDF

Info

Publication number
KR20180087033A
KR20180087033A KR1020170011215A KR20170011215A KR20180087033A KR 20180087033 A KR20180087033 A KR 20180087033A KR 1020170011215 A KR1020170011215 A KR 1020170011215A KR 20170011215 A KR20170011215 A KR 20170011215A KR 20180087033 A KR20180087033 A KR 20180087033A
Authority
KR
South Korea
Prior art keywords
communication module
infrared signal
central communication
information
code information
Prior art date
Application number
KR1020170011215A
Other languages
English (en)
Inventor
나아현
김지원
박강규
김진웅
김동진
Original Assignee
나아현
김동진
김진웅
김지원
박강규
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 나아현, 김동진, 김진웅, 김지원, 박강규 filed Critical 나아현
Priority to KR1020170011215A priority Critical patent/KR20180087033A/ko
Publication of KR20180087033A publication Critical patent/KR20180087033A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q2209/00—Arrangements in telecontrol or telemetry systems
    • H04Q2209/40—Arrangements in telecontrol or telemetry systems using a wireless architecture

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Selective Calling Equipment (AREA)

Abstract

제스쳐 기반의 가전제품 제어 시스템 및 방법, 이를 수행하기 위한 기록매체가 개시된다. 본 발명에 따른 제스쳐 기반의 가전제품 제어 시스템은, 사용자의 제스쳐를 감지하여 동작정보를 생성하는 사용자 단말, 상기 사용자 단말로부터 상기 동작정보를 수신하여 상기 동작정보와 미리 매칭된 코드정보를 검색하고, 상기 코드정보가 포함된 적외선 신호를 주변으로 방사하는 중앙 통신 모듈 및 가전제품과 연결되고, 방사되는 상기 적외선 신호를 정상적으로 수신하는지 여부를 감지하여 상기 중앙 통신 모듈로 피드백 정보를 전송하며, 상기 적외선 신호가 정상적으로 수신된 것으로 판단되는 경우, 상기 적외선 신호를 상기 가전제품으로 전달하는 말단 통신 모듈을 포함한다.

Description

제스쳐 기반의 가전제품 제어 시스템 및 방법, 이를 수행하기 위한 기록매체{SYSTEM AND METHOD FOR GESTURE BASED CONTROLLING HOME APPLIANCES, RECORDING MEDIUM FOR PERFORMING THE METHOD}
본 발명은 제스쳐 기반의 가전제품 제어 시스템 및 방법, 이를 수행하기 위한 기록매체에 관한 것으로서, 더욱 상세하게는 종래의 리모컨을 대신하여 시각 장애인이 편리하게 가전제품을 원격으로 제어할 수 있는 본 발명은 제스쳐 기반의 가전제품 제어 시스템 및 방법, 이를 수행하기 위한 기록매체에 관한 것이다.
가전제품을 원격에서 편리하기 제어하기 위한 장치로 리모컨을 사용한다. 리모컨과 가전제품은 일반적으로 적외선 통신으로 데이터를 송수신하며, 리모컨에 구비된 각각의 버튼은 서로 다른 키 코드(key code)가 전송되도록 설계되어 있다. 가전제품은 리모컨으로부터 적외선 신호를 수신하여 적외선 신호에 포함된 키 코드를 분석함으로써, 각각의 버튼에 대응되는 동작을 수행할 수 있다.
하지만, 이와 같은 리모컨의 편리함에도 불구하고, 시각장애인들은 리모컨을 사용하기 어렵다는 문제점이 있다. 종래의 리모컨은 시각장애들이 사용하기에는 너무 많은 기능들이 구현되어 있기 때문에, 원하는 명령에 해당되는 버튼의 위치를 구분하기 어려우며, 실제 사용하지 않는 기능에 대한 버튼이 존재함에 따라 시각장애인은 리모컨을 효율적으로 사용하지 못하는 불편함이 존재해 왔다. 또한, 종래의 리모컨은 가전제품이 위치한 방향을 향하여 입력버튼을 눌러야 가전제품이 정상적으로 이를 인지할 수 있기 때문에, 가전제품의 정확한 위치를 인식하지 못하는 시각 장애인들의 경우에는 리모컨 사용에 한계가 있다.
한국공개특허 제10-2015-0086807호 한국등록특허 제10-0755552호
본 발명의 일측면은 사용자의 제스쳐 만으로 가전제품을 원격으로 제어하고, 특정 방향을 향해 제어신호를 전송하지 않더라도 가전제품이 제스쳐에 따른 제어신호를 용이하게 수신할 수 있는 제스쳐 기반의 가전제품 제어 시스템 및 방법, 이를 수행하기 위한 기록매체를 제공한다.
본 발명의 기술적 과제는 이상에서 언급한 기술적 과제로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일 실시예에 따른 제스쳐 기반의 가전제품 제어 시스템은, 사용자의 제스쳐를 감지하여 동작정보를 생성하는 사용자 단말, 상기 사용자 단말로부터 상기 동작정보를 수신하여 상기 동작정보와 미리 매칭된 코드정보를 검색하고, 상기 코드정보가 포함된 적외선 신호를 주변으로 방사하는 중앙 통신 모듈 및 가전제품과 연결되고, 방사되는 상기 적외선 신호를 정상적으로 수신하는지 여부를 감지하여 상기 중앙 통신 모듈로 피드백 정보를 전송하며, 상기 적외선 신호가 정상적으로 수신된 것으로 판단되는 경우, 상기 적외선 신호를 상기 가전제품으로 전달하는 말단 통신 모듈을 포함한다.
상기 중앙 통신 모듈은, 상기 적외선 신호를 주변으로 방사하도록, 상기 적외선 신호를 서로 다른 방향으로 전송하는 복수의 적외선 송수신 센서를 포함할 수 있다.
상기 중앙 통신 모듈은, 상기 가전제품과 관련된 리모컨과 통신하여 상기 가전제품의 특정 동작을 제어하는 코드정보를 수집하여 저장하고, 상기 사용자 단말과 통신하여 특정 동작정보와 상기 코드정보를 매칭하여 저장할 수 있다.
상기 말단 통신 모듈은, 상기 중앙 통신 모듈로부터 상기 적외선 신호를 수신하면 상기 적외선 신호에 소정의 데이터가 부가된 상기 피드백 정보를 생성하고, 상기 적외선 신호를 상기 가전제품으로 전송하고, 상기 소정의 데이터가 부가된 적외선 신호인 상기 피드백 정보를 상기 중앙 통신 모듈로 전송할 수 있다.
상기 중앙 통신 모듈은, 상기 피드백 신호를 수신하면 상기 피드백 신호를 해석하여 상기 가전제품이 상기 적외선 신호를 정상적으로 수신하였는지 여부를 음성으로 출력하는 스피커 모듈을 포함할 수 있다.
상기 중앙 통신 모듈은, 상기 말단 통신 모듈로부터 상기 피드백 신호를 수신하면 상기 가전제품이 상기 적외선 신호를 정상적으로 수신한 것으로 판단하고, 상기 적외선 신호를 전송한 시점으로부터 미리 설정된 시간 구간 내에 상기 피드백 신호를 수신하지 못한 것으로 확인되면 상기 가전제품이 상기 적외선 신호를 수신하지 못한 것으로 판단할 수 있다.
상기 가전제품은, 상기 중앙 통신 모듈로부터 방사되는 상기 적외선 신호를 수신하면, 상기 적외선 신호에 포함된 상기 코드정보를 추출하고, 상기 코드정보가 미리 저장된 코드정보 중 어느 하나와 일치하면 상기 코드정보에 따른 동작을 실행할 수 있다.
본 발명의 일 실시예에 따른 제스쳐 기반의 가전제품 제어 방법은, 사용자 단말이 사용자의 제스쳐를 감지하여 동작정보를 생성하는 단계, 중앙 통신 모듈이 상기 동작정보를 수신하여 상기 동작정보와 미리 매칭된 코드정보를 검색하고, 상기 코드정보가 포함된 적외선 신호를 주변으로 방사하는 단계, 상기 말단 통신 모듈이 수신된 상기 적외선 신호를 상기 말단 통신 모듈과 연결된 가전제품으로 전달하는 단계 및 말단 통신 모듈이 상기 적외선 신호를 수신하면, 피드백 정보를 생성하여 상기 중앙 통신 모듈로 전송하는 단계를 포함한다.
상기 중앙 통신 모듈이 상기 가전제품과 관련된 리모콘과 통신하여 상기 가전제품의 특정 동작을 제어하는 코드정보를 수집하여 저장하는 단계 및 상기 중앙 통신 모듈이 상기 사용자 단말과 통신하여 특정 동작정보와 상기 코드정보를 매칭하여 저장하는 단계를 더 포함할 수 있다.
상기 피드백 정보를 생성하는 것은, 상기 말단 통신 모듈이 상기 적외선 신호를 수신하면, 상기 적외선 신호에 소정의 데이터가 부가된 피드백 정보를 생성하는 것을 특징으로 한다.
상기 가전제품이 상기 중앙 통신 모듈로부터 방사되는 상기 적외선 신호를 수신하면, 상기 적외선 신호에 포함된 상기 코드정보를 추출하는 단계 및 추출된 상기 코드정보를 미리 저장된 코드정보들 중 어느 하나와 일치하면 상기 코드정보에 따른 동작을 수행하는 단계를 더 포함할 수 있다.
또한, 제스쳐 기반의 가전제품 제어 시스템 및 방법을 제공하기 위한, 컴퓨터 프로그램이 기록된 컴퓨터로 판독 가능한 기록매체일 수 있다.
상술한 본 발명의 일측면에 따르면, 가전제품의 정확한 위치를 파악하지 못하는 시각장애인도 가전제품에 대한 원격 제어신호를 효율적으로 전송할 수 있으며, 제어신호의 정상 수신여부를 음성으로 출력하여 시각장애인이 가전제품에 대한 정상 제어 여부를 용이하게 파악할 수 있다.
도 1은 본 발명의 일 실시예에 따른 제스쳐 기반의 가전제품 제어 시스템의 개략적인 구성을 나타내는 도면이다.
도 2는 도 1의 중앙 통신 모듈의 구체적인 구성을 나타내는 도면이다.
도 3은 도 1의 중앙 통신 모듈과 말단 통신 모듈간의 구체적인 동작 과정을 나타내는 도면이다.
도 4는 본 발명의 일 실시예에 따른 제스쳐 기반의 가전제품 제어 방법의 개략적인 흐름을 나타내는 도면이다.
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예와 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.
이하, 도면들을 참조하여 본 발명의 바람직한 실시예들을 보다 상세하게 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 제스쳐 기반의 가전 제품 제어 시스템(1000)의 개략적인 구성을 도시한 도면이다.
구체적으로, 본 실시예에 따른 제스쳐 기반의 가전 제품 제어 시스템(1000)는 사용자 단말(10), 중앙 통신 모듈(20) 및 말단 통신 모듈(30)을 포함한다.
사용자 단말(10)은 사용자가 구비하는 전자 장치이다. 사용자 단말(10)은 사용자의 제스쳐를 감지하고, 감지된 제스쳐에 대한 동작정보를 생성할 수 있다. 본 명세서에서, 제스쳐라 함은 사용자의 모션(동작)을 의미한다. 즉, 제스쳐는 사용자의 핸드모션 및 립모션을 포함할 수 있다. 또한, 제스쳐는 넓은 의미로 사용자가 사용자 단말(10)에 입력하는 터치정보를 더 포함할 수 있다.
사용자 단말(10)은 다양한 방법으로 사용자의 제스쳐를 감지할 수 있다. 일 예로, 사용자 단말(10)은 제조 시 구비되는 카메라 모듈이나 모션센서를 이용하여 사용자의 움직임을 감지할 수 있다. 다른 예로, 사용자 단말(10)은 제조 시 구비되는 터치패드를 이용하여 사용자의 터치정보에 따른 제스쳐를 감지할 수 있다.
사용자 단말(10)은 미리 설치된 애플리케이션이 실행되면 사용자의 제스쳐를 감지할 수 있다. 즉, 사용자 단말(10)은 평상시에는 사용자의 제스쳐가 인식되더라도 이를 무시하고 있다가, 사용자 단말(10)에 설치된 애플리케이션이 실행되어 활성화되면 사용자의 동작을 감지하기 시작할 수 있다. 이후, 사용자 단말(10)은 감지된 제스쳐를 데이터 통신에 적합하도록 디지털화된 동작정보로 변환할 수 있다.
이러한 사용자 단말(10)은 사용자가 상시로 휴대할 수 있는 이동 단말의 형태일 수 있다. 사용자 단말(10)의 일 예로는, 스마트폰, 웨어러블 장치, PDA, 태블릿 PC 등일 수 있으나, 사용자 단말(10)의 형태는 상술한 예시에 한정되는 것은 아니며, 사용환경에 따라 다양한 다른 전자 장치들로도 대체 가능하다.
중앙 통신 모듈(20)은 특정 장소에 배치되어, 사용자 단말(10)로부터 동작정보를 수신할 수 있다. 중앙 통신 모듈(20)은 사용자 단말(10) 및 사용자가 제어하기를 원하는 모든 가전제품과 통신 가능한 위치에 배치될 수 있다. 중앙 통신 모듈(20)은 적외선 신호를 이용하여 가전제품으로 제어신호를 전송할 수 있다. 따라서, 중앙 통신 모듈(20)은 가전제품이 적외선 신호를 정상적으로 수신할 수 있는 위치에 배치되는 것이 바람직하다.
중앙 통신 모듈(20)은 사용자 단말(10)로부터 수신된 동작정보에 대응되는 코드정보를 검색할 수 있다. 중앙 통신 모듈(20)은 데이터베이스에 저장된 복수의 코드정보 중 수신된 동작정보와 미리 매칭된 코드정보를 검색할 수 있다. 중앙 통신 모듈(20)은 동작정보에 매칭된 코드정보가 존재하는 경우, 코드정보가 포함된 적외선 신호를 주변으로 방사할 수 있다. 중앙 통신 모듈(20)은 코드정보가 포함된 적외선 신호를 특정 방향이 아닌 전방위로 방사하기 때문에, 적외선 신호를 수신하는 가전제품은 적외선 신호를 수신할 수 있는 영역 내의 어느 위치에서라도 중앙 통신 모듈(20)로부터 전송되는 적외선 신호를 수신할 수 있다. 이러한 중앙 통신 모듈(20)의 구체적인 기능은 도 2를 참조하여 후술하기로 한다.
말단 통신 모듈(30)은 가전제품과 연결되어 가전제품의 주변에 배치될 수 있다. 말단 통신 모듈(30)은 중앙 통신 모듈(20)로부터 방사되는 적외선 신호를 수신할 수 있다. 말단 통신 모듈(30)은 적외선 신호를 송수신하기 위한 적외선 송수신 모듈이 구비되어 있을 수 있다. 말단 통신 모듈(30)은 크게 두 가지 기능을 수행할 수 있다.
먼저, 말단 통신 모듈(30)은 중앙 통신 모듈(20)로부터 수신된 적외선 신호를 가전제품으로 전달하는 역할을 수행할 수 있다. 말단 통신 모듈(30)은
따라서, 가전제품이 중앙 통신 모듈(20)의 통신 범위 내에 위치하지 않아 중앙 통신 모듈(20)로부터 전송되는 적외선 신호를 수신할 수 없더라도, 말단 통신 모듈(30)이 통신 범위 내에 위치하면 중앙 통신 모듈(20)로부터 전송되는 적외선 신호인 제어신호는 말단 통신 모듈(30)에 의해 가전제품으로 중개될 수 있다.
또한, 말단 통신 모듈(30)은 적외선 신호를 수신하면, 신호를 정상적으로 수신하였음을 알리는 피드백 정보를 중앙 통신 모듈(20)로 전송할 수 있다. 즉, 말단 통신 모듈(30)은 수신되는 적외선 신호를 기초로 피드백 정보를 생성할 수 있다. 중앙 통신 모듈(20)은 말단 통신 모듈(30)로부터 수신된 피드백 정보를 분석하여 전송된 적외선 신호를 정상적으로 수신하였는지 여부를 판단할 수 있다.
몇몇 다른 실시예에서, 가전제품은 말단 통신 모듈(30)로부터 적외선 신호를 간접적으로 수신하는 대신, 중앙 통신 모듈(20)에서 방사되는 적외선 신호를 직접 수신할 수 있다. 말단 통신 모듈(30)은 가전제품 근처에 배치되어 있으므로, 가전제품이 중앙 통신 모듈(20)의 통신 반경 내에 위치하는 경우 적외선 신호를 중개하는 역할이 생략될 수도 있다. 즉, 중앙 통신 모듈(20)에서 방사되는 적외선 신호를 말단 통신 모듈(30)과 가전제품 모두가 수신할 수 있는 환경인 경우 말단 통신 모듈(30)은 수신된 적외선 신호를 가전제품으로 전달하지 않을 수도 있다. 이때, 말단 통신 모듈(30)은 적외선 신호의 정상 수신여부를 확인하는 피드백 정보를 생성하여 중앙 통신 모듈(20)로 전송하는 역할만 수행할 수 있다.
상술한 중앙 통신 모듈(20)과 말단 통신 모듈(30)은 적외선 신호를 양방향으로 송수신하도록, 아두이노(arduino) 기반의 제어기판이 구비되어 있을 수 있다. 즉, 중앙 통신 모듈(20)에서 송신한 적외선 신호를 말단 통신 모듈(30)의 아두이노 적외선 센서가 수신할 수 있다. 또한, 말단 통신 모듈(30)에서 생성된 피드백 정보가 포함된 적외선 신호는 중앙 통신 모듈(20)에 구비된 아두이노 적외선 센서가 수신할 수 있다. 이와 같이, 중앙 통신 모듈(20)과 말단 통신 모듈(30)은 아두이노 기반의 양방향 통신을 수행하도록 구현될 수 있다.
도 2를 참조하면, 도 1의 중앙 통신 모듈(20)의 구체적인 기능이 도시된다.
구체적으로, 중앙 통신 모듈(20)은 복수의 적외선 송수신 센서(21)와 제어기판(22)을 포함한다.
상술한 바와 같이, 중앙 통신 모듈(20)은 적외선 신호를 주변으로 방사할 수 있다. 이를 위해, 중앙 통신 모듈(20)은 생성된 적외선 신호를 서로 다른 방향으로 전송하는 복수의 적외선 송수신 센서(21)가 구비될 수 있다.
종래의 리모컨은 가전제품 방향으로 적외선 송신기의 송신 방향을 일치시켜야 제어신호가 정상적으로 전송될 수 있다. 하지만, 시각 장애인은 일반적으로 가전제품이 배치된 정확한 방향을 인지하기 어렵기 때문에, 종래의 리모컨을 통한 가전제품의 원격제어에 한계가 있어왔다.
반면, 본 발명에 따른 중앙 통신 모듈(20)은 적외선 신호를 한 방향으로 전송하는 것이 아니라, 주변으로 방사하므로 사용자가 가전제품이 배치된 방향으로 컨트롤러를 향하지 않더라도 적외선 신호를 정상적으로 전송할 수 있다. 즉, 도시된 바와 같이 본 실시예에 따른 중앙 통신 모듈(20)은, 서로 다른 방향으로 적외선 신호를 전송하는 7개의 적외선 송수신 센서(21)가 구비되어 있다. 하지만, 적외선 송수신 모듈(25)의 개수 및 이들 간의 배치 방향은 도시된 예시로 한정되지 않으며, 사용환경 또는 제조환경에 따라 모듈의 개수 및 배치 방향은 다양하게 고려될 수 있음은 물론이다.
제어 기판(22)은 중앙 통신 모듈(20)의 전반적인 제어를 담당할 수 있다. 구체적으로, 제어 기판(22)은 사용자 단말(10)로부터 동작정보를 수신할 수 있다. 그리고, 제어 기판(22)은 수신된 동작정보에 대한 코드정보를 검색할 수 있다. 이를 위해, 제어 기판(22)은 자신과 연동되는 가전제품에 대한 코드정보들을 수집할 수 있다. 코드정보는 특정 가전제품에 대한 리모컨(remote controller)로부터 수집될 수 있다. 즉, 중앙 통신 모듈(20)은 리모컨과 통신하여 리모컨에 저장된 다양한 종류의 코드정보를 수집할 수 있다.
일반적으로, 리모컨에 의해 제어되는 가전제품은 리모컨으로부터 수신되는 적외선 신호에 의해 제어될 수 있다. 리모컨은 서로 다른 동작명령을 전송하는 버튼들이 구비되어 있으며, 사용자가 특정 버튼을 누르게 되면 특정 버튼에 대응되는 동작명령이 포함된 적외선 신호를 가전제품으로 전송하게 된다. 또한, 가전제품은 제품별 또는 제조사별로 기능별 키 코드(key code)가 저장되어 있고, 외부로부터 특정 키 코드를 수신하면 이에 대응되는 동작을 실행할 수 있다. 다시 말해, 리모컨은 버튼마다 서로 다른 키 코드를 적외선 신호에 포함시켜 가전제품에 전송할 수 있으며, 가전제품은 리모컨으로부터 수신되는 키 코드를 분석하여 어떤 동작을 수행할지를 결정할 수 있다.
따라서, 중앙 통신 모듈(20)에 구비된 제어 기판(22)은 기존의 리모컨을 대신하여 가전제품을 원격으로 제어하도록, 리모컨과 통신하여 해당 리모컨에 저장된 키 코드들을 수집할 수 있다. 예를 들어, 사용자는 리모컨에 구비된 버튼들을 하나씩 입력하면, 제어 기판(22)은 키 코드가 포함된 적외선 신호를 종류별로 수신할 수 있다. 다른 예로, 중앙 통신 모듈(20)에 구비된 제어 기판(22)은 리모컨과 근거리 무선통신을 수행하여 리모컨에 저장된 모든 키 코드들을 자동으로 수집할 수 있다. 또 다른 예로, 제어 기판(22)은 해당 제품에 대한 키 코드들을 해당 가전제품의 제조사 홈페이지와 같은 외부서버로부터 수집할 수 있다. 제어 기판(22)은 수집된 키 코드를 데이터베이스(DB)에 저장할 수 있다.
또한, 중앙 통신 모듈(20)에 구비된 제어 기판(22)은 사용자 단말(10)과 통신하여 사용자의 제스쳐와 미리 저장된 키 코드를 매칭시키는 전처리과정을 수행할 수 있다. 중앙 통신 모듈(20)은 사용자 단말(10)과 통신하여 사용자 단말(10)에 설치된 애플리케이션을 실행시킬 수 있다. 이때, 제어 기판(22)은 실행된 애플리케이션을 통해 가전제품의 기능별 제스쳐를 설정할 수 있다. 이후, 제어 기판(22)은 사용자 단말(10)로부터 동작정보를 수신하면, 수신된 동작정보와 미리 매칭된 키 코드인 코드정보를 검색할 수 있다. 제어 기판(22)은 수신된 동작정보와 미리 매칭된 코드정보를 발견하는 경우, 검색된 코드정보를 적외선 신호에 포함시켜 적외선 통신 모듈(21)로 전송하고, 적외선 통신 모듈(21)은 수신된 적외선 신호를 주변으로 방사할 수 있다.
도 3을 참조하면, 도 1의 중앙 통신 모듈(20)과 말단 통신 모듈(30)간의 구체적인 동작 과정의 일 예가 도시된다.
중앙 통신 모듈(20)은 사용자 단말로부터 수신된 동작정보에 대응되는 코드정보가 포함된 적외선 신호를 방사할 수 있다. 중앙 통신 모듈(20)은 사용자 단말(10)로부터 특정 제스쳐와 관련된 동작정보를 수신하며, 수신된 동작정보와 미리 매칭된 코드정보를 검색할 수 있다. 중앙 통신 모듈(20)은 검색된 코드정보가 포함된 적외선 신호를 서로 다른 방향으로 전송함으로써 적외선 신호를 주변으로 방사할 수 있다.
중앙 통신 모듈(20)의 적외선 통신 반경 내에 위치하는 말단 통신 모듈(30)은 방사되는 적외선 신호를 수신할 수 있다. 말단 통신 모듈(30)은 적외선 신호를 수신하면, 수신된 적외선 신호를 연결된 가전제품으로 전달하는 동시에, 적외선 신호를 기반으로 피드백 정보를 생성할 수 있다.
여기서, 피드백 정보는 적외선 신호에 소정의 데이터가 부가된 정보일 수 있다. 즉, 말단 통신 모듈(30)은 수신된 적외선 신호에 소정의 데이터를 부가하여 피드백 정보를 생성할 수 있다. 예를 들어, 말단 통신 모듈(30)은 적외선 데이터에 1비트 크기의 데이터를 부가하여 수신된 적외선 신호를 중앙 통신 모듈(20)로 재전송할 수 있다. 말단 통신 모듈(30)에서 적외선 신호를 가공 없이 중앙 통신 모듈(20)로 재전송하는 경우, 가전제품은 적외선 신호를 중복하여 수신하기 때문에 데이터 교란에 의해 정상적으로 적외선 신호를 인식하지 못하는 문제점이 발생할 수 있다. 따라서, 말단 통신 모듈(30)은 수신된 적외선 신호를 그대로 재전송하지 않고, 수신된 적외선 신호에 미리 정해진 소정 크기의 데이터를 부가하여 피드백 정보를 생성하여 중앙 통신 모듈(20)로 전송할 수 있다.
중앙 통신 모듈(20)은 수신된 피드백 정보를 분석하여 전송한 적외선 신호가 가전제품에 정상적으로 수신되었는지 여부를 판단할 수 있다. 구체적으로, 중앙 통신 모듈(20)은 전송된 적외선 신호를 피드백 정보와 비교하여 일치도를 산출할 수 있다. 이때, 중앙 통신 모듈(20)은 전송된 적외선 신호에 미리 정해진 소정 크기의 데이터를 부가하여 피드백 정보와 비교할 수 있다. 상술한 바와 같이, 피드백 정보는 송신된 적외선 신호에 소정의 데이터가 부가된 상태이므로, 송신 시의 적외선 신호와 비교하였을 때 코드정보가 포함된 데이터자체는 일치하더라도 전체적으로는 정확히 일치하지 않는 결과가 발생하게 된다. 따라서, 중앙 통신 모듈(20)은 피드백 정보를 분석할 때, 전송된 원본 데이터(적외선 신호)에 말단 통신 모듈(30)에 부가된 데이터와 동일한 데이터를 부가한 후 원본 데이터와 피드백 정보를 비교할 수 있다.
다른 예로, 중앙 통신 모듈(20)은 피드백 정보를 수신하면, 말단 통신 모듈(30)에 의해 피드백 정보에 포함된 소정의 부가된 데이터를 삭제한 후, 원본 데이터(전송된 적외선 신호)와 비교할 수 있다. 이를 위해, 중앙 통신 모듈(20)과 말단 통신 모듈(30)은 미리 설정된 규칙에 따라 동일한 크기의 데이터를 부가하거나 제거할 수 있다.
중앙 통신 모듈(20)은 전송된 적외선 데이터와 수신된 피드백 데이터가 일치하지 않는 경우 가전제품이 왜곡된 신호를 수신한 것으로 판단할 수 있다. 또는, 중앙 통신 모듈(20)은 적외선 신호를 전송한 시점으로부터 미리 설정된 시간 구간 내에 피드백 정보를 수신하지 못한 것으로 확인되면, 해당 가전제품이 적외선 신호를 수신하지 못한 것으로 판단할 수 있다. 중앙 통신 모듈(20)은 가전제품이 왜곡된 신호를 수신하거나 적외선 신호를 수신하지 못한 것으로 확인되면 이에 대한 내용을 음성으로 출력할 수 있다. 예를 들어, 중앙 통신 모듈(20)은 스피커 모듈이 구비되어 있으며, 스피커 모듈은 적외선 신호가 정상적으로 수신하지 못한 경우 이에 대한 안내음성을 출력할 수 있다.
도 4를 참조하면, 본 발명의 일 실시예에 따른 제스쳐 기반의 가전제품 제어 방법의 개략적인 흐름이 도시된다.
먼저, 사용자 단말(10)이 사용자의 제스쳐를 감지하여 동작정보를 생성할 수 있다(110). 사용자 단말은 중앙 통신 모듈(20)의 통신 반경 내에 진입하는 경우에만 사용자의 제스쳐를 감지하기 시작할 수 있다. 예를 들어, 사용자 단말(10)과 중앙 통신 모듈(20)은 블루투스로 통신하고, 사용자 단말(10)이 중앙 통신 모듈(20)의 블루투스 통신반경 내에 진입하면, 사용자 단말(10)에 미리 설치된 애플리케이션이 자동으로 실행되고, 사용자 단말(10)은 애플리케이션이 실행되는 동안 사용자의 제스쳐를 감지하여 동작정보를 생성할 수 있다.
중앙 통신 모듈(20)은 사용자 단말(10)로부터 동작정보를 수신하여 동작정보와 미리 매칭된 코드정보를 검색하고, 코드정보가 포함된 적외선 신호를 주변으로 방사할 수 있다(120).
중앙 통신 모듈(20)은 미리 매칭된 코드정보를 검색하기 위해 전처리 과정을 수행할 수 있다. 먼저, 중앙 통신 모듈이 사전제품과 관련된 리모컨과 통신하여 가전제품의 특정 동작을 제어하는 코드정보를 수집하여 저장할 수 있다. 그리고, 중앙 통신 모듈이 사용자 단말과 통신하여 특정 동작정보와 코드정보를 매칭하여 저장할 수 있다. 예를 들어, 사용자가 손을 위에서 아래로 움직이는 제스쳐를 수행하면 TV에 출력되는 음량을 감소하는 동작이 수행되기를 원하는 경우, 중앙 통신 모듈(20)은 해당 제스쳐와 음량을 감소하는 제1 코드정보를 매칭하여 저장할 수 있다. 또는, 사용자가 애플리케이션이 실행된 사용자 단말(10)의 화면을 두 번 연속하여 터치하면 TV의 전원이 종료되는 동작이 수행되기를 원하는 경우, 중앙 통신 모듈(20)은 해당 제스쳐와 TV전원을 종료하는 제2 코드정보를 매칭하여 저장할 수 있다.
이와 같이, 중앙 통신 모듈(20)은 사용자 단말(10)에 실행된 애플리케이션을 통해 특정 가전 제품을 제어하기 위한 제스쳐를 코드정보와 매칭하여 저장할 수 있다. 또한, 중앙 통신 모듈(20)과 연동되는 가전제품이 여러 종류인 경우, 상술한 110 단계 이전에 제어를 원하는 가전제품을 선택하는 단계를 먼저 수행할 수 있다. 즉, 동일한 동작정보라 하더라도 선택되는 가전제품에 따라 동작되는 명령을 상이하게 설정할 수 있다.
말단 통신 모듈(30)은 방사되는 적외선 신호를 수신하면, 말단 통신 모듈(30)과 연결된 가전제품으로 적외선 신호를 전달할 수 있다(130). 이와 동시에, 말단 통신 모듈(30)은 적외선 신호를 수신하면, 적외선 신호를 기초로 피드백 정보를 생성하고, 이를 중앙 통신 모듈(20)로 재전송할 수 있다(140).
가전제품은 적외선 신호에 포함된 코드정보를 추출하고, 추출된 코드정보에 따른 동작을 수행할 수 있다(150).
이와 같은, 제스쳐 기반의 가전제품 제어 시스템 및 방법을 제공하는 기술은 애플리케이션으로 구현되거나 다양한 컴퓨터 구성요소를 통하여 수행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다.
상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것들이거니와 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수도 있다.
컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD 와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 ROM, RAM, 플래시 메모리 등과 같은 프로그램 명령어를 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다.
프로그램 명령어의 예에는, 컴파일러에 의해 만들어지는 것과 같은 기계어 코드 뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 상기 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상에서는 실시예들을 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
10: 사용자 단말
20: 중앙 통신 모듈
30: 말단 통신 모듈

Claims (12)

  1. 사용자의 제스쳐를 감지하여 동작정보를 생성하는 사용자 단말;
    상기 사용자 단말로부터 상기 동작정보를 수신하여 상기 동작정보와 미리 매칭된 코드정보를 검색하고, 상기 코드정보가 포함된 적외선 신호를 주변으로 방사하는 중앙 통신 모듈; 및
    가전제품과 연결되고, 방사되는 상기 적외선 신호를 정상적으로 수신하는지 여부를 감지하여 상기 중앙 통신 모듈로 피드백 정보를 전송하며, 상기 적외선 신호가 정상적으로 수신된 것으로 판단되는 경우, 상기 적외선 신호를 상기 가전제품으로 전달하는 말단 통신 모듈을 포함하는, 제스쳐 기반의 가전제품 제어 시스템.
  2. 제1항에 있어서,
    상기 중앙 통신 모듈은,
    상기 적외선 신호를 주변으로 방사하도록, 상기 적외선 신호를 서로 다른 방향으로 전송하는 복수의 적외선 송수신 센서를 포함하는, 제스쳐 기반의 가전제품 제어 시스템.
  3. 제1항에 있어서,
    상기 중앙 통신 모듈은,
    상기 가전제품과 관련된 리모컨과 통신하여 상기 가전제품의 특정 동작을 제어하는 코드정보를 수집하여 저장하고,
    상기 사용자 단말과 통신하여 특정 동작정보와 상기 코드정보를 매칭하여 저장하는, 제스쳐 기반의 가전제품 제어 시스템.
  4. 제1항에 있어서,
    상기 말단 통신 모듈은,
    상기 중앙 통신 모듈로부터 상기 적외선 신호를 수신하면 상기 적외선 신호에 소정의 데이터가 부가된 상기 피드백 정보를 생성하고,
    상기 적외선 신호를 상기 가전제품으로 전송하고, 상기 소정의 데이터가 부가된 적외선 신호인 상기 피드백 정보를 상기 중앙 통신 모듈로 전송하는, 제스쳐 기반의 가전제품 제어 시스템.
  5. 제1항에 있어서,
    상기 중앙 통신 모듈은,
    상기 피드백 신호를 수신하면 상기 피드백 신호를 해석하여 상기 가전제품이 상기 적외선 신호를 정상적으로 수신하였는지 여부를 음성으로 출력하는 스피커 모듈을 포함하는, 제스쳐 기반의 가전제품 제어 시스템.
  6. 제1항에 있어서,
    상기 중앙 통신 모듈은,
    상기 말단 통신 모듈로부터 상기 피드백 신호를 수신하면 상기 가전제품이 상기 적외선 신호를 정상적으로 수신한 것으로 판단하고,
    상기 적외선 신호를 전송한 시점으로부터 미리 설정된 시간 구간 내에 상기 피드백 신호를 수신하지 못한 것으로 확인되면 상기 가전제품이 상기 적외선 신호를 수신하지 못한 것으로 판단하는, 제스쳐 기반의 가전제품 제어 시스템.
  7. 제1항에 있어서,
    상기 가전제품은,
    상기 중앙 통신 모듈로부터 방사되는 상기 적외선 신호를 수신하면, 상기 적외선 신호에 포함된 상기 코드정보를 추출하고, 상기 코드정보가 미리 저장된 코드정보 중 어느 하나와 일치하면 상기 코드정보에 따른 동작을 실행하는, 제스쳐 기반의 가전제품 제어 시스템.
  8. 사용자 단말이 사용자의 제스쳐를 감지하여 동작정보를 생성하는 단계;
    중앙 통신 모듈이 상기 동작정보를 수신하여 상기 동작정보와 미리 매칭된 코드정보를 검색하고, 상기 코드정보가 포함된 적외선 신호를 주변으로 방사하는 단계;
    상기 말단 통신 모듈이 수신된 상기 적외선 신호를 상기 말단 통신 모듈과 연결된 가전제품으로 전달하는 단계; 및
    말단 통신 모듈이 상기 적외선 신호를 수신하면, 피드백 정보를 생성하여 상기 중앙 통신 모듈로 전송하는 단계를 포함하는, 제스쳐 기반의 가전제품 제어 방법.
  9. 제8항에 있어서,
    상기 중앙 통신 모듈이 상기 가전제품과 관련된 리모콘과 통신하여 상기 가전제품의 특정 동작을 제어하는 코드정보를 수집하여 저장하는 단계; 및
    상기 중앙 통신 모듈이 상기 사용자 단말과 통신하여 특정 동작정보와 상기 코드정보를 매칭하여 저장하는 단계를 더 포함하는, 제스쳐 기반의 가전제품 제어 방법.
  10. 제8항에 있어서,
    상기 피드백 정보를 생성하는 것은,
    상기 말단 통신 모듈이 상기 적외선 신호를 수신하면, 상기 적외선 신호에 소정의 데이터가 부가된 피드백 정보를 생성하는 것을 특징으로 하는, 제스쳐 기반의 가전제품 제어 방법.
  11. 제8항에 있어서,
    상기 가전제품이 상기 중앙 통신 모듈로부터 방사되는 상기 적외선 신호를 수신하면, 상기 적외선 신호에 포함된 상기 코드정보를 추출하는 단계; 및
    추출된 상기 코드정보를 미리 저장된 코드정보들 중 어느 하나와 일치하면 상기 코드정보에 따른 동작을 수행하는 단계를 더 포함하는, 제스쳐 기반의 가전제품 제어 방법.
  12. 제1항 내지 제11항 중 어느 하나의 항에 따라 제스쳐 기반의 가전제품 제어 시스템 및 방법을 제공하기 위한, 컴퓨터 프로그램이 기록된 컴퓨터로 판독 가능한 기록매체.
KR1020170011215A 2017-01-24 2017-01-24 제스쳐 기반의 가전제품 제어 시스템 및 방법, 이를 수행하기 위한 기록매체 KR20180087033A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170011215A KR20180087033A (ko) 2017-01-24 2017-01-24 제스쳐 기반의 가전제품 제어 시스템 및 방법, 이를 수행하기 위한 기록매체

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170011215A KR20180087033A (ko) 2017-01-24 2017-01-24 제스쳐 기반의 가전제품 제어 시스템 및 방법, 이를 수행하기 위한 기록매체

Publications (1)

Publication Number Publication Date
KR20180087033A true KR20180087033A (ko) 2018-08-01

Family

ID=63228073

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170011215A KR20180087033A (ko) 2017-01-24 2017-01-24 제스쳐 기반의 가전제품 제어 시스템 및 방법, 이를 수행하기 위한 기록매체

Country Status (1)

Country Link
KR (1) KR20180087033A (ko)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100755552B1 (ko) 2005-08-01 2007-09-06 한국정보통신대학교 산학협력단 리모컨 코드 복사/중계장치
KR20150086807A (ko) 2014-01-20 2015-07-29 한국전자통신연구원 사물인식기반 통합 리모컨 장치 및 그 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100755552B1 (ko) 2005-08-01 2007-09-06 한국정보통신대학교 산학협력단 리모컨 코드 복사/중계장치
KR20150086807A (ko) 2014-01-20 2015-07-29 한국전자통신연구원 사물인식기반 통합 리모컨 장치 및 그 방법

Similar Documents

Publication Publication Date Title
EP2960882B1 (en) Display device and operating method thereof
EP3387628B1 (en) Apparatus, system, and methods for interfacing with a user and/or external apparatus by stationary state detection
KR102429260B1 (ko) 음성 에이전트 기반의 제어 명령 처리 장치 및 방법과, 에이전트 장치
KR102398488B1 (ko) 복수의 디바이스에 대한 원격제어를 수행할 수 있는 이동 단말기
CN101546476B (zh) 使用遥控器设备和软遥控器来控制设备的系统和方法
US10127807B1 (en) Apparatus, system and method for using a universal controlling device for displaying a graphical user element in a display device
KR100621593B1 (ko) 다중양식의 입력을 이용하는 통합 원격 제어 장치 및 방법
US20140176309A1 (en) Remote control system using a handheld electronic device for remotely controlling electrical appliances
US20070171091A1 (en) Environmental control system
US20050286737A1 (en) Gesture activated home appliance
KR20140112910A (ko) 입력 제어 방법 및 이를 지원하는 전자 장치
US9210357B1 (en) Automatically pairing remote
US9949107B2 (en) Method and system for detecting an input to a device
KR102604297B1 (ko) 프로세서, 디스플레이 장치 및 방법
KR102044526B1 (ko) 인공지능에 기반하여 음성 인식을 향상시키는 방법 및 이를 구현하는 장치
KR20140095998A (ko) 원격 제어 시스템 및 장치
CN103793055A (zh) 一种手势响应方法及终端
CN109446775A (zh) 一种声控方法及电子设备
KR20070051271A (ko) 디바이스를 제어하기 위한 방법
KR101131499B1 (ko) 최적의 사운드 제공 방법, 단말기 및 시스템
KR101379191B1 (ko) 모션 인식방식의 통합 리모콘 제공 애플리케이션 장치 및 방법
US20170243579A1 (en) Electronic apparatus and service providing method thereof
KR20160054799A (ko) 원격 제어 장치 및 그의 동작 방법
KR20180087033A (ko) 제스쳐 기반의 가전제품 제어 시스템 및 방법, 이를 수행하기 위한 기록매체
KR102313299B1 (ko) 복수의 디바이스에 대한 원격제어를 수행할 수 있는 원격제어장치