KR100434545B1 - 홈네트워크로 연결된 가전기기들을 제어하는 방법 및 장치 - Google Patents

홈네트워크로 연결된 가전기기들을 제어하는 방법 및 장치 Download PDF

Info

Publication number
KR100434545B1
KR100434545B1 KR10-2002-0014096A KR20020014096A KR100434545B1 KR 100434545 B1 KR100434545 B1 KR 100434545B1 KR 20020014096 A KR20020014096 A KR 20020014096A KR 100434545 B1 KR100434545 B1 KR 100434545B1
Authority
KR
South Korea
Prior art keywords
action
home
command
home appliance
home network
Prior art date
Application number
KR10-2002-0014096A
Other languages
English (en)
Other versions
KR20030075020A (ko
Inventor
조정미
김재우
홍영진
박준호
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR10-2002-0014096A priority Critical patent/KR100434545B1/ko
Priority to EP03251572A priority patent/EP1345360B1/en
Priority to AT03251572T priority patent/ATE333174T1/de
Priority to DE60306701T priority patent/DE60306701T2/de
Priority to US10/388,749 priority patent/US7957974B2/en
Priority to JP2003072015A priority patent/JP4689944B2/ja
Publication of KR20030075020A publication Critical patent/KR20030075020A/ko
Application granted granted Critical
Publication of KR100434545B1 publication Critical patent/KR100434545B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282—Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/16—Arrangements for providing special services to substations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/18—Speech classification or search using natural language modelling
    • G10L15/1815—Semantic context, e.g. disambiguation of the recognition hypotheses based on word meaning

Abstract

본 발명은 홈네트워크로 연결된 가전기기들을 제어하는 방법 및 장치에 관한 것이다.
상기 본 발명에 따른 홈네트워크로 연결된 가전기기들을 제어하는 방법은, 사용자의 음성명령을 수신하여 문자 명령으로 변환하는 제1단계와, 상기 변환된 문자 명령으로부터 액션과 대상을 추출하여 논리적 명령으로 변환하는 제2단계와, 상기 홈네트워크로 연결된 가전기기들을 제어하는 액션 데이터를 저장하는 액션 라이브러리를 참조하여 상기 논리적 명령으로부터 일련의 액션들을 포함하는 액션 리스트를 추출하는 제3단계와, 상기 액션 리스트에 포함된 일련의 액션들을 가전기기 제어신호로 변환하여 상기 홈네트워크로 연결된 가전기기들을 제어하는 제4단계를 포함한다. 이와 같은 본 발명에 의하면, 복잡해진 홈 네트워크로 연결된 가전기기들에 대한 사용자 명령을 단순하게 함으로써 가전기기들을 편리하고 효율적으로 제어할 수 있게 된다.

Description

홈네트워크로 연결된 가전기기들을 제어하는 방법 및 장치{Method and apparatus for controlling devices connected with home network}
본 발명은 홈네트워크로 연결된 가전기기들을 제어하는 방법 및 장치에 관한 것으로, 좀더 구체적으로는, 음성 명령 처리를 통하여 홈네트워크로 연결된 가전기기들을 제어하는 방법 및 장치에 관한 것이다.
홈 네트워크 환경에서는 디지털방송, 네트워크 생활가전기기, 정보통신기기, 디지털 방송프로그램, 인터넷 콘텐츠, 초고속 유무선 통신서비스가 결합된 복합 정보가전 등이 등장하면서 사용자에게 더 다양하고 편리한 기능을 제공하지만, 그 조작과 제어는 더욱 복잡해진다. 사용자는 가전 기기가 특정한 서비스를 실행할 수 있도록 하기 위해 보통 일련의 단계들을 순차적으로 지시해야 하며, 이를 위해서는 가전 기기 간의 내부적인 상호 동작을 이미 알고 있어야 한다. 예를 들면, PC에저장된 파일을 디지털 TV에서 재생시키기 위해 사용자는 "디지털 TV의 다운로드 메뉴 선택 → PC로부터 다운로드 선택 →PC 접속 → PC에서 다운로드 가능한 영상물 검색 → 원하는 영상물 선택 → PC에서 디지털 TV로 파일 다운로드 → 디지털 TV에서 파일 재생"과 같이 7단계 동작을 순차적으로 지시하거나 선택해야 하는 불편함이 있다.
음성은 일상 생활에서 가장 효과적이고 자연스러운 의사 소통 방법으로, 음성 명령 처리는 음성 인식 기술 발전과 더불어 인간과 기계간의 발전된 형태의 인터페이스로 개발되고 있다.
음성 명령 처리를 통하여 단일 기기를 제어하는 기술은 다수의 특허에 개시되어 있다. 미국 특허 제4,340,797호, 미국 특허 제 4,340,798호, 미국 특허 제4,340,799호 및 미국 특허 제4,513,189호는 모두 음성에 의해 오븐을 제어하는 기술에 관한 특허로서, 오븐의 기능 선택과 강약 조절을 음성에 의한 대화 형식으로 수행하는 기술을 개시한다. 또한, 미국 특허 제4,520,576호는 음성에 의해 세탁기를 제어하는 기술에 관한 특허로서, 음성 인식과 합성에 의해 세탁 과정을 제어하는 기술을 개시한다. 이외에도 미국 특허 제5,222,121호에 개시된 음성 다이얼링 기술, 미국 특허 제4,389,109호에 개시된 음성 제어 카메라 기술, 한국공개특허2000-49417호에 개시된 음성 인터넷 명령어 처리 장치 등 응용 대상을 달리한 많은 종래 기술들이 있다.
이러한 기술들은 모두 독립된 가전 기기의 단일 기능 수행에 대한 기술로, 음성 명령이 단순히 가전 기기에 장착된 버튼 기능을 대신하고 있다. 이와 같은기술들은 음성 패턴과 기능과의 단순 매핑에 의해 구현될 수 있다. 유럽 특허 제1,063,637호는 음성 DB 변경을 위한 모듈이나 새로운 기기 장착에 의한 명령 정의 모듈 등을 정의하고는 있지만, 이 역시 미리 저장된 음성과 입력된 음성과의 비교에 의한 단일 가전 제어 시스템에 관한 것이다.
음성 명령 처리를 통하여 홈 네트워크로 연결된 가전 기기를 제어하는 기술도 다수의 특허에 개시되어 있다. 미국 특허 제6,243,707호 및 한국공개특허 제2001-14155호는 브라우저에 기반하여 홈 네트워크 상에서 가전기기들을 제어하기 위한 방법에 관한 것으로, 사용자에 의해 반복되는 일련의 명령 단계들을 줄이기 위해 매크로 기능을 정의하는 기술을 개시한다. 즉, 브라우저 기반의 인터페이스를 이용하여 사용자가 원하는 일련의 명령 단계를 순차적으로 매크로로 저장하고, 이러한 매크로 실행이 일련의 명령 단계를 대신하는 것이다.
상기 매크로 정의를 통한 명령 처리 기술은 기존의 기술에 비해 복잡한 제어에 있어서 사용자 편의를 제공하기는 하지만, 사용자가 매크로 생성을 위해 일일이 동작 지시를 해주어야 하고, 매크로의 일부 수정을 위해 전체 매크로를 다시 생성해야 한다는 문제점이 있다.
이외에도 유럽 특허 제1,085,500호는 가전 제어를 위한 음성 명령의 전처리 모듈에 관한 것으로, 특정 음성 신호 인식에 의한 음성 명령 인식 방법과 시간 간격에 의한 연속 명령 인식 방법, 음성 명령 인식 후 주변 가전 기기의 음향을 조절하는 기술을 개시한다.
또한, 한국공개특허 제2000-45069호는 가정 외부에서의 원격 제어 기술에 관한 것으로, 가정 외부에서 전화기에 의한 음성 신호에 의해 일반 가정용 기기들 중 리모콘에 의해 제어되는 기기들 및 전원에 연결되어 있는 기기들을 원격 제어할 수 있는 음성 인식 홈 오토메이션 및 이를 이용한 가정용 기기 제어 방법을 개시한다.
그러나, 상기 종래에 개시된 기술들 모두 홈네트워크로 연결된 가전기기들을 제어하기 위해 복잡해진 여러 단계의 사용자 명령을 줄여서 간단한 사용자의 음성 명령으로 가전기기들을 제어하는 기술은 개시된 바 없는 실정이다.
본 발명은 상기와 같은 문제점을 해결하여, 복잡해진 홈네트워크 환경하에서 사용자가 원하는 가전기기 동작 제어를 편리하고 효율적으로 수행할 수 있도록 홈네트워크로 연결된 가전기기들을 제어하는 방법 및 장치를 제공하는 것을 목적으로 한다.
도 1은 본 발명에 따른 가전기기 제어장치의 일 예의 개략적인 블럭도,
도 2는 도 1에 도시된 명령 해석부의 구체적인 구성을 도시하는 블럭도,
도 3은 도 1에 도시된 명령 해석부에서의 동작을 설명하기 위한 도면,
도 4는 도 1에 도시된 액션 라이브러리에 저장된 데이터 구조를 설명하기 위한 도면,
도 5는 도 4에 도시된 데이터 구조의 일 예를 설명하기 위한 도면,
도 6은 도 1에 도시된 액션 계획부에서의 동작을 설명하는 흐름도,
도 7은 구체적인 예를 통하여 도 1에 도시된 명령 해석부 및 액션 계획부의 동작을 설명하기 위한 도면,
도 8은 도 1에 도시된 디바이스 제어부의 구체적인 구성을 도시하는 블럭도,
도 9는 구체적인 예를 통하여 디바이스 제어부의 동작을 설명하기 위한 도면,
도 10은 도 1에 도시된 디바이스 모니터링부의 구체적인 구성을 도시하는 블럭도,
도 11은 도 1에 도시된 디바이스 상태 라이브러리에 저장되는 데이터 구조를설명하기 위한 도면,
도 12는 도 1에 도시된 응답 관리부의 구체적인 구성을 도시하는 블럭도.
* 도면의 주요한 부분에 대한 부호의 설명 *
100 : 명령 해석부 200 : 액션 라이브러리
300 : 액션 계획부 400 : 디바이스 제어부
500 : 디바이스 모니터링부 600 : 디바이스상태 라이브러리
700 ; 가전기기 800 : 응답 관리부
900 : 출력부
상기와 같은 과제를 해결하기 위한 본 발명의 하나의 특징은, 홈네트워크로 연결된 가전기기들을 제어하는 방법에 있어서, 사용자의 음성명령을 수신하여 문자 명령으로 변환하는 제1단계와, 상기 변환된 문자 명령으로부터 액션과 대상을 추출하여 논리적 명령으로 변환하는 제2단계와, 상기 홈네트워크로 연결된 가전기기들을 제어하는 액션 데이터를 저장하는 액션 라이브러리를 참조하여 상기 논리적 명령으로부터 일련의 액션들을 포함하는 액션 리스트를 추출하는 제3단계와, 상기 액션 리스트에 포함된 일련의 액션들을 가전기기 제어신호로 변환하여 상기 홈네트워크로 연결된 가전기기들을 제어하는 제4단계를 포함하는 것이다.
바람직하게는, 상기 제2단계는, 상기 문자 명령으로부터 명령의 액션과 대상을 추출하는 제2a단계와, 상기 추출된 액션과 대상의 의미정보를 적재하는 제2b단계와, 상기 적재된 액션과 대상의 의미정보를 이용하여 액션과 대상의 의미의 중의성을 해소하는 제2c단계를 포함한다.
또한, 바람직하게는, 상기 액션 라이브러리에 저장되는 액션 데이터의 데이터구조는 상기 액션을 나타내는 액션 헤더, 상기 액션이 실행되기 위해 요구되는 선행 조건, 상기 액션의 실행 완료를 위한 세부 액션들, 상기 액션의 실행 결과인 액션 효과 중 적어도 하나를 포함한다.
또한, 바람직하게는, 상기 제3단계는, 상기 논리적 명령에 해당하는 액션 데이터에 포함된 선행 조건이 만족되는지를 판단하는 제3a단계와, 상기 판단 결과 선행조건이 만족되지 않고, 그 선행조건이 제어가능한 경우에, 상기 선행 조건을 상기 액션 리스트에 기록하는 제3b단계와, 상기 판단 결과 선행조건이 만족되지 않고, 그 선행조건이 제어불가능한 경우에, 에러 메시지를 출력하는 제3c단계와, 상기 논리적 명령에 해당하는 액션 데이터에 포함된 세부 액션들을 상기 액션 리스트에 기록하는 제3d단계를 포함한다.
또한, 상기 바람직하게는, 상기 제3단계는, 상기 논리적 명령에 해당하는 액션 데이터에 포함된 선행 조건이 만족되는지를 판단하는 제3a단계와, 상기 판단 결과 선행조건이 만족되지 않고, 그 선행조건을 만족시킬 수 있는 액션이 액션 라이브러리내에 존재하는 경우, 상기 액션을 검색하는 제3b단계와, 상기 판단 결과 선행조건이 만족되지 않고, 그 선행조건을 만족시킬 수 있는 액션이 액션 라이브러리내에 존재하지 않는 경우, 에러메시지를 출력하는 제3c단계와, 상기 논리적 명령에 해당하는 액션 데이터에 포함된 선행조건이 만족되고 세부 액션이 존재하는 경우 상기 세부 액션을 액션 라이브러리로부터 검색하는 제3d단계와, 상기 논리적 명령에 해당하는 액션 데이터에 포함된 선행조건이 만족되고 더 이상 세부 액션이 없는 경우 상기 액션을 상기 액션 리스트에 기록하는 제3e단계를 포함할 수 있다.
또한, 바람직하게는, 상기 제3a단계는, 상기 홈네트워크에 연결된 가전기기들의 상태 정보를 저장하는 디바이스 상태 라이브러리를 참조하여 상기 선행조건이 만족되는지를 판단한다.
또한, 바람직하게는, 상기 디바이스 상태 라이브러리는 적어도 디바이스 ID, 액션, 디바이스 상태를 저장한다.
또한, 바람직하게는, 상기 방법은, 상기 홈네트워크로 연결된 가전기기들의 제어에 따른 액션 실행 결과를 보고하는 제5단계를 더 포함한다.
또한, 바람직하게는, 상기 제5단계는, 상기 홈네트워크로 연결된 가전기기로부터 액션 실행 결과를 수신하는 제5a단계와, 상기 수신된 액션 실행 결과를 포함하는 결과 메시지를 출력하는 제5b단계를 포함한다.
또한, 바람직하게는, 상기 결과 메시지는 실행 결과 성공 메시지 또는 실행 결과 실패 메시지를 포함하며, 상기 실행 결과 실패 메시지는 오류를 일으킨 가전기기에 관한 정보를 포함한다.
또한, 바람직하게는, 상기 방법은, 상기 홈네트워크로 연결된 가전기기들의 제어에 따라 변경되는 가전기기의 상태를 모니터하는 제6단계를 더 포함한다.
또한, 바람직하게는, 상기 제6단계는, 상기 홈네트워크로 연결된 가전기기로부터 변경된 가전기기 상태 정보를 수신하는 제6a단계와, 상기 수신된 가전기기 상태 정보를 이용하여 상기 홈네트워크에 연결된 가전기기들의 상태 정보를 저장하는 디바이스 상태 라이브러리를 갱신하는 제6b단계를 포함한다.
본 발명의 다른 특징은, 홈네트워크로 연결된 가전기기 제어 장치에 있어서, 상기 홈네트워크로 연결된 가전기기들을 제어하는 액션 데이터를 저장하는 액션 라이브러리와, 사용자의 음성명령을 수신하여 문자 명령으로 인식하는 음성인식부와, 상기 인식된 문자 명령으로부터 액션과 대상을 추출하여 논리적 명령으로 변환하는 명령해석부와, 상기 액션 라이브러리를 참조하여 상기 논리적 명령으로부터 일련의 액션들을 포함하는 액션 리스트를 추출하는 액션계획부와, 상기 액션 리스트에 포함된 일련의 액션들을 가전기기 제어신호로 변환하여 상기 홈네트워크로 연결된 가전기기들을 제어하는 가전기기 제어부를 포함하는 것이다.
바람직하게는, 상기 명령해석부는, 상기 문자 명령으로부터 명령의 액션과 대상을 추출하고, 상기 추출된 액션과 대상의 의미정보를 적재하는 명령 표층 분석부와, 상기 적재된 액션과 대상의 의미정보를 이용하여 액션과 대상의 의미의 중의성을 해소하는 명령 심층 분석부를 포함한다.
또한, 바람직하게는, 상기 액션 라이브러리에 저장되는 액션 데이터의 데이터 구조는 상기 액션을 나타내는 액션 헤더, 상기 액션이 실행되기 위해 요구되는 선행 조건, 상기 액션의 실행 완료를 위한 세부 액션들, 상기 액션의 실행 결과인 액션 효과 중 적어도 하나를 포함한다.
또한, 바람직하게는, 상기 논리적 명령에 해당하는 액션 데이터에 포함된 선행 조건이 만족되는지를 판단한 결과 선행조건이 만족되지 않고, 그 선행조건을 만족시킬 수 있는 액션이 액션 라이브러리내에 존재하지 않는 경우에, 상기 액션 계획부는 에러 메시지를 출력한다.
또한, 바람직하게는, 상기 액션 리스트에는, 상기 논리적 명령에 해당하는 액션 데이터에 포함된 선행 조건이 만족되는지를 판단한 결과 선행조건이 만족되지 않고, 그 선행조건을 만족시킬 수 있는 액션이 액션 라이브러리내에 존재하는 경우에, 상기 선행 조건과, 상기 논리적 명령에 해당하는 액션 데이터에 포함된 세부 액션들이 기록된다.
또한, 바람직하게는, 상기 논리적 명령에 해당하는 액션 데이터에 포함된 선행조건이 만족되는지는 상기 홈네트워크에 연결된 가전기기들의 상태 정보를 저장하는 디바이스 상태 라이브러리를 참조하여 판단된다.
또한, 바람직하게는, 상기 디바이스 상태 라이브러리는 적어도 디바이스 ID, 액션, 디바이스 상태를 저장한다.
또한, 바람직하게는, 상기 제어장치는 상기 홈네트워크로 연결된 가전기기들의 제어에 따른 액션 실행 결과를 보고하는 응답관리부를 더 포함한다.
또한, 바람직하게는, 상기 응답관리부는 상기 디바이스 제어부를 통하여 상기 홈네트워크로 연결된 가전기기로부터 액션 실행 결과를 수신하고, 상기 수신된 액션 실행 결과를 포함하는 결과 메시지를 출력한다.
또한, 바람직하게는, 상기 결과 메시지는 음성 또는 문자 형태로 출력된다.
또한, 바람직하게는, 상기 결과 메시지는 실행 결과 성공 메시지 또는 실행 결과 실패 메시지를 포함하며, 상기 실행 결과 실패 메시지는 오류를 일으킨 가전기기에 관한 정보를 포함한다.
또한, 바람직하게는, 상기 제어장치는 상기 홈네트워크로 연결된 가전기기들의 제어에 따라 변경되는 가전기기의 상태를 모니터하는 디바이스 모니터링부를 더 포함한다.
또한, 바람직하게는, 상기 디바이스 모니터링부는, 상기 홈네트워크로 연결된 가전기기로부터 변경된 가전기기 상태 정보를 수신하고, 상기 수신된 가전기기 상태 정보를 이용하여 상기 홈네트워크에 연결된 가전기기들의 상태 정보를 저장하는 디바이스 상태 라이브러리를 갱신한다.
이하에서는, 첨부된 도 1 내지 도 12를 참조하여 본 발명을 상세히 설명한다.
도 1은 본 발명에 따른 가전기기 제어장치의 일 예의 개략적인 블럭도이다.
도 1에 도시된 가전기기 제어장치는 음성인식부(50)와, 명령 해석부(100)와, 액션 라이브러리(200)와, 액션 계획부(300)와, 디바이스 제어부(400)와, 디바이스 모니터링부(500)와, 디바이스 상태 라이브러리(600)와, 응답 관리부(800)와, 출력부(900)를 포함한다.
음성 인식부(50)는 가전기기 제어장치로 입력되는 사용자의 음성 명령을 텍스트 명령으로 변환한다. 즉, 음성 인식부는 음성 입력 장치를 통하여 사용자의 음성 명령을 입력받아 이를 인식하여 문자 명령으로 변환한다.
명령 해석부(100)는 음성 인식부(50)에서 출력된 문자 명령을 해석하여 논리적인 명령 형태로 바꾼다. 명령 해석부(100)의 세부적인 구성 및 동작은 도 2 및 도 3을 참조하여 상세히 설명된다.
액션 계획부(300)는 액션 라이브러리(200)를 참조하여 명령 해석부(100)로부터 출력된 논리적인 명령을 가전기기 제어를 위한 일련의 액션 리스트로 확장한다. 액션 계획부(300)의 동작은 도 6을 참조하여 상세히 설명된다.
액션 라이브러리(200)는 가전기기 제어를 위한 액션을 선행 조건, 서브 액션, 효과로 구성되는 데이터 구조를 저장한다. 액션 라이브러리(200)의 데이터 구조는 도 4 및 도 5를 참조하여 상세히 설명된다.
디바이스 제어부(400)는 액션 계획부(300)로부터 출력된 액션 리스트를 이용하여 가전 기기를 제어하고, 액션 수행 결과를 추출한다. 즉, 디바이스 제어부(400)는 액션 리스트를 가전기기 제어를 위한 제어 신호로 변환하고, 이 제어신호를 가전기기에 전송함으로써 가전기기를 제어한다. 디바이스 제어부(400)의 세부적인 구성은 도 8을 참조하여 상세히 설명된다.
디바이스 모니터링부(500)는 액션 수행에 따른 가전기기의 상태를 감시하고, 가전기기의 상태를 디바이스 상태 라이브러리(600)에 저장한다. 디바이스 모니터링부(500)의 세부적인 구성은 도 10을 참조하여 상세히 설명된다.
가전기기(700)는 홈네트워크로 연결된 디바이스들로서, DTV(710), VCR(720), DVD(730), PC(740) 등을 포함하며, 각 디바이스는 디바이스 상태 감시부(711)와, 디바이스 상태 플래그(712)를 포함한다. 각 디바이스 상태 플래그는 그 디바이스의 상태에 따라 세팅되며, 디바이스 상태 감시부는 이러한 디바이스 상태를 플래그를 참조하여 디바이스 상태를 감시하며, 디바이스의 상태를 디바이스 제어부(400) 및 디바이스 모니터링부(500)로 보고한다.
응답관리부(800)는 디바이스 제어부(400)로부터 수신한 액션 수행 결과로부터 응답을 생성하여 출력부(900)로 전송한다. 응답관리부(800)의 세부적인 구성은 도 12를 참조하여 상세히 설명된다.
출력부(900)는 응답 관리부(800)로부터 수신한 응답을 음성 합성부(910)와 디스플레이 제어부(920)를 통하여 출력한다.
도 2는 도 1에 도시된 명령 해석부(100)의 구체적인 구성을 도시한다.
도 2에 도시된 명령 해석부(100)는 형태소 해석과 구문 해석을 수행하는 명령 표층 분석부(110)와, 의미 해석을 수행하는 명령 심층 분석부(120)를 포함한다.
명령 표층 분석부(110)의 액션/대상 추출부(111)는 수신된 문자 명령에 대해 형태소 해석과 구문 해석 과정을 거처 동사와 명사, 이들 간의 수식 관계를 밝히고, 이에 근거하여 명령의 액션과 대상을 추출하며, 의미 정보 적재부(112)는 추출된 액션과 대상에 해당하는 모든 의미 정보를 적재한다.
명령 심층 분석부(120)는 의미정부 적재부(112)로부터 수신한 결과의 의미를 분석하여 동작과 대상의 의미적 중의성을 해소한다. 즉, 동작 의미 중의성 해소부(121)는 동작 의미의 중의성을 해소하고, 대상 의미 중의성 해소부(122)는 대상 의미의 중의성을 해소하여 의미를 하나로 결정하고 결정된 논리적 명령을 출력한다.
도 3을 참조하여 명령 해석부(100)의 동작을 설명한다. 예를 들어, 명령 해석부(100)가 음성인식부(50)로부터 "두남자쇼를 틀어줘"라는 문자 명령을 수신하면, 액션/대상 추출부(111)는 수신한 문자 명령에서 액션으로 "틀다"를 추출하고 대상으로 "두남자쇼"를 추출한다.
다음, 의미정보 적재부(112)는 "틀다"라는 의미에 대한 정보로서 TV, 오디오, 비디오, 에어컨, 수도 등을 적재하고, "두남자쇼"라는 의미에 대한 정보로서 프로그램, SBS, 화요일, PM10:00-11:00, 화요일, 11월 13일 등을 적재한다.
다음, 동작 의미 중의성 해소부(121)는 "두남자쇼"가 TV 프로그램이므로 동작을 TV-play로 결정한다.
대상 의미 중의성 해소부(122)는 명령을 받은 시점이 화요일 PM10:00 이면, TV 채널 SBS의 프로그램을 방영해야 하므로 대상의 의미 정보를 프로그램으로, 명령을 받은 시점이 화요일을 지난 시간이면 VOD 서비스를 받아야 하므로 대상의 의미 정보를 VOD로 결정한다.
따라서, 명령 해석부(100)는 최종적으로 명령을 받은 시점에 따라서 play(TV, 두남자쇼(프로그램, SBS) 또는 play(TV, 두남자쇼(VOD, SBS, 11월13일, 화요일, PM10:00)의 논리적 명령을 출력한다.
도 4에 액션 라이브러리(200)에 저장되는 데이터 구조가 도시되어 있으며, 도 5에 액션 라이브러리(200)에 저장되는 데이터 구조의 일예가 도시되어 있다.
상기 데이터 구조는 액션 헤더(210)와, 선행조건(220)과, 서브액션1,...N(230)과, 액션 효과(240)를 포함한다. 액션의 선행 조건(220)은 액션을 수행하기 위해 만족되어야 하는 조건으로, 예를 들어, 도 5에 도시된 바와 같이 "TV 채널 변경(CHANGE(CHE))"이라는 액션이 수행되기 위해서는 "TV가 이미 커져 있어야 한다(POWER-ON(TV))"는 선행 조건이 만족되어야 함을 의미한다.
액션의 효과(240)는, 그 액션이 수행되면서 그 결과로 만족되는 결과로서, 예를 들어, 도 3에 도시된 바와 같이 "PC에서 TV로 특정 파일 전송(GET(FILE,PC)"이라는 액션이 성공적으로 수행되면 그 결과로 "TV에 특정 파일이 존재한다(IS-FILE(TV))"라는 상황이 만족하게 되는 것이다.
액션의 서브 액션(230)은 액션 수행을 위한 순차적인 단계를 의미하는 것으로, 예를 들어, 도3에 도시된 바와 같이 "PC의 파일을 TV로 재생(PLAY(FILE,PC))"이라는 액션은 "PC 접속(POWER-ON(PC)) →PC에서 파일 검색(SEARCH(FILE)) → PC에서 TV로 파일 전송(TRANSMIT(FILE,PC,TV)) → TV에서 파일 재생(PLAY(FILE,TV))"이라는 세부 단계로 나뉘게 된다.
액션 라이브러리를 이와 같이 구성함으로써 액션간의 선후행 관계가 명확해지며, 함축적인 사용자의 명령으로부터 일련의 액션 리스트를 추출할 수 있다.
이제, 도 6을 참조하여 액션 계획부(300)의 동작을 설명한다. 액션 계획부(300)은 논리적 형태의 명령을 수신하여 액션 리스트를 추출한다. 액션 리스트란 입력된 논리적 명령을 수행하기 위한 일련의 액션 단계를 의미한다.
먼저, 액션 계획부(300)는 명령 해석부(100)로부터 논리적 명령을 수신하면(601), 그 논리적 명령에 해당하는 액션 헤더를 액션 라이브러리(200)에서 검색하고(602), 디바이스 상태 라이브러리(600)를 참조하여 액션 헤더내의 선행조건을 만족하는지를 검사한다(603). 디바이스 상태 라이브러리(600)에는 가전기기 제어장치가 제어하는 디바이스들의 상태가 저장되어 있다.
선행조건을 만족하지 않는 경우에는, 그 선행조건을 만족시킬 수 있는 액션이 액션 라이브러리 내에 존재하는지 판단한다(604). 그러한 액션이 액션 라이브러리에 존재하지 않는 경우에(즉, 제어가능하지 않은 경우에) 액션 계획부(300)는 응답관리부(800)로 에러 메시지를 출력하고(606), 종료한다. 예를 들어, TV의 전원을 켜라는 명령의 경우에 그 선행조건으로서 전원 코드는 플러그에 꽂혀져 있어야 하는데, 그러한 선행조건을 만족시킬 수 있는 액션이 액션 라이브러리 내에 존재하지 않는다면, 더 이상 가전기기를 제어할 수 없는 상태이므로 이러한 경우에 에러 메시지를 출력하게 된다.
단계 604의 판단 결과, 선행조건을 만족시킬 수 있는 액션이 액션 라이브러리내에 존재하는 경우에는 상기 선행조건을 먼저 수행해야 하므로 상기 선행조건을 만족시킬 수 있는 액션을 검색하여 액션 리스트에 기입하고(605), 단계603으로 진행한다.
다음, 서브액션이 존재하는지를 체크하고(607), 서브 액션이 존재하는 경우에는 서브 액션에 해당하는 액션 헤더를 액션 라이브러리(200)에서 다시 검색하여 단계 603으로 다시 진행하고, 서브 액션이 존재하지 않는 경우에는 현재 액션을 액션 리스트에 기입한다(609).
그리고 나서, 다음 액션이 존재하는지를 판단하고(610), 다음 액션이 남아있으면 다음 액션에 해당하는 액션 헤더를 검색하고(611), 단계 603으로 진행하며,다음 액션이 존재하지 않는 경우에는 동작과정을 종료한다.
이제, 도 7을 참조하여, 구체적인 예를 통해 명령 해석부(100) 및 액션 계획부(300)의 동작을 설명한다.
명령 해석부(100)가 "PC의 파일을 TV로 재생해줘"라는 문자명령(701)을 수신하면, 그 문자명령을 해석하여 "PLAY(FILE,PC)"라는 논리적 명령(702)으로 변환하여 액션계획부(300)로 출력하고, 액션 계획부(300)는 수신된 논리적 명령을 액션리스트(703)로 확장시킨다.
도 5 및 7을 참조하여 "PLAY(FILE,PC)"를 액션 리스트로 확장시키는 것을 설명하면, "PLAY(FILE,PC)"의 선행조건으로 POWER-ON(TV)가 있는데, 디바이스 상태 라이브러리 검색 결과 선행조건이 만족되지 않는다면, 액션 라이브러리 내에서 POWER-ON(TV)라는 상기 선행조건을 만족시킬 수 있는 액션을 검색한다. 즉, 액션 효과가 POWER-ON(TV)인 액션을 검색하고, 그 결과 액션 POWER-ON(TV)가 검색된다. 액션 POWER-ON(TV)의 선행조건이 만족된다고 가정한다면, 상기 액션은 서브 액션이 존재하지 않으므로 액션 리스트의 첫 번째 액션(704)으로 POWER-ON(TV)를 기입한다.
다음 서브액션으로 GET(FILE,PC)와 PLAY(FILE,TV)가 있고, GET(FILE,PC)를 액션헤더로 다시 검색하면 선행조건으로 POWER-ON(PC)가 있다. 디바이스 상태 라이브러리 검색 결과 선행조건이 만족되지 않는다면, 상기 선행조건을 만족시킬 수 있는 액션을 액션 라이브러리로부터 검색하게 되고, 그 결과 액션 POWER-ON(PC)가 검색된다. 액션 POWER-ON(PC)의 선행조건이 만족되고 서브 액션이 존재하지 않는다고 가정하면, 수행해야 할 두 번째 액션(705)으로 POWER-ON(PC)를 기입한다.
다음, 서브액션으로 SEARCH(FILE)과 TRANSMIT(FILE,PC,TV)가 있다. SEARCH(FILE)을 액션 헤더로 검색하여 선행조건도 만족되고 서브액션도 없다고 가정하면 세 번째 액션(706)으로 SEARCH(FILE)을 기입하고, 또한, TRANSMIT(FILE,PC,TV)를 액션 헤더로 검색하여 선행조건도 만족되고 서브액션도 없다고 가정하면, 네 번째 액션(707)에 TRANSMIT(FILE,PC,TV)을 기입한다.
다음, 더 이상의 서브액션이 없으므로 다음 액션인 PLAY(FILE,TV)를 액션 헤더로 검색하여 선행조건도 만족되고 서브액션도 없다고 가정하면 다섯 번째 액션(708)에 PLAY(FILE,TV)를 기입한다. 다음, 더 이상의 남은 액션이 없으므로 액션 리스트의 작성은 종료된다.
이와 같은 과정에 의해 PLAY(FILE,PC)라는 논리적 명령(702)은 POWER-ON(TV)(704), POWER-ON(PC)(705), SEARCH(FILE)(706), TRANSMIT(FILE,PC,TV)(707), PLAY(FILE,TV)(708)로 이루어진 액션 리스트(703)로 확장된다.
이제, 도 8을 참조하여 디바이스 제어부(400)의 구체적인 구성을 설명한다.
디바이스 제어부(400)는 액션 리스트/제어신호 변환부(410)와, 제어신호 인가부(420)와, 액션 실행결과 보고부(430)를 포함한다.
액션리스트/제어신호 변환부(410)는 액션 계획부(300)로부터 수신한 액션 리스트의 각 액션을 개별 가전 제어를 위한 신호로 변환한다.
제어신호 인가부(420)는 변환된 가전 제어 신호를 홈네트워크로 연결된 가전기기(710)에 전송한다. 예를 들어, 도 7에 도시된 액션 리스트(703)를 이용하여가전기기를 제어하는 동작을 도 9를 참조하여 설명하면, POWER-ON(TV)(704) 액션은 제어신호 S1으로 변환되어 DTV(710)로 전송되고, POWER-ON(PC)(705) 액션은 제어신호 S2로 변환되어 PC(740)로 전송되고, SEARCH(FILE)(706) 액션은 제어신호 S3로 변환되어 PC(740)로 전송되고, TRANSMIT(FILE,PC,TV)(707) 액션은 제어신호 S4로 변환되어 DTV(710)와 PC(740)로 전송되며, PLAY(FILE,TV)(708) 액션은 제어신호 S5로 변환되어 DTV(710)로 전송된다. 이와 같은 과정에 의해 가전기기들은 논리적인 동작 순서로 제어될 수 있다.
액션 실행 결과 보고부(430)는 디바이스의 각 액션 실행에 대한 성공, 실패 여부를 보고받고, 상기 보고받은 액션 실행 결과를 응답 관리부(800)에 전송한다. 예를 들어, 명령에 대한 액션이 성공이라는 결과를 디바이스 상태 감시부(711)로부터 보고받을 수도 있을 것이고, 명령에 대한 액션 실행중 에러가 나온 경우에 실패라는 결과를 디바이스 상태 감시부(711)로부터 보고받아 응답관리부(800)로 에러메시지를 출력할 수도 있을 것이다. 액션 실행 실패의 경우에는 액션에 참여하는 여러 디바이스들중 오류가 난 바로 그 디바이스로부터 오류 결과를 보고 받을 수 있으므로, 액션 실행의 어느 단계에서 또는 어느 디바이스에서 오류가 난 것인지를 정확히 파악할 수 있게 된다.
도 10에 디바이스 모니터링부(500)의 구체적인 구성을 도시한다.
디바이스 모니터링부(500)는 디바이스상태 추출부(510)와, 디바이스 상태 갱신부(520)를 포함한다. 디바이스 상태 감시부(711)는 디바이스 상태 플래그(712)를 감시하고 플래그의 상태에 변경이 있으면 변경된 디바이스 상태 플래그의 상태를 나타내는 메시지를 디바이스 상태 추출부(510)로 전송한다. 디바이스 상태 추출부(510)는 디바이스 상태 메시지를 수신하여 디바이스 상태를 추출하고, 디바이스 상태 갱신부(520)는 디바이스 상태 추출부(510)에 의해 추출된 디바이스 상태를 디바이스 상태 라이브러리(600)에 갱신한다.
디바이스 상태 라이브러리(600)에 저장되는 디바이스 상태의 데이터 구조는 예를 들어, 도 11에 도시된 바와 같다. 상기 데이터 구조는 디바이스 ID(1110)와, 액션(1120)과, 디바이스 상태(1130)를 포함한다. 예를 들면, 디바이스 ID(1110)에 "TV", 액션(1120)에 "POWER-ON", 디바이스 상태(1130)에 "ON"이 저장될 수 있을 것이다.
도 12는 도 1에 도시된 응답 관리부(800)의 구체적인 구성을 도시한다.
응답 관리부(800)는 디바이스 제어부(400)로부터의 액션 수행 결과를 입력으로 수신하여 사용자에게 액션 수행 결과를 통지한다. 액션 리스트 작성 단계에서 선행조건을 만족시킬 수 있는 액션이 액션 라이브러리 내에 존재하지 않는 상태에서도 에러 메시지를 출력할 수 있으므로, 응답 관리부(800)는 액션 계획부(300)로부터도 메시지를 수신할 수 있다.
응답 관리부(800)가 디바이스 제어부(400) 또는 액션 계획부(300)로부터 명령 수행결과를 수신하면 응답 프레임 선택부(810)는 응답 프레임의 데이터베이스인 응답 프레임 사전(801)을 참조하여 적합한 응답 프레임을 선택하고, 프레임 슬롯 매핑부(820)는 응답 프레임의 슬롯값을 결정하며, 형태소 생성부(830)는 수신된 응답 프레임을 형태소 생성 과정을 거쳐 문자 형태 응답으로 변환하고, 변환된 응답을 출력부(900)로 출력한다.
이상과 같은 본 발명에 의하면, 일련의 명령 단계를 함축적인 명령으로 수행 가능하게 함으로써 사용자 명령을 단축시킬 수 있고, 명령 수행 결과를 정확하게 반영하는 응답을 생성시킬 수 있으며, 명령 실패 시 실패 원인을 사용자에게 정확하게 알려줌으로서 네트워크 제어의 편리성을 증대시킬 수 있고, 복잡해진 홈 네트워크 제어에 대한 편리하고 효율적인 인터페이스를 제공할 수 있게 된다.

Claims (25)

  1. 홈네트워크로 연결된 가전기기들을 제어하는 방법에 있어서,
    상기 가전기기의 제어를 명령하는 사용자의 음성명령을 수신하여 문자 명령으로 변환하는 제1단계와,
    상기 변환된 문자 명령으로부터 상기 가전기기의 제어동작을 나타내는 액션과 상기 가전기기를 나타내는 대상을 추출하여 논리적 명령으로 변환하는 제2단계와,
    상기 홈네트워크로 연결된 가전기기들을 제어하기 위한 액션 데이터를 저장하는 액션 라이브러리를 참조하여 상기 논리적 명령으로부터 상기 가전기기를 단계적으로 제어하기 위한 일련의 액션들을 포함하는 액션 리스트를 추출하는 제3단계와,
    상기 액션 리스트에 포함된 일련의 액션들을 가전기기 제어신호로 변환하여 상기 홈네트워크로 연결된 가전기기들을 제어하는 제4단계를 포함하는, 홈네트워크 연결 가전기기 제어방법.
  2. 제1항에 있어서,
    상기 제2단계는,
    상기 문자 명령으로부터 명령의 액션과 대상을 추출하는 제2a단계와,
    상기 추출된 액션과 대상의 의미정보를 적재하는 제2b단계와,
    상기 적재된 액션과 대상의 의미정보를 이용하여 액션과 대상의 의미의 중의성을 해소하는 제2c단계를 포함하는, 홈네트워크 연결 가전기기 제어방법.
  3. 제1항에 있어서,
    상기 액션 라이브러리에 저장되는 액션 데이터의 데이터구조는 상기 액션을 나타내는 액션 헤더, 상기 액션이 실행되기 위해 요구되는 선행 조건, 상기 액션의 실행 완료를 위한 세부 액션들, 상기 액션의 실행 결과인 액션 효과 중 적어도 하나를 포함하는, 홈네트워크 연결 가전기기 제어방법.
  4. 제3항에 있어서,
    상기 제3단계는,
    상기 논리적 명령에 해당하는 액션 데이터에 포함된 선행 조건이 만족되는지를 판단하는 제3a단계와,
    상기 판단 결과 선행조건이 만족되지 않고, 그 선행조건이 제어가능한 경우에, 상기 선행 조건을 상기 액션 리스트에 기록하는 제3b단계와,
    상기 판단 결과 선행조건이 만족되지 않고, 그 선행조건이 제어불가능한 경우에, 에러 메시지를 출력하는 제3c단계와,
    상기 논리적 명령에 해당하는 액션 데이터에 포함된 세부 액션들을 상기 액션 리스트에 기록하는 제3d단계를 포함하는, 홈네트워크 연결 가전기기 제어방법.
  5. 제3항에 있어서,
    상기 제3단계는,
    상기 논리적 명령에 해당하는 액션 데이터에 포함된 선행 조건이 만족되는지를 판단하는 제3a단계와,
    상기 판단 결과 선행조건이 만족되지 않고, 그 선행조건을 만족시킬 수 있는 액션이 액션 라이브러리내에 존재하는 경우, 상기 액션을 검색하는 제3b단계와,
    상기 판단 결과 선행조건이 만족되지 않고, 그 선행조건을 만족시킬 수 있는 액션이 액션 라이브러리내에 존재하지 않는 경우, 에러메시지를 출력하는 제3c단계와,
    상기 논리적 명령에 해당하는 액션 데이터에 포함된 선행조건이 만족되고 세부 액션이 존재하는 경우 상기 세부 액션을 액션 라이브러리로부터 검색하는 제3d단계와,
    상기 논리적 명령에 해당하는 액션 데이터에 포함된 선행조건이 만족되고 더 이상 세부 액션이 없는 경우 상기 액션을 상기 액션 리스트에 기록하는 제3e단계를 포함하는, 홈네트워크 연결 가전기기 제어방법.
  6. 제4항 또는 제5항에 있어서,
    상기 제3a단계는, 상기 홈네트워크에 연결된 가전기기들의 상태 정보를 저장하는 디바이스 상태 라이브러리를 참조하여 상기 선행조건이 만족되는지를 판단하는, 홈네트워크 연결 가전기기 제어방법.
  7. 제6항에 있어서,
    상기 디바이스 상태 라이브러리는 적어도 디바이스 ID, 액션, 디바이스 상태를 저장하는, 홈네트워크 연결 가전기기 제어방법.
  8. 제1항에 있어서,
    상기 홈네트워크로 연결된 가전기기들의 제어에 따른 액션 실행 결과를 보고하는 제5단계를 더 포함하는, 홈네트워크 연결 가전기기 제어방법.
  9. 제8항에 있어서,
    상기 제5단계는,
    상기 홈네트워크로 연결된 가전기기로부터 액션 실행 결과를 수신하는 제5a단계와,
    상기 수신된 액션 실행 결과를 포함하는 결과 메시지를 출력하는 제5b단계를 포함하는, 홈네트워크 연결 가전기기 제어방법.
  10. 제9항에 있어서,
    상기 결과 메시지는 실행 결과 성공 메시지 또는 실행 결과 실패 메시지를 포함하며, 상기 실행 결과 실패 메시지는 오류를 일으킨 가전기기에 관한 정보를 포함하는, 홈네트워크 연결 가전기기 제어방법.
  11. 제1항에 있어서,
    상기 홈네트워크로 연결된 가전기기들의 제어에 따라 변경되는 가전기기의 상태를 모니터하는 제6단계를 더 포함하는, 홈네트워크 연결 가전기기 제어방법.
  12. 제11항에 있어서,
    상기 제6단계는,
    상기 홈네트워크로 연결된 가전기기로부터 변경된 가전기기 상태 정보를 수신하는 제6a단계와,
    상기 수신된 가전기기 상태 정보를 이용하여 상기 홈네트워크에 연결된 가전기기들의 상태 정보를 저장하는 디바이스 상태 라이브러리를 갱신하는 제6b단계를 포함하는, 홈네트워크 연결 가전기기 제어방법.
  13. 홈네트워크로 연결된 가전기기 제어 장치에 있어서,
    상기 홈네트워크로 연결된 가전기기들을 제어하기 위한 액션 데이터를 저장하는 액션 라이브러리와,
    상기 가전기기의 제어를 명령하는 사용자의 음성명령을 수신하여 문자 명령으로 인식하는 음성인식부와,
    상기 인식된 문자 명령으로부터 상기 가전기기의 제어동작을 나타내는 액션과 상기 가전기기를 나타내는 대상을 추출하여 논리적 명령으로 변환하는 명령해석부와,
    상기 액션 라이브러리를 참조하여 상기 논리적 명령으로부터 상기 가전기기를 단계적으로 제어하기 위한 일련의 액션들을 포함하는 액션 리스트를 추출하는 액션계획부와,
    상기 액션 리스트에 포함된 일련의 액션들을 가전기기 제어신호로 변환하여 상기 홈네트워크로 연결된 가전기기들을 제어하는 가전기기 제어부를 포함하는, 홈네트워크 연결 가전기기 제어장치.
  14. 제13항에 있어서,
    상기 명령해석부는,
    상기 문자 명령으로부터 명령의 액션과 대상을 추출하고, 상기 추출된 액션과 대상의 의미정보를 적재하는 명령 표층 분석부와,
    상기 적재된 액션과 대상의 의미정보를 이용하여 액션과 대상의 의미의 중의성을 해소하는 명령 심층 분석부를 포함하는, 홈네트워크 연결 가전기기 제어장치.
  15. 제13항에 있어서,
    상기 액션 라이브러리에 저장되는 액션 데이터의 데이터구조는 상기 액션을 나타내는 액션 헤더, 상기 액션이 실행되기 위해 요구되는 선행 조건, 상기 액션의 실행 완료를 위한 세부 액션들, 상기 액션의 실행 결과인 액션 효과 중 적어도 하나를 포함하는, 홈네트워크 연결 가전기기 제어장치.
  16. 제15항에 있어서,
    상기 논리적 명령에 해당하는 액션 데이터에 포함된 선행 조건이 만족되는지를 판단한 결과 선행조건이 만족되지 않고, 그 선행조건을 만족시킬 수 있는 액션이 액션 라이브러리에 존재하지 않는 경우에, 상기 액션 계획부는 에러 메시지를 출력하는, 홈네트워크 연결 가전기기 제어장치.
  17. 제15항에 있어서,
    상기 액션 리스트에는, 상기 논리적 명령에 해당하는 액션 데이터에 포함된 선행 조건이 만족되는지를 판단한 결과 선행조건이 만족되지 않고, 그 선행조건을 만족시킬 수 있는 액션이 액션 라이브러리내에 존재하는 경우에, 상기 선행 조건 및 상기 논리적 명령에 해당하는 액션 데이터에 포함된 세부 액션들이 기록되는, 홈네트워크 연결 가전기기 제어장치.
  18. 제16항 또는 제17항에 있어서,
    상기 논리적 명령에 해당하는 액션 데이터에 포함된 선행조건이 만족되는지는 상기 홈네트워크에 연결된 가전기기들의 상태 정보를 저장하는 디바이스 상태 라이브러리를 참조하여 판단되는, 홈네트워크 연결 가전기기 제어장치.
  19. 제18항에 있어서,
    상기 디바이스 상태 라이브러리는 적어도 디바이스 ID, 액션, 디바이스 상태를 저장하는, 홈네트워크 연결 가전기기 제어장치.
  20. 제13항에 있어서,
    상기 홈네트워크로 연결된 가전기기들의 제어에 따른 액션 실행 결과를 보고하는 응답관리부를 더 포함하는, 홈네트워크 연결 가전기기 제어장치.
  21. 제20항에 있어서,
    상기 응답관리부는 상기 디바이스 제어부를 통하여 상기 홈네트워크로 연결된 가전기기로부터 액션 실행 결과를 수신하고, 상기 수신된 액션 실행 결과를 포함하는 결과 메시지를 출력하는, 홈네트워크 연결 가전기기 제어장치.
  22. 제21항에 있어서,
    상기 결과 메시지는 음성 또는 문자 형태로 출력되는, 홈네트워크 연결 가전기기 제어장치.
  23. 제21항에 있어서,
    상기 결과 메시지는 실행 결과 성공 메시지 또는 실행 결과 실패 메시지를 포함하며, 상기 실행 결과 실패 메시지는 오류를 일으킨 가전기기에 관한 정보를포함하는, 홈네트워크 연결 가전기기 제어장치.
  24. 제13항에 있어서,
    상기 홈네트워크로 연결된 가전기기들의 제어에 따라 변경되는 가전기기의 상태를 모니터하는 디바이스 모니터링부를 더 포함하는, 홈네트워크 연결 가전기기 제어장치.
  25. 제24항에 있어서,
    상기 디바이스 모니터링부는, 상기 홈네트워크로 연결된 가전기기로부터 변경된 가전기기 상태 정보를 수신하고, 상기 수신된 가전기기 상태 정보를 이용하여 상기 홈네트워크에 연결된 가전기기들의 상태 정보를 저장하는 디바이스 상태 라이브러리를 갱신하는, 홈네트워크 연결 가전기기 제어장치.
KR10-2002-0014096A 2002-03-15 2002-03-15 홈네트워크로 연결된 가전기기들을 제어하는 방법 및 장치 KR100434545B1 (ko)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR10-2002-0014096A KR100434545B1 (ko) 2002-03-15 2002-03-15 홈네트워크로 연결된 가전기기들을 제어하는 방법 및 장치
EP03251572A EP1345360B1 (en) 2002-03-15 2003-03-14 Method and apparatus for controlling devices connected to home network
AT03251572T ATE333174T1 (de) 2002-03-15 2003-03-14 Verfahren und vorrichtung zur steuerung von geräten, die mit einem hauswerknetz verbunden sind
DE60306701T DE60306701T2 (de) 2002-03-15 2003-03-14 Verfahren und Vorrichtung zur Steuerung von Geräten, die mit einem Hauswerknetz verbunden sind
US10/388,749 US7957974B2 (en) 2002-03-15 2003-03-17 Method and apparatus for controlling devices connected to home network
JP2003072015A JP4689944B2 (ja) 2002-03-15 2003-03-17 ホームネットワークに連結された電化製品を制御する方法及び装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR10-2002-0014096A KR100434545B1 (ko) 2002-03-15 2002-03-15 홈네트워크로 연결된 가전기기들을 제어하는 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20030075020A KR20030075020A (ko) 2003-09-22
KR100434545B1 true KR100434545B1 (ko) 2004-06-05

Family

ID=36776478

Family Applications (1)

Application Number Title Priority Date Filing Date
KR10-2002-0014096A KR100434545B1 (ko) 2002-03-15 2002-03-15 홈네트워크로 연결된 가전기기들을 제어하는 방법 및 장치

Country Status (6)

Country Link
US (1) US7957974B2 (ko)
EP (1) EP1345360B1 (ko)
JP (1) JP4689944B2 (ko)
KR (1) KR100434545B1 (ko)
AT (1) ATE333174T1 (ko)
DE (1) DE60306701T2 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100790173B1 (ko) 2006-02-23 2008-01-02 삼성전자주식회사 단문 메시지 서비스를 이용하여 무선 기기를 제어하기 위한방법과 홈 네트워크 시스템 및 이동 단말기
KR101387928B1 (ko) 2010-06-24 2014-04-22 에스케이플래닛 주식회사 홈 미디어 디바이스 및 이를 이용한 홈 네트워크 시스템, 방법
US10627789B2 (en) 2014-11-05 2020-04-21 Samsung Electronics Co., Ltd. User device, driving method of user device, apparatus for providing service and driving method of apparatus for providing service
WO2022014738A1 (ko) * 2020-07-14 2022-01-20 엘지전자 주식회사 디스플레이 장치

Families Citing this family (135)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
JP4531546B2 (ja) * 2003-12-15 2010-08-25 パナソニック株式会社 制御信号を利用したインデックス付与システム
EP1562180B1 (en) * 2004-02-06 2015-04-01 Nuance Communications, Inc. Speech dialogue system and method for controlling an electronic device
US20090164215A1 (en) * 2004-02-09 2009-06-25 Delta Electronics, Inc. Device with voice-assisted system
JP4370410B2 (ja) * 2004-03-08 2009-11-25 独立行政法人情報通信研究機構 対話システム、対話ロボット、プログラム及び記録媒体
WO2006019226A1 (en) * 2004-07-07 2006-02-23 Lg Electronics Inc. Event interfacing method and apparatus between applications and a library of a master on home network
WO2006004378A1 (en) * 2004-07-07 2006-01-12 Lg Electronics Inc. Event interfacing method and apparatus between applications and a library of a master on home network
JP2006165811A (ja) * 2004-12-03 2006-06-22 Nippon Hoso Kyokai <Nhk> リモコン操作提示装置及びリモコン操作提示プログラム
US8265939B2 (en) * 2005-08-31 2012-09-11 Nuance Communications, Inc. Hierarchical methods and apparatus for extracting user intent from spoken utterances
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
KR100694221B1 (ko) 2005-10-05 2007-03-14 삼성전자주식회사 디지털리빙 네트워크에서의 디바이스 제어 시스템 및 그방법
US7698140B2 (en) * 2006-03-06 2010-04-13 Foneweb, Inc. Message transcription, voice query and query delivery system
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
JP5059370B2 (ja) * 2006-10-16 2012-10-24 株式会社内田洋行 環境情報処理方法、環境情報処理装置及び環境情報処理プログラム
US8032383B1 (en) * 2007-05-04 2011-10-04 Foneweb, Inc. Speech controlled services and devices using internet
US8595642B1 (en) 2007-10-04 2013-11-26 Great Northern Research, LLC Multiple shell multi faceted graphical user interface
US8165886B1 (en) * 2007-10-04 2012-04-24 Great Northern Research LLC Speech interface system and method for control and interaction with applications on a computing system
US20090125813A1 (en) * 2007-11-09 2009-05-14 Zhongnan Shen Method and system for processing multiple dialog sessions in parallel
US20090187398A1 (en) * 2008-01-18 2009-07-23 Avaya Technology Llc Script Selection Based On SIP Language Preference
JP2009199678A (ja) * 2008-02-22 2009-09-03 Sony Corp 情報処理置および方法、並びにプログラム
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
KR20100072847A (ko) 2008-12-22 2010-07-01 한국전자통신연구원 차량 입출고를 기반으로 한 디지털 가전기기 제어 장치 및 방법
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US9197736B2 (en) 2009-12-31 2015-11-24 Digimarc Corporation Intuitive computing methods and systems
US8379801B2 (en) * 2009-11-24 2013-02-19 Sorenson Communications, Inc. Methods and systems related to text caption error correction
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US20120059655A1 (en) * 2010-09-08 2012-03-08 Nuance Communications, Inc. Methods and apparatus for providing input to a speech-enabled application program
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US8340975B1 (en) * 2011-10-04 2012-12-25 Theodore Alfred Rosenberger Interactive speech recognition device and system for hands-free building control
US10088853B2 (en) 2012-05-02 2018-10-02 Honeywell International Inc. Devices and methods for interacting with an HVAC controller
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
US10042603B2 (en) 2012-09-20 2018-08-07 Samsung Electronics Co., Ltd. Context aware service provision method and apparatus of user device
KR102070196B1 (ko) 2012-09-20 2020-01-30 삼성전자 주식회사 사용자 디바이스에서 상황 인식 서비스 제공 방법 및 장치
KR20140060040A (ko) * 2012-11-09 2014-05-19 삼성전자주식회사 디스플레이장치, 음성취득장치 및 그 음성인식방법
TWI557722B (zh) * 2012-11-15 2016-11-11 緯創資通股份有限公司 語音干擾的濾除方法、系統，與電腦可讀記錄媒體
US9311640B2 (en) 2014-02-11 2016-04-12 Digimarc Corporation Methods and arrangements for smartphone payments and transactions
US10145579B2 (en) 2013-05-01 2018-12-04 Honeywell International Inc. Devices and methods for interacting with a control system that is connected to a network
US9472205B2 (en) * 2013-05-06 2016-10-18 Honeywell International Inc. Device voice recognition systems and methods
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
EP3008641A1 (en) 2013-06-09 2016-04-20 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
US10030878B2 (en) 2013-08-21 2018-07-24 Honeywell International Inc. User interaction with building controller device using a remote server and a duplex connection
US20150053779A1 (en) 2013-08-21 2015-02-26 Honeywell International Inc. Devices and methods for interacting with an hvac controller
DE102013019208A1 (de) * 2013-11-15 2015-05-21 Audi Ag Kraftfahrzeug-Sprachbedienung
US10514677B2 (en) 2014-04-11 2019-12-24 Honeywell International Inc. Frameworks and methodologies configured to assist configuring devices supported by a building management system
US9860076B2 (en) 2014-05-07 2018-01-02 Vivint, Inc. Home automation via voice control
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9939823B2 (en) 2014-06-05 2018-04-10 Wise Spaces Ltd. Home automation control system
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
WO2016099148A1 (en) * 2014-12-16 2016-06-23 Samsung Electronics Co., Ltd. Method and apparatus for controlling device using a service rule
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
JP6516585B2 (ja) * 2015-06-24 2019-05-22 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 制御装置、その方法及びプログラム
US10075537B2 (en) * 2015-08-27 2018-09-11 Accenture Global Services Limited Action execution architecture for virtual machines
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10431218B2 (en) * 2016-02-15 2019-10-01 EVA Automation, Inc. Integration and probabilistic control of electronic devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9911417B2 (en) * 2016-04-01 2018-03-06 Tai-An Lu Internet of things system with voice-controlled functions and method for processing information of the same
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179309B1 (en) * 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
JP2018063537A (ja) * 2016-10-12 2018-04-19 株式会社東芝 ホームネットワーク、電子機器、処理装置および表示方法
JP6659514B2 (ja) 2016-10-12 2020-03-04 東芝映像ソリューション株式会社 電子機器及びその制御方法
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US10614804B2 (en) 2017-01-24 2020-04-07 Honeywell International Inc. Voice control of integrated room automation system
US10757058B2 (en) 2017-02-17 2020-08-25 International Business Machines Corporation Outgoing communication scam prevention
US10102868B2 (en) * 2017-02-17 2018-10-16 International Business Machines Corporation Bot-based honeypot poison resilient data collection
US10810510B2 (en) 2017-02-17 2020-10-20 International Business Machines Corporation Conversation and context aware fraud and abuse prevention agent
US10013979B1 (en) * 2017-04-17 2018-07-03 Essential Products, Inc. Expanding a set of commands to control devices in an environment
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US10984329B2 (en) 2017-06-14 2021-04-20 Ademco Inc. Voice activated virtual assistant with a fused response
KR102419374B1 (ko) 2017-07-21 2022-07-11 삼성전자주식회사 사용자 발화를 처리하는 전자 장치 및 그 전자 장치의 제어 방법
US10524046B2 (en) 2017-12-06 2019-12-31 Ademco Inc. Systems and methods for automatic speech recognition
US10778674B2 (en) 2018-01-30 2020-09-15 D&M Holdings, Inc. Voice authentication and setup for wireless media rendering system
CN111433755A (zh) * 2018-04-11 2020-07-17 海信视像科技股份有限公司 家庭网络、电子机器、处理装置及显示方法
US20190332848A1 (en) 2018-04-27 2019-10-31 Honeywell International Inc. Facial enrollment and recognition system
US10783886B2 (en) * 2018-06-12 2020-09-22 International Business Machines Corporation Cognitive agent disambiguation
US20190390866A1 (en) 2018-06-22 2019-12-26 Honeywell International Inc. Building management system with natural language interface
US10650819B2 (en) 2018-10-15 2020-05-12 Midea Group Co., Ltd. System and method for providing portable natural language processing interface across multiple appliances
CN111508483B (zh) * 2019-01-31 2023-04-18 北京小米智能科技有限公司 设备控制方法及装置
US11562731B2 (en) 2020-08-19 2023-01-24 Sorenson Ip Holdings, Llc Word replacement in transcriptions

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000045069A (ko) * 1998-12-30 2000-07-15 윤종용 음성인식 홈 오토메이션 시스템 및 이를 이용한 가정용 기기 제어방법
KR20000049417A (ko) * 2000-02-29 2000-08-05 이만균 음성 인터넷 명령어 처리방법 및 시스템
KR20010014155A (ko) * 1997-06-25 2001-02-26 윤종용 브라우저 기반의 개선된 홈 네트웍 명령 및 제어
KR20010077303A (ko) * 2000-02-01 2001-08-17 구자홍 홈 어플라이언스 네트워킹 시스템 및 그 시스템의 운용 방법
KR20010104252A (ko) * 2000-05-11 2001-11-24 이마이 기요스케 가정용 전기 기기를 조작하기 위한 음성 제어 시스템
KR20020033896A (ko) * 2000-10-30 2002-05-08 구자홍 가전제품 원격 조정장치

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6269298A (ja) * 1985-09-20 1987-03-30 三洋電機株式会社 音声認識装置
US4797924A (en) * 1985-10-25 1989-01-10 Nartron Corporation Vehicle voice recognition method and apparatus
JPS6369298A (ja) 1986-09-10 1988-03-29 富士通株式会社 プリント板の放熱構造
US5086385A (en) * 1989-01-31 1992-02-04 Custom Command Systems Expandable home automation system
US5657425A (en) * 1993-11-15 1997-08-12 International Business Machines Corporation Location dependent verbal command execution in a computer based control system
JP3254994B2 (ja) * 1995-03-01 2002-02-12 セイコーエプソン株式会社 音声認識対話装置および音声認識対話処理方法
US6052666A (en) * 1995-11-06 2000-04-18 Thomson Multimedia S.A. Vocal identification of devices in a home environment
US6073101A (en) * 1996-02-02 2000-06-06 International Business Machines Corporation Text independent speaker recognition for transparent command ambiguity resolution and continuous access control
EP0911808B1 (en) * 1997-10-23 2002-05-08 Sony International (Europe) GmbH Speech interface in a home network environment
JP3928229B2 (ja) * 1997-11-28 2007-06-13 ソニー株式会社 表示制御装置および表示制御方法、並びに記録媒体
IL139408A0 (en) * 1998-05-07 2001-11-25 Samsung Electronics Co Ltd Method and apparatus for user and device command and control in a network
US6253184B1 (en) * 1998-12-14 2001-06-26 Jon Ruppert Interactive voice controlled copier apparatus
US6523061B1 (en) * 1999-01-05 2003-02-18 Sri International, Inc. System, method, and article of manufacture for agent-based navigation in a speech-based data navigation system
US6314398B1 (en) * 1999-03-01 2001-11-06 Matsushita Electric Industrial Co., Ltd. Apparatus and method using speech understanding for automatic channel selection in interactive television
EP1166564A1 (en) 1999-03-30 2002-01-02 Sony Electronics Inc. A method and a device for managing resources in a network
JP2001005492A (ja) 1999-06-21 2001-01-12 Matsushita Electric Ind Co Ltd 音声認識方法および音声認識装置
DE60032982T2 (de) 1999-09-13 2007-11-15 Matsushita Electric Industrial Co., Ltd., Kadoma Spracherkennung zur Steuerung eines Geräts
JP2001285314A (ja) 2000-04-04 2001-10-12 Toshiba Corp 機器状態通知方法
US6587824B1 (en) * 2000-05-04 2003-07-01 Visteon Global Technologies, Inc. Selective speaker adaptation for an in-vehicle speech recognition system
JP2002044765A (ja) 2000-07-28 2002-02-08 Matsushita Electric Ind Co Ltd 遠隔制御システムとゲートウェイ装置
EP1215658A3 (en) * 2000-12-05 2002-08-14 Hewlett-Packard Company Visual activation of voice controlled apparatus
US7778816B2 (en) * 2001-04-24 2010-08-17 Microsoft Corporation Method and system for applying input mode bias
KR100446635B1 (ko) * 2001-11-27 2004-09-04 삼성전자주식회사 깊이 이미지 기반 3차원 객체 표현 장치 및 방법
CN1218282C (zh) 2001-11-27 2005-09-07 三星电子株式会社 用深度图像表示三维物体的节点结构
US6895379B2 (en) * 2002-03-27 2005-05-17 Sony Corporation Method of and apparatus for configuring and controlling home entertainment systems through natural language and spoken commands using a natural language server

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010014155A (ko) * 1997-06-25 2001-02-26 윤종용 브라우저 기반의 개선된 홈 네트웍 명령 및 제어
KR20000045069A (ko) * 1998-12-30 2000-07-15 윤종용 음성인식 홈 오토메이션 시스템 및 이를 이용한 가정용 기기 제어방법
KR20010077303A (ko) * 2000-02-01 2001-08-17 구자홍 홈 어플라이언스 네트워킹 시스템 및 그 시스템의 운용 방법
KR20000049417A (ko) * 2000-02-29 2000-08-05 이만균 음성 인터넷 명령어 처리방법 및 시스템
KR20010104252A (ko) * 2000-05-11 2001-11-24 이마이 기요스케 가정용 전기 기기를 조작하기 위한 음성 제어 시스템
KR20020033896A (ko) * 2000-10-30 2002-05-08 구자홍 가전제품 원격 조정장치

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100790173B1 (ko) 2006-02-23 2008-01-02 삼성전자주식회사 단문 메시지 서비스를 이용하여 무선 기기를 제어하기 위한방법과 홈 네트워크 시스템 및 이동 단말기
KR101387928B1 (ko) 2010-06-24 2014-04-22 에스케이플래닛 주식회사 홈 미디어 디바이스 및 이를 이용한 홈 네트워크 시스템, 방법
US10627789B2 (en) 2014-11-05 2020-04-21 Samsung Electronics Co., Ltd. User device, driving method of user device, apparatus for providing service and driving method of apparatus for providing service
WO2022014738A1 (ko) * 2020-07-14 2022-01-20 엘지전자 주식회사 디스플레이 장치

Also Published As

Publication number Publication date
JP2004005481A (ja) 2004-01-08
DE60306701D1 (de) 2006-08-24
DE60306701T2 (de) 2007-07-12
JP4689944B2 (ja) 2011-06-01
ATE333174T1 (de) 2006-08-15
EP1345360A2 (en) 2003-09-17
US20030187659A1 (en) 2003-10-02
EP1345360A3 (en) 2004-11-17
US7957974B2 (en) 2011-06-07
KR20030075020A (ko) 2003-09-22
EP1345360B1 (en) 2006-07-12

Similar Documents

Publication Publication Date Title
KR100434545B1 (ko) 홈네트워크로 연결된 가전기기들을 제어하는 방법 및 장치
JP5027397B2 (ja) 分離された作業及び装置説明書を使用した家電製品の記述方法及びシステム
KR100739732B1 (ko) 전자 장치의 제어를 위한 사용자 작업을 제시하는 방법 및시스템
US8099313B2 (en) Method and system for the orchestration of tasks on consumer electronics
JP5069207B2 (ja) 遠隔制御アプリケーション用のユーザ・インタフェース
US6993486B2 (en) Speech command recognition apparatus, method, and storage medium used therewith for controlling a plurality of electronic devices over a network
EP1160664A2 (en) Agent display apparatus displaying personified agent for selectively executing process
CN112511882B (zh) 一种显示设备及语音唤起方法
CN103945250A (zh) 图像处理设备、其控制方法、以及图像处理系统
CN112163086A (zh) 多意图的识别方法、显示设备
US20050289560A1 (en) Method for making user-system interaction independent from the application of interaction media
CN114155855A (zh) 语音识别方法、服务器以及电子设备
CN103035267A (zh) 控制电器装置的内容驱动输入装置与方法
JP2008145769A (ja) 対話シナリオ生成システム，その方法およびプログラム
CN114299939A (zh) 一种智能设备、智能家居的语音控制设备及控制方法
JP2010003020A (ja) 情報処理装置、情報処理システムおよび情報処理方法
CN112380871A (zh) 语义识别方法、设备及介质
Nichols et al. Describing appliance user interfaces abstractly with xml
CN114822598A (zh) 服务器及语音情感识别方法
JPH0520002A (ja) メタフア環境制御方式
CN117075867A (zh) 一种计算机基础技术开发框架系统
CN116615780A (zh) 电子装置及其控制方法
JPH07129384A (ja) 操作手順の自然言語形式ファイルへの変換システム
KR20050061114A (ko) 실시간 사용자 정의에 의한 서비스 실행방법 및 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130429

Year of fee payment: 10

FPAY Annual fee payment

Payment date: 20140429

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20150429

Year of fee payment: 12

FPAY Annual fee payment

Payment date: 20160428

Year of fee payment: 13

FPAY Annual fee payment

Payment date: 20170427

Year of fee payment: 14

FPAY Annual fee payment

Payment date: 20180427

Year of fee payment: 15