KR20060092993A - 사용자의 컨텍스트를 결정하고 태스크들을 제안하기 위한컨텍스츄얼 태스크 제안 시스템 및 방법 - Google Patents
사용자의 컨텍스트를 결정하고 태스크들을 제안하기 위한컨텍스츄얼 태스크 제안 시스템 및 방법 Download PDFInfo
- Publication number
- KR20060092993A KR20060092993A KR1020050112970A KR20050112970A KR20060092993A KR 20060092993 A KR20060092993 A KR 20060092993A KR 1020050112970 A KR1020050112970 A KR 1020050112970A KR 20050112970 A KR20050112970 A KR 20050112970A KR 20060092993 A KR20060092993 A KR 20060092993A
- Authority
- KR
- South Korea
- Prior art keywords
- user
- task
- context
- tasks
- information
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/12—Arrangements for remote connection or disconnection of substations or of equipment thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
- H04L12/2803—Home automation networks
- H04L12/2807—Exchanging configuration information on appliance services in a home automation network
- H04L12/2812—Exchanging configuration information on appliance services in a home automation network describing content present in a home automation network, e.g. audio video content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/10—Network architectures or network communication protocols for network security for controlling access to devices or network resources
- H04L63/102—Entity profiles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/52—Network services specially adapted for the location of the user terminal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/2866—Architectures; Arrangements
- H04L67/30—Profiles
- H04L67/306—User profiles
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Automation & Control Theory (AREA)
- Computer Security & Cryptography (AREA)
- Computer Hardware Design (AREA)
- Multimedia (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Information Transfer Between Computers (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Telephonic Communication Services (AREA)
- Telephone Function (AREA)
Abstract
장치들의 네트웍에서 사용자가 수행할 가장 바람직한 태스크(task)를 제안하기 위하여 사용자의 컨텍스트(context)를 확인하는 시스템 및 방법을 제공한다. 사용자의 컨텍스트는 사용자의 위치, 사용자가 흥미를 갖고 있는 컨텐트, 사용자에 의해 사용되고 있는 장치들 및 사용자에 의해 사용되도록 허용된 장치들 및 컨텐트를 포함한다. 이 컨텍스트를 이용하여, 시스템은 그 컨텍스트에 적절한 태스크들을 사용자에게 제안한다. 컨텍스트의 결정과 태스크들의 제안은 어떤 주어진 시간에 사용자에게 이용가능한 컨텐트 및 장치들에 대한 정보를 추적함으로써 수행된다. 태스크들의 제안은 특정 정책들에 따라 수행된다. 예를 들며, 사용자는 정책에서의 규칙들을 변경함으로써 시스템의 동작을 제어할 수 있다. 태스크들은 사용자가 쉽게 이해할 수 있는 단순한 문장들의 형태로 되어 있다. 만약, 소정 컨텍스트에 기초하여, 하나 이상의 태스크가 가능하다면, 시스템은 사용자에게 가장 높은 우선순위를 갖는 태스크를 제안한다.
Description
도 1은 본 발명의 일 실시예를 구현하는 네트웍 예를 보여준다.
도 2는 본 발명의 일 실시예에 따른 상호작용 제어기(InterPlay Controller) 및 태스크 생성(Task Generation) 모듈의 기능적 블록도를 보여준다.
도 3a는 본 발명의 일 실시예에 따른 컨텍스츄얼 태스크 제안기(Contextual Task Recommender)에 의해 수행되는 일반적인 단계들의 흐름도를 보여준다.
도 3b 내지 도 3d는 본 발명의 일 실시예에 따른 컨텍스츄얼 태스크 제안기에 의해 수행되는 특정 단계들의 예의 흐름도들을 보여준다.
도 4는 본 발명의 일 실시예에 따른 태스크 생성 모듈에 의해 구현되는 일반적인 단계들의 흐름도를 보여준다.
본 발명은 일반적으로 장치들의 사용자 제어를 위한 사용자 인터페이스(interface)들을 제공하는 것에 관한 것이며, 특히 사용자의 컨텍스트(context)를 결정하고 태스크(task)들을 제안하기 위한 컨텍스츄얼(contextual) 태스크 제안 시스템 및 방법에 관한 것이다.
소비자 가전제품(comsumer electronics : CE) 장치들(예를 들면, TV, VCR, DVD 재생기, CD 재생기 등)과 같은 장치들의 사용자 제어를 위한 일반적인 사용자 인터페이스(user interface)들은 사용자 태스크들이 장치들에서 나타나지 않도록 한다. 대신, 장치 기능(function)들의 집합이 사용자에게 주어지며 사용자는 태스크을 수행하기 위해 이들 장치 기능들의 조합들을 선택한다. 예를 들면, 비디오 테이프를 관람하는 것은 사용자가 입력(예를 들면, 테이프)을 선택하고, 테이프를 되감고 VCR상의 재생 버튼을 누르기를 요구된다. 결국, 사용자는 사용자가 위 조작들을 자동화하기 위하여 '비디오 테이프'를 '관람'하기 원한다라고 단순히 지정할 수 없다. 사용자들은 실행되어야 할 원하는 태스크들(예를 들면, '비디오 테이프'를 '관람')을 표현할 수 없으며, 오히려 사용자들은 원하는 기능들(예를 들면, 입력을 선택, 테이프 되감기 및 VCR상의 재생 버튼 누름)을 실행하기 위하여 장치들을 직접 제어해야만 한다.
이는 태스크들이 어플리케이션(application)의 개념으로 매핑(mapping)되는 종래의 소프트웨어 체계와 유사하다. 예를 들면, 만약 사용자가 편지 쓰기를 원한다면, 사용자는 적절한 기능성을 가진 워드 프로세서(word processor)를 작동시킨다. 그러나, 잘 알려진 명칭으로 매핑되는 잘 알려진 기능성은 별문제로 하고, 이는 사용자에게 거의 나타내지 않는다. 다른 대안은 사용자에게 선택사항(option)들의 집합을 제공하기 위하여 메뉴(menu) 형식으로 존재하였다. 몇 개의 시스템들 은 잘 알려진 태스크들이 메뉴 선택사항들(예를 들면, 문서에 대해 철자 검사(spell-check) 또는 VCR상의 순간 녹음)에서 열거되도록 허용한다. 그러나, 이러한 시스템들은 장치 기능들을 사용자에게 제공하기만 한다.
사용자가 태스크를 그래프식(예를 들면, 원하는 태스크을 수행하기 위하여 그려진 장치들의 집합을 함께 연결하기 위하여 선들을 이용하는 것)으로 표현하는 것을 허용하는 또 다른 대안이 존재하였다. 이 접근법의 문제점은 장치들을 이용함의 복잡성을 사용자로부터 감추지 않는다는 것이다. 그것은 기능 선택들을 사용자에게 단순히 그래프식으로 나타내며 사용자가 태스크을 수행하기 위해 필요한 연결들을 지정하도록 요구한다.
또 다른 대안은 장치들 및 특별한 환경에서 이용 가능한 서비스들을 찾아내는 시스템이었다. 시스템은 결집될 수 있는 서비스들을 확인하고 최종적으로 가능한 서비스 조합들을 사용자에게 제안한다. 결집된 서비스 조합들을 사용자에게 제안하면서 시스템은 모든 사용자의 선호들의 집합 및 사용자에 대한 실행 이력에 기초하여 서비스들에 점수를 매기고 사용자에게 최고 점수를 가진 서비스를 표시한다. 그러나, 이러한 시스템에서 사용자의 컨텍스트를 고려함 없이 모든 사용자의 선호들의 집합과 사용자에 대한 실행 이력에 기초하여 서비스들이 평가되기 때문에 그 특정 순간에서의 사용자 의도들을 반영하지 않는 방법으로 서비스들에 점수를 매기는 결과가 된다.
본 발명이 이루고자하는 기술적 과제는 장치들이 연결된 네트웍에서 사용자 의 컨텍트 정보에 기초하여 사용자에게 적절할 태스크를 제안할 수 있는 사용자의 컨텍스트를 결정하고 태스크들을 제안하기 위한 컨텍스츄얼 태스크 제안 시스템 및 방법을 제공하는 것이다.
본 발명은 위 단점들을 역점을 두어 다룬다. 일 실시예에서 본 발명은 장치들의 네트웍에서 사용자가 실행할 가장 바람직한 태스크를 제안하기 위하여 사용자의 컨텍스트를 확인하는 시스템 및 방법을 제공한다. 사용자의 컨텍스트는 사용자의 위치, 사용자가 흥미를 갖고 있는 컨텐트, 사용자가 접근하도록 허용된 컨텐트, 사용자에 의해 사용되고 있는 장치들 및 사용자가 접근하도록 허용된 장치들을 포함한다. 이들 컨텍스트를 이용하여 시스템은 그 컨텍스트에 대해 적절한 태스크들을 사용자에게 제안한다.
컨텍스트의 결정과 태스크들의 제안은 어떤 주어진 시간에 사용자에게 이용 가능한 컨텐트와 장치들에 대한 정보를 추적함으로써 수행된다. 태스크들의 제안은 소정 정책들에 따라 수행된다. 더욱이, 사용자는 정책에서의 규칙들을 변경함으로써 시스템의 동작을 제어할 수 있다.
태스크들은 사용자가 쉽게 이해할 수 있는 단순한 문장들의 형식으로 되어있다. 만약, 소정 컨텍스트에 기초하여, 하나 이상의 태스크가 가능하면, 시스템은 우선순위화 모듈(Prioritization module)에 의해 태스크에 할당된 우선순위(priority)를 통해 확인된 사용자에게 가장 관련되는 태스크를 제안한다.
시스템을 시간, 장치 정보, 컨텐트 정보, 위치 정보 및 사용자에 의해 수행 되는 액션(action)들을 서로 관련시킴으로써 컨텍스트를 수립한다. 이 컨텍스트 정보는 그 다음에 사용자에게 관련되는 태스크 제안들로 귀결되는 태스크들을 찾고 사용자에게 제안하는데 이용된다. 종래 기술은 장치/태스크 속성들에 기초하여 단순히 점수 매기기만을 수행하며 위치에 기초하여 태스크들을 제안하지 않는다.
이들과 본 발명의 다른 특징들, 양상들 및 이점들은 아래의 상세한 설명, 첨부된 청구항 및 도면들을 참조하여 이해될 수 있을 것이다.
도 1은 본 발명의 일 실시예에 따른 사용자의 컨텍스트을 결정하고 태스크들을 제안하기 위한 컨텍스츄얼 태스크 제안 및 기법을 구현하는, 홈 네트워크와 같은, 네트웍(10)의 기능적 체계의 예를 보여준다. 네트웍(10)은 장치들(20)(예를 들면, 컨텐트를 포함) 및 장치들(30)(예를 들면, 클라이언트(client) GUI를 사용자에게 표시하기 위한 시각적 인터페이스(visual interface)를 포함하는 클라이언트 장치) 및 네트웍(10)을 다른 네트웍(50)(예를 들면, 다른 홈 네트웍, 인터넷 등)으로 연결하는 선택적인 인터페이스(40)를 포함한다. 비록 장치들(20 및 30)은 따로따로 보여지고 있지만, 하나의 물리적 장치는 하나 이상의 클라이언트 장치들 및/또는 하나 이상의 서버 장치들을 포함할 수 있다.
장치들(20 및 30)은 각각 통신을 위한 HTTP 프로토콜(protocol) 및 그들 사이의 프로토콜을 구현할 수 있다. 비록 여기에 설명된 예에서 HTTP 프로토콜이 네트웍(10)에 의해 이용되지만, 당해 기술분야에서 숙련된 사람들은 본 발명이 클라이언트-서버 모델(client-server model)을 이용하는 다른 네트웍 통신 프로토콜들에 유용하다는 것을 인식할 것이다. 예시 장치(20)는 VCR, DVD, 컴퓨터 등이 될 수 있다. 더욱이, 예시 클라이언트 장치(30)는 TV, 컴퓨터 등이 될 수 있다.
네트웍(10)은 일 양상에서 사용자가 실행할 가장 바람직한 태스크를 제안하기 위하여 사용자의 컨텍스트를 확인하는 적어도 하나의 상호작용 제어기(InterPlay Controller : IC)(60)을 더 포함한다. 태스크는 장치들을 이용하여 수행될 수 있는 행동들의 표현에 기초하는 의사-문장(pseudo-sentence)을 포함한다. 예를 들면, 만약 한 사람이 TV와 DVD 재생기를 가지고 있다면 "TV에 영화를 재생"은 하나의 태스크이다. 사용자의 컨텍스트는 예를 들면 사용자의 위치, 사용자가 흥미를 갖는 있는 컨텐트 및 사용자에 의해 사용되고 있는 장치들을 포함한다. 이 컨텍스트를 이용하여, 시스템은 그 컨텍스트에 적절한 태스크들을 사용자에게 제안한다.
컨텍스트의 결정과 태스크들의 제안은 어떤 주어진 시간에 사용자에게 이용 가능한 컨텐트 및 장치들에 대한 정보를 추적함으로써 수행된다. 태스크들의 제안은 소정 정책들에 따라 수행된다. 더욱이, 사용자는 정책에서의 규칙들을 변경함으로써 시스템의 동작을 제어할 수 있다. 만약, 소정 컨텍스트에 기초하여, 하나 이상의 태스크가 가능하면, 시스템은 사용자에게 가장 관련되는 태스크를 제안한다. 시스템은 시간, 장치 정보, 컨텐트 정보, 위치 정보 및 사용자에 의해 수행된 행위들을 서로 관련시킴으로써 컨텍스트을 수립한다. 이 컨텍스트 정보는 그 다음에 사용자에게 관련되는 태스크 제안으로 귀착되는 태스크들을 검색하고 사용자에게 제안하기 위하여 이용된다. 선행 기술은 장치/태스크 속성들에 기초하여 단순한 점수 매기기만을 수행하며 사용자의 컨텍스트에 기초하여 태스크들을 제안하지 않는다.
아래에서 더욱 상세히 설명하듯이, 일례에서, 상호작용 제어기(60)은 (1) 사용자의 위치, 사용자가 사용하고 있는 장치, 사용자가 이용하기를 원하는 컨텐트 및 사용자가 이용하도록 허용된 컨텐트 및 장치들과 같은 컨텍스트 정보를 결정함으로써, (2) 선택적으로, 시스템의 동작을 제어하기 위한 정책 규칙들을 제공함으로써 및 (3) 현재의 컨텍스트에 걸맞는 태스크를 제안하기 위하여 사용자의 컨텍스트 정보를 이용함으로써 사용자에게 태스크들을 제안한다.
상호작용 제어기(60)의 일 실시예에서, 사용자의 위치는 사용자가 이용하고 있는 네트웍에서의 장치의 위치를 이용하여 간접적으로 결정된다. 일반적으로, 사용자는 클라이언트 프로그램(예를 들면, 클라이언트 장치(20) 또는 서버 장치(30))을 상호작용 제어기(60)와 상호작용하기 위하여 이용한다. 컨텍스트 검색기(컨텍스트 에이전트(agent))(62)를 이용하여, 상호작용 제어기(60)은 장치로부터 또는 위치를 제공할 수 없는 장치들에 대해서는 설정 파일로부터 각각의 장치(예를 들면, 장치(20 또는 30))의 위치를 획득한다.
장치들/사용자의 클라이언트 프로그램을 실행하는 장치에 대한 설정 파일들은 또한 "쿠키(cookie)"라고 불리는 추가적인 정보의 일부를 포함한다. 사용자가 클라이언트 프로그램을 시작할 때, 클라이언트 프로그램은 이 쿠키를 상호작용 제어기(60)으로 전송한다. 상호작용 제어기(60)은 클라이언트 프로그램에 의해 제공된 쿠키와 장치 설정 파일들에서의 쿠키를 비교한다. 쿠키가 클라이언트 쿠키와 매치(match)되는 장치의 위치는 사용자의 위치와 동일한 것으로 간주된다. 최종적 으로, 컨텐트 메타-데이터(meta-data)는 컨텐트의 위치를 포함한다. 컨텐트에 대한 위치는 컨텐트을 생성 또는 저장하는 장치의 위치로부터 결정된다. 위치 정보는 또한 장치상의 GPS와 같은 센서들로부터 얻어질 수 있다. 비록 홈 네트워크에서 몇몇 소비자 가전제품들(comsumer electronics : CE)은 위치 센서들을 구비하지 않을 수도 있으며, 본 발명은 이러한 위치 센서들의 이용을 예측한다.
컨텐트 메타-데이터는 컨텐트에 대한 정보를 포함한다. 예를 들면, 음악 파일은 트랙 이름(track name), 가수, 앨범, 트랙 번호, MIME-유형 등을 포함한다. 본 발명에 있어서, 추가적인 메타-데이터가 이용된다. 예를 들면, 위치 정보는 컨텐트 메타-데이터에 추가된다. 이 데이터의 일부는 컨텐트의 위치와 사용자의 위치를 서로 관련시키는 것을 허용한다.
도 2는 네트웍에서 클라이언트 프로그램들(예를 들면, 클라이언트 1, 클라이언트 2, ..., 클라이언트 N)에 태스크 제안들을 제공하는 상호작용 제어기(60)의 기능 블록도를 보여준다. 상호작용 제어기(60)은 컨텍스츄얼 태스크 제안기(Contextual Task Recommender : CTR)(65) 및 태스크 생성 모듈(Task Generation module)(70)을 포함한다. 컨텍스츄얼 태스크 제안기(65)는 새로운 장치 또는 새로운 컨텐트가 네트웍에서 발견되어 질 때마다 각각 새로운 장치 이벤트(New Device Event) 또는 새로운 컨텐트 이벤트(New Content Event)를 통해 트리거(trigger)된다. 컨텍스츄얼 태스크 제안기를 트리거할 수 있는 일반적인 사용자 액션들은 예들 들면 TV를 켬, 장치에 오디오 CD를 삽입 등을 포함한다. 우선순위화 모듈(63)은 CTR(65)에 태스크에 할당된 우선순위를 제공한다.
정책 필터(Policy Filter)(68)은 시스템이 특정 종류의 장치 및 컨텐트에만 반응하도록 허용한다. 예를 들면, 새로운 컨텐트가 시스템에 추가될 때마다, CTR(65)는 이벤트를 수신한다. 정책은 사용자가 mp3 파일들과 같은 특정 유형들의 파일들에 단지 흥미가 있다고 지정하도록 한다. 정책 파일에 이것을 지정함으로써, 정책 필터(68)은 mp3들 이외의 모든 컨텐트를 무시한다. 정책 필터(68)가 mp3 파일들을 수신할 때, 정책 필터(68)는 연관된 태스크를 결정하고 그것을 사용자에게 제안하는 순환 과정을 시작한다.
도 3a는 컨텍스츄얼 태스크 제안기(65)의 예에 의해 수행되는 일반적인 단계들의 흐름도를 보여준다. 컨텍스츄얼 태스크 제안기(65)는 새로운 장치 이벤트 또는 새로운 컨텐트 이벤트가 발생(단계 100)할 때 트리거된다. 만약 새로운 장치가 발견되면(단계 102), 컨텍스츄얼 태스크 제안기(65)는 장치의 신원확인(identification) 정보(예들 들면, 명칭), 위치 및 장치가 이용가능하게 된 시간을 나타내는 타임-스탬프(time-stamp)를 기록한다(단계 106). 만약 새로운 컨텐트가 발견된다면(단계 106), 이때 컨텍스츄얼 태스크 제안기(65)는 컨텐트의 MIME-유형(즉, 파일의 파일 형식을 기술하는 메타-데이터의 형식), 컨텐트 위치, 컨텐트 신원확인(컨텐트-id) 및 타임-스탬프를 기록한다(단계 108). 장치 및 컨텐트 정보는 두 개의 독립된 표들(72 및 74) 각각에 저장된다(도 2).
둘 중 어느 한 이벤트(즉, 새로운 장치 또는 새로운 컨텐트)에 있어서, 적절한 "태스크 제안"이 사용자에게 제공되기 전에, 컨텍스츄얼 태스크 제안기(65)는 장치 이름과 컨텐트 정보가 다양한 파라미터(parameter)들(예를 들면, 정책 규칙들)에 대해 검사되는 정책 검사들을 순환하는 과정을 수행한다(단계 110). 일 실시예에서, 정책 규칙은 장치 정보 또는 컨텐트 정보 또는 양쪽 모두의 특정 일부를 검사하는 것에 대응한다. 예를 들면, 디폴트(default) 규칙은 장치 위치 또는 컨텐트 위치가 사용자의 위치와 동일한지를 결정하기 위한 검사와 관련한다. 규칙은 컨텍스츄얼 태스크 제안기(65)에 의해 다루어져야 하는 컨텐트들의 MIME-유형들을 지정하도록 작성될 수 있다.
컨텍스츄얼 태스크 제안기(65)는 다음의 예시 트리거 조건들 중의 적어도 하나가 만족되는 때에 태스크를 검색하는 것을 시도한다. (1) 새로운 장치가 이용가능하게 되다, (2) 새로운 컨텐트가 이용가능하게 되다. 조건들 (1)과 (2)는 새로운 태스크가 이용가능하도록 한다. 조건 (2)는 만약 새로운 MIME-유형에 대응하는 컨텐트가 추가되고 그 컨텐트를 해석할 수 있는 적어도 하나의 장치가 있다면 새로운 태스크의 추가로 귀결될 수 있다.
도 3b에서의 예시 흐름도를 참조하면, 새로운 장치가 이용가능하게 되는 첫번째 경우에, 장치 정보(예를 들면, 장치 이름, 위치 및 타임-스탬프)가 저장(단계 200)되면, 단계 202에서 컨텍스츄얼 태스크 제안기(65)는 우선 어떤 새로운 컨텐트가 최근에(예를 들면, 1분 전 과거에) 검출되었는지를 검사한다. 만약 컨텍스츄얼 태스크 제안기(65)가 이 기준에 걸맞는 컨텐트를 발견한다면, 컨텍스츄얼 태스크 제안기(65)는 새로이 발견된 장치 및 컨텐트의 MIME-유형을 이용하는 태스크를 검색하려고 시도한다(단계 204).
만약 매칭(matching)되는 태스크가 발견되지 않는다면, 컨텍스츄얼 태스크 제안기(65)는 질의 기준(query cirteria)을 완화하며(단계 206) 새로이 발견된 장치를 이용하는 태스크를 검색하려고 시도한다(단계 208). 만약 매칭되는 태스크가 검색되지 않는다면, 컨텍스츄얼 태스크 제안기(65)는 휴면 상태에 있게 되며 트리거 조건을 기다린다(단계 210). 그러나, 만약 매칭되는 태스크가 단계 204 또는 단계 208에서 검색된다면, 컨텍스츄얼 태스크 제안기(65)는 다음 단계로 진행하며 태스크를 제안하기 위하여 적절한 사용자 (클라이언트 프로그램)을 검색하려고 시도한다(단계 212). 위 단계 202에서, 만약 새로운 컨텐트가 검색되지 않는다면, 프로세스(process)는 단계 206으로 진행한다.
도 3c에서의 예시 흐름도를 참조하면, 새로운 컨텐트가 이용 가능하게 되는 두 번째 경우에 있어서, 위 첫 번째 경우와 유사하며, 컨텐트 정보(MIME-유형, 위치, 컨텐트-id 및 타임-스탬프)를 저장한 후(단계 220), 단계 222에서 컨텍스츄얼 태스크 제안기(65)는 어떤 새로운 장치가 최근의 과거(예를 들면, 1분 전의 과거)에서 발견되었는지를 알아보기 위해 검사한다. 만약 이러한 장치가 발견된다면, 컨텍스츄얼 태스크 제안기(65)는 장치와 MIME-유형에 걸맞는 태스크를 검색하기 위해 이용가능한 태스크들의 목록을 질의한다.(단계 224).
만약 이들 질의들이 실패하면 검색 기준은 완화되며(단계 226) 컨텍스츄얼 태스크 제안기(65)는 단지 MIME_유형을 이용하여 이용가능한 태스크들의 목록을 질의한다(단계(228). 단계 224 또는 단계 228에서, 만약 매칭되는 것이 검색된다면 컨텍스츄얼 태스크 제안기(CTR)는 태스크를 제안하기 위하여 적절한 사용자 클라이언트 프로그램을 검색하려고 시도한다(즉, CTR은 태스크가 연관된 모든 능동적인 사용자들을 확인하며 그것을 그들에게 제안한다)(단계 230). 만약 매칭되는 것이 검색되지 않는다면, 컨텍스츄얼 태스크 제안기(65)는 휴면 상태에 있게 되며 다음의 트리거 조건(이벤트)를 기다린다(단계 232). 위 단계 222에서, 만약 새로운 장치가 검색된다면, 프로세스는 단계 226으로 진행한다.
태스크 생성 모듈(70)(도 2)는 태스크들을 생성하며 컨텍스츄얼 태스크 제안기(65)와 독립적으로 동작한다. 태스크들은 새로운 장치 또는 컨텐트가 검출되는 때 생성된다. 컨텍스츄얼 태스크 제안기(65) 및 태스크 생성 모듈(70)은 모두 새로운 장치 및 새로운 컨텐트의 이용가능성 이벤트들을 감시한다.
만약 컨텍스츄얼 태스크 제안기(65)가 이벤트(즉, 새로운 장치 또는 새로운 컨텐트 이벤트)를 태스크 생성 모듈(70)에 앞서서 수신한다면, 컨텍스츄얼 태스크 제안기(65)는 태스크가 생성되기 전에 질의한다(이는 아래의 세 번째 경우로 처리되며 컨텍스츄얼 태스크 제안기(65)는 새로운 태스크가 이용가능하다는 이벤트로 트리거된다).
CTR(65)은 새로운 컨텐트/장치 이벤트를 직접 수신하며 새로운 태스크 이벤트를 간접적으로 처리한다. 태스크는 태스크 생성 모듈(70)이 새로운 장치/새로운 컨텐트 이벤트를 수신할 때 생성된다. CTR(65)의 라이프사이클(lifecycle)은 이들 이벤트들에 의해 트리거된다. CTR(65)이 이들 이벤트들을 수신하며 태스크 생성 모듈(70)이 바로 이 동일한 이벤트들로부터의 태스크들을 생성하는 것을 마치기 전에 태스크 생성 모듈(70)에게 질의하는 상황이 가능하다. 이 경우에, CTR(65)에 의한 질의는 실패할 것이다. 이 상황은 CTR(65)이 새로운 태스크들이 이용가능하 게 되는 때에 CTR(65)가 제안을 위한 태스크들을 검색하도록 시도하는 세 번째 트리거 조건에 의해 처리된다.
새로운 태스크가 이용가능하게 되며, 태스크가 생성되기 바로 전에 컨텍스츄얼 태스크 제안기(65)가 이용가능한 태스크들의 목록을 질의하는, 세 번째 경우에 있어서, 위 첫 번째 및 두 번째 경우들에 대응하는 루틴(routine)들은 새로운 태스크의 생성을 야기시키는 어떤 이벤트(즉, 새로운 장치가 이용 가능 또는 새로운 컨텐트가 이용 가능)에 기초하여 실행된다.
도 3d에서의 예시 흐름도를 참조하면, 일단 매칭되는 태스크가 검색되면(단계 240), 컨텍스츄얼 태스크 제안기(65)는 매칭되는 태스크를 구성하는 장치들과 동일한 위치들 또는 장치 또는 양쪽 모두의 위치와 동일한 위치를 가진 사용자들(클라이언트 프로그램들)을 검색하려고 시도한다(단계 242). 만약 이러한 클라이언트 프로그램이 검색된다면, 태스크는 이벤트로 패키지(package)되며 클라이언트 프로그램에 보내진다(단계 244). 이벤트는 또한 컨텐트-id를 포함할 수 있으며, 컨텐트-id는 시스템에서 각각의 컨텐트 아이템(item)에 할당된 유일한 값이다.
일 실시예에서, 이벤트를 수신하는 클라이언트 프로그램은 태스크를 구성하는 의사-문장pseudo-sentence)(예를 들면, "TV에 영화를 재생"; 문장을 구성함에 있어서 컨텐트 정보를 이용하는 예는 "TV에 반지의 제왕을 재생")를 포함한다. 만약 컨텐트-id가 이벤트의 일부분이라면, 클라이언트 프로그램은 컨텐트 관련 정보를 수신하며 문장에 그것을 포함한다. 문장은 자연어로 되어 있으며 사용자에 의해 쉽게 이해될 수 있다. 이 문장은 예를 들면, 수 초 동안 화면상에 머무르는 팝 업 윈도우(pop-up window)를 이용하여 사용자에게 표시된다. 사용자는 팝업 윈도우에서 "OK" 버튼을 선택함으로써 그 태스크를 실행할 수 있다.
컨텍스츄얼 태스크 제안기(65)는 또한 사용자의 현재 상태를 검사하고 행위의 이용가능한 코스(course)들을 클라이언트 프로그램에게 제안한다. 예를 들면, 만약 사용자가 태스크를 구성하는 과정에 있다면, 컨텍스츄얼 태스크 제안기(65)는 이 정보를 전송되는 이벤트에 포함하며 클라이언트 프로그램은 사용자가 사용자의 현재 행위를 마칠 때까지 사용자에 대한 태스크의 표시를 지연시키기 위하여 이 정보를 이용한다. 컨텍스츄얼 태스크 제안기(65)가 하나 이상의 매칭되는 태스크를 검색한 때에, 사용자에게 가장 관련되는 가장 높은 순위의 태스크를 사용자에게 제안한다.
선택적으로, 컨텍스츄얼 이벤트를 수신하는 때에, 클라이언트 프로그램은 사용자에게 알려진 모든 태스크들의 목록 중에서 제안된 태스크의 우선순위를 갱신하는 것, 직접 태스크를 실행하는 것 등 같은 다양한 행위를 취할 수 있다.
도 4는 태스크 생성 모듈(70)에 의해 수행되는 단계들의 예시 흐름도를 보여준다. 일례에서, 태스크 생성 모듈(70)은 홈태스크모델(HomeTaskModel : HTM)로서 구현된다. 태스크의 생성에 관련된 흐름도는 아래에서 설명된다.
장치가 온라인(online) 상태가 될 때, 장치는 장치의 설명과 태스크 설명을 컨텐트 에이전트(Context Agent : CA) 모듈(62)로 제공한다. CA(62)는 장치 설명 및 태스크 설명에 대한 포인터(pointer)를 이벤트로 패키지한다. CA(62)는 또한 장치의 이름 및 위치를 이벤트에 동봉하며 이들 이벤트들을 HTM(70)에 전송하여 HTM(70)에 의해 이들 이벤트가 수신된다(단계 260). 장치 설명은 장치 특성들(예를 들면, 사용자에게 표시될 이름), 장치 기능들(예를 들면, 장치가 오디오/비디오를 표현할 수 있는지 여부), 장치 속성들(예를 들면, 장치의 화면 크기) 및 장치 기초(grounding) 정보(각각의 기능들을 불러 일으키는 법)을 포함한다. 태스크 설명은 특정의 태스크을 달성하기 위해 요구되는 기능들에 대해 HTM(70)에 알리는 정보를 포함한다. 예를 들면, 태스크 설명은 "영화 재생"이 오디오 표현 능력들과 비디오 표현 능력들을 갖춘 장치를 요구한다고 지정한다. HTM(70)이 이들 이벤트들을 수신할 때, HTM(70)은 태스크 설명으로부터 정보를 추출하고 태스크에 의해 요구되는 기능을 제공하는 장치들을 검색하려고 시도한다(단계 262). HTM(70)은 그 다음에 장치의 각각의 유일한 조합에 대한 태스크을 생성한다(단계 264). 태스크는 주어, 동사 및 태스크를 실현하는 장치의 정보를 포함한다. 장치 설명은 또한 장치가 다룰 수 있는 MIME-유형의 목록을 포함한다. HTM(70)은 컨텐트 관리자(Content Manager : CM) 모듈(66)(도 2)로부터 이용가능한 MIME-유형들의 목록을 수신한다. HTM(70)은 태스크에서 장치에 의해 지원되는 MIME-유형들이 시스템에서 이용가능한 지를 알아보기 위해 조사한다(단계 266). 만약 장치에 의해 지원되는 최소 하나의 MIME-유형들이 있고 시스템에서 이용가능하다면, 태스크는 클라이언트에게 보내지며(단계 268), 만약 그렇지 않다면 시스템은 다음 이벤트를 기다린다(단계 270). 시스템은 컨텐트 관리자(Content Manager)로부터 이용가능한 MIME-유형들에 대해 기억한다. 일례에서, 시스템에서 이용가능한 MIME-유형들의 목록은 컨텐트 관리자(CM)로부터 수신된 마임타입갱신(MimeTypeUpdate) 이벤트들을 이용하여 만들어진다. HTM(70)은 이들 새로운 태스크 이벤트들을 유저 태스크 관리자(User Task Manager : UTM)(67)(도 2)로 보내며, 유저 태스크 관리자는 새로운 태스크 이벤트들을 패키지하여 클라이언트로 보낸다. 컨텐트 또는 장치들이 이용가능하지 않게 될 때, 태스크들은 이용가능하지 않게 된다. HTM(70)은 더 이상 완수할수 없으며 이벤트들로서 패키지되며 이용 가능하지 않은 태스크로서 클라이언트에게 보내지는 태스크들에 대한 정보를 추적한다.
따라서, 본 발명은 사용자가 수행할 가장 바람직한 태스크를 제안하기 위하여 장치들의 네트웍에서 사용자의 컨텍스트를 확인하는 시스템 및 방법을 제공한다. 사용자의 컨텍스트는 사용자의 위치, 사용자가 흥미를 갖는 컨텐트, 사용자에 의해 사용되고 있는 장치들 및 선택적으로 사용자가 이용하도록 허용된 컨텐트 및 장치들을 포함한다. 이 컨텍스트를 이용하여, 시스템은 그 컨텍스트에 적절한 태스크들을 사용자에게 제안한다. 컨텍스트의 결정과 태스크들의 제안은 모든 주어진 시간에 사용자에게 이용가능한 컨텐트 및 장치들에 대한 정보를 추적함으로써 수행된다.
태스크들의 제안은 특정 정책에 따라 수행된다. 예를 들면, 사용자는 정책에서의 규칙들을 변경함으로써 시스템의 동작을 제어할 수 있다. 태스크들은 사용자가 쉽게 이해할 수 있는 단순한 문장들의 형태로 되어 있다. 만약, 어떤 컨텍스트에 기초하여, 하나 이상의 태스크가 가능하다면, 시스템은 사용자에게 가장 관련되는 태스크를 제안한다.
본 발명은 다른 버전들도 가능하지만 특정 바람직한 버전들에 관하여 상당히 상세히 기술되었다. 따라서, 첨부된 청구항들의 사상 및 범위는 여기에 포함된 바람직한 버전들의 상세한 설명에 한정되어서는 안 된다.
본 발명에 따른 사용자의 컨텍스트를 결정하고 태스크들을 제안하기 위한 컨텍스츄얼 태스크 제안 시스템 및 방법에 의하면 사용자가 흥미를 갖고 수행하고자 하는 태스크를 사용자의 컨텍스트와 장치들로부터의 장치 설명과 태스크 설명 및 장치들을 제어할 수 있는 설정 파일 또는 정책들에 기초하여 사용자에게 제안할 수 있다.
Claims (32)
- 네트웍(network)에 있는 복수의 전자 장치들 중에 하나 이상에 의해 수행되는 사용자 태스크(task)들을 제안하는 방법에 있어서,상기 네트웍에서 사용자의 컨텍스트(context)를 결정하는 단계;태스크들을 생성하는 단계; 및상기 사용자에게 각각의 태스크가 상기 사용자의 컨텍스트에 적절한 하나 이상의 태스크들을 제안하는 단계를 포함하는 것을 특징으로 하는 태스크 제안 방법.
- 제 1항에 있어서, 상기 사용자의 컨텍스트를 결정하는 단계는,상기 사용자의 위치, 상기 사용자가 흥미를 갖고 있는 컨텐트 및 상기 사용자에 의해 이용되고 있는 상기 장치들 중 하나 이상을 결정하는 단계를 포함하는 것을 특징으로 하는 태스크 제안 방법.
- 제 1항에 있어서,상기 사용자에게 이용 가능한 컨텐트 및 장치들에 관한 정보를 추적하는 단계를 더 포함하며, 상기 사용자의 컨텍스트를 결정하는 단계는 상기 사용자의 컨텍스트를 결정하기 위하여 상기 정보를 이용하는 단계를 포함하는 것을 특징으로 하는 태스크 제안 방법.
- 제 1항에 있어서,상기 사용자에게 이용 가능한 컨텐트 및 장치들에 관한 정보를 추적하는 단계를 더 포함하는 것을 특징으로 하는 태스크 제안 방법.
- 제 1항에 있어서, 상기 하나 이상의 태스크들을 제안하는 단계는,소정 정책(policy)들에 따라 하나 이상의 태스크들을 제안하는 단계를 더 포함하는 것을 특징으로 하는 태스크 제안 방법.
- 제 5항에 있어서,상기 정책은 네트웍에서의 하나 이상의 장치들의 동작에 영향을 주는 규칙(rule)들을 포함하는 것을 특징으로 하는 태스크 제안 방법.
- 제 1항에 있어서,각각의 태스크는 상기 사용자에 의해 쉽게 이해될 수 있는 단순한 문장을 포함하는 것을 특징으로 하는 태스크 제안 방법.
- 제 1항에 있어서, 상기 태스크들을 제안하는 단계는,소정 컨텍스트에 기초하여, 하나 이상의 태스크가 가능하다면, 가장 높은 우선순위(priority)를 가진 태스크를 상기 사용자에게 제안하는 단계를 더 포함하는 것을 특징으로 하는 태스크 제안 방법.
- 제 1항에 있어서, 상기 사용자의 컨텍스트를 결정하는 단계는,시간, 장치 정보, 컨텐트 정보, 위치 정보 및 사용자에 의해 수행되는 액션(action)들 중 두 개 이상을 서로 관련시킴으로써 사용자 컨텍스츄얼(contextual) 정보를 구성하는 단계를 더 포함하는 것을 특징으로 하는 태스크 제안 방법.
- 제 9항에 있어서,상기 태스크들을 생성하는 단계는 태스크들을 생성/검색하기 위하여 상기 컨텍스츄얼 정보를 이용하는 단계를 더 포함하며, 상기 하나 이상의 태스크들을 제안하는 단계는 상기 사용자에게 관련되는 태스크들을 상기 사용자에게 제안하기 위하여 상기 컨텍스츄얼 정보를 이용하는 단계를 더 포함하는 것을 특징으로 하는 태스크 제안 방법.
- 네트웍에 있는 복수의 전자 장치들 중에 하나 이상에 의해 수행되는 사용자 태스크(task)들을 제안하는 시스템에 있어서,상기 네트웍에서 사용자의 컨텍스트를 결정하는 컨텍스트 검색기; 및각각의 태스크가 상기 사용자의 컨텍스트에 적절한 하나 이상의 태스크들을 상기 사용자에게 제안하는 컨텍스츄얼 태스크 제안기를 포함하는 것을 특징으로 하는 태스크 제안 시스템.
- 제 11항에 있어서, 상기 컨텍스트 검색기는,상기 사용자의 위치, 상기 사용자가 흥미를 갖고 있는 컨텐트 및 상기 사용자에 의해 이용되고 있는 장치들 중 하나 이상을 상기 사용자의 컨텍스트로서 더 결정하는 것을 특징으로 하는 태스크 제안 시스템.
- 제 11항에 있어서,상기 사용자에게 이용가능한 컨텐트 및 장치들에 관한 정보를 추적하는 수단을 더 포함하며, 상기 컨텍스트 검색기는 상기 사용자의 컨텍스트를 결정하기 위하여 상기 정보를 이용하는 것을 특징으로 하는 태스크 제안 시스템.
- 제 11항에 있어서,상기 사용자에게 이용가능한 컨텐트 및 장치들에 관한 정보를 추적하는 수단을 더 포함하며, 상기 태스크 생성기는 상기 태스크들을 생성하기 위하여 상기 정보를 이용하는 것을 특징으로 하는 태스크 제안 시스템.
- 제 11항에 있어서,상기 사용자에게 이용가능한 컨텐트 및 장치들에 관한 정보를 추적하는 수단을 더 포함하며, 상기 컨텍스츄얼 태스크 제안기는 태스크들을 제안하기 위하여 상기 정보를 이용하는 것을 특징으로 하는 태스크 제안 시스템.
- 제 11항에 있어서, 상기 컨텍스츄얼 태스크 제안기는,소정 정책에 따라 하나 이상의 태스크들을 제안하는 것을 특징으로 하는 태스크 제안 시스템.
- 제 16항에 있어서,상기 정책은 네트웍에서의 하나 이상의 장치들의 동작에 영향을 주는 규칙들을 포함하는 것을 특징으로 하는 태스크 제안 시스템.
- 제 11항에 있어서,상기 각각의 태스크는 사용자에 의해 쉽게 이해될 수 있는 단순한 문장을 포함하는 것을 특징으로 하는 태스크 제안 시스템.
- 제 11항에 있어서,소정 컨텍스트에 기초하여, 하나 이상의 태스크가 가능하다면, 상기 컨텍스츄얼 태스크 제안기는 가장 높은 우선순위를 가진 태스크를 상기 사용자에게 제안하는 것을 특징으로 하는 태스크 제안 시스템.
- 제 11항에 있어서, 상기 컨텍스트 검색기는,시간, 장치 정보, 컨텐트 정보, 위치 정보 및 사용자에 의해 수행되는 액션들 중에 두 개 이상을 서로 관련시킴으로써 사용자 컨텍스츄얼 정보를 구성하는 것 을 특징으로 하는 태스크 제안 시스템.
- 제 20항에 있어서,태스크들을 검색하기 위하여 상기 컨텍스츄얼 정보를 이용하는 태스크 생성기를 더 포함하며, 상기 컨텍스츄얼 태스크 제안기는 상기 사용자에게 관련되는 태스크들을 상기 사용자에게 제안하기 위하여 상기 컨텍스츄얼 정보를 이용하는 것을 특징으로 하는 태스크 제안 시스템.
- 복수의 장치들; 및사용자에게 상기 장치들 중에 하나 이상에 의해 수행될 태스크들을 제안하는 제어기를 포함하며 상기 제어기는,네트웍에서 사용자의 컨텍스트를 결정하는 컨텍스트 검색기; 및각각의 태스크가 상기 사용자의 컨텍스트에 적절하도록 하나 이상의 태스크들을 사용자에게 제안하는 컨텍스츄얼 태스크 제안기를 포함하는 것을 특징으로 하는 네트웍.
- 제 22항에 있어서, 상기 컨텍스트 검색기는,상기 사용자의 위치, 상기 사용자가 흥미를 갖고 있는 컨텍스트 및 상기 사용자에 의해 사용되고 있는 장치들 중의 하나 이상을 상기 사용자의 컨텍스트로서 더 결정하는 것을 특징으로 하는 네트웍.
- 제 22항에 있어서,상기 사용자에게 이용가능한 컨텐트 및 장치들에 관한 정보를 추적하는 수단을 더 포함하며, 상기 컨텍스트 검색기는 상기 사용자의 컨텍스트를 결정하기 위하여 상기 정보를 이용하는 것을 특징으로 하는 네트웍.
- 제 22항에 있어서,상기 제어기는 상기 사용자에게 이용가능한 컨텐트 및 장치들에 관한 정보를 추적하는 수단을 더 포함하며, 상기 태스크 생성기는 상기 태스크들을 생성하기 위하여 상기 정보를 이용하는 것을 특징으로 하는 네트웍.
- 제 22항에 있어서,상기 제어기는 상기 사용자에게 이용가능한 컨텐트 및 장치들에 관한 정보를 추적하는 수단을 더 포함하며, 상기 컨텍스츄얼 태스크 제안기는 태스크들을 제안하기 위하여 상기 정보를 이용하는 것을 특징으로 하는 네트웍.
- 제 22항에 있어서,상기 컨텍스츄얼 태스크 제안기는 소정 정책들에 따라 하나 이상의 태스크들을 제안하는 것을 특징으로 하는 네트웍.
- 제 27항에 있어서,상기 정책은 상기 네트웍에서의 하나 이상의 장치들의 동작에 영향을 주는 규칙들을 포함하는 것을 특징으로 하는 네트웍.
- 제 22항에 있어서,각각의 태스크는 상기 사용자에 의해 쉽게 이해될 수 있는 단순한 문장을 포함하는 것을 특징으로 하는 네트웍.
- 제 22항에 있어서,소정 컨텍스트에 기초하여, 하나 이상의 태스크가 가능하다면, 상기 컨텍스츄얼 태스크 제안기는 가장 높은 우선순위를 가진 태스크를 상기 사용자에게 제안하는 것을 특징으로 하는 네트웍.
- 제 22항에 있어서, 상기 컨텍스트 검색기는,시간, 장치 정보, 컨텐트 정보, 위치 정보 및 상기 사용자에 의해 수행되는 액션들 중에 두 개 이상을 서로 관련시킴으로써 사용자 컨텍스츄얼 정보를 더 구성하는 것을 특징으로 하는 네트웍.
- 제 31항에 있어서,태스크들을 검색하기 위하여 상기 컨텍스츄얼 정보를 이용하는 태스크 생성 기를 더 포함하며, 상기 컨텍스츄얼 태스크 제안기는 상기 사용자에게 관련되는 태스크들을 상기 사용자에게 제안하기 위해 상기 컨텍스츄얼 정보를 이용하는 것을 특징으로 하는 네트웍.
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US64305105P | 2005-01-10 | 2005-01-10 | |
US60/643,051 | 2005-01-10 | ||
US11/200,546 US8069422B2 (en) | 2005-01-10 | 2005-08-09 | Contextual task recommendation system and method for determining user's context and suggesting tasks |
US11/200,546 | 2005-08-09 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20060092993A true KR20060092993A (ko) | 2006-08-23 |
KR100754194B1 KR100754194B1 (ko) | 2007-09-03 |
Family
ID=36147622
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020050112970A KR100754194B1 (ko) | 2005-01-10 | 2005-11-24 | 사용자의 컨텍스트를 결정하고 태스크들을 제안하기 위한컨텍스츄얼 태스크 제안 시스템 및 방법 |
Country Status (4)
Country | Link |
---|---|
US (1) | US8069422B2 (ko) |
EP (1) | EP1679831A3 (ko) |
JP (1) | JP2006228198A (ko) |
KR (1) | KR100754194B1 (ko) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100728021B1 (ko) * | 2005-01-07 | 2007-06-13 | 삼성전자주식회사 | 네트워크 내 장치들에 의해 이용가능하게 만들어진태스크들을 순위 매기는 방법 및 시스템 |
US8099313B2 (en) | 2004-09-22 | 2012-01-17 | Samsung Electronics Co., Ltd. | Method and system for the orchestration of tasks on consumer electronics |
US8185427B2 (en) | 2004-09-22 | 2012-05-22 | Samsung Electronics Co., Ltd. | Method and system for presenting user tasks for the control of electronic devices |
US8412554B2 (en) | 2004-09-24 | 2013-04-02 | Samsung Electronics Co., Ltd. | Method and system for describing consumer electronics using separate task and device descriptions |
KR101460613B1 (ko) * | 2007-05-15 | 2014-11-13 | 삼성전자주식회사 | 로컬 네트워크내의 장치의 사용자에게 적절한 정보를제공하는 방법 및 시스템 |
US8938465B2 (en) | 2008-09-10 | 2015-01-20 | Samsung Electronics Co., Ltd. | Method and system for utilizing packaged content sources to identify and provide information based on contextual information |
Families Citing this family (223)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8645137B2 (en) | 2000-03-16 | 2014-02-04 | Apple Inc. | Fast, language-independent method for user authentication by voice |
JP4164490B2 (ja) * | 2004-12-17 | 2008-10-15 | キヤノン株式会社 | 通信装置、プロファイル情報取得方法、及び、プログラム |
US8069422B2 (en) * | 2005-01-10 | 2011-11-29 | Samsung Electronics, Co., Ltd. | Contextual task recommendation system and method for determining user's context and suggesting tasks |
US8205013B2 (en) * | 2005-05-02 | 2012-06-19 | Samsung Electronics Co., Ltd. | Method and system for aggregating the control of middleware control points |
US8677377B2 (en) | 2005-09-08 | 2014-03-18 | Apple Inc. | Method and apparatus for building an intelligent automated assistant |
US8510453B2 (en) * | 2007-03-21 | 2013-08-13 | Samsung Electronics Co., Ltd. | Framework for correlating content on a local network with information on an external network |
US8028283B2 (en) * | 2006-03-20 | 2011-09-27 | Samsung Electronics Co., Ltd. | Method and system for automated invocation of device functionalities in a network |
US20070261055A1 (en) * | 2006-05-04 | 2007-11-08 | Samsung Electronics Co., Ltd. | Method and system for the generic and flexible access of available tasks through a user interface |
US9318108B2 (en) | 2010-01-18 | 2016-04-19 | Apple Inc. | Intelligent automated assistant |
US8935269B2 (en) * | 2006-12-04 | 2015-01-13 | Samsung Electronics Co., Ltd. | Method and apparatus for contextual search and query refinement on consumer electronics devices |
US8977255B2 (en) | 2007-04-03 | 2015-03-10 | Apple Inc. | Method and system for operating a multi-function portable electronic device using voice-activation |
US9292807B2 (en) | 2007-05-10 | 2016-03-22 | Microsoft Technology Licensing, Llc | Recommending actions based on context |
US10133372B2 (en) * | 2007-12-20 | 2018-11-20 | Nokia Technologies Oy | User device having sequential multimodal output user interface |
US10002189B2 (en) | 2007-12-20 | 2018-06-19 | Apple Inc. | Method and apparatus for searching using an active ontology |
US9330720B2 (en) | 2008-01-03 | 2016-05-03 | Apple Inc. | Methods and apparatus for altering audio output signals |
US8996376B2 (en) | 2008-04-05 | 2015-03-31 | Apple Inc. | Intelligent text-to-speech conversion |
US10496753B2 (en) | 2010-01-18 | 2019-12-03 | Apple Inc. | Automatically adapting user interfaces for hands-free interaction |
CN101282342B (zh) * | 2008-05-30 | 2012-05-23 | 腾讯科技(深圳)有限公司 | 一种网络内容拉取方法与系统 |
US20100030549A1 (en) | 2008-07-31 | 2010-02-04 | Lee Michael M | Mobile device having human language translation capability with positional feedback |
US20100077327A1 (en) * | 2008-09-22 | 2010-03-25 | Microsoft Corporation | Guidance across complex tasks |
US8676904B2 (en) | 2008-10-02 | 2014-03-18 | Apple Inc. | Electronic devices with voice command and contextual data processing capabilities |
WO2010067118A1 (en) | 2008-12-11 | 2010-06-17 | Novauris Technologies Limited | Speech recognition involving a mobile device |
DE102010064593A1 (de) * | 2009-05-21 | 2015-07-30 | Koh Young Technology Inc. | Formmessgerät und -verfahren |
US10241752B2 (en) | 2011-09-30 | 2019-03-26 | Apple Inc. | Interface for a virtual digital assistant |
US10706373B2 (en) | 2011-06-03 | 2020-07-07 | Apple Inc. | Performing actions associated with task items that represent tasks to perform |
US9858925B2 (en) | 2009-06-05 | 2018-01-02 | Apple Inc. | Using context information to facilitate processing of commands in a virtual assistant |
US10241644B2 (en) | 2011-06-03 | 2019-03-26 | Apple Inc. | Actionable reminder entries |
US10540976B2 (en) | 2009-06-05 | 2020-01-21 | Apple Inc. | Contextual voice commands |
US9431006B2 (en) | 2009-07-02 | 2016-08-30 | Apple Inc. | Methods and apparatuses for automatic speech recognition |
US10276170B2 (en) | 2010-01-18 | 2019-04-30 | Apple Inc. | Intelligent automated assistant |
US10705794B2 (en) | 2010-01-18 | 2020-07-07 | Apple Inc. | Automatically adapting user interfaces for hands-free interaction |
US10553209B2 (en) | 2010-01-18 | 2020-02-04 | Apple Inc. | Systems and methods for hands-free notification summaries |
US10679605B2 (en) | 2010-01-18 | 2020-06-09 | Apple Inc. | Hands-free list-reading by intelligent automated assistant |
DE202011111062U1 (de) | 2010-01-25 | 2019-02-19 | Newvaluexchange Ltd. | Vorrichtung und System für eine Digitalkonversationsmanagementplattform |
FR2956762B1 (fr) * | 2010-02-19 | 2013-02-08 | Alcatel Lucent | Procede et systeme domotique contextuel. |
US8682667B2 (en) | 2010-02-25 | 2014-03-25 | Apple Inc. | User profiling for selecting user specific voice input processing information |
US8868538B2 (en) * | 2010-04-22 | 2014-10-21 | Microsoft Corporation | Information presentation system |
US9785987B2 (en) | 2010-04-22 | 2017-10-10 | Microsoft Technology Licensing, Llc | User interface for information presentation system |
US9043296B2 (en) | 2010-07-30 | 2015-05-26 | Microsoft Technology Licensing, Llc | System of providing suggestions based on accessible and contextual information |
US10762293B2 (en) | 2010-12-22 | 2020-09-01 | Apple Inc. | Using parts-of-speech tagging and named entity recognition for spelling correction |
US9262612B2 (en) | 2011-03-21 | 2016-02-16 | Apple Inc. | Device access using voice authentication |
JP5682705B2 (ja) | 2011-03-30 | 2015-03-11 | 富士通株式会社 | タスク実行制御装置、タスク実行制御システムおよびタスク実行制御方法 |
US10642934B2 (en) | 2011-03-31 | 2020-05-05 | Microsoft Technology Licensing, Llc | Augmented conversational understanding architecture |
US8943514B2 (en) | 2011-04-30 | 2015-01-27 | Samsung Electronics Co., Ltd. | Middle partners |
US8491384B2 (en) | 2011-04-30 | 2013-07-23 | Samsung Electronics Co., Ltd. | Multi-user discovery |
US10057736B2 (en) | 2011-06-03 | 2018-08-21 | Apple Inc. | Active transport based notifications |
US9208511B2 (en) | 2011-08-22 | 2015-12-08 | Simple Rules, Inc. | System and method for location-based recommendations |
US10505751B2 (en) * | 2011-08-25 | 2019-12-10 | Siemens Industry, Inc. | Synergistic interface system for a building network |
US8994660B2 (en) | 2011-08-29 | 2015-03-31 | Apple Inc. | Text correction processing |
US10192176B2 (en) * | 2011-10-11 | 2019-01-29 | Microsoft Technology Licensing, Llc | Motivation of task completion and personalization of tasks and lists |
US10134385B2 (en) | 2012-03-02 | 2018-11-20 | Apple Inc. | Systems and methods for name pronunciation |
US9483461B2 (en) | 2012-03-06 | 2016-11-01 | Apple Inc. | Handling speech synthesis of content for multiple languages |
US9280610B2 (en) | 2012-05-14 | 2016-03-08 | Apple Inc. | Crowd sourcing information to fulfill user requests |
US10417037B2 (en) | 2012-05-15 | 2019-09-17 | Apple Inc. | Systems and methods for integrating third party services with a digital assistant |
US20130311595A1 (en) * | 2012-05-21 | 2013-11-21 | Google Inc. | Real-time contextual overlays for live streams |
US9721563B2 (en) | 2012-06-08 | 2017-08-01 | Apple Inc. | Name recognition system |
US9495129B2 (en) | 2012-06-29 | 2016-11-15 | Apple Inc. | Device, method, and user interface for voice-activated navigation and browsing of a document |
US8949334B2 (en) | 2012-07-26 | 2015-02-03 | Microsoft Corporation | Push-based recommendations |
US9576574B2 (en) | 2012-09-10 | 2017-02-21 | Apple Inc. | Context-sensitive handling of interruptions by intelligent digital assistant |
US9547647B2 (en) | 2012-09-19 | 2017-01-17 | Apple Inc. | Voice-based media searching |
US10528385B2 (en) | 2012-12-13 | 2020-01-07 | Microsoft Technology Licensing, Llc | Task completion through inter-application communication |
US9313162B2 (en) | 2012-12-13 | 2016-04-12 | Microsoft Technology Licensing, Llc | Task completion in email using third party app |
US8990205B2 (en) | 2013-01-28 | 2015-03-24 | International Business Machines Corporation | Data caveats for database tables |
KR102516577B1 (ko) | 2013-02-07 | 2023-04-03 | 애플 인크. | 디지털 어시스턴트를 위한 음성 트리거 |
US9799005B2 (en) * | 2013-03-07 | 2017-10-24 | Samsung Electronics Co., Ltd. | Computing system with contextual interaction mechanism and method of operation thereof |
US10652394B2 (en) | 2013-03-14 | 2020-05-12 | Apple Inc. | System and method for processing voicemail |
US9368114B2 (en) | 2013-03-14 | 2016-06-14 | Apple Inc. | Context-sensitive handling of interruptions |
US10748529B1 (en) | 2013-03-15 | 2020-08-18 | Apple Inc. | Voice activated device for use with a voice-based digital assistant |
WO2014144949A2 (en) | 2013-03-15 | 2014-09-18 | Apple Inc. | Training an at least partial voice command system |
WO2014144579A1 (en) | 2013-03-15 | 2014-09-18 | Apple Inc. | System and method for updating an adaptive speech recognition model |
WO2014197336A1 (en) | 2013-06-07 | 2014-12-11 | Apple Inc. | System and method for detecting errors in interactions with a voice-based digital assistant |
US9582608B2 (en) | 2013-06-07 | 2017-02-28 | Apple Inc. | Unified ranking with entropy-weighted information for phrase-based semantic auto-completion |
WO2014197334A2 (en) | 2013-06-07 | 2014-12-11 | Apple Inc. | System and method for user-specified pronunciation of words for speech synthesis and recognition |
WO2014197335A1 (en) | 2013-06-08 | 2014-12-11 | Apple Inc. | Interpreting and acting upon commands that involve sharing information with remote devices |
KR101922663B1 (ko) | 2013-06-09 | 2018-11-28 | 애플 인크. | 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스 |
US10176167B2 (en) | 2013-06-09 | 2019-01-08 | Apple Inc. | System and method for inferring user intent from speech inputs |
EP3008964B1 (en) | 2013-06-13 | 2019-09-25 | Apple Inc. | System and method for emergency calls initiated by voice command |
WO2015020942A1 (en) | 2013-08-06 | 2015-02-12 | Apple Inc. | Auto-activating smart responses based on activities from remote devices |
US10296160B2 (en) | 2013-12-06 | 2019-05-21 | Apple Inc. | Method for extracting salient dialog usage from live data |
US9406213B2 (en) | 2013-12-27 | 2016-08-02 | Google Inc. | Notification engine |
WO2015112152A1 (en) * | 2014-01-23 | 2015-07-30 | Nokia Corporation | Apparatus and method for correlating context data |
US9620105B2 (en) | 2014-05-15 | 2017-04-11 | Apple Inc. | Analyzing audio input for efficient speech and music recognition |
US10592095B2 (en) | 2014-05-23 | 2020-03-17 | Apple Inc. | Instantaneous speaking of content on touch devices |
KR20150135820A (ko) * | 2014-05-26 | 2015-12-04 | 삼성전자주식회사 | 디스플레이 장치 및 그 제어 방법 |
US9502031B2 (en) | 2014-05-27 | 2016-11-22 | Apple Inc. | Method for supporting dynamic grammars in WFST-based ASR |
US9734193B2 (en) | 2014-05-30 | 2017-08-15 | Apple Inc. | Determining domain salience ranking from ambiguous words in natural speech |
US10078631B2 (en) | 2014-05-30 | 2018-09-18 | Apple Inc. | Entropy-guided text prediction using combined word and character n-gram language models |
US10170123B2 (en) | 2014-05-30 | 2019-01-01 | Apple Inc. | Intelligent assistant for home automation |
WO2015184186A1 (en) | 2014-05-30 | 2015-12-03 | Apple Inc. | Multi-command single utterance input method |
US9760559B2 (en) | 2014-05-30 | 2017-09-12 | Apple Inc. | Predictive text input |
US9785630B2 (en) | 2014-05-30 | 2017-10-10 | Apple Inc. | Text prediction using combined word N-gram and unigram language models |
US10289433B2 (en) | 2014-05-30 | 2019-05-14 | Apple Inc. | Domain specific language for encoding assistant dialog |
US9430463B2 (en) | 2014-05-30 | 2016-08-30 | Apple Inc. | Exemplar-based natural language processing |
US9715875B2 (en) | 2014-05-30 | 2017-07-25 | Apple Inc. | Reducing the need for manual start/end-pointing and trigger phrases |
US9633004B2 (en) | 2014-05-30 | 2017-04-25 | Apple Inc. | Better resolution when referencing to concepts |
US9842101B2 (en) | 2014-05-30 | 2017-12-12 | Apple Inc. | Predictive conversion of language input |
US10659851B2 (en) | 2014-06-30 | 2020-05-19 | Apple Inc. | Real-time digital assistant knowledge updates |
US9338493B2 (en) | 2014-06-30 | 2016-05-10 | Apple Inc. | Intelligent automated assistant for TV user interactions |
US10446141B2 (en) | 2014-08-28 | 2019-10-15 | Apple Inc. | Automatic speech recognition based on user feedback |
US9818400B2 (en) | 2014-09-11 | 2017-11-14 | Apple Inc. | Method and apparatus for discovering trending terms in speech requests |
US10789041B2 (en) | 2014-09-12 | 2020-09-29 | Apple Inc. | Dynamic thresholds for always listening speech trigger |
US10127911B2 (en) | 2014-09-30 | 2018-11-13 | Apple Inc. | Speaker identification and unsupervised speaker adaptation techniques |
US10074360B2 (en) | 2014-09-30 | 2018-09-11 | Apple Inc. | Providing an indication of the suitability of speech recognition |
US9886432B2 (en) | 2014-09-30 | 2018-02-06 | Apple Inc. | Parsimonious handling of word inflection via categorical stem + suffix N-gram language models |
US9668121B2 (en) | 2014-09-30 | 2017-05-30 | Apple Inc. | Social reminders |
US9646609B2 (en) | 2014-09-30 | 2017-05-09 | Apple Inc. | Caching apparatus for serving phonetic pronunciations |
US10552013B2 (en) | 2014-12-02 | 2020-02-04 | Apple Inc. | Data detection |
US9711141B2 (en) | 2014-12-09 | 2017-07-18 | Apple Inc. | Disambiguating heteronyms in speech synthesis |
US9865280B2 (en) | 2015-03-06 | 2018-01-09 | Apple Inc. | Structured dictation using intelligent automated assistants |
US10152299B2 (en) | 2015-03-06 | 2018-12-11 | Apple Inc. | Reducing response latency of intelligent automated assistants |
US10567477B2 (en) | 2015-03-08 | 2020-02-18 | Apple Inc. | Virtual assistant continuity |
US9886953B2 (en) | 2015-03-08 | 2018-02-06 | Apple Inc. | Virtual assistant activation |
US9721566B2 (en) | 2015-03-08 | 2017-08-01 | Apple Inc. | Competing devices responding to voice triggers |
US9899019B2 (en) | 2015-03-18 | 2018-02-20 | Apple Inc. | Systems and methods for structured stem and suffix language models |
US9842105B2 (en) | 2015-04-16 | 2017-12-12 | Apple Inc. | Parsimonious continuous-space phrase representations for natural language processing |
US10460227B2 (en) | 2015-05-15 | 2019-10-29 | Apple Inc. | Virtual assistant in a communication session |
US10200824B2 (en) | 2015-05-27 | 2019-02-05 | Apple Inc. | Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device |
US10083688B2 (en) | 2015-05-27 | 2018-09-25 | Apple Inc. | Device voice control for selecting a displayed affordance |
US10127220B2 (en) | 2015-06-04 | 2018-11-13 | Apple Inc. | Language identification from short strings |
US10101822B2 (en) | 2015-06-05 | 2018-10-16 | Apple Inc. | Language input correction |
US9578173B2 (en) | 2015-06-05 | 2017-02-21 | Apple Inc. | Virtual assistant aided communication with 3rd party service in a communication session |
US10255907B2 (en) | 2015-06-07 | 2019-04-09 | Apple Inc. | Automatic accent detection using acoustic models |
US10186254B2 (en) | 2015-06-07 | 2019-01-22 | Apple Inc. | Context-based endpoint detection |
US11025565B2 (en) | 2015-06-07 | 2021-06-01 | Apple Inc. | Personalized prediction of responses for instant messaging |
US20160378747A1 (en) | 2015-06-29 | 2016-12-29 | Apple Inc. | Virtual assistant for media playback |
US10311384B2 (en) | 2015-07-29 | 2019-06-04 | Microsoft Technology Licensing, Llc | Automatic creation and maintenance of a taskline |
US10740384B2 (en) | 2015-09-08 | 2020-08-11 | Apple Inc. | Intelligent automated assistant for media search and playback |
US10331312B2 (en) | 2015-09-08 | 2019-06-25 | Apple Inc. | Intelligent automated assistant in a media environment |
US10671428B2 (en) | 2015-09-08 | 2020-06-02 | Apple Inc. | Distributed personal assistant |
US10747498B2 (en) | 2015-09-08 | 2020-08-18 | Apple Inc. | Zero latency digital assistant |
US9697820B2 (en) | 2015-09-24 | 2017-07-04 | Apple Inc. | Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks |
US10366158B2 (en) | 2015-09-29 | 2019-07-30 | Apple Inc. | Efficient word encoding for recurrent neural network language models |
US11010550B2 (en) | 2015-09-29 | 2021-05-18 | Apple Inc. | Unified language modeling framework for word prediction, auto-completion and auto-correction |
US11587559B2 (en) | 2015-09-30 | 2023-02-21 | Apple Inc. | Intelligent device identification |
US10691473B2 (en) | 2015-11-06 | 2020-06-23 | Apple Inc. | Intelligent automated assistant in a messaging environment |
US10956666B2 (en) | 2015-11-09 | 2021-03-23 | Apple Inc. | Unconventional virtual assistant interactions |
US10049668B2 (en) | 2015-12-02 | 2018-08-14 | Apple Inc. | Applying neural network language models to weighted finite state transducers for automatic speech recognition |
US10223066B2 (en) | 2015-12-23 | 2019-03-05 | Apple Inc. | Proactive assistance based on dialog communication between devices |
US10446143B2 (en) | 2016-03-14 | 2019-10-15 | Apple Inc. | Identification of voice inputs providing credentials |
US9934775B2 (en) | 2016-05-26 | 2018-04-03 | Apple Inc. | Unit-selection text-to-speech synthesis based on predicted concatenation parameters |
US9972304B2 (en) | 2016-06-03 | 2018-05-15 | Apple Inc. | Privacy preserving distributed evaluation framework for embedded personalized systems |
US10249300B2 (en) | 2016-06-06 | 2019-04-02 | Apple Inc. | Intelligent list reading |
US11227589B2 (en) | 2016-06-06 | 2022-01-18 | Apple Inc. | Intelligent list reading |
US10049663B2 (en) | 2016-06-08 | 2018-08-14 | Apple, Inc. | Intelligent automated assistant for media exploration |
DK179588B1 (en) | 2016-06-09 | 2019-02-22 | Apple Inc. | INTELLIGENT AUTOMATED ASSISTANT IN A HOME ENVIRONMENT |
US10586535B2 (en) | 2016-06-10 | 2020-03-10 | Apple Inc. | Intelligent digital assistant in a multi-tasking environment |
US10067938B2 (en) | 2016-06-10 | 2018-09-04 | Apple Inc. | Multilingual word prediction |
US10490187B2 (en) | 2016-06-10 | 2019-11-26 | Apple Inc. | Digital assistant providing automated status report |
US10509862B2 (en) | 2016-06-10 | 2019-12-17 | Apple Inc. | Dynamic phrase expansion of language input |
US10192552B2 (en) | 2016-06-10 | 2019-01-29 | Apple Inc. | Digital assistant providing whispered speech |
DK179415B1 (en) | 2016-06-11 | 2018-06-14 | Apple Inc | Intelligent device arbitration and control |
DK179049B1 (en) | 2016-06-11 | 2017-09-18 | Apple Inc | Data driven natural language event detection and classification |
DK201670540A1 (en) | 2016-06-11 | 2018-01-08 | Apple Inc | Application integration with a digital assistant |
DK179343B1 (en) | 2016-06-11 | 2018-05-14 | Apple Inc | Intelligent task discovery |
US10474753B2 (en) | 2016-09-07 | 2019-11-12 | Apple Inc. | Language identification using recurrent neural networks |
US10043516B2 (en) | 2016-09-23 | 2018-08-07 | Apple Inc. | Intelligent automated assistant |
US11107021B2 (en) | 2016-11-06 | 2021-08-31 | Microsoft Technology Licensing, Llc | Presenting and manipulating task items |
US11281993B2 (en) | 2016-12-05 | 2022-03-22 | Apple Inc. | Model and ensemble compression for metric learning |
US10593346B2 (en) | 2016-12-22 | 2020-03-17 | Apple Inc. | Rank-reduced token representation for automatic speech recognition |
WO2018117685A1 (en) | 2016-12-23 | 2018-06-28 | Samsung Electronics Co., Ltd. | System and method of providing to-do list of user |
US10552218B2 (en) * | 2017-01-06 | 2020-02-04 | Microsoft Technology Licensing, Llc | Dynamic context of tasks |
US11204787B2 (en) | 2017-01-09 | 2021-12-21 | Apple Inc. | Application integration with a digital assistant |
DK201770383A1 (en) | 2017-05-09 | 2018-12-14 | Apple Inc. | USER INTERFACE FOR CORRECTING RECOGNITION ERRORS |
US10417266B2 (en) | 2017-05-09 | 2019-09-17 | Apple Inc. | Context-aware ranking of intelligent response suggestions |
US10726832B2 (en) | 2017-05-11 | 2020-07-28 | Apple Inc. | Maintaining privacy of personal information |
US10395654B2 (en) | 2017-05-11 | 2019-08-27 | Apple Inc. | Text normalization based on a data-driven learning network |
DK201770439A1 (en) | 2017-05-11 | 2018-12-13 | Apple Inc. | Offline personal assistant |
DK179745B1 (en) | 2017-05-12 | 2019-05-01 | Apple Inc. | SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT |
US11301477B2 (en) | 2017-05-12 | 2022-04-12 | Apple Inc. | Feedback analysis of a digital assistant |
DK201770427A1 (en) | 2017-05-12 | 2018-12-20 | Apple Inc. | LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT |
DK179496B1 (en) | 2017-05-12 | 2019-01-15 | Apple Inc. | USER-SPECIFIC Acoustic Models |
DK201770432A1 (en) | 2017-05-15 | 2018-12-21 | Apple Inc. | Hierarchical belief states for digital assistants |
DK201770431A1 (en) | 2017-05-15 | 2018-12-20 | Apple Inc. | Optimizing dialogue policy decisions for digital assistants using implicit feedback |
US10311144B2 (en) | 2017-05-16 | 2019-06-04 | Apple Inc. | Emoji word sense disambiguation |
DK179560B1 (en) | 2017-05-16 | 2019-02-18 | Apple Inc. | FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES |
US10403278B2 (en) | 2017-05-16 | 2019-09-03 | Apple Inc. | Methods and systems for phonetic matching in digital assistant services |
US20180336892A1 (en) | 2017-05-16 | 2018-11-22 | Apple Inc. | Detecting a trigger of a digital assistant |
US20180336275A1 (en) | 2017-05-16 | 2018-11-22 | Apple Inc. | Intelligent automated assistant for media exploration |
US10657328B2 (en) | 2017-06-02 | 2020-05-19 | Apple Inc. | Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling |
WO2018232622A1 (en) | 2017-06-21 | 2018-12-27 | Microsoft Technology Licensing, Llc | RECOMMENDATION OF MULTIMEDIA CONTENT THROUGH CONVERSATIONAL ROBOTS |
US10445429B2 (en) | 2017-09-21 | 2019-10-15 | Apple Inc. | Natural language understanding using vocabularies with compressed serialized tries |
US10755051B2 (en) | 2017-09-29 | 2020-08-25 | Apple Inc. | Rule-based natural language processing |
US10636424B2 (en) | 2017-11-30 | 2020-04-28 | Apple Inc. | Multi-turn canned dialog |
US10733982B2 (en) | 2018-01-08 | 2020-08-04 | Apple Inc. | Multi-directional dialog |
US10733375B2 (en) | 2018-01-31 | 2020-08-04 | Apple Inc. | Knowledge-based framework for improving natural language understanding |
US10789959B2 (en) | 2018-03-02 | 2020-09-29 | Apple Inc. | Training speaker recognition models for digital assistants |
US10592604B2 (en) | 2018-03-12 | 2020-03-17 | Apple Inc. | Inverse text normalization for automatic speech recognition |
US10818288B2 (en) | 2018-03-26 | 2020-10-27 | Apple Inc. | Natural assistant interaction |
US10909331B2 (en) | 2018-03-30 | 2021-02-02 | Apple Inc. | Implicit identification of translation payload with neural machine translation |
US11145294B2 (en) | 2018-05-07 | 2021-10-12 | Apple Inc. | Intelligent automated assistant for delivering content from user experiences |
US10928918B2 (en) | 2018-05-07 | 2021-02-23 | Apple Inc. | Raise to speak |
US11132233B2 (en) * | 2018-05-07 | 2021-09-28 | Micron Technology, Inc. | Thread priority management in a multi-threaded, self-scheduling processor |
US10984780B2 (en) | 2018-05-21 | 2021-04-20 | Apple Inc. | Global semantic word embeddings using bi-directional recurrent neural networks |
US10892996B2 (en) | 2018-06-01 | 2021-01-12 | Apple Inc. | Variable latency device coordination |
DK179822B1 (da) | 2018-06-01 | 2019-07-12 | Apple Inc. | Voice interaction at a primary device to access call functionality of a companion device |
DK180639B1 (en) | 2018-06-01 | 2021-11-04 | Apple Inc | DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT |
DK201870355A1 (en) | 2018-06-01 | 2019-12-16 | Apple Inc. | VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS |
US11386266B2 (en) | 2018-06-01 | 2022-07-12 | Apple Inc. | Text correction |
AU2019100576C4 (en) * | 2018-06-03 | 2020-01-30 | Apple Inc. | Accelerated task performance |
US10944859B2 (en) | 2018-06-03 | 2021-03-09 | Apple Inc. | Accelerated task performance |
US11010561B2 (en) | 2018-09-27 | 2021-05-18 | Apple Inc. | Sentiment prediction from textual data |
US11170166B2 (en) | 2018-09-28 | 2021-11-09 | Apple Inc. | Neural typographical error modeling via generative adversarial networks |
US11462215B2 (en) | 2018-09-28 | 2022-10-04 | Apple Inc. | Multi-modal inputs for voice commands |
US10839159B2 (en) | 2018-09-28 | 2020-11-17 | Apple Inc. | Named entity normalization in a spoken dialog system |
US11475898B2 (en) | 2018-10-26 | 2022-10-18 | Apple Inc. | Low-latency multi-speaker speech recognition |
US11638059B2 (en) | 2019-01-04 | 2023-04-25 | Apple Inc. | Content playback on multiple devices |
US11348573B2 (en) | 2019-03-18 | 2022-05-31 | Apple Inc. | Multimodality in digital assistant systems |
US11423908B2 (en) | 2019-05-06 | 2022-08-23 | Apple Inc. | Interpreting spoken requests |
DK201970509A1 (en) | 2019-05-06 | 2021-01-15 | Apple Inc | Spoken notifications |
US11307752B2 (en) | 2019-05-06 | 2022-04-19 | Apple Inc. | User configurable task triggers |
US11475884B2 (en) | 2019-05-06 | 2022-10-18 | Apple Inc. | Reducing digital assistant latency when a language is incorrectly determined |
US11140099B2 (en) | 2019-05-21 | 2021-10-05 | Apple Inc. | Providing message response suggestions |
US11496600B2 (en) | 2019-05-31 | 2022-11-08 | Apple Inc. | Remote execution of machine-learned models |
US11289073B2 (en) | 2019-05-31 | 2022-03-29 | Apple Inc. | Device text to speech |
DK201970510A1 (en) | 2019-05-31 | 2021-02-11 | Apple Inc | Voice identification in digital assistant systems |
DK180129B1 (en) | 2019-05-31 | 2020-06-02 | Apple Inc. | USER ACTIVITY SHORTCUT SUGGESTIONS |
US11360641B2 (en) | 2019-06-01 | 2022-06-14 | Apple Inc. | Increasing the relevance of new available information |
WO2021056255A1 (en) | 2019-09-25 | 2021-04-01 | Apple Inc. | Text detection using global geometry estimators |
US11861674B1 (en) | 2019-10-18 | 2024-01-02 | Meta Platforms Technologies, Llc | Method, one or more computer-readable non-transitory storage media, and a system for generating comprehensive information for products of interest by assistant systems |
US11567788B1 (en) | 2019-10-18 | 2023-01-31 | Meta Platforms, Inc. | Generating proactive reminders for assistant systems |
US11183193B1 (en) | 2020-05-11 | 2021-11-23 | Apple Inc. | Digital assistant hardware abstraction |
DK202070658A1 (en) | 2020-06-01 | 2022-01-13 | Apple Inc | Suggesting executable actions in response to detecting events |
US11842228B2 (en) * | 2022-04-22 | 2023-12-12 | Dell Products L.P. | Context specific orchestration of data objects |
Family Cites Families (57)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05197573A (ja) | 1991-08-26 | 1993-08-06 | Hewlett Packard Co <Hp> | タスク指向パラダイムによるタスク管理システム |
JP3408850B2 (ja) | 1992-12-09 | 2003-05-19 | 三菱電機株式会社 | クライアント・サーバシステムおよびその制御方法、並びにクライアント機装置 |
US5812865A (en) * | 1993-12-03 | 1998-09-22 | Xerox Corporation | Specifying and establishing communication data paths between particular media devices in multiple media device computing systems based on context of a user or users |
US5555376A (en) | 1993-12-03 | 1996-09-10 | Xerox Corporation | Method for granting a user request having locational and contextual attributes consistent with user policies for devices having locational attributes consistent with the user request |
US5910799A (en) * | 1996-04-09 | 1999-06-08 | International Business Machines Corporation | Location motion sensitive user interface |
JP3857388B2 (ja) * | 1997-06-27 | 2006-12-13 | 富士通株式会社 | 移動通信端末 |
US6563430B1 (en) * | 1998-12-11 | 2003-05-13 | Koninklijke Philips Electronics N.V. | Remote control device with location dependent interface |
US7225229B1 (en) * | 1998-12-18 | 2007-05-29 | Tangis Corporation | Automated pushing of computer user's context data to clients |
US7046263B1 (en) * | 1998-12-18 | 2006-05-16 | Tangis Corporation | Requesting computer user's context data |
US6848104B1 (en) | 1998-12-21 | 2005-01-25 | Koninklijke Philips Electronics N.V. | Clustering of task-associated objects for effecting tasks among a system and its environmental devices |
KR20010041425A (ko) | 1998-12-29 | 2001-05-15 | 요트.게.아. 롤페즈 | 분포된 네트워크 장치를 갖는 홈 제어 시스템 |
US6957075B1 (en) * | 1999-02-01 | 2005-10-18 | Intel Corporation | Method and apparatus for providing a location based appliance personality |
JP4258585B2 (ja) | 1999-03-19 | 2009-04-30 | 株式会社エクォス・リサーチ | 目的地設定装置 |
US6256019B1 (en) * | 1999-03-30 | 2001-07-03 | Eremote, Inc. | Methods of using a controller for controlling multi-user access to the functionality of consumer devices |
US6567840B1 (en) | 1999-05-14 | 2003-05-20 | Honeywell Inc. | Task scheduling and message passing |
US20010032132A1 (en) * | 2000-01-28 | 2001-10-18 | Dan Moran | System for message delivery in interactive communication networks |
WO2001069380A2 (en) | 2000-03-14 | 2001-09-20 | Edapta, Inc. | A system and method for enabling dynamically adaptable user interfaces for electronic devices |
US7076255B2 (en) * | 2000-04-05 | 2006-07-11 | Microsoft Corporation | Context-aware and location-aware cellular phones and methods |
JP4576675B2 (ja) | 2000-06-30 | 2010-11-10 | ソニー株式会社 | 制御システム、制御機器及びサーバ |
AU2001276992A1 (en) * | 2000-07-20 | 2002-02-05 | Aeptec Microsystems, Inc. | Method, system, and protocol for location-aware mobile devices |
JP2002049556A (ja) | 2000-08-02 | 2002-02-15 | Sharp Corp | 家庭内メディア配信システム |
JP2002063033A (ja) | 2000-08-21 | 2002-02-28 | Toko Seiki Co Ltd | オントロジを備えた知識管理システム |
US6931630B1 (en) * | 2000-09-27 | 2005-08-16 | International Business Machines Corporation | Method of, system for, and computer program product for providing automatic identification of a computer program code candidate for web deployment or a stored procedure |
US20030046401A1 (en) * | 2000-10-16 | 2003-03-06 | Abbott Kenneth H. | Dynamically determing appropriate computer user interfaces |
US7290039B1 (en) * | 2001-02-27 | 2007-10-30 | Microsoft Corporation | Intent based processing |
US20020138327A1 (en) * | 2001-03-26 | 2002-09-26 | Mello Celso Luis | System for remotely managing elevator mechanic service routine |
US7206559B2 (en) * | 2001-10-16 | 2007-04-17 | Hewlett-Packard Development Company, L.P. | System and method for a mobile computing device to control appliances |
US6954737B2 (en) * | 2001-11-05 | 2005-10-11 | Johnsondiversey, Inc. | Method and apparatus for work management for facility maintenance |
JP4164280B2 (ja) | 2002-04-11 | 2008-10-15 | キヤノン株式会社 | 周辺機器およびジョブ管理方法およびコンピュータが読み取り可能な記憶媒体およびプログラム |
US7170422B2 (en) * | 2002-06-24 | 2007-01-30 | Matsushita Electric Industrial Co., Ltd. | Personal programmable universal remote control |
US6792323B2 (en) | 2002-06-27 | 2004-09-14 | Openpeak Inc. | Method, system, and computer program product for managing controlled residential or non-residential environments |
US7024256B2 (en) * | 2002-06-27 | 2006-04-04 | Openpeak Inc. | Method, system, and computer program product for automatically managing components within a controlled environment |
JPWO2004019225A1 (ja) | 2002-08-26 | 2005-12-15 | 富士通株式会社 | 状況付情報を処理する装置および方法 |
US20040068504A1 (en) * | 2002-10-04 | 2004-04-08 | Peter Gobbi | Serving apparatus for providing storage solutions |
US20040100505A1 (en) | 2002-11-21 | 2004-05-27 | Cazier Robert Paul | System for and method of prioritizing menu information |
US8561069B2 (en) * | 2002-12-19 | 2013-10-15 | Fujitsu Limited | Task computing |
US8607280B2 (en) | 2003-01-08 | 2013-12-10 | Intel Corporation | Resource and capability borrowing |
US20040176118A1 (en) | 2003-02-18 | 2004-09-09 | Michael Strittmatter | Service attribute based filtering system and method |
JP2004266453A (ja) | 2003-02-28 | 2004-09-24 | Toshiba Corp | ネットワークシステム、サーバ機器および通信方法 |
FR2852173B1 (fr) | 2003-03-06 | 2005-05-27 | France Telecom | Systeme de creation d'ambiance et d'environnement de personnes a l'aide d'equipements electroniques multisensoriels |
KR20040080663A (ko) | 2003-03-12 | 2004-09-20 | 삼성전자주식회사 | 유비퀴터스 서비스 기능을 가지는 사설 네트워크 시스템및 그의 동작방법 |
US7064675B2 (en) * | 2003-08-15 | 2006-06-20 | Microsoft Corporation | Context-sensitive remote controls |
EP1526457B1 (en) | 2003-10-22 | 2013-03-13 | Sony Deutschland GmbH | Context-aware automatic service discovery and execution engine in mobile ad-hoc networks |
KR100651729B1 (ko) | 2003-11-14 | 2006-12-06 | 한국전자통신연구원 | 홈네트워크 환경에서의 멀티-모달 상황 인식어플리케이션을 위한 시스템 및 방법 |
US7493294B2 (en) | 2003-11-28 | 2009-02-17 | Manyworlds Inc. | Mutually adaptive systems |
US7522549B2 (en) * | 2004-04-16 | 2009-04-21 | Broadcom Corporation | Registering access device multimedia content via a broadband access gateway |
WO2005104772A2 (en) * | 2004-04-28 | 2005-11-10 | Fujitsu Limited | Semantic task computing |
US20050267770A1 (en) * | 2004-05-26 | 2005-12-01 | International Business Machines Corporation | Methods and apparatus for performing task management based on user context |
US8099313B2 (en) | 2004-09-22 | 2012-01-17 | Samsung Electronics Co., Ltd. | Method and system for the orchestration of tasks on consumer electronics |
US8185427B2 (en) | 2004-09-22 | 2012-05-22 | Samsung Electronics Co., Ltd. | Method and system for presenting user tasks for the control of electronic devices |
US8412554B2 (en) | 2004-09-24 | 2013-04-02 | Samsung Electronics Co., Ltd. | Method and system for describing consumer electronics using separate task and device descriptions |
US7613285B2 (en) | 2004-12-07 | 2009-11-03 | Electronics And Telecommunications Research Institute | System and method for service-oriented automatic remote control, remote server, and remote control agent |
KR100682995B1 (ko) | 2004-12-16 | 2007-02-15 | 한국전자통신연구원 | 유비쿼터스 기반의 상황 정보 제공 서비스 시스템 및 그방법 |
US8510737B2 (en) | 2005-01-07 | 2013-08-13 | Samsung Electronics Co., Ltd. | Method and system for prioritizing tasks made available by devices in a network |
US8069422B2 (en) * | 2005-01-10 | 2011-11-29 | Samsung Electronics, Co., Ltd. | Contextual task recommendation system and method for determining user's context and suggesting tasks |
US8972872B2 (en) | 2006-03-27 | 2015-03-03 | Fujitsu Limited | Building computing applications based upon metadata |
US20070233287A1 (en) | 2006-03-30 | 2007-10-04 | Samsung Electronics Co., Ltd. | Dynamic generation of tasks in resource constrained devices |
-
2005
- 2005-08-09 US US11/200,546 patent/US8069422B2/en not_active Expired - Fee Related
- 2005-11-24 KR KR1020050112970A patent/KR100754194B1/ko not_active IP Right Cessation
-
2006
- 2006-01-05 EP EP06250036A patent/EP1679831A3/en not_active Withdrawn
- 2006-01-10 JP JP2006002511A patent/JP2006228198A/ja active Pending
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8099313B2 (en) | 2004-09-22 | 2012-01-17 | Samsung Electronics Co., Ltd. | Method and system for the orchestration of tasks on consumer electronics |
US8185427B2 (en) | 2004-09-22 | 2012-05-22 | Samsung Electronics Co., Ltd. | Method and system for presenting user tasks for the control of electronic devices |
US8412554B2 (en) | 2004-09-24 | 2013-04-02 | Samsung Electronics Co., Ltd. | Method and system for describing consumer electronics using separate task and device descriptions |
KR100728021B1 (ko) * | 2005-01-07 | 2007-06-13 | 삼성전자주식회사 | 네트워크 내 장치들에 의해 이용가능하게 만들어진태스크들을 순위 매기는 방법 및 시스템 |
US8510737B2 (en) | 2005-01-07 | 2013-08-13 | Samsung Electronics Co., Ltd. | Method and system for prioritizing tasks made available by devices in a network |
KR101460613B1 (ko) * | 2007-05-15 | 2014-11-13 | 삼성전자주식회사 | 로컬 네트워크내의 장치의 사용자에게 적절한 정보를제공하는 방법 및 시스템 |
US8938465B2 (en) | 2008-09-10 | 2015-01-20 | Samsung Electronics Co., Ltd. | Method and system for utilizing packaged content sources to identify and provide information based on contextual information |
Also Published As
Publication number | Publication date |
---|---|
KR100754194B1 (ko) | 2007-09-03 |
EP1679831A3 (en) | 2007-10-17 |
US8069422B2 (en) | 2011-11-29 |
JP2006228198A (ja) | 2006-08-31 |
EP1679831A2 (en) | 2006-07-12 |
US20060156252A1 (en) | 2006-07-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100754194B1 (ko) | 사용자의 컨텍스트를 결정하고 태스크들을 제안하기 위한컨텍스츄얼 태스크 제안 시스템 및 방법 | |
US9619751B2 (en) | Intelligent delivery of actionable content | |
US20060156307A1 (en) | Method and system for prioritizing tasks made available by devices in a network | |
US8510453B2 (en) | Framework for correlating content on a local network with information on an external network | |
JP2022095765A (ja) | タグコンテンツおよびソーシャルネットワークコンテンツに基くクラウドで実行されたミニゲームをランク付けするシステムおよび方法 | |
US8843467B2 (en) | Method and system for providing relevant information to a user of a device in a local network | |
KR100961302B1 (ko) | 인터랙티브 텔레비전용 개인 채널을 효과적으로 구현하기위한 시스템 및 방법 | |
US8813060B2 (en) | Context aware application model for connected devices | |
KR101989502B1 (ko) | 검색 피처들을 제공하기 위한 시스템들 및 방법들 | |
JP4434972B2 (ja) | 情報提供システム、情報提供方法及びそのプログラム | |
US20070233287A1 (en) | Dynamic generation of tasks in resource constrained devices | |
CN109478142B (zh) | 呈现为预测的用户活动定制的用户界面的方法、系统和介质 | |
US20140156277A1 (en) | Information processing device and content retrieval method | |
JP6827496B2 (ja) | リソースに対するアクションへのインデックス付け | |
US11310301B2 (en) | Detecting sensor-based interactions with client device in conjunction with presentation of content | |
JP2022108263A (ja) | メッセンジャーアプリケーションのチャットルームに関連して検索サービスを提供する方法および装置 | |
KR102586286B1 (ko) | 상황적 디지털 미디어 처리 시스템 및 방법 | |
CN113438492B (zh) | 直播中的题目生成方法、系统、计算机设备及存储介质 | |
JP5788866B2 (ja) | アイテムを格付けする方法及びシステム | |
US10157210B2 (en) | Searching and accessing software application functionality using application connections | |
JP5448192B2 (ja) | 検索システム、端末、サーバ、検索方法、プログラム | |
WO2019052926A1 (en) | CONTENT MANAGEMENT SYSTEM AND METHOD OF OPERATION THEREFOR | |
WO2016158215A1 (ja) | 情報処理システム | |
JP5542536B2 (ja) | 情報処理装置及びダウンロード制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E601 | Decision to refuse application | ||
AMND | Amendment | ||
J201 | Request for trial against refusal decision | ||
B701 | Decision to grant | ||
GRNT | Written decision to grant | ||
G170 | Re-publication after modification of scope of protection [patent] | ||
LAPS | Lapse due to unpaid annual fee |