KR20060092993A - 사용자의 컨텍스트를 결정하고 태스크들을 제안하기 위한컨텍스츄얼 태스크 제안 시스템 및 방법 - Google Patents

사용자의 컨텍스트를 결정하고 태스크들을 제안하기 위한컨텍스츄얼 태스크 제안 시스템 및 방법 Download PDF

Info

Publication number
KR20060092993A
KR20060092993A KR1020050112970A KR20050112970A KR20060092993A KR 20060092993 A KR20060092993 A KR 20060092993A KR 1020050112970 A KR1020050112970 A KR 1020050112970A KR 20050112970 A KR20050112970 A KR 20050112970A KR 20060092993 A KR20060092993 A KR 20060092993A
Authority
KR
South Korea
Prior art keywords
user
task
context
tasks
information
Prior art date
Application number
KR1020050112970A
Other languages
English (en)
Other versions
KR100754194B1 (ko
Inventor
미툰 세사기리
아누기타 군지타파탐
알란 메써
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Publication of KR20060092993A publication Critical patent/KR20060092993A/ko
Application granted granted Critical
Publication of KR100754194B1 publication Critical patent/KR100754194B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/12Arrangements for remote connection or disconnection of substations or of equipment thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2807Exchanging configuration information on appliance services in a home automation network
    • H04L12/2812Exchanging configuration information on appliance services in a home automation network describing content present in a home automation network, e.g. audio video content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/10Network architectures or network communication protocols for network security for controlling access to devices or network resources
    • H04L63/102Entity profiles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/52Network services specially adapted for the location of the user terminal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/2866Architectures; Arrangements
    • H04L67/30Profiles
    • H04L67/306User profiles

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Automation & Control Theory (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Telephonic Communication Services (AREA)
  • Telephone Function (AREA)

Abstract

장치들의 네트웍에서 사용자가 수행할 가장 바람직한 태스크(task)를 제안하기 위하여 사용자의 컨텍스트(context)를 확인하는 시스템 및 방법을 제공한다. 사용자의 컨텍스트는 사용자의 위치, 사용자가 흥미를 갖고 있는 컨텐트, 사용자에 의해 사용되고 있는 장치들 및 사용자에 의해 사용되도록 허용된 장치들 및 컨텐트를 포함한다. 이 컨텍스트를 이용하여, 시스템은 그 컨텍스트에 적절한 태스크들을 사용자에게 제안한다. 컨텍스트의 결정과 태스크들의 제안은 어떤 주어진 시간에 사용자에게 이용가능한 컨텐트 및 장치들에 대한 정보를 추적함으로써 수행된다. 태스크들의 제안은 특정 정책들에 따라 수행된다. 예를 들며, 사용자는 정책에서의 규칙들을 변경함으로써 시스템의 동작을 제어할 수 있다. 태스크들은 사용자가 쉽게 이해할 수 있는 단순한 문장들의 형태로 되어 있다. 만약, 소정 컨텍스트에 기초하여, 하나 이상의 태스크가 가능하다면, 시스템은 사용자에게 가장 높은 우선순위를 갖는 태스크를 제안한다.

Description

사용자의 컨텍스트를 결정하고 태스크들을 제안하기 위한 컨텍스츄얼 태스크 제안 시스템 및 방법{Contextual task recommendation system and method for determining user's context and suggesting tasks}
도 1은 본 발명의 일 실시예를 구현하는 네트웍 예를 보여준다.
도 2는 본 발명의 일 실시예에 따른 상호작용 제어기(InterPlay Controller) 및 태스크 생성(Task Generation) 모듈의 기능적 블록도를 보여준다.
도 3a는 본 발명의 일 실시예에 따른 컨텍스츄얼 태스크 제안기(Contextual Task Recommender)에 의해 수행되는 일반적인 단계들의 흐름도를 보여준다.
도 3b 내지 도 3d는 본 발명의 일 실시예에 따른 컨텍스츄얼 태스크 제안기에 의해 수행되는 특정 단계들의 예의 흐름도들을 보여준다.
도 4는 본 발명의 일 실시예에 따른 태스크 생성 모듈에 의해 구현되는 일반적인 단계들의 흐름도를 보여준다.
본 발명은 일반적으로 장치들의 사용자 제어를 위한 사용자 인터페이스(interface)들을 제공하는 것에 관한 것이며, 특히 사용자의 컨텍스트(context)를 결정하고 태스크(task)들을 제안하기 위한 컨텍스츄얼(contextual) 태스크 제안 시스템 및 방법에 관한 것이다.
소비자 가전제품(comsumer electronics : CE) 장치들(예를 들면, TV, VCR, DVD 재생기, CD 재생기 등)과 같은 장치들의 사용자 제어를 위한 일반적인 사용자 인터페이스(user interface)들은 사용자 태스크들이 장치들에서 나타나지 않도록 한다. 대신, 장치 기능(function)들의 집합이 사용자에게 주어지며 사용자는 태스크을 수행하기 위해 이들 장치 기능들의 조합들을 선택한다. 예를 들면, 비디오 테이프를 관람하는 것은 사용자가 입력(예를 들면, 테이프)을 선택하고, 테이프를 되감고 VCR상의 재생 버튼을 누르기를 요구된다. 결국, 사용자는 사용자가 위 조작들을 자동화하기 위하여 '비디오 테이프'를 '관람'하기 원한다라고 단순히 지정할 수 없다. 사용자들은 실행되어야 할 원하는 태스크들(예를 들면, '비디오 테이프'를 '관람')을 표현할 수 없으며, 오히려 사용자들은 원하는 기능들(예를 들면, 입력을 선택, 테이프 되감기 및 VCR상의 재생 버튼 누름)을 실행하기 위하여 장치들을 직접 제어해야만 한다.
이는 태스크들이 어플리케이션(application)의 개념으로 매핑(mapping)되는 종래의 소프트웨어 체계와 유사하다. 예를 들면, 만약 사용자가 편지 쓰기를 원한다면, 사용자는 적절한 기능성을 가진 워드 프로세서(word processor)를 작동시킨다. 그러나, 잘 알려진 명칭으로 매핑되는 잘 알려진 기능성은 별문제로 하고, 이는 사용자에게 거의 나타내지 않는다. 다른 대안은 사용자에게 선택사항(option)들의 집합을 제공하기 위하여 메뉴(menu) 형식으로 존재하였다. 몇 개의 시스템들 은 잘 알려진 태스크들이 메뉴 선택사항들(예를 들면, 문서에 대해 철자 검사(spell-check) 또는 VCR상의 순간 녹음)에서 열거되도록 허용한다. 그러나, 이러한 시스템들은 장치 기능들을 사용자에게 제공하기만 한다.
사용자가 태스크를 그래프식(예를 들면, 원하는 태스크을 수행하기 위하여 그려진 장치들의 집합을 함께 연결하기 위하여 선들을 이용하는 것)으로 표현하는 것을 허용하는 또 다른 대안이 존재하였다. 이 접근법의 문제점은 장치들을 이용함의 복잡성을 사용자로부터 감추지 않는다는 것이다. 그것은 기능 선택들을 사용자에게 단순히 그래프식으로 나타내며 사용자가 태스크을 수행하기 위해 필요한 연결들을 지정하도록 요구한다.
또 다른 대안은 장치들 및 특별한 환경에서 이용 가능한 서비스들을 찾아내는 시스템이었다. 시스템은 결집될 수 있는 서비스들을 확인하고 최종적으로 가능한 서비스 조합들을 사용자에게 제안한다. 결집된 서비스 조합들을 사용자에게 제안하면서 시스템은 모든 사용자의 선호들의 집합 및 사용자에 대한 실행 이력에 기초하여 서비스들에 점수를 매기고 사용자에게 최고 점수를 가진 서비스를 표시한다. 그러나, 이러한 시스템에서 사용자의 컨텍스트를 고려함 없이 모든 사용자의 선호들의 집합과 사용자에 대한 실행 이력에 기초하여 서비스들이 평가되기 때문에 그 특정 순간에서의 사용자 의도들을 반영하지 않는 방법으로 서비스들에 점수를 매기는 결과가 된다.
본 발명이 이루고자하는 기술적 과제는 장치들이 연결된 네트웍에서 사용자 의 컨텍트 정보에 기초하여 사용자에게 적절할 태스크를 제안할 수 있는 사용자의 컨텍스트를 결정하고 태스크들을 제안하기 위한 컨텍스츄얼 태스크 제안 시스템 및 방법을 제공하는 것이다.
본 발명은 위 단점들을 역점을 두어 다룬다. 일 실시예에서 본 발명은 장치들의 네트웍에서 사용자가 실행할 가장 바람직한 태스크를 제안하기 위하여 사용자의 컨텍스트를 확인하는 시스템 및 방법을 제공한다. 사용자의 컨텍스트는 사용자의 위치, 사용자가 흥미를 갖고 있는 컨텐트, 사용자가 접근하도록 허용된 컨텐트, 사용자에 의해 사용되고 있는 장치들 및 사용자가 접근하도록 허용된 장치들을 포함한다. 이들 컨텍스트를 이용하여 시스템은 그 컨텍스트에 대해 적절한 태스크들을 사용자에게 제안한다.
컨텍스트의 결정과 태스크들의 제안은 어떤 주어진 시간에 사용자에게 이용 가능한 컨텐트와 장치들에 대한 정보를 추적함으로써 수행된다. 태스크들의 제안은 소정 정책들에 따라 수행된다. 더욱이, 사용자는 정책에서의 규칙들을 변경함으로써 시스템의 동작을 제어할 수 있다.
태스크들은 사용자가 쉽게 이해할 수 있는 단순한 문장들의 형식으로 되어있다. 만약, 소정 컨텍스트에 기초하여, 하나 이상의 태스크가 가능하면, 시스템은 우선순위화 모듈(Prioritization module)에 의해 태스크에 할당된 우선순위(priority)를 통해 확인된 사용자에게 가장 관련되는 태스크를 제안한다.
시스템을 시간, 장치 정보, 컨텐트 정보, 위치 정보 및 사용자에 의해 수행 되는 액션(action)들을 서로 관련시킴으로써 컨텍스트를 수립한다. 이 컨텍스트 정보는 그 다음에 사용자에게 관련되는 태스크 제안들로 귀결되는 태스크들을 찾고 사용자에게 제안하는데 이용된다. 종래 기술은 장치/태스크 속성들에 기초하여 단순히 점수 매기기만을 수행하며 위치에 기초하여 태스크들을 제안하지 않는다.
이들과 본 발명의 다른 특징들, 양상들 및 이점들은 아래의 상세한 설명, 첨부된 청구항 및 도면들을 참조하여 이해될 수 있을 것이다.
도 1은 본 발명의 일 실시예에 따른 사용자의 컨텍스트을 결정하고 태스크들을 제안하기 위한 컨텍스츄얼 태스크 제안 및 기법을 구현하는, 홈 네트워크와 같은, 네트웍(10)의 기능적 체계의 예를 보여준다. 네트웍(10)은 장치들(20)(예를 들면, 컨텐트를 포함) 및 장치들(30)(예를 들면, 클라이언트(client) GUI를 사용자에게 표시하기 위한 시각적 인터페이스(visual interface)를 포함하는 클라이언트 장치) 및 네트웍(10)을 다른 네트웍(50)(예를 들면, 다른 홈 네트웍, 인터넷 등)으로 연결하는 선택적인 인터페이스(40)를 포함한다. 비록 장치들(20 및 30)은 따로따로 보여지고 있지만, 하나의 물리적 장치는 하나 이상의 클라이언트 장치들 및/또는 하나 이상의 서버 장치들을 포함할 수 있다.
장치들(20 및 30)은 각각 통신을 위한 HTTP 프로토콜(protocol) 및 그들 사이의 프로토콜을 구현할 수 있다. 비록 여기에 설명된 예에서 HTTP 프로토콜이 네트웍(10)에 의해 이용되지만, 당해 기술분야에서 숙련된 사람들은 본 발명이 클라이언트-서버 모델(client-server model)을 이용하는 다른 네트웍 통신 프로토콜들에 유용하다는 것을 인식할 것이다. 예시 장치(20)는 VCR, DVD, 컴퓨터 등이 될 수 있다. 더욱이, 예시 클라이언트 장치(30)는 TV, 컴퓨터 등이 될 수 있다.
네트웍(10)은 일 양상에서 사용자가 실행할 가장 바람직한 태스크를 제안하기 위하여 사용자의 컨텍스트를 확인하는 적어도 하나의 상호작용 제어기(InterPlay Controller : IC)(60)을 더 포함한다. 태스크는 장치들을 이용하여 수행될 수 있는 행동들의 표현에 기초하는 의사-문장(pseudo-sentence)을 포함한다. 예를 들면, 만약 한 사람이 TV와 DVD 재생기를 가지고 있다면 "TV에 영화를 재생"은 하나의 태스크이다. 사용자의 컨텍스트는 예를 들면 사용자의 위치, 사용자가 흥미를 갖는 있는 컨텐트 및 사용자에 의해 사용되고 있는 장치들을 포함한다. 이 컨텍스트를 이용하여, 시스템은 그 컨텍스트에 적절한 태스크들을 사용자에게 제안한다.
컨텍스트의 결정과 태스크들의 제안은 어떤 주어진 시간에 사용자에게 이용 가능한 컨텐트 및 장치들에 대한 정보를 추적함으로써 수행된다. 태스크들의 제안은 소정 정책들에 따라 수행된다. 더욱이, 사용자는 정책에서의 규칙들을 변경함으로써 시스템의 동작을 제어할 수 있다. 만약, 소정 컨텍스트에 기초하여, 하나 이상의 태스크가 가능하면, 시스템은 사용자에게 가장 관련되는 태스크를 제안한다. 시스템은 시간, 장치 정보, 컨텐트 정보, 위치 정보 및 사용자에 의해 수행된 행위들을 서로 관련시킴으로써 컨텍스트을 수립한다. 이 컨텍스트 정보는 그 다음에 사용자에게 관련되는 태스크 제안으로 귀착되는 태스크들을 검색하고 사용자에게 제안하기 위하여 이용된다. 선행 기술은 장치/태스크 속성들에 기초하여 단순한 점수 매기기만을 수행하며 사용자의 컨텍스트에 기초하여 태스크들을 제안하지 않는다.
아래에서 더욱 상세히 설명하듯이, 일례에서, 상호작용 제어기(60)은 (1) 사용자의 위치, 사용자가 사용하고 있는 장치, 사용자가 이용하기를 원하는 컨텐트 및 사용자가 이용하도록 허용된 컨텐트 및 장치들과 같은 컨텍스트 정보를 결정함으로써, (2) 선택적으로, 시스템의 동작을 제어하기 위한 정책 규칙들을 제공함으로써 및 (3) 현재의 컨텍스트에 걸맞는 태스크를 제안하기 위하여 사용자의 컨텍스트 정보를 이용함으로써 사용자에게 태스크들을 제안한다.
상호작용 제어기(60)의 일 실시예에서, 사용자의 위치는 사용자가 이용하고 있는 네트웍에서의 장치의 위치를 이용하여 간접적으로 결정된다. 일반적으로, 사용자는 클라이언트 프로그램(예를 들면, 클라이언트 장치(20) 또는 서버 장치(30))을 상호작용 제어기(60)와 상호작용하기 위하여 이용한다. 컨텍스트 검색기(컨텍스트 에이전트(agent))(62)를 이용하여, 상호작용 제어기(60)은 장치로부터 또는 위치를 제공할 수 없는 장치들에 대해서는 설정 파일로부터 각각의 장치(예를 들면, 장치(20 또는 30))의 위치를 획득한다.
장치들/사용자의 클라이언트 프로그램을 실행하는 장치에 대한 설정 파일들은 또한 "쿠키(cookie)"라고 불리는 추가적인 정보의 일부를 포함한다. 사용자가 클라이언트 프로그램을 시작할 때, 클라이언트 프로그램은 이 쿠키를 상호작용 제어기(60)으로 전송한다. 상호작용 제어기(60)은 클라이언트 프로그램에 의해 제공된 쿠키와 장치 설정 파일들에서의 쿠키를 비교한다. 쿠키가 클라이언트 쿠키와 매치(match)되는 장치의 위치는 사용자의 위치와 동일한 것으로 간주된다. 최종적 으로, 컨텐트 메타-데이터(meta-data)는 컨텐트의 위치를 포함한다. 컨텐트에 대한 위치는 컨텐트을 생성 또는 저장하는 장치의 위치로부터 결정된다. 위치 정보는 또한 장치상의 GPS와 같은 센서들로부터 얻어질 수 있다. 비록 홈 네트워크에서 몇몇 소비자 가전제품들(comsumer electronics : CE)은 위치 센서들을 구비하지 않을 수도 있으며, 본 발명은 이러한 위치 센서들의 이용을 예측한다.
컨텐트 메타-데이터는 컨텐트에 대한 정보를 포함한다. 예를 들면, 음악 파일은 트랙 이름(track name), 가수, 앨범, 트랙 번호, MIME-유형 등을 포함한다. 본 발명에 있어서, 추가적인 메타-데이터가 이용된다. 예를 들면, 위치 정보는 컨텐트 메타-데이터에 추가된다. 이 데이터의 일부는 컨텐트의 위치와 사용자의 위치를 서로 관련시키는 것을 허용한다.
도 2는 네트웍에서 클라이언트 프로그램들(예를 들면, 클라이언트 1, 클라이언트 2, ..., 클라이언트 N)에 태스크 제안들을 제공하는 상호작용 제어기(60)의 기능 블록도를 보여준다. 상호작용 제어기(60)은 컨텍스츄얼 태스크 제안기(Contextual Task Recommender : CTR)(65) 및 태스크 생성 모듈(Task Generation module)(70)을 포함한다. 컨텍스츄얼 태스크 제안기(65)는 새로운 장치 또는 새로운 컨텐트가 네트웍에서 발견되어 질 때마다 각각 새로운 장치 이벤트(New Device Event) 또는 새로운 컨텐트 이벤트(New Content Event)를 통해 트리거(trigger)된다. 컨텍스츄얼 태스크 제안기를 트리거할 수 있는 일반적인 사용자 액션들은 예들 들면 TV를 켬, 장치에 오디오 CD를 삽입 등을 포함한다. 우선순위화 모듈(63)은 CTR(65)에 태스크에 할당된 우선순위를 제공한다.
정책 필터(Policy Filter)(68)은 시스템이 특정 종류의 장치 및 컨텐트에만 반응하도록 허용한다. 예를 들면, 새로운 컨텐트가 시스템에 추가될 때마다, CTR(65)는 이벤트를 수신한다. 정책은 사용자가 mp3 파일들과 같은 특정 유형들의 파일들에 단지 흥미가 있다고 지정하도록 한다. 정책 파일에 이것을 지정함으로써, 정책 필터(68)은 mp3들 이외의 모든 컨텐트를 무시한다. 정책 필터(68)가 mp3 파일들을 수신할 때, 정책 필터(68)는 연관된 태스크를 결정하고 그것을 사용자에게 제안하는 순환 과정을 시작한다.
도 3a는 컨텍스츄얼 태스크 제안기(65)의 예에 의해 수행되는 일반적인 단계들의 흐름도를 보여준다. 컨텍스츄얼 태스크 제안기(65)는 새로운 장치 이벤트 또는 새로운 컨텐트 이벤트가 발생(단계 100)할 때 트리거된다. 만약 새로운 장치가 발견되면(단계 102), 컨텍스츄얼 태스크 제안기(65)는 장치의 신원확인(identification) 정보(예들 들면, 명칭), 위치 및 장치가 이용가능하게 된 시간을 나타내는 타임-스탬프(time-stamp)를 기록한다(단계 106). 만약 새로운 컨텐트가 발견된다면(단계 106), 이때 컨텍스츄얼 태스크 제안기(65)는 컨텐트의 MIME-유형(즉, 파일의 파일 형식을 기술하는 메타-데이터의 형식), 컨텐트 위치, 컨텐트 신원확인(컨텐트-id) 및 타임-스탬프를 기록한다(단계 108). 장치 및 컨텐트 정보는 두 개의 독립된 표들(72 및 74) 각각에 저장된다(도 2).
둘 중 어느 한 이벤트(즉, 새로운 장치 또는 새로운 컨텐트)에 있어서, 적절한 "태스크 제안"이 사용자에게 제공되기 전에, 컨텍스츄얼 태스크 제안기(65)는 장치 이름과 컨텐트 정보가 다양한 파라미터(parameter)들(예를 들면, 정책 규칙들)에 대해 검사되는 정책 검사들을 순환하는 과정을 수행한다(단계 110). 일 실시예에서, 정책 규칙은 장치 정보 또는 컨텐트 정보 또는 양쪽 모두의 특정 일부를 검사하는 것에 대응한다. 예를 들면, 디폴트(default) 규칙은 장치 위치 또는 컨텐트 위치가 사용자의 위치와 동일한지를 결정하기 위한 검사와 관련한다. 규칙은 컨텍스츄얼 태스크 제안기(65)에 의해 다루어져야 하는 컨텐트들의 MIME-유형들을 지정하도록 작성될 수 있다.
컨텍스츄얼 태스크 제안기(65)는 다음의 예시 트리거 조건들 중의 적어도 하나가 만족되는 때에 태스크를 검색하는 것을 시도한다. (1) 새로운 장치가 이용가능하게 되다, (2) 새로운 컨텐트가 이용가능하게 되다. 조건들 (1)과 (2)는 새로운 태스크가 이용가능하도록 한다. 조건 (2)는 만약 새로운 MIME-유형에 대응하는 컨텐트가 추가되고 그 컨텐트를 해석할 수 있는 적어도 하나의 장치가 있다면 새로운 태스크의 추가로 귀결될 수 있다.
도 3b에서의 예시 흐름도를 참조하면, 새로운 장치가 이용가능하게 되는 첫번째 경우에, 장치 정보(예를 들면, 장치 이름, 위치 및 타임-스탬프)가 저장(단계 200)되면, 단계 202에서 컨텍스츄얼 태스크 제안기(65)는 우선 어떤 새로운 컨텐트가 최근에(예를 들면, 1분 전 과거에) 검출되었는지를 검사한다. 만약 컨텍스츄얼 태스크 제안기(65)가 이 기준에 걸맞는 컨텐트를 발견한다면, 컨텍스츄얼 태스크 제안기(65)는 새로이 발견된 장치 및 컨텐트의 MIME-유형을 이용하는 태스크를 검색하려고 시도한다(단계 204).
만약 매칭(matching)되는 태스크가 발견되지 않는다면, 컨텍스츄얼 태스크 제안기(65)는 질의 기준(query cirteria)을 완화하며(단계 206) 새로이 발견된 장치를 이용하는 태스크를 검색하려고 시도한다(단계 208). 만약 매칭되는 태스크가 검색되지 않는다면, 컨텍스츄얼 태스크 제안기(65)는 휴면 상태에 있게 되며 트리거 조건을 기다린다(단계 210). 그러나, 만약 매칭되는 태스크가 단계 204 또는 단계 208에서 검색된다면, 컨텍스츄얼 태스크 제안기(65)는 다음 단계로 진행하며 태스크를 제안하기 위하여 적절한 사용자 (클라이언트 프로그램)을 검색하려고 시도한다(단계 212). 위 단계 202에서, 만약 새로운 컨텐트가 검색되지 않는다면, 프로세스(process)는 단계 206으로 진행한다.
도 3c에서의 예시 흐름도를 참조하면, 새로운 컨텐트가 이용 가능하게 되는 두 번째 경우에 있어서, 위 첫 번째 경우와 유사하며, 컨텐트 정보(MIME-유형, 위치, 컨텐트-id 및 타임-스탬프)를 저장한 후(단계 220), 단계 222에서 컨텍스츄얼 태스크 제안기(65)는 어떤 새로운 장치가 최근의 과거(예를 들면, 1분 전의 과거)에서 발견되었는지를 알아보기 위해 검사한다. 만약 이러한 장치가 발견된다면, 컨텍스츄얼 태스크 제안기(65)는 장치와 MIME-유형에 걸맞는 태스크를 검색하기 위해 이용가능한 태스크들의 목록을 질의한다.(단계 224).
만약 이들 질의들이 실패하면 검색 기준은 완화되며(단계 226) 컨텍스츄얼 태스크 제안기(65)는 단지 MIME_유형을 이용하여 이용가능한 태스크들의 목록을 질의한다(단계(228). 단계 224 또는 단계 228에서, 만약 매칭되는 것이 검색된다면 컨텍스츄얼 태스크 제안기(CTR)는 태스크를 제안하기 위하여 적절한 사용자 클라이언트 프로그램을 검색하려고 시도한다(즉, CTR은 태스크가 연관된 모든 능동적인 사용자들을 확인하며 그것을 그들에게 제안한다)(단계 230). 만약 매칭되는 것이 검색되지 않는다면, 컨텍스츄얼 태스크 제안기(65)는 휴면 상태에 있게 되며 다음의 트리거 조건(이벤트)를 기다린다(단계 232). 위 단계 222에서, 만약 새로운 장치가 검색된다면, 프로세스는 단계 226으로 진행한다.
태스크 생성 모듈(70)(도 2)는 태스크들을 생성하며 컨텍스츄얼 태스크 제안기(65)와 독립적으로 동작한다. 태스크들은 새로운 장치 또는 컨텐트가 검출되는 때 생성된다. 컨텍스츄얼 태스크 제안기(65) 및 태스크 생성 모듈(70)은 모두 새로운 장치 및 새로운 컨텐트의 이용가능성 이벤트들을 감시한다.
만약 컨텍스츄얼 태스크 제안기(65)가 이벤트(즉, 새로운 장치 또는 새로운 컨텐트 이벤트)를 태스크 생성 모듈(70)에 앞서서 수신한다면, 컨텍스츄얼 태스크 제안기(65)는 태스크가 생성되기 전에 질의한다(이는 아래의 세 번째 경우로 처리되며 컨텍스츄얼 태스크 제안기(65)는 새로운 태스크가 이용가능하다는 이벤트로 트리거된다).
CTR(65)은 새로운 컨텐트/장치 이벤트를 직접 수신하며 새로운 태스크 이벤트를 간접적으로 처리한다. 태스크는 태스크 생성 모듈(70)이 새로운 장치/새로운 컨텐트 이벤트를 수신할 때 생성된다. CTR(65)의 라이프사이클(lifecycle)은 이들 이벤트들에 의해 트리거된다. CTR(65)이 이들 이벤트들을 수신하며 태스크 생성 모듈(70)이 바로 이 동일한 이벤트들로부터의 태스크들을 생성하는 것을 마치기 전에 태스크 생성 모듈(70)에게 질의하는 상황이 가능하다. 이 경우에, CTR(65)에 의한 질의는 실패할 것이다. 이 상황은 CTR(65)이 새로운 태스크들이 이용가능하 게 되는 때에 CTR(65)가 제안을 위한 태스크들을 검색하도록 시도하는 세 번째 트리거 조건에 의해 처리된다.
새로운 태스크가 이용가능하게 되며, 태스크가 생성되기 바로 전에 컨텍스츄얼 태스크 제안기(65)가 이용가능한 태스크들의 목록을 질의하는, 세 번째 경우에 있어서, 위 첫 번째 및 두 번째 경우들에 대응하는 루틴(routine)들은 새로운 태스크의 생성을 야기시키는 어떤 이벤트(즉, 새로운 장치가 이용 가능 또는 새로운 컨텐트가 이용 가능)에 기초하여 실행된다.
도 3d에서의 예시 흐름도를 참조하면, 일단 매칭되는 태스크가 검색되면(단계 240), 컨텍스츄얼 태스크 제안기(65)는 매칭되는 태스크를 구성하는 장치들과 동일한 위치들 또는 장치 또는 양쪽 모두의 위치와 동일한 위치를 가진 사용자들(클라이언트 프로그램들)을 검색하려고 시도한다(단계 242). 만약 이러한 클라이언트 프로그램이 검색된다면, 태스크는 이벤트로 패키지(package)되며 클라이언트 프로그램에 보내진다(단계 244). 이벤트는 또한 컨텐트-id를 포함할 수 있으며, 컨텐트-id는 시스템에서 각각의 컨텐트 아이템(item)에 할당된 유일한 값이다.
일 실시예에서, 이벤트를 수신하는 클라이언트 프로그램은 태스크를 구성하는 의사-문장pseudo-sentence)(예를 들면, "TV에 영화를 재생"; 문장을 구성함에 있어서 컨텐트 정보를 이용하는 예는 "TV에 반지의 제왕을 재생")를 포함한다. 만약 컨텐트-id가 이벤트의 일부분이라면, 클라이언트 프로그램은 컨텐트 관련 정보를 수신하며 문장에 그것을 포함한다. 문장은 자연어로 되어 있으며 사용자에 의해 쉽게 이해될 수 있다. 이 문장은 예를 들면, 수 초 동안 화면상에 머무르는 팝 업 윈도우(pop-up window)를 이용하여 사용자에게 표시된다. 사용자는 팝업 윈도우에서 "OK" 버튼을 선택함으로써 그 태스크를 실행할 수 있다.
컨텍스츄얼 태스크 제안기(65)는 또한 사용자의 현재 상태를 검사하고 행위의 이용가능한 코스(course)들을 클라이언트 프로그램에게 제안한다. 예를 들면, 만약 사용자가 태스크를 구성하는 과정에 있다면, 컨텍스츄얼 태스크 제안기(65)는 이 정보를 전송되는 이벤트에 포함하며 클라이언트 프로그램은 사용자가 사용자의 현재 행위를 마칠 때까지 사용자에 대한 태스크의 표시를 지연시키기 위하여 이 정보를 이용한다. 컨텍스츄얼 태스크 제안기(65)가 하나 이상의 매칭되는 태스크를 검색한 때에, 사용자에게 가장 관련되는 가장 높은 순위의 태스크를 사용자에게 제안한다.
선택적으로, 컨텍스츄얼 이벤트를 수신하는 때에, 클라이언트 프로그램은 사용자에게 알려진 모든 태스크들의 목록 중에서 제안된 태스크의 우선순위를 갱신하는 것, 직접 태스크를 실행하는 것 등 같은 다양한 행위를 취할 수 있다.
도 4는 태스크 생성 모듈(70)에 의해 수행되는 단계들의 예시 흐름도를 보여준다. 일례에서, 태스크 생성 모듈(70)은 홈태스크모델(HomeTaskModel : HTM)로서 구현된다. 태스크의 생성에 관련된 흐름도는 아래에서 설명된다.
장치가 온라인(online) 상태가 될 때, 장치는 장치의 설명과 태스크 설명을 컨텐트 에이전트(Context Agent : CA) 모듈(62)로 제공한다. CA(62)는 장치 설명 및 태스크 설명에 대한 포인터(pointer)를 이벤트로 패키지한다. CA(62)는 또한 장치의 이름 및 위치를 이벤트에 동봉하며 이들 이벤트들을 HTM(70)에 전송하여 HTM(70)에 의해 이들 이벤트가 수신된다(단계 260). 장치 설명은 장치 특성들(예를 들면, 사용자에게 표시될 이름), 장치 기능들(예를 들면, 장치가 오디오/비디오를 표현할 수 있는지 여부), 장치 속성들(예를 들면, 장치의 화면 크기) 및 장치 기초(grounding) 정보(각각의 기능들을 불러 일으키는 법)을 포함한다. 태스크 설명은 특정의 태스크을 달성하기 위해 요구되는 기능들에 대해 HTM(70)에 알리는 정보를 포함한다. 예를 들면, 태스크 설명은 "영화 재생"이 오디오 표현 능력들과 비디오 표현 능력들을 갖춘 장치를 요구한다고 지정한다. HTM(70)이 이들 이벤트들을 수신할 때, HTM(70)은 태스크 설명으로부터 정보를 추출하고 태스크에 의해 요구되는 기능을 제공하는 장치들을 검색하려고 시도한다(단계 262). HTM(70)은 그 다음에 장치의 각각의 유일한 조합에 대한 태스크을 생성한다(단계 264). 태스크는 주어, 동사 및 태스크를 실현하는 장치의 정보를 포함한다. 장치 설명은 또한 장치가 다룰 수 있는 MIME-유형의 목록을 포함한다. HTM(70)은 컨텐트 관리자(Content Manager : CM) 모듈(66)(도 2)로부터 이용가능한 MIME-유형들의 목록을 수신한다. HTM(70)은 태스크에서 장치에 의해 지원되는 MIME-유형들이 시스템에서 이용가능한 지를 알아보기 위해 조사한다(단계 266). 만약 장치에 의해 지원되는 최소 하나의 MIME-유형들이 있고 시스템에서 이용가능하다면, 태스크는 클라이언트에게 보내지며(단계 268), 만약 그렇지 않다면 시스템은 다음 이벤트를 기다린다(단계 270). 시스템은 컨텐트 관리자(Content Manager)로부터 이용가능한 MIME-유형들에 대해 기억한다. 일례에서, 시스템에서 이용가능한 MIME-유형들의 목록은 컨텐트 관리자(CM)로부터 수신된 마임타입갱신(MimeTypeUpdate) 이벤트들을 이용하여 만들어진다. HTM(70)은 이들 새로운 태스크 이벤트들을 유저 태스크 관리자(User Task Manager : UTM)(67)(도 2)로 보내며, 유저 태스크 관리자는 새로운 태스크 이벤트들을 패키지하여 클라이언트로 보낸다. 컨텐트 또는 장치들이 이용가능하지 않게 될 때, 태스크들은 이용가능하지 않게 된다. HTM(70)은 더 이상 완수할수 없으며 이벤트들로서 패키지되며 이용 가능하지 않은 태스크로서 클라이언트에게 보내지는 태스크들에 대한 정보를 추적한다.
따라서, 본 발명은 사용자가 수행할 가장 바람직한 태스크를 제안하기 위하여 장치들의 네트웍에서 사용자의 컨텍스트를 확인하는 시스템 및 방법을 제공한다. 사용자의 컨텍스트는 사용자의 위치, 사용자가 흥미를 갖는 컨텐트, 사용자에 의해 사용되고 있는 장치들 및 선택적으로 사용자가 이용하도록 허용된 컨텐트 및 장치들을 포함한다. 이 컨텍스트를 이용하여, 시스템은 그 컨텍스트에 적절한 태스크들을 사용자에게 제안한다. 컨텍스트의 결정과 태스크들의 제안은 모든 주어진 시간에 사용자에게 이용가능한 컨텐트 및 장치들에 대한 정보를 추적함으로써 수행된다.
태스크들의 제안은 특정 정책에 따라 수행된다. 예를 들면, 사용자는 정책에서의 규칙들을 변경함으로써 시스템의 동작을 제어할 수 있다. 태스크들은 사용자가 쉽게 이해할 수 있는 단순한 문장들의 형태로 되어 있다. 만약, 어떤 컨텍스트에 기초하여, 하나 이상의 태스크가 가능하다면, 시스템은 사용자에게 가장 관련되는 태스크를 제안한다.
본 발명은 다른 버전들도 가능하지만 특정 바람직한 버전들에 관하여 상당히 상세히 기술되었다. 따라서, 첨부된 청구항들의 사상 및 범위는 여기에 포함된 바람직한 버전들의 상세한 설명에 한정되어서는 안 된다.
본 발명에 따른 사용자의 컨텍스트를 결정하고 태스크들을 제안하기 위한 컨텍스츄얼 태스크 제안 시스템 및 방법에 의하면 사용자가 흥미를 갖고 수행하고자 하는 태스크를 사용자의 컨텍스트와 장치들로부터의 장치 설명과 태스크 설명 및 장치들을 제어할 수 있는 설정 파일 또는 정책들에 기초하여 사용자에게 제안할 수 있다.

Claims (32)

  1. 네트웍(network)에 있는 복수의 전자 장치들 중에 하나 이상에 의해 수행되는 사용자 태스크(task)들을 제안하는 방법에 있어서,
    상기 네트웍에서 사용자의 컨텍스트(context)를 결정하는 단계;
    태스크들을 생성하는 단계; 및
    상기 사용자에게 각각의 태스크가 상기 사용자의 컨텍스트에 적절한 하나 이상의 태스크들을 제안하는 단계를 포함하는 것을 특징으로 하는 태스크 제안 방법.
  2. 제 1항에 있어서, 상기 사용자의 컨텍스트를 결정하는 단계는,
    상기 사용자의 위치, 상기 사용자가 흥미를 갖고 있는 컨텐트 및 상기 사용자에 의해 이용되고 있는 상기 장치들 중 하나 이상을 결정하는 단계를 포함하는 것을 특징으로 하는 태스크 제안 방법.
  3. 제 1항에 있어서,
    상기 사용자에게 이용 가능한 컨텐트 및 장치들에 관한 정보를 추적하는 단계를 더 포함하며, 상기 사용자의 컨텍스트를 결정하는 단계는 상기 사용자의 컨텍스트를 결정하기 위하여 상기 정보를 이용하는 단계를 포함하는 것을 특징으로 하는 태스크 제안 방법.
  4. 제 1항에 있어서,
    상기 사용자에게 이용 가능한 컨텐트 및 장치들에 관한 정보를 추적하는 단계를 더 포함하는 것을 특징으로 하는 태스크 제안 방법.
  5. 제 1항에 있어서, 상기 하나 이상의 태스크들을 제안하는 단계는,
    소정 정책(policy)들에 따라 하나 이상의 태스크들을 제안하는 단계를 더 포함하는 것을 특징으로 하는 태스크 제안 방법.
  6. 제 5항에 있어서,
    상기 정책은 네트웍에서의 하나 이상의 장치들의 동작에 영향을 주는 규칙(rule)들을 포함하는 것을 특징으로 하는 태스크 제안 방법.
  7. 제 1항에 있어서,
    각각의 태스크는 상기 사용자에 의해 쉽게 이해될 수 있는 단순한 문장을 포함하는 것을 특징으로 하는 태스크 제안 방법.
  8. 제 1항에 있어서, 상기 태스크들을 제안하는 단계는,
    소정 컨텍스트에 기초하여, 하나 이상의 태스크가 가능하다면, 가장 높은 우선순위(priority)를 가진 태스크를 상기 사용자에게 제안하는 단계를 더 포함하는 것을 특징으로 하는 태스크 제안 방법.
  9. 제 1항에 있어서, 상기 사용자의 컨텍스트를 결정하는 단계는,
    시간, 장치 정보, 컨텐트 정보, 위치 정보 및 사용자에 의해 수행되는 액션(action)들 중 두 개 이상을 서로 관련시킴으로써 사용자 컨텍스츄얼(contextual) 정보를 구성하는 단계를 더 포함하는 것을 특징으로 하는 태스크 제안 방법.
  10. 제 9항에 있어서,
    상기 태스크들을 생성하는 단계는 태스크들을 생성/검색하기 위하여 상기 컨텍스츄얼 정보를 이용하는 단계를 더 포함하며, 상기 하나 이상의 태스크들을 제안하는 단계는 상기 사용자에게 관련되는 태스크들을 상기 사용자에게 제안하기 위하여 상기 컨텍스츄얼 정보를 이용하는 단계를 더 포함하는 것을 특징으로 하는 태스크 제안 방법.
  11. 네트웍에 있는 복수의 전자 장치들 중에 하나 이상에 의해 수행되는 사용자 태스크(task)들을 제안하는 시스템에 있어서,
    상기 네트웍에서 사용자의 컨텍스트를 결정하는 컨텍스트 검색기; 및
    각각의 태스크가 상기 사용자의 컨텍스트에 적절한 하나 이상의 태스크들을 상기 사용자에게 제안하는 컨텍스츄얼 태스크 제안기를 포함하는 것을 특징으로 하는 태스크 제안 시스템.
  12. 제 11항에 있어서, 상기 컨텍스트 검색기는,
    상기 사용자의 위치, 상기 사용자가 흥미를 갖고 있는 컨텐트 및 상기 사용자에 의해 이용되고 있는 장치들 중 하나 이상을 상기 사용자의 컨텍스트로서 더 결정하는 것을 특징으로 하는 태스크 제안 시스템.
  13. 제 11항에 있어서,
    상기 사용자에게 이용가능한 컨텐트 및 장치들에 관한 정보를 추적하는 수단을 더 포함하며, 상기 컨텍스트 검색기는 상기 사용자의 컨텍스트를 결정하기 위하여 상기 정보를 이용하는 것을 특징으로 하는 태스크 제안 시스템.
  14. 제 11항에 있어서,
    상기 사용자에게 이용가능한 컨텐트 및 장치들에 관한 정보를 추적하는 수단을 더 포함하며, 상기 태스크 생성기는 상기 태스크들을 생성하기 위하여 상기 정보를 이용하는 것을 특징으로 하는 태스크 제안 시스템.
  15. 제 11항에 있어서,
    상기 사용자에게 이용가능한 컨텐트 및 장치들에 관한 정보를 추적하는 수단을 더 포함하며, 상기 컨텍스츄얼 태스크 제안기는 태스크들을 제안하기 위하여 상기 정보를 이용하는 것을 특징으로 하는 태스크 제안 시스템.
  16. 제 11항에 있어서, 상기 컨텍스츄얼 태스크 제안기는,
    소정 정책에 따라 하나 이상의 태스크들을 제안하는 것을 특징으로 하는 태스크 제안 시스템.
  17. 제 16항에 있어서,
    상기 정책은 네트웍에서의 하나 이상의 장치들의 동작에 영향을 주는 규칙들을 포함하는 것을 특징으로 하는 태스크 제안 시스템.
  18. 제 11항에 있어서,
    상기 각각의 태스크는 사용자에 의해 쉽게 이해될 수 있는 단순한 문장을 포함하는 것을 특징으로 하는 태스크 제안 시스템.
  19. 제 11항에 있어서,
    소정 컨텍스트에 기초하여, 하나 이상의 태스크가 가능하다면, 상기 컨텍스츄얼 태스크 제안기는 가장 높은 우선순위를 가진 태스크를 상기 사용자에게 제안하는 것을 특징으로 하는 태스크 제안 시스템.
  20. 제 11항에 있어서, 상기 컨텍스트 검색기는,
    시간, 장치 정보, 컨텐트 정보, 위치 정보 및 사용자에 의해 수행되는 액션들 중에 두 개 이상을 서로 관련시킴으로써 사용자 컨텍스츄얼 정보를 구성하는 것 을 특징으로 하는 태스크 제안 시스템.
  21. 제 20항에 있어서,
    태스크들을 검색하기 위하여 상기 컨텍스츄얼 정보를 이용하는 태스크 생성기를 더 포함하며, 상기 컨텍스츄얼 태스크 제안기는 상기 사용자에게 관련되는 태스크들을 상기 사용자에게 제안하기 위하여 상기 컨텍스츄얼 정보를 이용하는 것을 특징으로 하는 태스크 제안 시스템.
  22. 복수의 장치들; 및
    사용자에게 상기 장치들 중에 하나 이상에 의해 수행될 태스크들을 제안하는 제어기를 포함하며 상기 제어기는,네트웍에서 사용자의 컨텍스트를 결정하는 컨텍스트 검색기; 및
    각각의 태스크가 상기 사용자의 컨텍스트에 적절하도록 하나 이상의 태스크들을 사용자에게 제안하는 컨텍스츄얼 태스크 제안기를 포함하는 것을 특징으로 하는 네트웍.
  23. 제 22항에 있어서, 상기 컨텍스트 검색기는,
    상기 사용자의 위치, 상기 사용자가 흥미를 갖고 있는 컨텍스트 및 상기 사용자에 의해 사용되고 있는 장치들 중의 하나 이상을 상기 사용자의 컨텍스트로서 더 결정하는 것을 특징으로 하는 네트웍.
  24. 제 22항에 있어서,
    상기 사용자에게 이용가능한 컨텐트 및 장치들에 관한 정보를 추적하는 수단을 더 포함하며, 상기 컨텍스트 검색기는 상기 사용자의 컨텍스트를 결정하기 위하여 상기 정보를 이용하는 것을 특징으로 하는 네트웍.
  25. 제 22항에 있어서,
    상기 제어기는 상기 사용자에게 이용가능한 컨텐트 및 장치들에 관한 정보를 추적하는 수단을 더 포함하며, 상기 태스크 생성기는 상기 태스크들을 생성하기 위하여 상기 정보를 이용하는 것을 특징으로 하는 네트웍.
  26. 제 22항에 있어서,
    상기 제어기는 상기 사용자에게 이용가능한 컨텐트 및 장치들에 관한 정보를 추적하는 수단을 더 포함하며, 상기 컨텍스츄얼 태스크 제안기는 태스크들을 제안하기 위하여 상기 정보를 이용하는 것을 특징으로 하는 네트웍.
  27. 제 22항에 있어서,
    상기 컨텍스츄얼 태스크 제안기는 소정 정책들에 따라 하나 이상의 태스크들을 제안하는 것을 특징으로 하는 네트웍.
  28. 제 27항에 있어서,
    상기 정책은 상기 네트웍에서의 하나 이상의 장치들의 동작에 영향을 주는 규칙들을 포함하는 것을 특징으로 하는 네트웍.
  29. 제 22항에 있어서,
    각각의 태스크는 상기 사용자에 의해 쉽게 이해될 수 있는 단순한 문장을 포함하는 것을 특징으로 하는 네트웍.
  30. 제 22항에 있어서,
    소정 컨텍스트에 기초하여, 하나 이상의 태스크가 가능하다면, 상기 컨텍스츄얼 태스크 제안기는 가장 높은 우선순위를 가진 태스크를 상기 사용자에게 제안하는 것을 특징으로 하는 네트웍.
  31. 제 22항에 있어서, 상기 컨텍스트 검색기는,
    시간, 장치 정보, 컨텐트 정보, 위치 정보 및 상기 사용자에 의해 수행되는 액션들 중에 두 개 이상을 서로 관련시킴으로써 사용자 컨텍스츄얼 정보를 더 구성하는 것을 특징으로 하는 네트웍.
  32. 제 31항에 있어서,
    태스크들을 검색하기 위하여 상기 컨텍스츄얼 정보를 이용하는 태스크 생성 기를 더 포함하며, 상기 컨텍스츄얼 태스크 제안기는 상기 사용자에게 관련되는 태스크들을 상기 사용자에게 제안하기 위해 상기 컨텍스츄얼 정보를 이용하는 것을 특징으로 하는 네트웍.
KR1020050112970A 2005-01-10 2005-11-24 사용자의 컨텍스트를 결정하고 태스크들을 제안하기 위한컨텍스츄얼 태스크 제안 시스템 및 방법 KR100754194B1 (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US64305105P 2005-01-10 2005-01-10
US60/643,051 2005-01-10
US11/200,546 US8069422B2 (en) 2005-01-10 2005-08-09 Contextual task recommendation system and method for determining user's context and suggesting tasks
US11/200,546 2005-08-09

Publications (2)

Publication Number Publication Date
KR20060092993A true KR20060092993A (ko) 2006-08-23
KR100754194B1 KR100754194B1 (ko) 2007-09-03

Family

ID=36147622

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050112970A KR100754194B1 (ko) 2005-01-10 2005-11-24 사용자의 컨텍스트를 결정하고 태스크들을 제안하기 위한컨텍스츄얼 태스크 제안 시스템 및 방법

Country Status (4)

Country Link
US (1) US8069422B2 (ko)
EP (1) EP1679831A3 (ko)
JP (1) JP2006228198A (ko)
KR (1) KR100754194B1 (ko)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100728021B1 (ko) * 2005-01-07 2007-06-13 삼성전자주식회사 네트워크 내 장치들에 의해 이용가능하게 만들어진태스크들을 순위 매기는 방법 및 시스템
US8099313B2 (en) 2004-09-22 2012-01-17 Samsung Electronics Co., Ltd. Method and system for the orchestration of tasks on consumer electronics
US8185427B2 (en) 2004-09-22 2012-05-22 Samsung Electronics Co., Ltd. Method and system for presenting user tasks for the control of electronic devices
US8412554B2 (en) 2004-09-24 2013-04-02 Samsung Electronics Co., Ltd. Method and system for describing consumer electronics using separate task and device descriptions
KR101460613B1 (ko) * 2007-05-15 2014-11-13 삼성전자주식회사 로컬 네트워크내의 장치의 사용자에게 적절한 정보를제공하는 방법 및 시스템
US8938465B2 (en) 2008-09-10 2015-01-20 Samsung Electronics Co., Ltd. Method and system for utilizing packaged content sources to identify and provide information based on contextual information

Families Citing this family (223)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
JP4164490B2 (ja) * 2004-12-17 2008-10-15 キヤノン株式会社 通信装置、プロファイル情報取得方法、及び、プログラム
US8069422B2 (en) * 2005-01-10 2011-11-29 Samsung Electronics, Co., Ltd. Contextual task recommendation system and method for determining user's context and suggesting tasks
US8205013B2 (en) * 2005-05-02 2012-06-19 Samsung Electronics Co., Ltd. Method and system for aggregating the control of middleware control points
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US8510453B2 (en) * 2007-03-21 2013-08-13 Samsung Electronics Co., Ltd. Framework for correlating content on a local network with information on an external network
US8028283B2 (en) * 2006-03-20 2011-09-27 Samsung Electronics Co., Ltd. Method and system for automated invocation of device functionalities in a network
US20070261055A1 (en) * 2006-05-04 2007-11-08 Samsung Electronics Co., Ltd. Method and system for the generic and flexible access of available tasks through a user interface
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8935269B2 (en) * 2006-12-04 2015-01-13 Samsung Electronics Co., Ltd. Method and apparatus for contextual search and query refinement on consumer electronics devices
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US9292807B2 (en) 2007-05-10 2016-03-22 Microsoft Technology Licensing, Llc Recommending actions based on context
US10133372B2 (en) * 2007-12-20 2018-11-20 Nokia Technologies Oy User device having sequential multimodal output user interface
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
CN101282342B (zh) * 2008-05-30 2012-05-23 腾讯科技(深圳)有限公司 一种网络内容拉取方法与系统
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US20100077327A1 (en) * 2008-09-22 2010-03-25 Microsoft Corporation Guidance across complex tasks
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
WO2010067118A1 (en) 2008-12-11 2010-06-17 Novauris Technologies Limited Speech recognition involving a mobile device
DE102010064593A1 (de) * 2009-05-21 2015-07-30 Koh Young Technology Inc. Formmessgerät und -verfahren
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US10540976B2 (en) 2009-06-05 2020-01-21 Apple Inc. Contextual voice commands
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
DE202011111062U1 (de) 2010-01-25 2019-02-19 Newvaluexchange Ltd. Vorrichtung und System für eine Digitalkonversationsmanagementplattform
FR2956762B1 (fr) * 2010-02-19 2013-02-08 Alcatel Lucent Procede et systeme domotique contextuel.
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US8868538B2 (en) * 2010-04-22 2014-10-21 Microsoft Corporation Information presentation system
US9785987B2 (en) 2010-04-22 2017-10-10 Microsoft Technology Licensing, Llc User interface for information presentation system
US9043296B2 (en) 2010-07-30 2015-05-26 Microsoft Technology Licensing, Llc System of providing suggestions based on accessible and contextual information
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
JP5682705B2 (ja) 2011-03-30 2015-03-11 富士通株式会社 タスク実行制御装置、タスク実行制御システムおよびタスク実行制御方法
US10642934B2 (en) 2011-03-31 2020-05-05 Microsoft Technology Licensing, Llc Augmented conversational understanding architecture
US8943514B2 (en) 2011-04-30 2015-01-27 Samsung Electronics Co., Ltd. Middle partners
US8491384B2 (en) 2011-04-30 2013-07-23 Samsung Electronics Co., Ltd. Multi-user discovery
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US9208511B2 (en) 2011-08-22 2015-12-08 Simple Rules, Inc. System and method for location-based recommendations
US10505751B2 (en) * 2011-08-25 2019-12-10 Siemens Industry, Inc. Synergistic interface system for a building network
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US10192176B2 (en) * 2011-10-11 2019-01-29 Microsoft Technology Licensing, Llc Motivation of task completion and personalization of tasks and lists
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US20130311595A1 (en) * 2012-05-21 2013-11-21 Google Inc. Real-time contextual overlays for live streams
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US8949334B2 (en) 2012-07-26 2015-02-03 Microsoft Corporation Push-based recommendations
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
US10528385B2 (en) 2012-12-13 2020-01-07 Microsoft Technology Licensing, Llc Task completion through inter-application communication
US9313162B2 (en) 2012-12-13 2016-04-12 Microsoft Technology Licensing, Llc Task completion in email using third party app
US8990205B2 (en) 2013-01-28 2015-03-24 International Business Machines Corporation Data caveats for database tables
KR102516577B1 (ko) 2013-02-07 2023-04-03 애플 인크. 디지털 어시스턴트를 위한 음성 트리거
US9799005B2 (en) * 2013-03-07 2017-10-24 Samsung Electronics Co., Ltd. Computing system with contextual interaction mechanism and method of operation thereof
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
WO2014144949A2 (en) 2013-03-15 2014-09-18 Apple Inc. Training an at least partial voice command system
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
KR101922663B1 (ko) 2013-06-09 2018-11-28 애플 인크. 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
EP3008964B1 (en) 2013-06-13 2019-09-25 Apple Inc. System and method for emergency calls initiated by voice command
WO2015020942A1 (en) 2013-08-06 2015-02-12 Apple Inc. Auto-activating smart responses based on activities from remote devices
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US9406213B2 (en) 2013-12-27 2016-08-02 Google Inc. Notification engine
WO2015112152A1 (en) * 2014-01-23 2015-07-30 Nokia Corporation Apparatus and method for correlating context data
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
KR20150135820A (ko) * 2014-05-26 2015-12-04 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
WO2015184186A1 (en) 2014-05-30 2015-12-03 Apple Inc. Multi-command single utterance input method
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10311384B2 (en) 2015-07-29 2019-06-04 Microsoft Technology Licensing, Llc Automatic creation and maintenance of a taskline
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179588B1 (en) 2016-06-09 2019-02-22 Apple Inc. INTELLIGENT AUTOMATED ASSISTANT IN A HOME ENVIRONMENT
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US11107021B2 (en) 2016-11-06 2021-08-31 Microsoft Technology Licensing, Llc Presenting and manipulating task items
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
WO2018117685A1 (en) 2016-12-23 2018-06-28 Samsung Electronics Co., Ltd. System and method of providing to-do list of user
US10552218B2 (en) * 2017-01-06 2020-02-04 Microsoft Technology Licensing, Llc Dynamic context of tasks
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
WO2018232622A1 (en) 2017-06-21 2018-12-27 Microsoft Technology Licensing, Llc RECOMMENDATION OF MULTIMEDIA CONTENT THROUGH CONVERSATIONAL ROBOTS
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11132233B2 (en) * 2018-05-07 2021-09-28 Micron Technology, Inc. Thread priority management in a multi-threaded, self-scheduling processor
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
AU2019100576C4 (en) * 2018-06-03 2020-01-30 Apple Inc. Accelerated task performance
US10944859B2 (en) 2018-06-03 2021-03-09 Apple Inc. Accelerated task performance
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators
US11861674B1 (en) 2019-10-18 2024-01-02 Meta Platforms Technologies, Llc Method, one or more computer-readable non-transitory storage media, and a system for generating comprehensive information for products of interest by assistant systems
US11567788B1 (en) 2019-10-18 2023-01-31 Meta Platforms, Inc. Generating proactive reminders for assistant systems
US11183193B1 (en) 2020-05-11 2021-11-23 Apple Inc. Digital assistant hardware abstraction
DK202070658A1 (en) 2020-06-01 2022-01-13 Apple Inc Suggesting executable actions in response to detecting events
US11842228B2 (en) * 2022-04-22 2023-12-12 Dell Products L.P. Context specific orchestration of data objects

Family Cites Families (57)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05197573A (ja) 1991-08-26 1993-08-06 Hewlett Packard Co <Hp> タスク指向パラダイムによるタスク管理システム
JP3408850B2 (ja) 1992-12-09 2003-05-19 三菱電機株式会社 クライアント・サーバシステムおよびその制御方法、並びにクライアント機装置
US5812865A (en) * 1993-12-03 1998-09-22 Xerox Corporation Specifying and establishing communication data paths between particular media devices in multiple media device computing systems based on context of a user or users
US5555376A (en) 1993-12-03 1996-09-10 Xerox Corporation Method for granting a user request having locational and contextual attributes consistent with user policies for devices having locational attributes consistent with the user request
US5910799A (en) * 1996-04-09 1999-06-08 International Business Machines Corporation Location motion sensitive user interface
JP3857388B2 (ja) * 1997-06-27 2006-12-13 富士通株式会社 移動通信端末
US6563430B1 (en) * 1998-12-11 2003-05-13 Koninklijke Philips Electronics N.V. Remote control device with location dependent interface
US7225229B1 (en) * 1998-12-18 2007-05-29 Tangis Corporation Automated pushing of computer user's context data to clients
US7046263B1 (en) * 1998-12-18 2006-05-16 Tangis Corporation Requesting computer user's context data
US6848104B1 (en) 1998-12-21 2005-01-25 Koninklijke Philips Electronics N.V. Clustering of task-associated objects for effecting tasks among a system and its environmental devices
KR20010041425A (ko) 1998-12-29 2001-05-15 요트.게.아. 롤페즈 분포된 네트워크 장치를 갖는 홈 제어 시스템
US6957075B1 (en) * 1999-02-01 2005-10-18 Intel Corporation Method and apparatus for providing a location based appliance personality
JP4258585B2 (ja) 1999-03-19 2009-04-30 株式会社エクォス・リサーチ 目的地設定装置
US6256019B1 (en) * 1999-03-30 2001-07-03 Eremote, Inc. Methods of using a controller for controlling multi-user access to the functionality of consumer devices
US6567840B1 (en) 1999-05-14 2003-05-20 Honeywell Inc. Task scheduling and message passing
US20010032132A1 (en) * 2000-01-28 2001-10-18 Dan Moran System for message delivery in interactive communication networks
WO2001069380A2 (en) 2000-03-14 2001-09-20 Edapta, Inc. A system and method for enabling dynamically adaptable user interfaces for electronic devices
US7076255B2 (en) * 2000-04-05 2006-07-11 Microsoft Corporation Context-aware and location-aware cellular phones and methods
JP4576675B2 (ja) 2000-06-30 2010-11-10 ソニー株式会社 制御システム、制御機器及びサーバ
AU2001276992A1 (en) * 2000-07-20 2002-02-05 Aeptec Microsystems, Inc. Method, system, and protocol for location-aware mobile devices
JP2002049556A (ja) 2000-08-02 2002-02-15 Sharp Corp 家庭内メディア配信システム
JP2002063033A (ja) 2000-08-21 2002-02-28 Toko Seiki Co Ltd オントロジを備えた知識管理システム
US6931630B1 (en) * 2000-09-27 2005-08-16 International Business Machines Corporation Method of, system for, and computer program product for providing automatic identification of a computer program code candidate for web deployment or a stored procedure
US20030046401A1 (en) * 2000-10-16 2003-03-06 Abbott Kenneth H. Dynamically determing appropriate computer user interfaces
US7290039B1 (en) * 2001-02-27 2007-10-30 Microsoft Corporation Intent based processing
US20020138327A1 (en) * 2001-03-26 2002-09-26 Mello Celso Luis System for remotely managing elevator mechanic service routine
US7206559B2 (en) * 2001-10-16 2007-04-17 Hewlett-Packard Development Company, L.P. System and method for a mobile computing device to control appliances
US6954737B2 (en) * 2001-11-05 2005-10-11 Johnsondiversey, Inc. Method and apparatus for work management for facility maintenance
JP4164280B2 (ja) 2002-04-11 2008-10-15 キヤノン株式会社 周辺機器およびジョブ管理方法およびコンピュータが読み取り可能な記憶媒体およびプログラム
US7170422B2 (en) * 2002-06-24 2007-01-30 Matsushita Electric Industrial Co., Ltd. Personal programmable universal remote control
US6792323B2 (en) 2002-06-27 2004-09-14 Openpeak Inc. Method, system, and computer program product for managing controlled residential or non-residential environments
US7024256B2 (en) * 2002-06-27 2006-04-04 Openpeak Inc. Method, system, and computer program product for automatically managing components within a controlled environment
JPWO2004019225A1 (ja) 2002-08-26 2005-12-15 富士通株式会社 状況付情報を処理する装置および方法
US20040068504A1 (en) * 2002-10-04 2004-04-08 Peter Gobbi Serving apparatus for providing storage solutions
US20040100505A1 (en) 2002-11-21 2004-05-27 Cazier Robert Paul System for and method of prioritizing menu information
US8561069B2 (en) * 2002-12-19 2013-10-15 Fujitsu Limited Task computing
US8607280B2 (en) 2003-01-08 2013-12-10 Intel Corporation Resource and capability borrowing
US20040176118A1 (en) 2003-02-18 2004-09-09 Michael Strittmatter Service attribute based filtering system and method
JP2004266453A (ja) 2003-02-28 2004-09-24 Toshiba Corp ネットワークシステム、サーバ機器および通信方法
FR2852173B1 (fr) 2003-03-06 2005-05-27 France Telecom Systeme de creation d'ambiance et d'environnement de personnes a l'aide d'equipements electroniques multisensoriels
KR20040080663A (ko) 2003-03-12 2004-09-20 삼성전자주식회사 유비퀴터스 서비스 기능을 가지는 사설 네트워크 시스템및 그의 동작방법
US7064675B2 (en) * 2003-08-15 2006-06-20 Microsoft Corporation Context-sensitive remote controls
EP1526457B1 (en) 2003-10-22 2013-03-13 Sony Deutschland GmbH Context-aware automatic service discovery and execution engine in mobile ad-hoc networks
KR100651729B1 (ko) 2003-11-14 2006-12-06 한국전자통신연구원 홈네트워크 환경에서의 멀티-모달 상황 인식어플리케이션을 위한 시스템 및 방법
US7493294B2 (en) 2003-11-28 2009-02-17 Manyworlds Inc. Mutually adaptive systems
US7522549B2 (en) * 2004-04-16 2009-04-21 Broadcom Corporation Registering access device multimedia content via a broadband access gateway
WO2005104772A2 (en) * 2004-04-28 2005-11-10 Fujitsu Limited Semantic task computing
US20050267770A1 (en) * 2004-05-26 2005-12-01 International Business Machines Corporation Methods and apparatus for performing task management based on user context
US8099313B2 (en) 2004-09-22 2012-01-17 Samsung Electronics Co., Ltd. Method and system for the orchestration of tasks on consumer electronics
US8185427B2 (en) 2004-09-22 2012-05-22 Samsung Electronics Co., Ltd. Method and system for presenting user tasks for the control of electronic devices
US8412554B2 (en) 2004-09-24 2013-04-02 Samsung Electronics Co., Ltd. Method and system for describing consumer electronics using separate task and device descriptions
US7613285B2 (en) 2004-12-07 2009-11-03 Electronics And Telecommunications Research Institute System and method for service-oriented automatic remote control, remote server, and remote control agent
KR100682995B1 (ko) 2004-12-16 2007-02-15 한국전자통신연구원 유비쿼터스 기반의 상황 정보 제공 서비스 시스템 및 그방법
US8510737B2 (en) 2005-01-07 2013-08-13 Samsung Electronics Co., Ltd. Method and system for prioritizing tasks made available by devices in a network
US8069422B2 (en) * 2005-01-10 2011-11-29 Samsung Electronics, Co., Ltd. Contextual task recommendation system and method for determining user's context and suggesting tasks
US8972872B2 (en) 2006-03-27 2015-03-03 Fujitsu Limited Building computing applications based upon metadata
US20070233287A1 (en) 2006-03-30 2007-10-04 Samsung Electronics Co., Ltd. Dynamic generation of tasks in resource constrained devices

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8099313B2 (en) 2004-09-22 2012-01-17 Samsung Electronics Co., Ltd. Method and system for the orchestration of tasks on consumer electronics
US8185427B2 (en) 2004-09-22 2012-05-22 Samsung Electronics Co., Ltd. Method and system for presenting user tasks for the control of electronic devices
US8412554B2 (en) 2004-09-24 2013-04-02 Samsung Electronics Co., Ltd. Method and system for describing consumer electronics using separate task and device descriptions
KR100728021B1 (ko) * 2005-01-07 2007-06-13 삼성전자주식회사 네트워크 내 장치들에 의해 이용가능하게 만들어진태스크들을 순위 매기는 방법 및 시스템
US8510737B2 (en) 2005-01-07 2013-08-13 Samsung Electronics Co., Ltd. Method and system for prioritizing tasks made available by devices in a network
KR101460613B1 (ko) * 2007-05-15 2014-11-13 삼성전자주식회사 로컬 네트워크내의 장치의 사용자에게 적절한 정보를제공하는 방법 및 시스템
US8938465B2 (en) 2008-09-10 2015-01-20 Samsung Electronics Co., Ltd. Method and system for utilizing packaged content sources to identify and provide information based on contextual information

Also Published As

Publication number Publication date
KR100754194B1 (ko) 2007-09-03
EP1679831A3 (en) 2007-10-17
US8069422B2 (en) 2011-11-29
JP2006228198A (ja) 2006-08-31
EP1679831A2 (en) 2006-07-12
US20060156252A1 (en) 2006-07-13

Similar Documents

Publication Publication Date Title
KR100754194B1 (ko) 사용자의 컨텍스트를 결정하고 태스크들을 제안하기 위한컨텍스츄얼 태스크 제안 시스템 및 방법
US9619751B2 (en) Intelligent delivery of actionable content
US20060156307A1 (en) Method and system for prioritizing tasks made available by devices in a network
US8510453B2 (en) Framework for correlating content on a local network with information on an external network
JP2022095765A (ja) タグコンテンツおよびソーシャルネットワークコンテンツに基くクラウドで実行されたミニゲームをランク付けするシステムおよび方法
US8843467B2 (en) Method and system for providing relevant information to a user of a device in a local network
KR100961302B1 (ko) 인터랙티브 텔레비전용 개인 채널을 효과적으로 구현하기위한 시스템 및 방법
US8813060B2 (en) Context aware application model for connected devices
KR101989502B1 (ko) 검색 피처들을 제공하기 위한 시스템들 및 방법들
JP4434972B2 (ja) 情報提供システム、情報提供方法及びそのプログラム
US20070233287A1 (en) Dynamic generation of tasks in resource constrained devices
CN109478142B (zh) 呈现为预测的用户活动定制的用户界面的方法、系统和介质
US20140156277A1 (en) Information processing device and content retrieval method
JP6827496B2 (ja) リソースに対するアクションへのインデックス付け
US11310301B2 (en) Detecting sensor-based interactions with client device in conjunction with presentation of content
JP2022108263A (ja) メッセンジャーアプリケーションのチャットルームに関連して検索サービスを提供する方法および装置
KR102586286B1 (ko) 상황적 디지털 미디어 처리 시스템 및 방법
CN113438492B (zh) 直播中的题目生成方法、系统、计算机设备及存储介质
JP5788866B2 (ja) アイテムを格付けする方法及びシステム
US10157210B2 (en) Searching and accessing software application functionality using application connections
JP5448192B2 (ja) 検索システム、端末、サーバ、検索方法、プログラム
WO2019052926A1 (en) CONTENT MANAGEMENT SYSTEM AND METHOD OF OPERATION THEREFOR
WO2016158215A1 (ja) 情報処理システム
JP5542536B2 (ja) 情報処理装置及びダウンロード制御方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application
AMND Amendment
J201 Request for trial against refusal decision
B701 Decision to grant
GRNT Written decision to grant
G170 Re-publication after modification of scope of protection [patent]
LAPS Lapse due to unpaid annual fee