KR20160113144A - 엔티티 링크형 리마인더 통지들 - Google Patents

Abstract

컴퓨터로 구현된 방법 및 모바일 프로세싱 디바이스는 알려진 엔티티에 대한 연락처 정보와 연관시켜서 리마인더 데이터를 제공한다. 알려진 엔티티와 연관된 통신이 발생할 때 통지가 제공될 수 있다. 통신은 전화 콜, SMS 메시지, 이메일, 또는 통신 서비스들을 제공하는 제3자 애플리케이션의 형태를 취할 수 있다. 개인 컴퓨팅 디바이스에서의 임의의 검출가능한 통신은 알려진 엔티티에 기초하여 리마인더를 트리거할 수 있다. 리마인더 통지들은 인바운드(inbound) 통신 및 아웃바운드(outbound) 통신 상에서 트리거될 수 있다.

Description

엔티티 링크형 리마인더 통지들{ENTITY-LINKED REMINDER NOTIFICATIONS}

본 발명은 엔티티 링크형 리마인더 통지들에 관한 것이다.

"스마트" 모바일 디바이스들의 많은 이로운 이용들 중 한가지는 위치와 시간에 기초하여 리마인더들을 제공하는 것이다. 디바이스 사용자는 모바일 디바이스에서 리마인더들을 생성하고 트리거하는 데 있어서 많은 옵션들을 갖는다. 현재, 사용자들은 특정 시간에서 위치에 기초하여 경고문(alert)들을 트리거하도록 리마인더들을 세팅할 수 있다. 일반적으로, 리마인더들은, 텍스트이고, 스마트 디바이스 사용자 인터페이스 위에 놓인 "경고문"에서 제공된다. 경고문은 사용자가 디바이스를 계속해서 이용할 수 있기 전에 소거되어야 하며, 리마인더는 사용자로부터의 추가적인 입력없이 트리거된다.

알려진 엔티티(entity)에 대한 연락처 정보와 연관시켜 리마인더 데이터를 제공하기 위한 기술이 제공된다. 알려진 엔티티와 연관된 통신이 발생할 때, 알려진 엔티티와의 통신이 계속되기 전에 통지 리마인더들이 제공될 수 있다. 통신은 전화 콜(call), SMS 메시지, 이메일, 또는 통신 서비스들을 제공하는 제3자 애플리케이션(third-party application)의 형태를 취할 수 있다. 개인 컴퓨팅 디바이스에서의 임의의 검출가능한 통신은 알려진 엔티티에 기초하여 리마인더를 트리거할 수 있다. 리마인더 통지들은 인바운드(inbound) 통신 및 아웃바운드(outbound) 통신 상에서 트리거될 수 있다. 엔티티들은 개인들 및 그룹들을 포함할 수 있다. 리마인더 통지들 내에 포함된 리마인더 데이터는 사용자 입력 데이터, 제3자 애플리케이션들로부터의 데이터, 및 네트워크를 통해 액세스가능한 추가적인 데이터에 대한 링크들을 포함할 수 있다.

일 양태에서, 복수의 통신 채널들을 갖는 모바일 통신 디바이스가 제공된다. 디바이스는 디스플레이, 스피커 및 진동 엘리먼트를 비롯한 복수의 피드백 엘리먼트들뿐만이 아니라, 프로세서 및 이 프로세서로 하여금 엔티티 기반 리마인더 통지들을 제공하도록 명령하는 코드를 포함한다. 프로세서는 디스플레이 상에서 모바일 통신 디바이스에 의해 지원되는 통신 채널을 위한 상호작용 영역(interaction region)을 포함한 사용자 인터페이스를 디스플레이한다. 알려진 엔티티로부터의 통신이 통신 디바이스에 의해 지원되는 통신 채널을 통해 수행될 때, 알려진 엔티티가 이 알려진 엔티티와 연관된 적어도 하나의 리마인더를 갖는지 여부에 대한 결정이 행해진다. 만약 그러한 경우, 리마인더 데이터를 포함한 리마인더의 통지가 통신으로부터의 데이터와 함께 사용자 인터페이스에서 디스플레이된다.

본 요약은 아래의 상세한 설명에서 보다 상세하게 설명되는 개념들의 선택을 단순한 형태로 소개하기 위해 제공된 것이다. 본 요약은 청구된 발명내용의 중요한 특징들 또는 필수적인 특징들을 식별시키려는 의도는 없으며, 또한 청구된 발명내용의 범위를 결정하는데 도움을 주려고 의도된 것도 아니다.

도 1은 본 기술을 구현하기 위한 일반적인 방법을 나타내는 흐름도이다.
도 2a 내지 도 2c는 다양한 리마인더들의 디스플레이들 및 리마인더 선택 인터페이스들을 나타내는 스마트 프로세싱 디바이스를 위한 사용자 인터페이스를 도시한다.
도 3a 내지 도 3e는 사람(people) 링크형 리마인더의 생성을 도시하는 사용자 인터페이스들의 세트를 나타낸다.
도 3f는 본 기술에 따른 리마인더 데이터를 입력하기 위해 이용될 수 있는 대안적인 사용자 인터페이스를 나타낸다.
도 4a는 사용자가 전화 콜을 수신할 때의 텍스트 리마인더 데이터에 대한 모바일 디바이스 리마인더를 도시하는 사용자 인터페이스를 나타낸다.
도 4b는 사용자가 전화 콜을 수신할 때의 필기된 리마인더 데이터에 대한 모바일 디바이스 리마인더를 도시하는 사용자 인터페이스를 나타낸다.
도 4c는 사용자가 SMS 메시지에 개입되어 있을 때의 텍스트 리마인더 데이터에 대한 모바일 디바이스 리마인더를 도시하는 사용자 인터페이스를 나타낸다.
도 5a는 사용자가 인박스(inbox)에서 이메일 메시지를 수신할 때의 텍스트 리마인더 데이터에 대한 모바일 디바이스 리마인더를 도시하는 사용자 인터페이스를 나타낸다.
도 5b는 사용자가 이메일 메시지와 상호작용할 때의 텍스트 리마인더 데이터에 대한 모바일 디바이스 리마인더를 도시하는 사용자 인터페이스를 나타낸다.
도 6a와 도 6b는 사용자가 전화 콜 동안에 리마인더를 살펴보는 액션을 취할 때 개입되는 리마인더 인터페이스를 도시하는 제2 사용자 인터페이스를 나타낸다.
도 7a 내지 도 7e는 전화 콜의 완료에 이어서 리마인더를 생성하는 것을 포함하는 전화 통신 사용자 인터페이스들을 나타낸다.
도 8은 본 기술의 방법의 흐름도를 나타낸다.
도 9a는 모바일 디바이스에서 통신 채널들을 폴링(polling)하고 이에 따라 인바운드 통신을 위한 리마인더를 디스플레이하기 위한 제1 방법을 나타내는 흐름도이다.
도 9b는 메시징 애플리케이션들을 위한 리마인더 통지와 함께 활성 인터페이스를 인터럽트(interrupt)시키는 리마인더를 디스플레이하는 모바일 디바이스에서 통신 채널들을 통해 인바운드 통신 이벤트들을 폴링하기 위한 방법을 나타내는 흐름도이다.
도 9c는 이에 따라 아웃바운드 통신을 위한 리마인더를 디스플레이하는 모바일 디바이스에서 통신 채널들을 폴링하기 위한 방법을 나타내는 흐름도이다.
도 10은 모바일 프로세싱 디바이스를 나타내는 블럭도이다.
도 11은 통신들로부터 리마인더 데이터를 검색하는 방법을 나타내는 흐름도이다.
도 12는 리마인더 통지에서 이용하기 위한 리마인더 데이터 내에서 네트워크 액세스가능 데이터를 링크시키는 방법을 나타내는 흐름도이다.
도 13a 내지 도 13f는 도 12에서 나타낸 방법과의 이용에 적절한 사용자 인터페이스들을 나타낸다.

엔티티에 대한 연락처 정보와 연관된 리마인더 데이터를 리마인더 통지에서 제공하기 위한 기술이 제공된다. 이러한 “사람” 기반 리마인더들은 개인 컴퓨팅 디바이스에 이용가능한 통신 채널들 중 하나를 이용한 통신과 같은, 알려진 엔티티와 연관될 수 있는 활동이 발생할 때 모바일 폰과 같은 개인 컴퓨팅 디바이스 상에서 리마인더 통지를 트리거하도록 해준다. 알려진 엔티티들은 개인 컴퓨팅 디바이스 내에 저장된 연락처 기록에 의해 식별될 수 있다. 통신은 전화 콜, SMS 메시지, 이메일, 또는 통신 서비스들을 제공하는 제3자 애플리케이션의 형태를 취할 수 있다. 개인 컴퓨팅 디바이스에서의 임의의 검출가능한 통신은 알려진 엔티티에 기초하여 리마인더를 트리거할 수 있다. 리마인더 통지들은 인바운드(inbound) 통신 및 아웃바운드(outbound) 통신 상에서 트리거될 수 있다. 엔티티들은 개인들 및 그룹들을 포함할 수 있다.

각각의 통신 채널은 통신 사용자 인터페이스에 의해 디바이스 상에서 액세스될 수 있다. 전화 콜은 전화 인터페이스를 포함한 통신 사용자 인터페이스를 통해 액세스된다. SMS 애플리케이션 및 이메일 애플리케이션과 같은 메시징 채널(메시징 통신 채널)을 이용한 메시징 애플리케이션들은 SMS 통신 채널 및 이메일 통신 채널과의 상호작용을 가능하게 해주는 메시징 사용자 인터페이스들인 통신 사용자 인터페이스들을 제공한다. 제3자 애플리케이션들은 다른 통신 채널들을 위한 다른 유형들의 통신 사용자 인터페이스들을 제공할 수 있다.

도 1은 본 기술에 따른 일반적인 방법을 나타내는 흐름도이다. 일반적으로, 엔티티와 연관된, 모바일 프로세싱 디바이스와 같은 프로세싱 디바이스에 의한 통신 활동은 엔티티와 연관된 리마인더 통지를 트리거할 수 있다. 단계(110)에서, 리마인더 데이터를 수신하기 위한 인터페이스가 제공된다. 리마인더 데이터는, 엔티티와 연관될 수 있고 알려진 엔티티와의 통신 이벤트에 의해 트리거된 리마인더 통지에서 디스플레이될 수 있는 임의의 데이터를 포함한다. 하나의 실시예에서, 인터페이스는 모바일 폰과 같은 개인 컴퓨팅 디바이스와 연관된 사용자 인터페이스이다. 사용자 인터페이스는 사용자로 하여금 리마인더 통지에서 제공될 리마인더 데이터를 수동으로 입력하도록 해준다. 대안적인 실시예에서, 인터페이스는 제3자들로 하여금 리마인더 통지에서 이용될 리마인더 데이터를 제공하기 위한 제3자 애플리케이션들에 연결되도록 해주는 애플리케이션 프로그래밍 인터페이스이다. 단계(112)에서, 리마인더 데이터가 인터페이스를 통해 수신된다. 리마인더 데이터는 텍스트, 잉크 노트, 사진, 기록 또는 개인 컴퓨팅 디바이스에 의해 수집될 수 있는 임의의 정보를 포함한, 임의의 개수의 상이한 유형들의 데이터일 수 있다. 마찬가지로, 애플리케이션 프로그래밍 인터페이스는 제3자들 또는 제3자 애플리케이션들로부터 이러한 다양한 상이한 유형들의 데이터를 수신하기 위해 활용될 수 있다. 단계(114)에서, 리마인더 데이터는 통신 활동에 기초하여 리마인더 통지를 생성하는 데에 이용하기 위한 엔티티 정보와 연관된다. 하나의 실시예에서, 엔티티를 개인 컴퓨팅 디바이스의 하나 이상의 사용자들에게 식별해주는 “연락처” 기록 내에 엔티티 정보가 저장된다. 리마인더 데이터가 엔티티와 연관되면, 단계(116)에서, 리마인더 데이터를 갖는 엔티티와 연관된 통신이 개시되었는지 여부에 대한 결정이 행해진다. 만약, 이러한 통신이 개시되지 않았다면, 단계(120)에서 통신이 계속된다. 만약, 이러한 통신이 개시된 경우, 후술하는 바와 같이, 단계(118)에서, 통신에 적절한 인터페이스에서 리마인더 데이터가 리마인더 통지에서 제공된다.

리마인더들을 제공할 수 있는 인터페이스들의 다양한 예시들이 여기서 개시된다. 리마인더 통지들의 복수의 설명들을 시각적 리마인더 통지를 참조하여 논의하지만, 많은 개인 컴퓨팅 디바이스들은 리마인더 통지가 제공될 때 시각적 인디케이터와 함께 활용될 수 있는 스피커들 및 진동 메커니즘들을 포함한다.

엔티티 기반 리마인더 통지를 트리거하는 통신 이벤트는 인바운드 통신 또는 아웃바운드 통신일 수 있다. 개인 컴퓨팅 디바이스는, 예컨대, 전화 채널, SMS 채널, 및 이메일 채널을 비롯한 임의의 개수의 상이한 통신 채널들을 가질 수 있다. 다양한 상이한 유형들의 음성 통신 또는 데이터 메시징 애플리케이션들을 통해 제3자 애플리케이션들에 의해 제공된 것과 같은 다른 유형들의 통신 채널들은 또한 본 기술의 상황 내에서의 통신 채널들로서 간주될 수 있다. 통신 채널과 연관된 통신은 절단(truncation)이 연관된 엔티티로부터 온 것인지 여부를 결정하기 위한 이벤트를 트리거한다. 하나의 실시예에서, 통신 채널이 전화 콜과 같은 통신과 연관된 이벤트를 생성하면, 해당 이벤트는 통신이 알려진 엔티티로부터 온 것인지 여부에 관한 결정을 트리거하고 리마인더 통지를 발송할지 여부를 결정하는 데에 이용된다. 예컨대 SMS와 같은, 프로세싱 디바이스 상의 운영체제의 다른 양태들을 인터럽트하는 이벤트를 생성하지 않을 수 있는 채널을 통해 통신이 이뤄진 경우, 폴링 에이전트는 이러한 채널들 상의 통신들의 인스턴스(instance)들을 모니터하고 통지를 생성할지 여부를 결정할 수 있다. 리마인더 통지들은 인터페이스에서 제공될 수 있고/있거나, 비제한적인 예시로서, 통지 리마인더, 사운드, 진동 등의 시각적 디스플레이를 비롯한, 개인 컴퓨팅 디바이스의 청각적/시각적 능력들 중 임의의 것을 이용하여 제공될 수 있다.

도 2a 내지 도 2c는 모바일 폰과 같은 개인 컴퓨팅 디바이스에서의 리마인더 데이터를 디스플레이하기 위한 다양한 사용자 인터페이스들을 나타낸다. 도 2a 내지 도 2c는 알려진 엔티티와의 어떠한 특정 통신도 트리거되지 않은 경우의 인터페이스에서의 초기 스크린들을 나타낸다. 도 3a 내지 도 3f, 및 도 7c 내지 도 7e는 엔티티 기반 리마인더들의 생성을 위한 인터페이스들을 나타내는 반면에, 도 4a 내지 도 7b는 다양한 유형들의 리마인더 통지들을 나타낸다.

도 2a 내지 도 2c의 인터페이스 예시들은 리마인더 데이터가, 통신 이벤트들에 의해 트리거된 리마인더 통지들 이외의 다른 형태들로 알려진 엔티티와의 연관과 함께 인터페이스들에서 디스플레이될 수 있는 것을 나타낸다. 모바일 폰을 위한 한가지 유형의 사용자 인터페이스는 웨싱톤주 레드몬드에 있는 마이크로소프트사로부터 입수가능한 윈도우 폰 운영체제에서 이용가능한 타일형(tiled) 인터페이스를 포함한다. 이 유형의 인터페이스는 개인 컴퓨팅 디바이스의 디스플레이 영역 내의 다양한 데이터 소스들로부터의 정보를 디스플레이하는 “활성” 또는 “라이브” 타일들을 포함한다. 도 2a에서는 리마인더 정보뿐만이 아니라 모바일 디바이스에 의해 저장된 다른 정보 둘 다를 포함한 타일들의 세트를 나타낸다. 모달 경고문 다이얼로그 및 오버레이 통지들을 비롯한, 다른 유형들의 리마인더 통지들이 아래에 디스플레이 되고 이용중에 있는 통신 사용자 인터페이스 및 통신 채널에 기초하여 활용된다.

도 2a 내지 도 2c는 타일 및 리스트 형태의 엔티티 기반 리마인더들뿐만이 아니라 다른 유형들의 리마인더들을 보여주는 사용자 인터페이스(200)의 제1 실시예를 나타낸다. 엔티티 기반 리마인더들은 임의의 개수의 상이한 사용자 인터페이스들에서 디스플레이될 수 있다. 도 2a는 예컨대, 시간 기반 리마인더(204) 및 위치 기반 리마인더(206)를 비롯한, 다른 유형들의 리마인더 정보를 제공하는 복수의 다른 타일들과 더불어, 타일로 디스플레이되는 엔티티 리마인더(202)를 갖는 사용자 인터페이스(200a)를 나타낸다. 통지와 연관된 리마인더 데이터가 디스플레이된다. 시간 기반 리마인더는 특정 시간에 컴퓨팅 디바이스 인터페이스 상에서 리마인더 통지를 디스플레이한다. 위치 기반 리마인더는 일반적으로 사용자가 특정 위치에 있다는 것이 검출될 때 리마인더 데이터의 통지를 디스플레이한다.

도 2a에서 나타난 바와 같이, 모든 유형들의 리마인더들 및 노트들과 연관될 수 있는 데이터 유형은 텍스트, 잉크 노트, 오디오 노트, 기록물 및/또는 사진, 또는 개인 컴퓨팅 디바이스 내에 저장된 임의의 시청각 콘텐츠를 포함할 수 있다. 또한, 리마인더 데이터는 제3자 콘텐츠 또는 제3자 애플리케이션들에서 이용가능한 콘텐츠에 대한 링크들을 포함할 수 있다. 리마인더와 연관될 수 있는 리마인더 데이터의 유형은 이러한 데이터를 캡처하는 데에 이용된 개인 컴퓨팅 디바이스의 능력들에 의해서만 한정된다. 리마인더 데이터는, 일단 캡처되면, 여기서 설명된 바와 같이, 알려진 엔티티 정보와 연관지어질 수 있다.

도 2c에서 나타난 바와 같이, 사용자는 또한 예컨대, 시간에 의한(by time)(230), 위치에 의한(by location)(235), 또는 인간에 의한(by person)(240) 리마인더들과 같은, 단하나의 카테고리의 리마인더들을 디스플레이하는 것을 선택할 수 있다.

“인간” 및 “사람”의 명명법은 엔티티와 연관된 연락처 정보를 식별하는 데에 이용된다는 것을 이해해야 한다. 이에 따라, “인간”은 사람, 사업 또는 기업 엔티티들을 비롯하여, 임의의 유형의 엔티티에 대한 임의의 저장된 연락처 정보를 포함할 수 있다.

도 2b는 도 2a에서 나타난 세 개의 유형들의 리마인더들을 나열한 리스트 디스플레이 인터페이스(200b)를 나타낸다. 도 2a에서, 리마인더들은, 예컨대, 노트들 및 달력 정보와 같은, 개인 컴퓨터 디바이스들 내에 저장된 다른 유형들의 데이터와 결합된다. 도 2b에서는, 세 개의 상이한 유형들의 리마인더들이 리스트 포맷으로 나타난다. 본 기술에 따르면, 다양한 유형들의 사용자 인터페이스들이 활용될 수 있다. 도 2b의 사용자 인터페이스에서, 사용자는 “리마인더” 메뉴 아이템을 선택할 수 있고, 이 메뉴 아이템은 개인 컴퓨팅 디바이스 내에 저장된 리마인더 데이터만을 소팅(sort)하고 디스플레이한다. 본 기술과의 이용에 적절한 개인 컴퓨팅 디바이스가 도 10에서 나타난다.

도 3a 내지 도 3f는 사용자 인터페이스를 활용하여 리마인더 데이터를 개인 컴퓨팅 디바이스 내로 입력하는 다양한 인터페이스들 및 방법들을 나타낸다. 리마인더 데이터는 프로세싱 디바이스 상에서 통신이 발생하는 경우에 디스플레이되는 리마인더 통지들을 생성하는 데에 이용된다. (도 4a 내지 도 6b, 도 7a 및 도 7b는 다양한 유형들의 리마인더 통지들을 나타낸다)

도 3a 내지 도 3f에서 나타난 사용자 인터페이스들은 단지 예시에 불과하다. 도 3a는 키보드(305) 및 텍스트 엔트리 영역(303)을 제공하는 모바일 디바이스 인터페이스(300a)를 나타낸다. 도 3a에서, 사용자는 “grab coffee”(커피 한 잔 하기) 텍스트를 입력 중에 있다. 도 3a에서, 사용자가 적절한 리마인더 데이터, 이 경우에서는 “grab coffee”를 입력하면, 사용자는 “next” 버튼(307)을 선택하고, 도 3b에서 나타난 “pick a reminder type”(리마인더 유형 고르기) 스크린(300b)으로 유도된다. 리마인더의 유형은 예컨대, 사용자 손(350)이 “person” 엔트리를 선택하는 터치 스크린 인터페이스를 이용하여, 리마인더 유형 스크린 상의 “person” 엔트리를 선택함으로써 선택될 수 있다. Person 엔트리를 선택하는 것은 리마인더 데이터가 엔티티 정보와 연관되도록 유도한다. 사용자가 “person” 메뉴 아이템을 선택함으로써 엔티티 리마인더에 입력하는 것을 선택할 때, 사용자에게는, 도 3c에서 도시된 바와 같은 연락처를 사용자가 택할 수 있도록 해주기 위한 인터페이스(300c)가 제공될 수 있다. 엔티티들은 “family”(308) 및 “favorites”(310)와 같은 그룹들로 조직화될 수 있다. 인터페이스들에는 또한 인터페이스에서 제공된 버튼(312)을 통해 액세스가능한 검색 기능이 제공된다. 사용자 인터페이스(300c)에서, 엔티티 정보는 사용자가 연락처 엔트리들 중 하나를 “터치”함으로써 선택될 수 있다. 인터페이스(300c)는 사용자로 하여금 사용자의 연락처 데이터 내의 엔트리들을 알려진 방식으로 스크롤할 수 있도록 해준다.

택일적 사항으로서, 사용자는 버튼(312)을 선택함으로써 연락처 데이터를 검색하는 것을 선택할 수 있다. 검색이 선택되면, 도 3d에서 도시된 것과 같은 인터페이스(300d)가 제공된다. 키보드(305)는 사용자로 하여금 특정 연락처를 선택하기 위해 필드(324) 내에 검색 텍스트를 입력하도록 해주며, 도 3a에서 입력된 리마인더 데이터는 이 특정 연락처와 연관될 것이다. 도 3e는 모바일 컴퓨팅 디바이스 내에 이전에 입력되었던 다른 리마인더들의 리스트와 더불어 결과적인 리마인더 엔트리(344)를 나타낸다. 엔트리는 “Joe Smith”(조 스미스)의 엔티티 연관과 더불어 리마인더 데이터 “get coffee”(커피 마시기)를 포함한다.

도 3f는 사용자로 하여금 키보드 또는 프리핸드 엔트리를 이용하여 텍스트를 작도하거나 또는 입력하도록 해주는 잉크 또는 프리핸드 작도 필드(345) 엔트리 필드를 비롯한, 복수의 상이한 유형들의 데이터 엔트리 필드들을 포함한다. 두 개의 메뉴 아이템들은 사용자로 하여금 참조번호 355에서 프로세싱 디바이스 카메라 애플리케이션에 액세스하고 참조번호 365에서 음성 레코딩 애플리케이션에 액세스 하도록 해준다. 사용자는 모바일 프로세싱 디바이스 카메라에 액세스하는 것을 선택함으로써 사진 데이터를 입력하거나 또는 레코딩 애플리케이션에 액세스하는 것을 선택함으로써 기록된 엔트리들을 입력할 수 있다.

도 4a 내지 도 4c는 전화 콜 및 SMS 메시지의 수신 시에 제공될 수 있는 상이한 유형들의 리마인더 통지들을 나타낸다. 본 설명은 전화 콜들의 수신을 논의하지만, 리마인더들은 사용자가 전화 콜을 개시하거나, SMS 메시지를 개시하거나, 또는 이메일을 개시할 때 제공될 수 있다는 것을 인식해야 한다.

도 4a에서 도시된 사용자 인터페이스(400a)는 알려진 엔티티로부터의 착신 전화 콜에 대한 연락처 정보와 더불어 제공된 리마인더 데이터를 포함하는 리마인더 통지를 나타낸다. 리마인더 통지는 전화 콜 통지에 대한 오버레이로서 제공되며, 리마인더 통지 상에서 이용될 수 있는 제한된 액션들을 제공한다. “전화 콜” 용어는 비제한적인 예시로서 셀룰러 네트워크 콜 또는 VOIP(voice over IP) 통신을 비롯한 임의의 유형의 음성 통신을 포함할 수 있다는 것을 이해해야 한다. 발신자의 전화번호를 알려진 엔티티 정보와 연관시키기 위해 표준적인 발신자 식별 기술들이 이용될 수 있다. 엔티티에 대한 연락처 데이터는 전화 콜이 수신될 때 디스플레이되는 사진(404)과 연락처 이름(406)을 제공할 수 있다. 사용자 인터페이스는 전화 콜과 관련하여 각각의 응답 및 무시 액션을 취하기 위한 응답(answer) 키(408) 또는 무시(ignore) 키(410)를 제공한다. 하나의 실시예에서, 리마인더 데이터를 포함한 리마인더 통지(402)가 발신 당사자와 관련한 텍스트의 형태로 디스플레이된다. 텍스트는 해당 엔티티에 대한 식별 정보뿐만이 아니라 전화 콜에 대한 제어들로의 사용자 완전 액세스를 가능하게 해주는 영역에서 디스플레이된다.

도 4b는 발신자 엔티티와 관련한 잉크 데이터의 이용을 나타낸다. 인터페이스(400b)는 사용자가 해당 엔티티와 연관시킨, 손으로 쓴 노트를 리마인더 데이터(412)가 포함하는 것을 보여준다. 다시, 리마인더 데이터는 액션 영역(응답 키(408)와 무시 키(410)) 이외의, 사용자 인터페이스의 디스플레이 영역에서의 통지에서 제공된다.

도 4c는 SMS 애플리케이션(444)에서 디스플레이되는 리마인더 통지(422)를 나타낸다. 통지(422)는 사용자가 SMS 대화를 진행할 수 있기 전에 해당 통지와의 사용자 상호작용을 프롬프트(promp)하는 모달 경고문 다이얼로그이다. 대안적인 실시예에서, 경고문(422)은 사용자 입력을 요구할 필요는 없지만, 사용자가 다이얼로그 외부에 있는 인터페이스의 영역을 터치할 때 사라지도록 구성될 수 있다. 리마인더 통지(422)는 리마인더 데이터, 연락처 이름뿐만이 아니라 리마인더 통지(422)를 스누징(snooze)(424)하고 퇴장(dismiss)(426)시킬 옵션들을 포함한다. 이 예시에서, 통지(420)는 사용자가 SMS 애플리케이션의 대화 모드에 개입해 있는 동안에 제공된다. 다른 대안구성들에서, 통지는 SMS 메시지가 수신되고 사용자가 SMS 애플리케이션을 실행하지 않은 때에 제공될 수 있다. 리마인더 통지 포맷은 예컨대, MMS를 비롯한 다른 유형들의 메시징 애플리케이션들과 함께 활용될 수 있다. 이메일 및 임의의 제3자 앱도 마찬가지를 경험한다.

도 5a와 도 5b는 이메일 애플리케이션에서의 리마인더 통지의 디스플레이를 나타낸다. 도 5a에서, 사용자 인터페이스(500a)는 사용자 인터페이스 상에서의 사용자 이메일 인박스를 보여준다. 사용자는 참조번호 506에서의 메뉴 옵션들을 이용하여 모든 메시지, 안읽은 메시지, 또는 플래그 메시지를 디스플레이하는 것을 선택할 수 있다. 참조번호 504에서 인박스 뷰에서의 각각의 이메일의 단편이 사용자 이름과 타이틀에 의해 디스플레이된다. 단편(504)에 의해 표시된 것과 같은 신규 이메일이 수신될 때, 리마인더 통지 윈도우(514)는 리마인더 데이터(515)뿐만이 아니라, 리마인더 통지를 스누징(522)하고 퇴장(524)시킬 옵션들을 보여준다. 다시, 사용자는 사용자의 이름을 터치함으로써 메시지를 선택할 수 있고, 그 결과 사용자 인터페이스(500b)에서 도시된 것과 같은 메시지의 디스플레이를 초래시킨다. 도 5b에서 나타난 바와 같이, 사용자로 하여금 메시지 애플리케이션과 상호작용하도록 해주는 것을 비롯하여, 사용자로 하여금 메시지 디스플레이(550)와 상호작용하도록 해주는 디스플레이 영역 내에 통지 리마인더 데이터(515)가 제공된다. 다음 메시지를 선택할 옵션들뿐만이 아니라, 답신 및 삭제와 같은 일반적인 메시지 애플리케이션 기능들이 메뉴(555)에서 제공된다. 사용자는 리마인더 윈도우(514) 또는 메시지 디스플레이(550) 또는 메뉴(555) 중 임의의 것과 상호작용하는 것을 택할 수 있다.

도 6a와 도 6b는 사용자가 알려진 엔티티로부터 전화 콜을 수신할 때의 엔티티 링크형 리마인더 통지의 제공의 제2 실시예를 나타낸다. 도 6a에서 나타난 바와 같이, 인터페이스(600a)에서, 사용자는 텍스트(602)와 사진(604)에 의해 표시된 연락처로부터 전화 콜을 수신한다. 사용자는 전화 콜에 개입할 필요는 없지만, 사용자가 전화 콜에 개입하는 것을 택하면, 인터페이스(600a)에서, 사용자는 버튼(640)을 터치하고 디스플레이와 맞물린 상태에서 윗방향으로 스위핑함으로써 “밀어올리기”(610) 할 것으로 프롬프팅된다. 사용자는 메뉴 옵션(606)을 제공받을 수 있고, 사용자가 밀어올리기를 인용할 것을 프롬프팅하는 텍스트(608)를 프롬프트하며, 사용자는 발신자 엔티티에 관한 리마인더 정보를 바라보기를 희망한다. 사용자가 밀어올리기하면, 도 6b에서 도시된 바와 같이 인터페이스(600b)가 제공된다. 참조번호 630에서 전화 콜에 응답하거나, 참조번호 640에서 전화 콜을 무시하거나, 참조번호 650에서 텍스트 답변을 제공하기 위한 전화 콜 인터페이스 버튼들을 포함하는 활성 영역 위의 디스플레이 영역 내에 리마인더 정보(622)(리마인더 데이터)가 제공된다. 리마인더는 전화 콜과 상호작용하는 것을 시작하기 위해 사용자가 밀어올리기를 할 때 까지 나타나지 않는다. 사용자는 리마인더 사용자 인터페이스가 나타나는 것에 대해 응답할 필요가 없다는 것을 유념해둔다. 리마인더 텍스트는 잠금 위 착신 콜 스크린 상에서 보여질 수 있다.

도 7a와 도 7b는 사용자가 전화 콜에 개입할 때 사용자로 하여금 엔티티와 연관된 리마인더 데이터를 수정하도록 해주는 사용자 인터페이스를 나타낸다. (하나의 실시예에서, 이것은 도 6b에서 도시된 “응답(answer)” 키(630)를 사용자가 선택한 후에 발생한다) 전화 콜 동안에, 리마인더는 추가적인 상호작용으로 이어질 수 있다. 즉, 리마인더 텍스트를 탭핑하는 것은 아이템을 오픈시킨다. 현재 전화 콜 동안에 아이템이 변경되면 아이템 변경은 현재 전화 콜에 반영될 수 있거나 반영되지 않을 수 있다. 도 7a에서 나타난 바와 같이, 사용자 인터페이스(700a)는 이름 텍스트(704)와 사진(702)을 통해 엔티티 연락처 정보를 보여준다. 또한, 리마인더 정보(712)는 연락처 정보 상에 오버레이되면서 디스플레이된다. 통화 중 메뉴(715)는 사용자로 하여금, 콜을 스피커로 이동시키기, 콜을 무음처리하기, 추가적인 발신자들을 추가하기, 콜을 보류시키기, 비디오 서비스로 이동시키기, 또는 블루투스 연결된 디바이스로 이동시키기를 가능하게 해준다. 사용자는 또한 콜을 종료하거나 또는 숫자 키패드를 가져오기할 수 있다. 사용자가 버튼(720)을 선택함으로써 콜을 종료하는 것을 선택하면, 제공되는 인터페이스는 도 7b에서의 인터페이스(700b)에서 제공된다. 인터페이스(700b)에서, 사용자에게는 이전 사용자에게 다시 전화걸기, 이전 사용자에게 메시지 보내기, 참조번호 722에서 리마인더를 완료하기를 위한 옵션들이 제공된다. 리마인더 완료하기는 해당 리마인더를 “완료됨”으로서 표시하거나 또는 리마인더 상에 다른 액션들을 허용할 수 있다.

도 7c는 어떠한 리마인더도 발신자와 연관되지 않은 경우의 통화 중 인터페이스(700c)를 나타낸다. 도 7c에서 나타난 바와 같이 사용자가 콜을 종료할 것을 선택하면, 이전 사용자에게 다시 전화걸기, 이전 사용자에게 메시지 보내기, 참조번호 728에서 리마인더를 생성하기를 위한 옵션들을 사용자에게 제공하는 도 7d의 인터페이스(700d)가 제공될 수 있다. 사용자가 리마인더 생성 버튼(728)을 선택하면, 도 7e의 인터페이스(700e)가 제공된다. 인터페이스는 프로세싱 디바이스가 통신에 개입하였던 이전 엔티티, 임의의 이전 리마인더 텍스트(725), 및 사용자로 하여금 리마인더 데이터를 포함하는 텍스트를 변경하도록 해주는 키보드를 링크시킨다. 또다른 실시예에서, 리마인더 완료하기는 (도 7b에서의 인터페이스(700b)에서 도시된) 기존 리마인더를 부가 또는 편집하기 위한 옵션(이것은 이전에 엔티티와 연관된 리마인더 데이터를 사용자 인터페이스(700e)가 추가하는 것을 야기시킬 것이다)을 제공할 수 있다.

대안적인 실시예에서, 엔티티와의 통신에 개입할 때 리마인더 데이터가 입력되고 엔티티와 연관지어질 수 있다는 것을 인식해야 한다. 예를 들어, 알려진 엔티티와의 전화 콜에 개입할 때, “리마인더” 엔트리가 인터페이스(700c)에 추가될 수 있으며, 이 인터페이스(700c)는 전화 콜에 개입할 때 엔티티와 연관된 리마인더 데이터를 추가하기 위해 인터페이스(700e)(도 7e 참조)와 유사한 디스플레이를 생성한다.

도 8은 데이터를 알려진 엔티티와 연관시키기 위한 방법을 나타낸다. 리마인더 데이터 - 리마인더 통지에서 디스플레이될 정보 - 는 복수의 상이한 소스들 중 임의의 소스로부터 나올 수 있다. 몇몇의 경우들에서, 리마인더 데이터는 사용자에 의해 수동적으로 입력될 수 있다. 단계 802에서, 리마인더 사용자 인터페이스의 선택이 프로세싱 디바이스에 의해 수신될 수 있다. 단계 804에서, 리마인더 선택 유형들이 디스플레이될 수 있다. 이 디스플레이의 한가지 예시는 도 3b에서 상술된 것이다. 단계 806에서, 리마인더 정보의 사용자 입력이 검색된다. 리마인더를 위한 사용자 입력을 수신하는 사용자 인터페이스의 한가지 예시가 도 3a에서 도시된다. 도 3a 및 도 3b와 관련하여 유념한 바와 같이, 단계 806과 단계 804는 뒤바뀔 수 있다. 다른 실시예들에서, 리마인더 정보는 프로세싱 디바이스 내의 애플리케이션 프로그래밍 인터페이스와의 통신을 통해 제3자 소스로부터 수신될 수 있다. 단계 808에서, 리마인더 데이터의 세트가 제3자 소스로부터 수신될 수 있다. 또다른 실시예에서, 단계 810에서, 리마인더 데이터는 스마트 어시스턴트로부터 수신될 수 있다. 스마트 어시스턴트는 데이터를 입력하고 검색하라는 사용자 명령들에 응답하기 위해 프로세싱 디바이스 내의 데이터를 활용하는, 음성 입력에 응답하는 개인 정보 애플리케이션이다. 예를 들어, “get coffee with Joe Smith”(조 스미스와 커피 마시기)의 음성 명령은 프로세싱 디바이스 상의 연락처 데이터베이스 내에서 조 스미스에 대한 연락처 데이터 내에 저장된 엔티티 정보로의 링크와 함께 “get coffee”(커피 마시기) 텍스트의 엔티티 링크형 리마인더를 생성할 수 있다. 단계 820에서, 리마인더의 선택이 엔티티 링크형 리마인더에 관한 것인지 여부에 대한 결정이 행해진다. 그렇지 않은 경우, 데이터는 위치 기반 리마인더 또는 시간 기반 리마인더를 위한 프로세스(825)로 이송될 수 있다. 단계 820에서 선택이 엔티티 기반 리마인더에 대한 것인 경우, 단계 830에서 리마인더 데이터가 단계 802~단계 810에서 상기 언급된 소스들 중 하나로부터 수집되고, 리마인더에 추가시키기 위해 디바이스 데이터 소스들로부터 추가적인 알려진 정보를 선발한다. 단계 840에서, 도 10과 관련하여 아래에서 논의될 바와 같이, 리마인더 정보는 연락처 데이터 저장장치 내의 엔티티 연락처 기록과 링크된다. 단계 850에서, 연락처 기록 내 리마인더는 트리거링 이벤트를 위해 저장된다. 여기서 설명된 바와 같이, 트리거링 이벤트는 프로세싱 디바이스 상에서 이용가능한 통신 채널들 중 하나의 통신 채널을 통한 아웃바운드 또는 인바운드 통신을 포함할 수 있다.

도 9a는 인바운드 통신이 수신된 때 프로세싱 디바이스의 상태에 기초하여 통지 리마인더를 디스플레이할지 여부를 결정하기 위한 방법의 흐름도를 나타낸다. 도 9a에서는 트리거링 이벤트로서 통신 디바이스에 의한 통신을 개시하는 것을 나타낸다. 도 9b에서는 통신 애플리케이션이 활성화되지 않은 경우에 리마인더 통지를 디스플레이하는 대안적인 방법을 나타낸다. 도 9c에서는 사용자에 의해 생성된 트리거링 이벤트를 나타낸다. 도 9a 및 도 9b의 각각의 경우에서, 리마인더 데이터는 엔티티와 연관지어진다는 것을 유념해야 한다. 어떠한 리마인더 데이터도 엔티티와 연관되지 않거나, 또는 리마인더가 엔티티와 연관되고 해산되면, 어떠한 리마인더 통지도 제공되지 않는다.

단계 902에서, 초기에 트리거링 이벤트가 발생하였는지 여부에 대한 결정이 행해진다. 트리거링 이벤트는 프로세싱 디바이스에 의해 지원된 통신 채널을 통한 통신의 개시 또는 수신일 수 있다. 트리거링 이벤트가 발생하면, 단계 904, 단계 916, 단계 930, 단계 940에서, 발생하는 트리거링 이벤트의 유형에 의존하여 액션들이 취해진다. 단계 904에서 트리거링 이벤트가 전화 콜이면, 단계 905에서, 발신자를 디스플레이하는 전화 인터페이스가 디스플레이되고, 단계 906에서, 사용자가 전화 인터페이스와 상호작용하는 것을 선택하였는지 여부에 대한 결정이 행해진다. 위에서 나타난 바와 같이, 하나의 실시예에서, 사용자는 착신 전화 콜과 연관된 리마인더 데이터를 살펴보기 위해 사용자 인터페이스에서 밀어올리기해야 한다. 사용자가 리마인더를 살펴보는 것을 선택하면, 단계 910에서 리마인더 데이터와 함께 리마인더 통지가 디스플레이된다. 사용자가 리마인더를 살펴보는 것을 선택하지 않으면, 단계 914에서, 디바이스는 사용자 전화 콜에 대한 입력을 기다린다. 만약, 사용자가 전화 인터페이스와 상호작용하는 것을 선택하지 않으면, 단계 907에서 전화 콜은 타임아웃된다. 사용자가 예컨대, 사용자 인터페이스를 (도 7a에서와 같이) 밀어올림으로써 사용자 인터페이스와 상호작용하면, 리마인더 통지가 디스플레이되고, 단계 912에서 본 방법은 리마인더에 대한 사용자 입력을 기다리거나, 또는 단계 914에서 전화 앱에 대한 사용자 입력을 기다린다. 리마인더에 대한 입력, 전화 앱에 대한 입력 후, 또는 콜이 무응답으로 진행되면, 본 방법은 다음 인바운드 트리거링 이벤트를 기다린다.

단계 916에서, 트리거링 이벤트가 SMS 메시지이면, 단계 918에서, 사용자가 이미 SMS 애플리케이션에 개입해 있는지 여부에 대한 결정이 행해진다. 단계 918에서, 본 방법은 엔티티 리마인더 통지가 디스플레이되기 전에 SMS 애플리케이션이 활성화될 때 까지 기다린다. SMS 애플리케이션이 활성화되면(그리고, 엔티티에 대한 리마인더 데이터가 존재하는 경우), 단계 920에서, SMS 애플리케이션에 대한 임의의 통지 세팅들에 따라 리마인더 통지가 SMS 애플리케이션 내의 디스플레이 영역에서 디스플레이된다. 단계 922에서, 본 방법은 리마인더 통지에 대한 입력을 기다리고, 단계 922에서 리마인더가 어드레싱되면, 단계 924에서, SMS 애플리케이션에 대한 입력이 진행될 수 있다.

단계 930에서, 트리거링 이벤트가 이메일이면, 단계 932에서, 이메일 애플리케이션이 활성화되어 있는지 여부에 대한 결정이 행해진다. 이메일 애플리케이션이 활성화되어 있지 않으면, 단계 932에서, 이메일 애플리케이션이 활성화될 때 까지 리마인더 통지는 보류된다. 이메일 애플리케이션이 활성화되면, 단계 934에서, 리마인더 통지가 통지 영역에서 포스팅되며, 이에 대한 예시들은 위에서 나타나 있다. 단계 936에서, 이메일 애플리케이션에 대한 입력을 허용하기 전에, 본 방법은 리마인더 통지에 대한 입력을 기다린다(단계 938).

단계 940에서, 트리거링 이벤트가 제3자 애플리케이션 이벤트이면, 단계 941에서, 제3자 애플리케이션이 활성화되어 있는지 여부에 대한 결정이 행해진다. 제3자 애플리케이션이 활성화되어 있는 경우, 단계 942에서, 제3자 애플리케이션 통지들에 대한 세팅들에 따라 통지 살펴보기 영역에서 리마인더가 포스팅된다. 하나의 실시예에서, 단계 946에서, 통지는 사용자 상호작용을 기다리고, 통지 상호작용이 발생하면, 단계 944에서 제3자 애플리케이션에 대한 사용자 입력이 발생한다.

일례에서, 도 9a에서 나타난 바와 같이, 리마인더 통지들은 SMS 애플리케이션, 이메일 애플리케이션 또는 제3자 애플리케이션의 메시지 인터페이스들에서 디스플레이되며, 리마인더 통지는 사용자가 방금 열어봤던 아이템과 관련이 있는 상황이 리마인더 통지에 주어지는데, 그 이유는 수신인 또는 송신인은 리마인더가 트리거되었던 엔티티이기 때문이다.

SMS 메시지, 이메일, 및 제3자 애플리케이션의 경우, 프로세싱 디바이스 인터페이스는 통지 리마인더와는 별개로 메시지가 수신되었다라는 경고문을 제공할 수 있다는 것을 유념한다. 이러한 메시지 경고문들은 도 9a에 반영되어 있지 않다. 이러한 통지들은 디바이스 인터페이스의 구성에 의존하여, 프로세싱 디바이스 상의 인터페이스에서 발생 중에 있는 임의의 현재 활동을 인터럽트하거나 또는 인터럽트하지 않을 수 있다. 도 9b와 관련하여 아래에서 논의되는 바와 같이, 하나의 대안구성에서, 이러한 메시지 경고문은 엔티티 리마인더 통지와 연합될 수 있다. 하지만, 본 설명을 위해, 도 9a의 실시예에서는, SMS/이메일/제3자 애플리케이션 경고문은 엔티티 리마인더 통지를 포함하지 않는다.

도 9b는 통신 채널 애플리케이션(SMS 애플리케이션, 이메일 애플리케이션 또는 제3자 애플리케이션)이 활성화되어 있지 않더라도 통지들이 제공될 수 있는 본 방법의 대안적인 실시예를 나타낸다. 도 9a에서와 동일한 참조번호들을 갖는 도 9b에서 나타난 단계들은 도 9a에서의 단계들과 똑같다. 이에 따라, 전화 상호작용 통지 단계들 904, 905, 906, 907, 910, 914, 912은 도 9a에서의 단계들과 똑같다.

단계 916에서, 트리거링 이벤트가 SMS 메시지이면, 단계 918에서, 사용자가 이미 SMS 애플리케이션에 개입해 있는지 여부에 대한 결정이 행해진다. SMS 애플리케이션이 이미 활성화되어 있으면(그리고, 엔티티에 대한 리마인더 데이터가 존재하는 경우), 단계 920에서, 리마인더 통지가 SMS 애플리케이션 내의 디스플레이 영역에서 디스플레이된다. SMS 애플리케이션이 활성화되어 있지 않으면, 단계 921에서, SMS 애플리케이션에 대한 임의의 통지 세팅들에 따라, SMS 경고문이 인터페이스를 인터럽트하면서 디스플레이될 수 있고, 그 후 SMS 메시지의 수신시 디바이스 상에서 이용된다. SMS, 이메일 및 제3자 애플리케이션과 같은 통신 채널들을 제공할 수 있는 많은 프로세싱 디바이스들은 이러한 채널들 상에서의 활동이 발생할 때 통지들의 세팅을 허용한다. 도 9b의 실시예에서, 리마인더 통지들은 이러한 통신 채널들에 대한 경고문 세팅들에 따라 메시지 경고문들과 함께 디스플레이된다. 예를 들어, 신규 SMS 메시지의 수신 즉시 신규 SMS 경고문을 디스플레이하도록 신규 SMS가 세팅되면, 리마인더 통지는 인터페이스 상의 오버레이로 신규 SMS를 동반할 수 있다(단계 921). 신규 SMS 메시지가 경고문을 생성하지 않으면, SMS 통지가 디스플레이될 때 까지 어떠한 리마인더 통지도 디스플레이되지 않는다. 단계 923에서, 본 방법은 SMS 애플리케이션 또는 리마인더 통지 중 어느 하나에 대한 입력을 기다린다. 사실상 리마인더를 무시하는 SMS 경고문에 대한 입력은 알려진 엔티티와 관련된 다음 통신 이벤트까지 리마인더를 스누징하는 효과를 가질 수 있다.

단계 930에서, 인바운드 트리거링 이벤트가 이메일이면, 단계 932에서, 이메일 애플리케이션이 활성화되어 있는지 여부에 대한 결정이 행해진다. 단계 932에서, 이메일 애플리케이션이 활성화되어 있으면, 단계 934에서, 리마인더 통지가 통지 영역에서 포스팅되는데, 이에 대한 예시들은 위에서 나타나 있다. 이메일 애플리케이션이 활성화되어 있지 않으면, 단계 935에서, 프로세싱 디바이스의 경고문 세팅들에 따라 이메일 경고문이 포스트될 수 있고, 사용 중에 있는 통지 세팅들에 적절한 통지 살펴보기 영역에서 엔티티 리마인더 통지가 포스팅된다. 양자의 경우들에서, 본 방법은 리마인더 및 이메일 애플리케이션에 대한 입력을 기다린다(단계 937).

단계 940에서, 트리거링 이벤트가 제3자 애플리케이션 이벤트이면, 단계 941에서, 제3자 애플리케이션이 활성화되어 있는지 여부에 대한 결정이 행해진다. 제3자 애플리케이션이 활성화되어 있는 경우, 단계 942에서, 제3자 애플리케이션 통지들에 대한 세팅들에 따라 통지 살펴보기 영역에서 리마인더가 포스팅된다. 제3자 애플리케이션이 활성화되어 있지 않으면, 단계 943에서, 프로세싱 디바이스에 대한 경고문 세팅들에 따라 경고문이 제공될 수 있고, 이러한 경고문과 함께 엔티티 통지가 포스팅된다. 단계 945에서, 통지 또는 제3자 애플리케이션 상에서의 액션이 발생한다.

도 9c는 트리거링 이벤트가 아웃바운드 통신인 상황을 나타낸다. 아웃바운드 통신의 경우, 단계 952에서, 사용자는 통신을 개시할 특정 엔티티를 선택함으로써 시작할 수 있다. 많은 연락처 애플리케이션들에서, 사용자가 연락처 기록으로부터 직접 통신을 개시하기 위해 연락처 기록을 선택할 때 링크들이 제공된다. 링크는 전화 콜, 이메일 또는 SMS를 활성화시킬 수 있다. 대안적으로, 사용자는 연락처를 선택하기 전에 통신 채널을 이용하는 애플리케이션을 활성화시킬 수 있다. 단계 952에서 사용자가 연락처 선택을 결정하면, 단계 956에서 연락처의 선택 상에 리마인더 통지가 디스플레이될 수 있다. 단계 954에서, 전화 애플리케이션을 활성화시킴으로써 아웃바운드 전화 콜이 개시되면, 단계 956에서, 사용자가 전화 애플리케이션에서 연락처를 선택하거나 또는 사용자 전화 번호와 같은 식별 정보를 입력할 때 전화 애플리케이션의 살펴보기 영역에서 리마인더가 디스플레이된다. 단계 958에서, 본 시스템은 전화 콜에 대한 사용자 입력을 기다린다. 마찬가지로, 단계 962에서 SMS 애플리케이션이 활성화되면, 단계 964에서, 사용자가 연락처를 선택할 때 리마인더가 디스플레이되고, 단계 966에서, 사용자 입력이 결정된다. 단계 968에서, 사용자가 이메일 작성을 개시하면, 이메일의 수신에 대한 연락처를 선택할 때 리마인더 통지가 디스플레이되고, 단계 972에서, 시스템은 이메일 액션 또는 리마인더에 대한 사용자 입력을 기다린다. 단계 974에서, 제3자 애플리케이션이 이용되면, 사용자가 연락처를 선택하거나 또는 제3자 애플리케이션에서 엔티티에 대한 식별 정보를 입력할 때 리마인더 통지가 디스플레이되고, 단계 978에서, 리마인더 또는 제3자 애플리케이션에서의 입력이 결정된다.

도 10은 개시된 기술의 동작들을 이행하기 위한 모바일 컴퓨팅 디바이스를 포함하는 프로세싱 디바이스의 예시적인 블록도를 도시한다. 전형적인 모바일 폰의 예시적인 전자 회로가 도시된다. 모바일 디바이스(1400)는 하나 이상의 마이크로프로세서들(1412), 및 여기서 설명된 기능을 구현하기 위해 제어 프로세서(1412)의 하나 이상의 프로세서들에 의해 실행되는 프로세서로 판독가능한 코드를 저장하는 메모리(1410)(예컨대, ROM과 같은 비휘발성 메모리 및 RAM과 같은 휘발성 메모리)를 포함한다.

모바일 디바이스(1400)는, 예를 들어, 프로세서들(1412), 애플리케이션들(1472)을 포함한 메모리(1410), 및 비휘발성 저장장치(1440)를 포함할 수 있다. 프로세서(1412)는 여기서 설명된 애플리케이션들을 비롯한 임의의 개수의 애플리케이션들과 함께 통신들을 구현할 수 있다. 메모리(1410)는 비휘발성 및 휘발성 메모리를 비롯한, 임의의 다양한 메모리 저장 매체 유형들일 수 있다. 디바이스 운영체제는 모바일 디바이스(1400)의 상이한 동작들을 다루며, 전화걸기 및 전화받기, 텍스트 메시징, 음성메일 체크하기 등과 같은 동작들을 위한 사용자 인터페이스들을 포함할 수 있다. 애플리케이션들(1472)은 사진 및/또는 비디오를 위한 카메라 애플리케이션, 연락처(엔티티) 정보를 디스플레이하기 위한 어드레스 북, 달력 애플리케이션, 미디어 플레이어, 인터넷 브라우저, 게임, 알람 애플리케이션 또는 다른 제3자 애플리케이션들과 같은, 임의의 프로그램들의 집합체일 수 있다. 메모리(1410) 내의 비휘발성 저장 컴포넌트(1440)는 웹 캐시, 음악, 사진, 연락처 데이터, 스케쥴링 데이터, 및 기타 화일들과 같은 데이터를 포함한다. 도 10에서는 리마인더 데이터를 포함한 리마인더 데이터베이스(1492)와, 엔티티 기록들을 포함한 엔티티 또는 연락처 데이터베이스(1494)가 나타난다.

프로세서(1412)는 또한 RF 송수신 회로(1406), 적외선 송수신기(1408), 가속도계와 같은 움직임/배향 센서(1414), 및 자력계(1415)와 통신하고, RF 송수신 회로(1406)는 안테나(1402)에 결합된다. 지문 또는 다른 생체측정 데이터에 액세스하기 위해 생체측정 센서(1409)가 제공될 수 있다. 이러한 애플리케이션들을, 제스처들을 통해 사용자들이 명령들을 입력하도록 하는 지능형 사용자 인터페이스들로서 인에이블시키고, GPS 위성과 연락이 두절된 후 디바이스의 움직임과 방향을 계산하는 내부 GPS 기능으로서 인에이블시키며, 디바이스의 배향을 검출하고 전화기가 회전될 때 디스플레이를 초상화 모드에서 풍경화 모드로 자동적으로 변경시키기 위해 가속도계들이 모바일 디바이스들 내에 병합되었다. 가속도계는, 예컨대 반도체 칩 상에 내장된 (마이크로미터 크기의) 미세 기계적 디바이스인 미소 전자기계 시스템(micro-electromechanical system; MEMS)에 의해 제공될 수 있다. 가속도 방향뿐만이 아니라 배향, 진동 및 충격이 감지될 수 있다. 프로세서(1412)는 또한 벨소리장치/진동장치(1416), 사용자 인터페이스 키패드/스크린(1418), 스피커(1420), 마이크로폰(1422), 카메라(1424), 광 센서(1426) 및 온도 센서(1428)와 통신한다. 여기서 논의된 바와 같이, 사용자 인터페이스 키패드/스크린(1418)은 알려진 유형의 터치 민감 스크린일 수 있다. 이러한 애플리케이션들을, 모바일 디바이스 근처에서의 자기장의 방향 및 크기를 측정하고, 자기장의 변동을 추적하며, 자기장의 방향을 사용자들에 대해 디스플레이하는 디지털 콤파스로서 인에이블시키기 위해 자력계가 모바일 디바이스들 내에 병합되었다.

프로세서(1412)는 무선 신호들의 송신 및 수신을 제어한다. 송신 모드 동안, 프로세서(1412)는 마이크로폰(1422)으로부터의 음성 신호, 또는 다른 데이터 신호를, 송수신 회로(1406)에 제공한다. 송수신 회로(1406)는 안테나(1402)를 통한 통신을 위해 신호를 원격 스테이션(예컨대, 고정 스테이션, 오퍼레이터, 다른 셀룰러 폰들 등)에 전송한다. 착신 콜, 텍스트 메시지, 달력 리마인더, 알람 클록 리마인더, 또는 다른 통지를 사용자에게 시그널링하기 위해 벨소리장치/진동장치(1416)가 이용된다. 수신 모드 동안, 송수신 회로(1406)는 안테나(1402)를 통해 원격 스테이션으로부터 음성 또는 기타 데이터 신호를 수신한다. 수신된 음성 신호는 스피커(1420)에 제공되며, 한편 다른 수신된 데이터 신호들은 또한 적절하게 프로세싱된다.

추가적으로, 모바일 디바이스(1400)를, AC 아답터 또는 전력 도킹 스테이션과 같은, 외부 전원에 연결시키기 위해 물리적 커넥터(1488)가 이용될 수 있다. 물리적 커넥터(1488)는 또한 컴퓨팅 디바이스로의 데이터 연결부로서 이용될 수 있다. 데이터 연결부는 모바일 디바이스 데이터를 다른 디바이스 상의 컴퓨팅 데이터와 동기화시키는 것과 같은 동작들을 허용한다. 이러한 서비스를 위해 사용자 애플리케이션들의 위치를 중계하기 위해 위성 기반 무선 네비게이션을 활용하는 위성 위치측정 서비스(global positioning service; GPS)(1465)가 인에이블된다.

메모리(1410)는 프로세서들(1412)로 하여금 여기서 설명된 많은 기능들을 수행하도록 명령하는 코드를 포함한다. 이해를 용이하게 하기 위해, 엘리먼트들은 블록들로서 나타난다. 위에서 논의된 애플리케이션들(1472)에 더하여, 메모리(1410)는 복수의 제3자 애플리케이션(1476)과 스마트 어시스턴트(1474)를 포함할 수 있다. 제3자 애플리케이션(1476)은, 위의 도 8 내지 도 9b에서 나타난 많은 기능들을 수행하는 리마인더 애플리케이션(1484)과 제3자 애플리케이션들이 통신하도록 해주는 리마인더 애플리케이션 프로그래밍 인터페이스(1478)와 통신할 수 있다. 세 개의 통신 채널들, 즉 SMS 채널, 이메일 채널, 및 전화 채널이 나타난다. SMS 및 이메일 채널들은 도 10에서 나타난 임의의 데이터 인터페이스들을 통해 데이터를 수신한다. 이러한 채널들을 위한 통신 이벤트들이 수신될 때, 폴링 에이전트(1482)는 이러한 채널들에 대해 신규 인바운드 메시지들을 모니터링한다. 일반적으로, 이러한 채널들을 통한 통신들은 모바일 디바이스 상에서 실행 중인 다른 애플리케이션들을 인터럽트하는 이벤트를 생성하지 않는다. 이와는 대조적으로, 전화 채널(1456)은 일반적으로, 착신 전화 콜이 발생하였다는 것을 사용자에게 알리기 위해 모바일 디바이스에서 발생하는 임의의 액션들을 인터럽트한다. 이에 따라, 전화 채널로부터의 인터럽트는 리마인더 통지를 트리거하는 데에 이용될 수 있다. 폴링 에이전트는 SMS 및 이메일 채널들에서 이벤트들로부터 리마인더들을 트리거하는 데에 이용된다. 리마인더 애플리케이션(1484)은 활성 애플리케이션들 및 디바이스 활동에 기초하여 경고문 통지를 사용자 인터페이스 키패드/스크린(1418)에 발송할지 여부를 결정하는 규칙들을 포함하는 시스템 통지부들(1486)과 상호작용한다.

비휘발성 저장장치(1440)는, 예컨대, 음악, 사진, 스케쥴링 데이터, 달력 데이터, 및 위치 히스토리를 비롯한, 사용자와 연관된 데이터를 포함한다. 리마인더 데이터베이스(1492)와 연락처 데이터베이스(1494)가 또한 도시된다. 리마인더 데이터베이스(1492)는 데이터베이스(1494) 내의 엔티티 또는 연락처 데이터 기록들에 알려진 방식으로 데이터 기록으로 링크될 수 있다.

엔티티들은 연락처들의 그룹뿐만이 아니라 개인 연락처들을 포함할 수 있다는 것을 이해해야 한다. 이 구성에서, 엔티티들의 개수를 식별하는 그룹 기록은 해당 그룹과 연관된 리마인더 데이터 및 연락처 데이터베이스(1494) 내의 기록으로서 저장될 수 있다. 이러한 경우들에서, 통신들이 그룹 전체에 대해 행해진 때 또는 그룹의 멤버인 임의의 엔티티와의 통신이 발생한 때 그룹과 연관된 리마인더 데이터는 통지를 생성할 수 있다.

다른 실시예에서, 도 8의 단계 802 내지 단계 810에서 제공된 것과 같은 리마인더 데이터는 프로세싱 디바이스에 의해 지원되는 하나 이상의 통신 채널들에서의 통신들과 연관된 데이터로부터 검색될 수 있다. 예를 들어, 사진 첨부를 포함한 인바운드 이메일은 사진의 주체에 관한 데이터를 포함할 수 있다. 데이터는 사진과 연관된 (지오 태깅 정보와 같은) 메타데이터뿐만이 아니라, 사진으로부터 식별가능한 (안면 인식 정보와 같은) 데이터의 형태일 수 있다. 이러한 정보는 통신이 행해진 엔티티 또는 데이터의 주체인 엔티티에 관한 리마인더 정보를 채우는 데에 이용될 수 있다.

도 11은 통신의 주체로부터 정보를 검색하는 방법을 나타내는 흐름도이다. 단계 1110에서, 알려진 엔티티로부터 통신이 수신된다. 통신은, 첨부의 형태의 추가적인 데이터, 또는 파싱될 때, 리마인더 데이터를 채우는 데에 이용되는 통신 그 자체에 포함된 데이터를 포함할 수 있다. 단계 1112에서, 통신에서 식별가능한 모든 엔티티들에 대한 데이터뿐만이 아니라 리마인더가 생성되어야 하는 것을 표시할 수 있는 데이터에 대해 통신은 파싱(parse)된다. 예를 들어, 통신이 이벤트 리마인더를 포함하는 이메일인 경우, 이벤트가 일어날 당사자들이 해당 연락처에 대해 이용가능한 엔티티 정보와 연관된 리마인더 데이터 내에 포함될 수 있다. 다른 예시에서, 사진의 주체가 중요한 이벤트이였다는 것을 식별하는 통신에서 인식된 엔티티를 포함하는 사진이 수신되면, 엔티티와 연관된 리마인더 데이터를 생성하기 위해 넷(net) 정보가 이용될 수 있다. 단계 1116에서, 리마인더 데이터가 통신으로부터 표시되었는지 여부에 대한 결정이 행해진다. 어떠한 리마인더 데이터도 통신 내에서 표시되지 않은 경우, 단계 1120에서, 통신은 계속된다. 통신에 대해서 리마인더 데이터가 표시되면, 단계 1118에서, 통신 내 다른 엔티티에 대한 리마인더 데이터를 사용자가 입력하도록 해주기 위한 리마인더 입력 인터페이스가 제공된다. 대안적으로, 정보는 단계 1118에서 제공된 리마인더 입력 인터페이스를 미리 채울 수 있다. 여기서 논의된 리마인더 입력 인터페이스 중 어느 것이라도 단계 1118에서 활용될 수 있다.

도 12는 웹 페이지들 또는 다른 네트워크 액세스가능 정보와 같은, 제3자 소스들로부터의 정보를 엔티티 기반 리마인더에 링크시키는 방법을 나타내는 흐름도이다. 도 12를, 도 12의 단계들을 구현하는 예시적인 사용자 인터페이스들을 나타내는 도 13a 내지 도 13f를 참조하여 설명할 것이다. 도 12는 여기서 나타난 프로세싱 디바이스들 중 임의의 프로세싱 디바이스에 의해 수행될 수 있다. 일반적으로, 링크된 데이터는 링크의 선택시 링크된 정보에 액세스하도록 해주는 리마인더 통지에서 디스플레이될 수 있다.

예로서, 개인 컴퓨팅 디바이스의 사용자는 이 디바이스를 활용하여, 예컨대, 디바이스 상의 웹 브라우저를 통해서와 같이 복수의 상이한 소스들로부터 이용가능한 정보에 액세스할 수 있다. 이러한 유형의 정보의 예시가 도 13a에 도시되어 있다. 도 13a는 텍스트를 디스플레이하는 www.contoso.com 모바일 웹 페이지를 나타낸다. 사용자가 디스플레이된 웹 페이지에서 정보에 대한 엔티티 기반 리마인더를 생성하는 것에 관심이 있을 수 있으며, 사용자는, 단계 1210에서, 링크된 정보의 선택을 할 수 있고, 단계 1212에서 리마인더를 생성하는 것을 선택할 수 있다. 도 13b에서는 사용자가 리마인더를 생성하는 것을 선택하도록 해주는 인터페이스(1300b)를 나타낸다. 사용자가 인터페이스(1300a)에서 인터페이스 섹터(1308)를 선택할 때 인터페이스(1300b)가 제공될 수 있다.

인터페이스(1300b)에서, 리마인더를 생성하기 위해 “remind me” 옵션을 비롯한 다양한 메뉴 아이템들이 사용자에게 이용가능하다. 도 13b에서는 “remind me” 옵션의 선택이 나타난다.

단계 1216에서, 리마인더 데이터 및 링크된 정보가 입력된다. 하나의 실시예에서, 링크된 데이터의 소스 및 타이틀이 리마인더와 함께 저장된다. 다른 실시예에서, 사용자에 의해 추가적인 데이터가 입력될 수 있다. 도 13c에서는 링크된 데이터에 대한 링크와 더불어 추가적인 리마인더 데이터를 입력하기 위한 인터페이스(1300c)가 도시된다. 추가적인 데이터(1314)는 인터페이스(1300c)에서의 영역(1310) 내에 입력될 수 있다. 참조번호 1312에서 링크된 소스 및 타이틀이 도시된다.

정보가 입력되면, 단계 1218에서, 리마인더 유형이 입력된다. 도 13d에서는 리마인더 유형을 선택하기 위한 인터페이스(1300d)가 도시된다. 도 13d에서 도시된 바와 같이, 인터페이스(1300d) 상에서 “person” 엔트리를 터치함으로써 엔티티 기반 리마인더가 선택될 수 있다.

단계 1220에서, 리마인더 정보와 연관시킬 엔티티가 선택된다. 도 13e에서는 사용자가 엔티티를 선택하도록 해주는 인터페이스(1300e)가 도시된다. 엔티티들은 알파벳 순으로 디스플레이될 수 있거나 또는 “family” 및 “favorites”와 같은 그룹들로 조직화될 수 있다. 도 13d에서와 마찬가지 방식으로, 리마인더와 연관되어야 하는 엔티티의 엔트리를 터치함으로써 엔티티 또는 그룹이 선택될 수 있다.

단계 1220에서 엔티티가 선택되면, 택일적 사항으로서, 리마인더 리뷰/확인 스크린이 디스플레이될 수 있다. 다음으로, 단계 1222에서, 본 방법은 도 13f에서 도시된 것과 같은 리마인더 통지를 디스플레이하기 전에 트리거링 이벤트를 기다린다. 그룹의 경우, 그룹의 멤버인 임의의 엔티티와의 상호작용은 리마인더를 트리거할 수 있다.

본 발명내용을 구조적 특징들 또는 잉크 데이터에 특유적인 언어로 설명하였다. 첨부된 청구항들에서 정의된 발명내용은 위에서 설명된 이러한 특정한 특징들 또는 동작들로 반드시 제한될 필요는 없다는 것을 이해하여야 한다. 이보다는, 위에서 설명된 특정한 특징들 및 동작들은 청구항들을 구현하는 예시 형태들로서 개시된 것이다.

Claims (10)

1. 복수의 통신 채널들을 갖는 모바일 통신 디바이스에 있어서, 디스플레이, 프로세서, 및 상기 프로세서로 하여금 단계들을 수행하도록 명령하는 코드를 포함하고, 상기 단계들은,
   상기 모바일 통신 디바이스에 의해 지원되는 통신 채널을 위한 상호작용 영역을 포함한 사용자 인터페이스를 상기 디스플레이 상에서 디스플레이하는 단계;
   상기 모바일 통신 디바이스에 의해 지원되는 통신 채널을 통해 알려진 엔티티(entity)와 통신을 수행하는 단계;
   상기 알려진 엔티티가, 상기 알려진 엔티티와 연관된 적어도 하나의 리마인더를 갖는지 여부를 결정하는 단계; 및
   상기 통신에 응답하여, 상기 통신으로부터의 데이터와 함께 상기 사용자 인터페이스에서 리마인더 데이터를 포함한 리마인더 통지를 디스플레이하는 단계
   를 포함한 것인, 모바일 통신 디바이스.
2. 제1항에 있어서, 상기 통신을 수행하는 단계는 알려진 엔티티와 통신을 개시하는 단계를 포함하며, 상기 디스플레이하는 단계는 상기 통신을 개시하기 위한 엔티티 정보의 선택을 허용하는 상기 사용자 인터페이스에서 리마인더 정보를 디스플레이하는 단계를 포함한 것인, 모바일 통신 디바이스.
3. 제1항에 있어서, 상기 리마인더 데이터는 상기 모바일 통신 디바이스 상의 다른 애플리케이션에 의해 제공된 데이터에 대한 링크를 포함한 것인, 모바일 통신 디바이스.
4. 제1항에 있어서, 상기 통신 채널은 메시징 채널을 포함하고, 상기 메시징 채널에서의 메시지는 메시징 인터페이스에서 랜더링되며, 상기 디스플레이하는 단계는 메시지가 알려진 엔티티로부터 수신되고 상기 메시징 인터페이스가 디스플레이될 때 상기 리마인더 통지를 디스플레이하는 단계를 포함한 것인, 모바일 통신 디바이스.
5. 제1항에 있어서, 상기 통신 채널은 전화 채널이며, 상기 통지는 전화 콜(call)을 방해하지 않고서 사용자가 상기 전화 콜 및 상기 통지와 상호작용하도록 해주는 디스플레이 영역에서 제공되는 것인, 모바일 통신 디바이스.
6. 제1항에 있어서, 상기 알려진 엔티티는 알려진 개인들의 그룹을 포함하고, 각각의 개인은 연락처 기록에 의해 식별되며, 그룹은 그룹 연락처 기록에 의해 식별되는 것인, 모바일 통신 디바이스.
7. 저장 디바이스 및 디스플레이에 결합된 프로세싱 디바이스에서의 컴퓨터로 구현된 방법에 있어서, 본 방법은 알려진 엔티티에 대해 수신된 통신들에 기초하여 통지들을 제공하고, 상기 통신들은 상기 프로세싱 디바이스에 의해 지원되는 통신 채널을 통해 제공되고, 상기 방법은,
   리마인더 데이터를 인터페이스를 통해 수신하는 단계;
   상기 저장 디바이스 상에 저장된 알려진 엔티티 기록과 리마인더 데이터를 연관시키는 단계;
   상기 프로세싱 디바이스에 의해 지원되는 통신 채널을 통해 통신을 수행하는 단계로서, 상기 통신 채널은 상기 디스플레이를 위한 통신 채널 사용자 인터페이스를 갖는 것인, 상기 통신을 수행하는 단계;
   상기 알려진 엔티티가 상기 통신과 연관되어 있다라고 결정하는 단계;
   상기 알려진 엔티티와 연관된 상기 리마인더 데이터를 검색하는 단계;
   상기 프로세싱 디바이스의 통신 사용자 인터페이스와의 사용자 상호작용 및 상기 통신 채널에 기초하여 리마인더 통지가 디스플레이되어야 하는지 여부를 결정하는 단계; 및
   상기 통신이 메시지인 경우, 사용자가 상기 리마인더 데이터 및 메시지와 상호작용하도록 해주는 상기 통신 사용자 인터페이스에서 상기 리마인더 데이터를 디스플레이하고, 상기 통신이 전화 콜인 경우, 상기 통신 사용자 인터페이스를 디스플레이하는 단계
   를 포함한 것인, 프로세싱 디바이스에서의 컴퓨터로 구현된 방법.
8. 제7항에 있어서, 상기 리마인더 데이터를 디스플레이하는 단계는 상기 프로세싱 디바이스 상에서 리마인더 데이터를 보여주는 사용자 인터페이스를 디스플레이하는 단계를 포함한 것인, 프로세싱 디바이스에서의 컴퓨터로 구현된 방법.
9. 제7항에 있어서, 상기 알려진 엔티티는 연락처 기록에 의해 각각 식별되는 개인들의 그룹을 포함한 것인, 프로세싱 디바이스에서의 컴퓨터로 구현된 방법.
10. 제7항에 있어서, 상기 리마인더 데이터를 디스플레이하는 단계는 제3자 애플리케이션으로부터의 데이터, 및 링크의 선택시 상기 제3자 애플리케이션에서 액세스가능한 추가적인 데이터에 대한 링크를 수신하는 단계를 포함한 것인, 프로세싱 디바이스에서의 컴퓨터로 구현된 방법.

Images