KR101749009B1 - 원격 디바이스로부터의 활동에 기초한 스마트 응답의 자동 활성화 - Google Patents

원격 디바이스로부터의 활동에 기초한 스마트 응답의 자동 활성화 Download PDF

Info

Publication number
KR101749009B1
KR101749009B1 KR1020167005742A KR20167005742A KR101749009B1 KR 101749009 B1 KR101749009 B1 KR 101749009B1 KR 1020167005742 A KR1020167005742 A KR 1020167005742A KR 20167005742 A KR20167005742 A KR 20167005742A KR 101749009 B1 KR101749009 B1 KR 101749009B1
Authority
KR
South Korea
Prior art keywords
sender
instructions
user
specific
senders
Prior art date
Application number
KR1020167005742A
Other languages
English (en)
Other versions
KR20160040279A (ko
Inventor
바룬 에이. 보라
스와프닐 알. 데이브
Original Assignee
애플 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 애플 인크. filed Critical 애플 인크.
Publication of KR20160040279A publication Critical patent/KR20160040279A/ko
Application granted granted Critical
Publication of KR101749009B1 publication Critical patent/KR101749009B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M3/00Automatic or semi-automatic exchanges
    • H04M3/42Systems providing special services or facilities to subscribers
    • H04M3/42025Calling or Called party identification service
    • H04M3/42034Calling party identification service
    • H04M3/42042Notifying the called party of information on the calling party
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/64Automatic arrangements for answering calls; Automatic arrangements for recording messages for absent subscribers; Arrangements for recording conversations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/66Substation equipment, e.g. for use by subscribers with means for preventing unauthorised or fraudulent calling
    • H04M1/663Preventing unauthorised calls to a telephone set

Abstract

하나 이상의 프로세서들 및 메모리를 갖는 전자 디바이스가 인입 통신들에 자동으로 응답하기 위해 디지털 어시스턴트를 사용하기 위한 절차를 포함한다. 일부 실시예들에서, 본 디바이스는 사용자로부터 스피치 입력을 획득하고, 스피치 입력을 획득하는 것에 응답하여, 본 디바이스는 스피치 입력이 하나 이상의 특정 송신자들로부터의 후속 인입 통신의 수신에 응답하여 특정 액션을 수행하기 위한 명령어들을 포함하는지 여부를 판정한다. 명령어들을 저장한 후에, 본 디바이스는 개별 송신자로부터 인입 통신을 획득한다. 본 디바이스는 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하고, 개별 송신자가 하나 이상의 특정 송신자들 중 하나라고 판정할 시에, 본 디바이스는 명령어들에 따라 특정 액션을 수행하고 그 후에 명령어들을 자동으로 삭제한다.

Description

원격 디바이스로부터의 활동에 기초한 스마트 응답의 자동 활성화{AUTO-ACTIVATING SMART RESPONSES BASED ON ACTIVITIES FROM REMOTE DEVICES}
관련 출원에 대한 상호 참조
본 출원은 모든 목적을 위해 전체적으로 본 명세서에 참고로 포함된, 2013년 8월 6일자로 출원되고 발명의 명칭이 "원격 디바이스로부터의 활동에 기초한 스마트 응답의 자동 활성화(AUTO-ACTIVATING SMART RESPONSES BASED ON ACTIVITIES FROM REMOTE DEVICES)"인 미국 가출원 제61/862,927호의 우선권을 주장한다.
개시된 실시예들은 대체로 디지털 어시스턴트(digital assistant) 시스템들에 관한 것이고, 보다 구체적으로는 인입 통신(incoming communication)들에 자동으로 응답하는 것에 관한 것이다.
인간인 개인 비서와 같이, 디지털 어시스턴트 시스템은 요청된 태스크(task)를 수행하고 요청된 조언, 정보, 또는 서비스를 제공할 수 있다. 사용자의 요청을 이행하는 디지털 어시스턴트 시스템의 능력은 요청 또는 명령어에 대한 디지털 어시스턴트 시스템의 정확한 이해력에 달려있다. 최근 자연 언어 프로세싱의 발전을 통해 사용자들은 구어적 또는 문어적 형태로 자연 언어를 사용하여 디지털 어시스턴트 시스템과의 상호작용이 가능해졌다. 그러한 디지털 어시스턴트 시스템은 사용자의 입력을 해석하여 사용자의 의도를 추론할 수 있고, 추론된 의도를 액션가능 태스크들 및 파라미터들로 번역할 수 있으며, 동작들을 실행하거나 서비스들을 전개하여 태스크들을 수행할 수 있고, 사용자가 이해할 수 있는 출력을 생성할 수 있다. 이상적으로, 디지털 어시스턴트 시스템에 의해 생성된 출력은 사용자와 디지털 어시스턴트 시스템 사이의 자연 언어 상호작용 동안 표현되는 사용자의 의도를 이행해야 한다.
디지털 어시스턴트 시스템이 사용자 요청에 대하여 만족스러운 응답을 생성하는 능력은 디지털 어시스턴트 시스템에 사용가능한 자연 언어 프로세싱, 지식 기반, 및 인공 지능에 따라 달라진다. 게다가, 수많은 제3자 시스템들 및 서비스들이 현재 존재하지만, 디지털 어시스턴트 시스템이 하나 이상의 특정 송신자들로부터의 인입 통신의 수신에 응답하여 특정 액션을 자동으로 수행시키게 하는 효율적인 수단은 없다.
본 명세서에 개시된 실시예들은 하나 이상의 특정 송신자들로부터의 인입 통신의 수신에 응답하여 특정 액션을 자동으로 수행하도록 디지털 어시스턴트를 동작시키기 위한 방법들, 디바이스들, 시스템들, 및 비일시적 컴퓨터 판독가능 저장 매체를 제공한다.
일부 실시예들은 디지털 어시스턴트가 인입 통신들에 자동으로 응답하게 하는 방법을 제공한다. 본 방법은 하나 이상의 프로세서들 및 메모리를 각각 포함하는 하나 이상의 전자 디바이스들에서 수행된다. 먼저, 사용자로부터 스피치 입력이 획득된다. 스피치 입력을 획득하는 것에 응답하여, 스피치 입력이 하나 이상의 특정 송신자들로부터의 후속 인입 통신의 수신에 응답하여 특정 액션을 수행하기 위한 명령어들을 포함하는지 여부가 판정된다. 그 후에, 명령어들이 저장된다. 명령어들을 저장한 후에, 개별 송신자로부터 인입 통신이 획득된다. 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부가 판정된다. 개별 송신자가 하나 이상의 특정 송신자들 중 하나라고 판정할 시에, 명령어들에 따라 특정 액션이 수행된다. 그 후에, 명령어들이 자동으로(즉, 인간의 개입 없이) 삭제된다.
일부 실시예들에서, 스피치 입력이 명령어들을 포함하는지 여부를 판정하는 단계는, 스피치 입력이 하나 이상의 특정 송신자들로부터의 하나 이상의 특정 후속 인입 통신 유형들의 수신에 응답하여 특정 액션을 수행하기 위한 명령어들을 포함하는지 여부를 판정하는 단계를 포함한다. 개별 송신자가 하나 이상의 특정 송신자들 중 하나이며 인입 통신이 하나 이상의 특정 후속 인입 통신 유형들 중 하나라고 판정할 시에, 명령어들에 따라 특정 액션이 수행된다. 그 후에, 명령어들이 자동으로(즉, 인간의 개입 없이) 삭제된다.
일부 실시예들에서, 하나 이상의 특정 후속 인입 통신 유형들의 개별 특정 후속 인입 통신 유형은 전화 통화, 음성 메시지, 음성 메일, 영상 통화, SMS, MMS, VOIP 통화, 또는 이메일 중 하나이다.
일부 실시예들에서, 인입 통신은 전화 통화이고, 여기서 특정 액션은 음성 메시지를 송신하는 것이다.
일부 실시예들에서, 음성 메시지 중 적어도 일부는 사용자의 음성의 녹음물이다.
일부 실시예들에서, 음성 메시지 중 적어도 일부는 입력 텍스트의 디지털화된 버전 또는 텍스트-스피치(text-to-speech) 버전이다.
일부 실시예들에서, 본 방법은 스피치 입력을 텍스트로 변환하기 위해 스피치 입력에 대한 자연 언어 프로세싱을 수행하는 단계를 포함하고, 여기서 명령어들을 저장하는 단계는 명령어들을 텍스트로서 저장하는 단계를 포함한다.
일부 실시예들에서, 특정 액션을 수행하는 단계는, 명령어들에 따라 개별 송신자에 대한 응답을 구성하는 단계; 및 응답을 송신자에게 통신하는 단계를 포함한다.
일부 실시예들에서, 통신하는 단계는 전화 통화, 음성 메일, 영상 통화, SMS, MMS, VOIP 통화, 또는 이메일 중 하나이다.
일부 실시예들에서, 통신하는 단계는 인입 통신과 동일한 통신 수단을 이용한다.
일부 실시예들에서, 구성하는 단계는 명령어들에 따라서 그리고 상황적 정보에 적어도 부분적으로 기초하여 개별 송신자에 대한 응답을 구성하는 단계를 포함한다.
일부 실시예들에서, 상황적 정보는 사용자와 연관된 거동 정보, 패턴 정보, 또는 위치 정보 중 하나 이상을 포함한다.
일부 실시예들에서, 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하는 단계는, 디바이스의 사용자와 연관된 연락처들의 목록에 기초하여 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 확인하는 단계를 포함한다.
일부 실시예들에서, 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하는 단계는, 개별 송신자와 연관된 발신자 ID에 기초하여 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 확인하는 단계를 포함한다.
일부 실시예들에서, 본 방법은 통신의 송신자와 연관된 주소를 식별하는 단계를 포함하고, 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하는 단계는, 통신의 개별 송신자와 연관된 주소에 기초하여 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 확인하는 단계를 포함한다.
일부 실시예들에서, 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하는 단계는, 개별 송신자로부터 수신되는 인입 통신의 콘텐츠에 기초하여 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 확인하는 단계를 포함한다.
일부 실시예들에서, 특정 후속 인입 통신 유형은 전화 통화, 음성 메시지, 음성 메일, 영상 통화, SMS, MMS, VOIP 통화, 또는 이메일 중 하나이다.
일부 실시예들에서, 인입 통신은 전화 통화, 음성 메시지, 음성 메일, 영상 통화, SMS, MMS, VOIP 통화, 또는 이메일 중 하나이다.
일부 실시예들에서, 액션은, 음성 메시지를 송신자에게 송신하는 것; SMS 메시지를 송신자에게 송신하는 것; MMS 또는 사진을 송신자에게 송신하는 것; 이메일을 송신자에게 송신하는 것; 이벤트 초대장을 송신자에게 송신하는 것; 하나 이상의 캘린더 엔트리들을 송신자와 공유하는 것; 및 하나 이상의 커스텀 속성(custom attribute)들을 송신자와 공유하는 것으로 이루어진 그룹으로부터 선택된다.
일부 실시예들에서, 수행하는 단계 및 삭제하는 단계는 디바이스의 사용자로부터의 추가 검토 또는 명령어 없이 자동으로 수행된다.
일부 실시예들에서, 특정 액션을 수행하는 단계는, 제1 서브액션을 수행하는 단계; 및 제1 서브액션과는 상이한 제2 서브액션을 수행하는 단계를 포함한다.
일부 실시예들에서, 명령어들은 만료 기간을 추가로 특정하고, 본 방법은, 개별 송신자가 하나 이상의 특정 송신자들 중 하나가 아니며 만료 기간이 경과되었다고 판정할 시에, 명령어들을 자동으로 삭제하는 단계를 포함한다.
일부 실시예들에서, 개별 송신자는 제1 개별 송신자이고, 본 방법은, 제1 개별 송신자가 하나 이상의 특정 송신자들 중 하나가 아니며 만료 기간이 경과되지 않았다고 판정할 시에, 명령어들의 삭제를 보류하는 단계; 제1 개별 송신자와는 상이한 제2 개별 송신자로부터 인입 통신을 획득하는 단계; 제2 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하는 단계; 및 제2 개별 송신자가 하나 이상의 특정 송신자들 중 하나이며 만료 기간이 경과되지 않았다고 판정할 시에, 명령어들에 따라 특정 액션을 수행하는 단계와 그 후에 명령어들을 자동으로 삭제하는 단계를 포함한다.
일부 실시예들에 따르면, 비일시적 컴퓨터 판독가능 저장 매체는 하나 이상의 프로세서들을 갖는 전자 디바이스에 의해 실행될 때, 디바이스로 하여금 전술한 방법들 중 임의의 방법의 동작들을 수행하게 하는 명령어들을 내부에 저장하였다. 일부 실시예들에 따르면, 전자 디바이스는 하나 이상의 프로세서들, 메모리, 및 하나 이상의 프로그램들을 포함하고; 하나 이상의 프로그램들은 메모리에 저장되고 하나 이상의 프로세서들에 의해 실행되도록 구성되며, 하나 이상의 프로그램들은 전술한 방법들 중 임의의 방법의 동작들을 수행하기 위한 명령어들을 포함한다. 일부 실시예들에 따르면, 디스플레이, 메모리, 및 메모리에 저장된 하나 이상의 프로그램들을 실행시키는 하나 이상의 프로세서들을 갖는 전자 디바이스 상의 그래픽 사용자 인터페이스는, 전술한 방법들 중 임의의 방법에 따라 디스플레이되는 사용자 인터페이스들을 포함한다. 일부 실시예들에 따르면, 전자 디바이스는 전술한 방법들 중 임의의 방법의 동작들을 수행하기 위한 수단을 포함한다. 일부 실시예들에 따르면, 전자 디바이스에서 사용하기 위한 정보 프로세싱 장치는 전술한 방법들 중 임의의 방법의 동작들을 수행하기 위한 수단을 포함한다.
일부 실시예들에 따르면, 전자 디바이스는 사용자로부터의 스피치 입력을 획득하도록 구성된 사운드 수신 유닛을 포함한다. 전자 디바이스는 또한 사운드 수신 유닛에 연결된 프로세싱 유닛을 포함한다. 스피치 입력을 획득하는 것에 응답하여, 프로세싱 유닛은 스피치 입력이 하나 이상의 특정 송신자들로부터의 후속 인입 통신의 수신에 응답하여 특정 액션을 수행하기 위한 명령어들 및 제1 사용자로부터의 명령어를 포함하는지 여부를 판정하도록 구성된다. 그 후에, 프로세싱 유닛은 명령어들을 저장하도록 구성된다. 명령어들을 저장한 후에, 프로세싱 유닛은 개별 송신자로부터 인입 통신을 획득하도록 구성된다. 그 후에, 프로세싱 유닛은 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하도록 구성된다. 개별 송신자가 하나 이상의 특정 송신자들 중 하나라고 판정할 시에, 프로세싱 유닛은 명령어들에 따라 특정 액션을 수행하도록 구성된다. 그 후에, 프로세싱 유닛은 명령어들을 자동으로 삭제하도록 구성된다.
본 명세서에 설명되는 발명 대상의 하나 이상의 실시예들의 상세사항은 첨부 도면 및 하기 설명에서 기술된다. 발명 대상의 다른 특징, 태양, 및 이점은 본 명세서, 도면, 및 청구범위로부터 명백해질 것이다.
도 1은 일부 실시예들에 따른 디지털 어시스턴트가 동작하는 환경을 도시하는 블록도이다.
도 2는 일부 실시예들에 따른 디지털 어시스턴트 클라이언트 시스템을 도시하는 블록도이다.
도 3a는 일부 실시예들에 따른 디지털 어시스턴트 시스템 또는 그의 서버 부분을 도시하는 블록도이다.
도 3b는 일부 실시예들에 따른 도 3a에 도시된 디지털 어시스턴트의 기능을 예시하는 블록도이다.
도 3c는 일부 실시예들에 따른 도 3b에 도시된 온톨로지(ontology)의 일부분의 다이어그램이다.
도 4는 일부 실시예들에 따른 하나 이상의 특정 송신자들 중 하나로부터의 인입 통신의 수신에 응답하여 특정 액션을 자동으로 수행하기 위한 온톨로지의 일부분의 다이어그램이다.
도 5는 일부 실시예들에 따른 디지털 어시스턴트를 동작시키는 예시적인 프로세스에 대한 흐름도를 도시한다.
도 6은 일부 실시예들에 따른 디지털 어시스턴트를 동작시키는 예시적인 프로세스에 대한 흐름도를 도시한다.
도 7은 일부 실시예들에 따른 전자 디바이스의 기능 블록도이다.
도면 전체에 걸쳐서 동일한 도면 부호들은 대응하는 부분들을 지칭한다.
도 1은 일부 실시예들에 따른 디지털 어시스턴트의 동작 환경(100)의 블록도이다. 용어들 "디지털 어시스턴트", "가상 어시스턴트", "지능적 자동화된 어시스턴트", 또는 "자동 디지털 어시스턴트"는 구어적 및/또는 문어적 형태로 입력되는 자연 언어를 해석하여 사용자 의도를 추론하고, 추론된 사용자 의도에 기초하여 액션들을 수행하는 임의의 정보 프로세싱 시스템을 지칭한다. 예를 들어, 추론된 사용자 의도에 따라 액션하기 위해, 시스템은 다음 중 하나 이상을 수행할 수 있다: 추론된 사용자 의도를 완수하도록 설계된 단계들 및 파라미터들로 태스크 흐름을 식별하는 것; 추론된 사용자 의도로부터의 특정 요건들을 태스크 흐름 내에 입력하는 것; 프로그램들, 방법들, 서비스들, API들 등을 호출함으로써 태스크 흐름을 실행하는 것; 및 청각적(예컨대, 스피치) 및/또는 시각적 형태로 사용자에 대한 출력 응답들을 생성하는 것.
구체적으로, 디지털 어시스턴트(DA)는 적어도 부분적으로 자연 언어 커맨드, 요청, 진술, 서술, 및/또는 질의의 형태로 사용자 요청을 받아들일 수 있다. 전형적으로, 사용자 요청은 디지털 어시스턴트에 의해 정보 제공형 답변 또는 태스크의 수행 중 어느 하나를 구한다. 사용자 요청에 대한 만족스러운 응답은 요청된 정보 제공형 답변의 제공, 요청된 태스크의 수행, 또는 이 둘의 조합 중 어느 하나이다. 예를 들어, 사용자는 디지털 어시스턴트에게, "내가 지금 어디에 있지?"와 같은 질문을 할 수 있다. 사용자의 현재 위치에 기초하여, 디지털 어시스턴트는 "당신은 센트럴 파크에 있습니다."라고 답변할 수 있다. 사용자는 또한 태스크의 수행, 예를 들어, "오늘 오후 4시에 엄마에게 전화하라고 나에게 리마인더 해 주세요"를 요청할 수 있다. 이에 응답하여, 디지털 어시스턴트는 요청에 답할 수 있고 이어서사용자의 전자 스케줄 내에 적절한 리마인더 항목을 생성할 수 있다. 요청된 태스크의 수행 동안, 디지털 어시스턴트는 때때로 연장된 기간 내내 다수의 정보 교환을 수반하는 연속 대화로 사용자와 상호작용한다. 디지털 어시스턴트와 상호작용하여 정보 또는 다양한 태스크들의 수행을 요청하는 수많은 다른 방법들이 있다. 구두 응답들을 제공하는 것 및 프로그래밍된 액션들을 취하는 것 외에도, 디지털 어시스턴트는 또한 (예컨대, 텍스트, 알림들, 음악, 비디오들, 애니메이션들 등과 같은) 다른 시각적 또는 청각적 형태들의 응답들을 제공한다.
디지털 어시스턴트의 일례는 2011년 1월 10자로 출원된 "지능적 자동화된 어시스턴트(Intelligent Automated Assistant)"에 대한 본 출원인의 미국 실용신안 출원 제12/987,982호에 기재되어 있으며, 그 전체 개시 내용은 본 명세서에 참고로 포함된다.
도 1에 도시된 바와 같이, 일부 실시예들에서, 디지털 어시스턴트는 클라이언트-서버 모델에 따라 구현된다. 디지털 어시스턴트는 사용자 디바이스(104a, 104b) 상에서 실행되는 클라이언트 측 부분(102a, 102b)(이하, "DA-클라이언트(102)"), 및 서버 시스템(108) 상에서 실행되는 서버 측 부분(106)(이하, "DA-서버(106)")을 포함한다. DA-클라이언트(102)는 하나 이상의 네트워크들(110)을 통해 DA-서버(106)와 통신한다. DA-클라이언트(102)는 사용자 대면 입력 및 출력 프로세싱, 및 DA-서버(106)와의 통신과 같은 클라이언트 측 기능들을 제공한다. DA-서버(106)는 개별 사용자 디바이스(104) 상에 각각 존재하는 임의의 수의 DA-클라이언트들(102)에 서버 측 기능들을 제공한다.
일부 실시예들에서, DA-서버(106)는 클라이언트 대면 I/O 인터페이스(112), 하나 이상의 프로세싱 모듈들(114), 데이터 및 모델들(116), 및 외부 서비스들에 대한 I/O 인터페이스(118)를 포함한다. 클라이언트 대면 I/O 인터페이스는 디지털 어시스턴트 서버(106)에 대한 클라이언트 대면 입력 및 출력 프로세싱을 가능하게 한다. 하나 이상의 프로세싱 모듈들(114)은 데이터 및 모델들(116)을 이용하여, 자연 언어 입력에 기초하여 사용자의 의도를 판정하고, 추론된 사용자 의도에 기초하여 태스크 실행을 수행한다. 일부 실시예들에서, DA-서버(106)는 태스크 완료 또는 정보 획득을 위해 네트워크(들)(110)를 통해 외부 서비스들(120)과 통신한다. 외부 서비스들에 대한 I/O 인터페이스(118)는 그러한 통신을 가능하게 한다.
사용자 디바이스(104)의 예들은 핸드헬드 컴퓨터, 개인용 디지털 어시스턴트(PDA), 태블릿 컴퓨터, 랩톱 컴퓨터, 데스크톱 컴퓨터, 셀룰러 전화기, 스마트폰, EGPRS(enhanced general packet radio service) 모바일 전화기, 미디어 플레이어, 내비게이션 디바이스, 게임 콘솔, 텔레비전, 리모콘, 또는 이들 데이터 프로세싱 디바이스들 또는 다른 데이터 프로세싱 디바이스들 중 임의의 둘 이상의 것의 조합을 포함하지만, 이들로 제한되지는 않는다. 사용자 디바이스(104)에 대한 더 많은 상세사항들은 도 2에 도시된 예시적인 사용자 디바이스(104)를 참조하여 제공된다.
사용자 디바이스(104)는 통신 네트워크(들)(110)를 통해 기타 디바이스들(130)과 통신한다. 기타 디바이스들(130)은 사용자 디바이스(104)의 사용자와는 상이한 사용자들과 연관된 컴퓨팅 디바이스들(예컨대, 모바일 전화기들, 컴퓨터들, 또는 하나 이상의 프로세서들, 메모리 및 통신 인터페이스를 갖는 임의의 다른 전자 디바이스들)을 포함한다. 통신 네트워크(들)(110)의 예들은 근거리 통신망(LAN) 및 광역 통신망(WAN), 예컨대 인터넷을 포함한다. 통신 네트워크(들)(110)는 선택적으로, 예컨대 이더넷(Ethernet), 범용 직렬 버스(Universal Serial Bus, USB), 파이어와이어(FIREWIRE), GSM(Global System for Mobile Communications), EDGE(Enhanced Data GSM Environment), 코드 분할 다중 접속(code division multiple access, CDMA), 시간 분할 다중 접속(time division multiple access, TDMA), 블루투스(Bluetooth), Wi-Fi, VoIP(voice over Internet Protocol), Wi-MAX, 또는 임의의 다른 적합한 통신 프로토콜과 같은 다양한 유선 또는 무선 프로토콜들을 포함하는 임의의 공지된 네트워크 프로토콜을 이용하여 구현된다.
서버 시스템(108)은 하나 이상의 독립형 데이터 프로세싱 장치들 또는 분산형 컴퓨터 네트워크 상에 구현된다. 일부 실시예들에서, 서버 시스템(108)은 또한 서버 시스템(108)의 기본 컴퓨팅 리소스들 및/또는 인프라구조 리소스들을 제공하기 위해 제3자 서비스 제공자들(예컨대, 제3자 클라우드 서비스 제공자들)의 다양한 가상 디바이스들 및/또는 서비스들을 채용한다.
도 1에 도시된 디지털 어시스턴트가 클라이언트 측 부분(예컨대, DA-클라이언트(102)) 및 서버 측 부분(예컨대, DA-서버(106)) 둘 모두를 포함하지만, 일부 실시예들에서, 디지털 어시스턴트의 기능들은 사용자 디바이스 상에 설치된 독립형 애플리케이션으로서 구현된다. 추가로, 디지털 어시스턴트의 클라이언트 부분과 서버 부분 사이에서의 기능들의 분담은 상이한 실시예들에서 다를 수 있다. 예를 들어, 일부 실시예들에서, DA-클라이언트(102)는, 오로지 사용자 대면 입력 및 출력 프로세싱 기능들만을 제공하고, 디지털 어시스턴트의 다른 모든 기능들을 백엔드 서버에 위임하는 씬-클라이언트(thin-client)이다.
도 2는 일부 실시예들에 따른 사용자 디바이스(104)의 블록도이다. 사용자 디바이스(104)는 메모리 인터페이스(202), 하나 이상의 프로세서들(204), 및 주변기기 인터페이스(206)를 포함한다. 사용자 디바이스(104) 내의 다양한 컴포넌트들은 하나 이상의 통신 버스들 또는 신호 라인들에 의해 연결된다. 사용자 디바이스(104)는 다양한 센서들, 서브시스템들, 및 주변기기 인터페이스(206)에 연결되는 주변기기 디바이스들을 포함한다. 센서들, 서브시스템들, 및 주변기기 디바이스들은 정보를 수집하고 그리고/또는 사용자 디바이스(104)의 다양한 기능들을 가능하게 한다.
예를 들어, 모션 센서(210), 광 센서(212), 및 근접 센서(214)가 주변기기 인터페이스(206)에 연결되어 배향, 광, 및 근접 감지 기능들을 가능하게 한다. 하나 이상의 기타 센서들(216), 예컨대 포지셔닝 시스템(예컨대, GPS 수신기), 온도 센서, 생체인식 센서, 자이로스코프, 나침반, 가속도계 등이 또한 주변기기 인터페이스(206)에 접속되어 관련 기능들을 가능하게 한다.
일부 실시예들에서, 카메라 서브시스템(220) 및 광학 센서(222)가 활용되어 사진 촬영 및 비디오 클립 녹화와 같은 카메라 기능들을 가능하게 한다. 통신 기능들은 다양한 통신 포트들, 무선 주파수 수신기들 및 송신기들, 및/또는 광학(예컨대, 적외선) 수신기들 및 송신기들을 포함할 수 있는 하나 이상의 유선 및/또는 무선 통신 서브시스템들(224)을 통해 가능하게 된다. 오디오 서브시스템(226)은 스피커들(228) 및 마이크로폰(230)에 연결되어 음성 인식, 음성 복제, 디지털 녹음, 및 전화 통신 기능들과 같은 음성-인에이블형(voice-enabled) 기능들을 가능하게 한다.
일부 실시예들에서, I/O 서브시스템(240)이 또한 주변기기 인터페이스(206)에 연결된다. I/O 서브시스템(240)은 터치 스크린 제어기(242) 및/또는 기타 입력 제어기(들)(244)를 포함한다. 터치 스크린 제어기(242)는 터치 스크린(246)에 연결된다. 터치 스크린(246) 및 터치 스크린 제어기(242)는, 예를 들어, 용량성, 저항, 적외선, 표면 탄성파 기술들, 근접 센서 어레이들 등과 같은 복수의 터치 감지 기술들 중 임의의 것을 이용하여 접촉 및 움직임 또는 이들의 중단을 검출할 수 있다. 기타 입력 제어기(들)(244)가 하나 이상의 버튼, 로커 스위치(rocker switch), 지동륜(thumb-wheel), 적외선 포트, USB 포트, 및/또는 포인터 디바이스, 예컨대 스타일러스와 같은 기타 입력/제어 디바이스들(248)에 연결될 수 있다.
일부 실시예들에서, 메모리 인터페이스(202)는 메모리(250)에 연결된다. 메모리(250)는 고속 랜덤 액세스 메모리 및/또는 비휘발성 메모리, 예컨대 하나 이상의 자기 디스크 저장 디바이스, 하나 이상의 광 저장 디바이스, 및/또는 플래시 메모리(예를 들어, NAND 또는 NOR)를 포함할 수 있다.
일부 실시예들에서, 메모리(250)는 운영 체제(252), 통신 모듈(254), 그래픽 사용자 인터페이스 모듈(256), 센서 프로세싱 모듈(258), 전화 모듈(260) 및 애플리케이션(262)을 저장한다. 운영 체제(252)는 기본 시스템 서비스들을 처리하기 위한 그리고 하드웨어 의존 태스크들을 수행하기 위한 명령어들을 포함한다. 통신 모듈(254)은 하나 이상의 추가 디바이스들, 하나 이상의 컴퓨터들, 및/또는 하나 이상의 서버들과의 통신을 가능하게 한다. 그래픽 사용자 인터페이스 모듈(256)은 그래픽 사용자 인터페이스 프로세싱을 가능하게 한다. 센서 프로세싱 모듈(258)은 센서 관련 프로세싱 및 기능들을 가능하게 한다. 전화 모듈(260)은 전화 관련 프로세스들 및 기능들을 가능하게 한다. 애플리케이션 모듈(262)은 전자 메시징, 웹 브라우징, 미디어 프로세싱, 내비게이션, 이미징, 및/또는 기타 프로세스들 및 기능들과 같은 사용자 애플리케이션들의 다양한 기능들을 가능하게 한다.
본 명세서에서 기술하는 바와 같이, 메모리(250)는 또한 디지털 어시스턴트의 클라이언트 측 기능들을 제공하기 위해 클라이언트 측 디지털 어시스턴트 명령어들을 (예컨대, 디지털 어시스턴트 클라이언트 모듈(264) 내에) 그리고 다양한 사용자 데이터(266)(예컨대, 사용자 특정 어휘 데이터, 선호도 데이터, 및/또는 사용자의 전자 주소록, 할 일 목록, 쇼핑 리스트들 등과 같은 기타 데이터)를 저장한다.
다양한 실시예들에서, 디지털 어시스턴트 클라이언트 모듈(264)은 사용자 디바이스(104)의 다양한 사용자 인터페이스들(예컨대, I/O 서브시스템(244))을 통해 음성 입력(예컨대, 스피치 입력), 텍스트 입력, 터치 입력, 및/또는 제스처 입력을 받아들일 수 있다. 디지털 어시스턴트 클라이언트 모듈(264)은 또한 청각적(예컨대, 스피치 출력), 시각적, 및/또는 촉각적 형태들로 출력을 제공할 수 있다. 예를 들어, 출력은 음성, 사운드, 알림들, 텍스트 메시지들, 메뉴들, 그래픽들, 비디오들, 애니메이션들, 진동들, 및/또는 이들의 조합들로서 제공될 수 있다. 동작 동안, 디지털 어시스턴트 클라이언트 모듈(264)은 통신 서브시스템들(224)을 사용하여 디지털 어시스턴트 서버와 통신한다.
일부 실시예들에서, 디지털 어시스턴트 클라이언트 모듈(264)은 사용자와 연관된 상황, 현재 사용자 상호작용, 및/또는 현재 사용자 입력을 확립하기 위해 다양한 센서들, 서브시스템들, 및 주변기기 디바이스들을 활용하여 사용자 디바이스(104)의 주위 환경으로부터 추가 정보를 수집한다. 일부 실시예들에서, 디지털 어시스턴트 클라이언트 모듈(264)은 디지털 어시스턴트 서버에 사용자 입력과 함께 상황 정보 또는 그의 서브세트를 제공하여 사용자의 의도를 추론하는 것을 돕는다. 일부 실시예들에서, 디지털 어시스턴트는 또한 상황 정보를 이용하여 어떻게 출력들을 준비하여 사용자에게 전달할 지를 판정한다.
일부 실시예들에서, 사용자 입력을 동반하는 상황 정보는 센서 정보, 예컨대 조명, 주변 잡음, 주변 온도, 주위 환경의 이미지들 또는 비디오들 등을 포함한다. 일부 실시예들에서, 상황 정보는 또한 사용자 디바이스(104)의 물리적 상태(예컨대, 디바이스 배향, 디바이스 위치, 디바이스 온도, 전력 레벨, 속도, 가속도, 모션 패턴들, 셀룰러 신호 세기 등)를 포함한다. 일부 실시예들에서, 사용자 디바이스(104)의 소프트웨어 상태에 관련된 정보(예컨대, 구동 중인 프로세스들, 설치된 프로그램들, 과거 및 현재의 네트워크 활성도, 백그라운드 서비스들, 에러 로그들, 리소스 사용 등)가 사용자 입력과 연관된 상황 정보로서 디지털 어시스턴트 서버에 제공된다.
일부 실시예들에서, 디지털 어시스턴트 클라이언트 모듈(264)은 디지털 어시스턴트 서버로부터의 요청들에 응답하여 사용자 디바이스(104) 상에 저장된 정보(예컨대, 사용자 데이터(266))를 선택적으로 제공한다. 일부 실시예들에서, 디지털 어시스턴트 클라이언트 모듈(264)은 또한 디지털 어시스턴트 서버(106)에 의한 요청에 따라 자연 언어 대화 또는 기타 사용자 인터페이스들을 통해 사용자로부터 추가 입력을 이끌어낸다. 디지털 어시스턴트 클라이언트 모듈(264)은 디지털 어시스턴트 서버(106)에 추가 입력을 전달하여, 사용자 요청에서 표현되는 사용자 의도의 의도 추론 및/또는 이행 시에 디지털 어시스턴트 서버(106)를 돕는다.
다양한 실시예들에서, 메모리(250)는 추가 명령어들 또는 더 적은 명령어들을 포함한다. 더욱이, 사용자 디바이스(104)의 다양한 기능들은 하나 이상의 신호 프로세싱 및/또는 특정 용도의 집적 회로(application specific integrated circuit)들을 비롯한 하드웨어 및/또는 펌웨어로 구현될 수 있다.
도 3a는 일부 실시예들에 따른 예시적인 디지털 어시스턴트 시스템(300)의 블록도이다. 일부 실시예들에서, 디지털 어시스턴트 시스템(300)은 독립형 컴퓨터 시스템 상에서 구현된다. 일부 실시예들에서, 디지털 어시스턴트 시스템(300)은 다수의 컴퓨터들에 걸쳐 분산된다. 일부 실시예들에서, 디지털 어시스턴트의 모듈들 및 기능들 중 일부는 서버 부분과 클라이언트 부분으로 나뉘어지는데, 여기서 클라이언트 부분은 사용자 디바이스(예컨대, 사용자 디바이스(104)) 상에 존재하며, 하나 이상의 네트워크들(예컨대, 네트워크(들)(110))을 통해 서버 부분(예컨대, 서버 시스템(108))과 통신한다. 일부 실시예들에서, 디지털 어시스턴트 시스템(300)은 도 1에 도시된 서버 시스템(108)(및/또는 디지털 어시스턴트 서버(106))의 일 실시예이다. 디지털 어시스턴트 시스템(300)은 단지 디지털 어시스턴트 시스템의 일례일 뿐이라는 것, 및 디지털 어시스턴트 시스템(300)이 도시된 것보다 더 많거나 더 적은 컴포넌트들을 가질 수 있거나, 둘 이상의 컴포넌트들을 조합할 수 있거나, 또는 상이한 구성 또는 배열의 컴포넌트들을 가질 수 있다는 것에 유의해야 한다. 도 3a에 도시된 다양한 컴포넌트들은 하나 이상의 신호 프로세싱 및/또는 특정 용도의 집적 회로들을 비롯한, 하드웨어, 하나 이상의 프로세서들에 의한 실행을 위한 소프트웨어 명령어들, 펌웨어, 또는 이들의 조합으로 구현될 수 있다.
디지털 어시스턴트 시스템(300)은 메모리(302), 하나 이상의 프로세서들(304), 입출력(I/O) 인터페이스(306), 및 네트워크 통신 인터페이스(308)를 포함한다. 이들 컴포넌트들은 하나 이상의 통신 버스들 또는 신호 라인들(310)을 통해 서로 통신한다.
일부 실시예들에서, 메모리(302)는 비일시적 컴퓨터 판독가능 저장 매체, 예컨대 고속 랜덤 액세스 메모리 및/또는 비휘발성 저장 매체(예컨대, 하나 이상의 자기 디스크 저장 디바이스들, 플래시 메모리 디바이스들, 또는 기타 비휘발성 솔리드 스테이트 메모리 디바이스들)를 포함한다.
일부 실시예들에서, I/O 인터페이스(306)는 디스플레이들, 키보드들, 터치 스크린들, 및 마이크로폰들과 같은 디지털 어시스턴트 시스템(300)의 입출력 디바이스들(316)을 사용자 인터페이스 모듈(322)에 연결한다. I/O 인터페이스(306)는, 사용자 인터페이스 모듈(322)과 함께, 사용자 입력들(예컨대, 음성 입력, 키보드 입력들, 터치 입력들 등)을 수신하고 이에 따라 이들을 프로세싱한다. 일부 실시예들에서, 디지털 어시스턴트 시스템(300)은 (예컨대, 디지털 어시스턴트가 독립형 사용자 디바이스 상에서 구현되는 경우) 도 2에서의 사용자 디바이스(104)에 대하여 기재된 컴포넌트 및 I/O 및 통신 인터페이스들 중 임의의 것을 포함한다. 일부 실시예들에서, 디지털 어시스턴트 시스템(300)은 디지털 어시스턴트 구현예의 서버 부분을 나타내고, 사용자 디바이스(예를 들어, 도 2에 도시된 사용자 디바이스(104)) 상에 존재하는 클라이언트 측 부분을 통해 사용자와 상호작용한다.
일부 실시예들에서, 네트워크 통신 인터페이스(308)는 유선 통신 포트(들)(312) 및/또는 무선 송신 및 수신 회로(314)를 포함한다. 유선 통신 포트(들)는 하나 이상의 유선 인터페이스들, 예를 들어 이더넷, 범용 직렬 버스(USB), 파이어와이어 등을 통해 통신 신호들을 수신 및 송신한다. 무선 회로(314)는 통신 네트워크들 및 다른 통신 디바이스들로부터/로 RF 신호들 및/또는 광 신호들을 수신하고 송신한다. 무선 통신은 선택적으로, GSM, EDGE, CDMA, TDMA, 블루투스, Wi-Fi, VoIP, Wi-MAX, 또는 임의의 기타 적합한 통신 프로토콜과 같은 복수의 통신 표준들, 프로토콜들, 및 기술들 중 임의의 것을 이용한다. 네트워크 통신 인터페이스(308)는 하나 이상의 네트워크들(예를 들어, 인터넷, 인트라넷, 무선 네트워크, 예컨대 셀룰러 전화 네트워크, 무선 근거리 통신망(LAN) 또는 도시권 통신망(MAN))을 통해 디지털 어시스턴트 시스템(300), 서버 시스템(108), 및 기타 디바이스들(130) 사이의 통신을 가능하게 한다.
일부 실시예들에서, 메모리(302) 또는 메모리(302)의 비일시적 컴퓨터 판독가능 저장 매체는, 운영 체제(318), 통신 모듈(320), 사용자 인터페이스 모듈(322), 하나 이상의 애플리케이션들(324), 및 디지털 어시스턴트 모듈(326)의 전체 또는 그들의 서브세트를 포함한, 프로그램들, 모듈들, 명령어들, 및 데이터 구조들을 저장한다. 하나 이상의 프로세서들(304)은 이러한 프로그램들, 모듈들, 및 명령어들을 실행하고, 데이터 구조들로부터/로 판독한다/기록한다.
운영 체제(318)(예를 들어, 다윈(Darwin), RTXC, LINUX, UNIX, OS X, WINDOWS, 또는 VxWorks와 같은 내장형 운영 체제)는 일반적인 시스템 태스크들(예를 들어, 메모리 관리, 저장 디바이스 제어, 전력 관리 등)을 제어하고 관리하기 위한 다양한 소프트웨어 컴포넌트들 및/또는 드라이버들을 포함하고, 다양한 하드웨어, 펌웨어, 및 소프트웨어 컴포넌트들 간의 통신들을 가능하게 한다.
통신 모듈(320)은 디지털 어시스턴트 시스템(300), 서버 시스템(108), 및 기타 디바이스들(130)(예를 들어, 사용자 디바이스(104)의 사용자와는 상이한 사용자들과 연관된 컴퓨팅 디바이스들) 간에 네트워크 통신 인터페이스(308)를 통한 통신을 가능하게 한다. 예를 들어, 통신 모듈(320)은 선택적으로, 도 2에 도시된 사용자 디바이스(104)의 통신 인터페이스(254)와 통신한다. 통신 모듈(320)은 또한 무선 회로(314) 및/또는 유선 통신 포트(312)에 의해 수신된 데이터를 처리하기 위한 다양한 컴포넌트들을 포함한다.
사용자 인터페이스 모듈(322)은 I/O 인터페이스(306)를 통해 사용자로부터(예컨대, 키보드, 터치 스크린, 포인팅 디바이스, 제어기, 및/또는 마이크로폰으로부터) 커맨드들 및/또는 입력들을 수신하고, 디스플레이 상에 사용자 인터페이스 객체들을 생성한다. 사용자 인터페이스 모듈(322)은 또한 출력들(예컨대, 스피치, 사운드, 애니메이션, 텍스트, 아이콘들, 진동들, 햅틱 피드백, 조명 등)을 준비하고, I/O 인터페이스(306)를 통해(예컨대, 디스플레이들, 오디오 채널들, 스피커들, 및 터치 패드들 등을 통해) 사용자에게 그들을 전달한다.
하나 이상의 애플리케이션들(324)은 하나 이상의 프로세서들(304)에 의해 실행되도록 구성된 프로그램들 및/또는 모듈들을 포함한다. 예를 들어, 디지털 어시스턴트 시스템이 독립형 사용자 디바이스 상에 구현되는 경우, 하나 이상의 애플리케이션들(324)은 선택적으로, 게임들, 캘린더 애플리케이션, 내비게이션 애플리케이션, 또는 이메일 애플리케이션과 같은 사용자 애플리케이션들을 포함한다. 디지털 어시스턴트 시스템(300)이 서버 팜(server farm) 상에 구현되는 경우, 하나 이상의 애플리케이션들(324)은 선택적으로, 리소스 관리 애플리케이션들, 진단 애플리케이션들, 또는 스케줄링 애플리케이션들을 포함한다.
메모리(302)는 또한 디지털 어시스턴트 모듈(326)(또는 디지털 어시스턴트의 서버 부분)을 저장한다. 일부 실시예들에서, 디지털 어시스턴트 모듈(326)은 하기의 서브모듈들, 또는 그들의 서브세트 또는 슈퍼세트를 포함한다: 입출력 프로세싱 모듈(328), 스피치-텍스트(speech-to-text: STT) 프로세싱 모듈(330), 자연 언어 프로세싱 모듈(332), 대화 흐름 프로세싱 모듈(340), 태스크 흐름 프로세싱 모듈(342), 서비스 프로세싱 모듈(346), 및 자동 응답 모듈(350). 이러한 모듈들 각각은 디지털 어시스턴트(326)의 하기의 데이터 및 모델들, 또는 그들의 서브세트 또는 슈퍼세트 중 하나 이상에 액세스한다: 온톨로지(334), 어휘 인덱스(336), 사용자 데이터(338), 태스크 흐름 모델들(344), 서비스 모델들(348), 및 사용자 로그(360).
일부 실시예들에서, 디지털 어시스턴트 모듈(326)에서 구현되는 프로세싱 모듈들, 데이터, 및 모델들을 이용하여, 디지털 어시스턴트 시스템(300)은 하기 사항 중 적어도 일부를 수행한다: 사용자로부터 수신된 자연 언어 입력에서 표현되는 사용자의 의도를 식별하는 것; (예컨대, 단어들, 이름들, 의사 등을 명확히 함으로써) 사용자의 의도를 충분히 추론하는 데 필요한 정보를 능동적으로 이끌어내고 획득하는 것; 추론된 의도를 이행하기 위한 태스크 흐름을 결정하는 것; 및 태스크 흐름을 실행하여 추론된 의도를 이행하는 것. 일부 실시예들에서, 디지털 어시스턴트는 또한 여러 이유들로 인해 만족스러운 응답이 사용자에게 제공되지 못했거나 제공될 수 없었을 경우, 적절한 액션을 취한다.
일부 실시예들에서, 도 3b에 도시된 바와 같이, I/O 프로세싱 모듈(328)은 도 3a의 I/O 디바이스들(316)을 통해 사용자와 상호작용하거나 또는 도 3a의 네트워크 통신 인터페이스(308)를 통해 사용자 디바이스(예컨대, 도 1의 사용자 디바이스(104))와 상호작용하여, 사용자 입력(예컨대, 스피치 입력)을 획득하고 (예컨대, 스피치 출력들로서) 사용자 입력에 대한 응답들을 제공한다. I/O 프로세싱 모듈(328)은 사용자 입력의 수신과 함께 또는 사용자 입력의 수신 직후에, 사용자 디바이스로부터 사용자 입력과 연관된 상황 정보를 선택적으로 획득한다. 상황 정보는 사용자 특정 데이터, 어휘, 및/또는 사용자 입력과 관련된 선호도들을 포함한다. 일부 실시예들에서, 상황 정보는 또한 사용자 요청이 수신되는 시점에서의 디바이스(예를 들어, 도 1의 사용자 디바이스(104))의 소프트웨어 및 하드웨어 상태 및/또는 사용자 요청이 수신된 시점에서의 사용자의 주위 환경에 관련된 정보를 포함한다. 일부 실시예들에서, I/O 프로세싱 모듈(328)은 또한 사용자 요청에 관하여 사용자에게 후속 질문들을 전송하고, 그로부터 답변들을 수신한다. 사용자 요청이 I/O 프로세싱 모듈(328)에 의해 수신되고 사용자 요청이 스피치 입력을 포함하는 경우, I/O 프로세싱 모듈(328)은 스피치-텍스트 변환을 위해 스피치 입력을 STT 프로세싱 모듈(330)로 보낸다.
STT 프로세싱 모듈(330)은 I/O 프로세싱 모듈(328)을 통해 스피치 입력(예컨대, 음성 녹음에서 캡처된 사용자 발언)을 수신한다. 일부 실시예들에서, STT 프로세싱 모듈(330)은 다양한 음향 및 언어 모델들을 이용하여 음소(phoneme)들의 시퀀스, 및 궁극적으로, 하나 이상의 언어들로 쓰여진 단어들 또는 토큰들의 시퀀스로서 스피치 입력을 인식한다. 스피치-텍스트 프로세싱 모듈(330)은 은닉 마르코프 모델(Hidden Markov Model)들, 동적 시간 워핑(Dynamic Time Warping, DTW) 기반 스피치 인식, 및 기타 통계 및/또는 분석 기법들과 같은 임의의 적합한 스피치 인식 기술들, 음향 모델들, 및 언어 모델들을 이용하여 구현될 수 있다. 일부 실시예들에서, 스피치-텍스트 프로세싱은 적어도 부분적으로 제3자 서비스에 의해 수행될 수 있거나, 또는 사용자의 디바이스 상에서 수행될 수 있다. 일단 STT 프로세싱 모듈(330)이 스피치-텍스트 프로세싱의 결과물(예컨대, 단어들 또는 토큰들의 시퀀스)을 획득하면, STT 프로세싱 모듈(330)은 의도 추론을 위해 결과물을 자연 언어 프로세싱 모듈(332)로 전달한다.
스피치-텍스트 프로세싱에 대한 더 많은 상세사항들은 2011년 9월 20일자로 출원된 "스피치 인식 결과의 통합(Consolidating Speech Recognition Results)"에 대한 미국 실용신안 출원 제13/236,942호에 기재되어 있으며, 그 전체 개시 내용은 본 명세서에 참고로 포함된다.
디지털 어시스턴트의 자연 언어 프로세싱 모듈(332)(때때로 본 명세서에서 "자연 언어 프로세서"라고도 함)은 STT 프로세싱 모듈(330)에 의해 생성된 단어들 또는 토큰들의 시퀀스(또는 토큰 시퀀스)를 취하고, 토큰 시퀀스를 디지털 어시스턴트에 의해 인식되는 하나 이상의 액션가능 의도들과 연관시키고자 시도한다. "액션가능 의도"는 디지털 어시스턴트에 의해 수행될 수 있는 태스크를 나타내고, 태스크 흐름 모델들(344)에서 구현되는 연관 태스크 흐름을 갖는다. 연관 태스크 흐름은 디지털 어시스턴트가 태스크를 수행하기 위해 취하는 일련의 프로그래밍된 액션들 및 단계들이다. 디지털 어시스턴트의 능력들의 범주는 태스크 흐름 모델들(344)에서 구현되고 저장된 태스크 흐름들의 수 및 종류, 또는 다시 말해, 디지털 어시스턴트가 인식하는 액션가능 의도들의 수 및 종류에 의존한다. 그러나, 디지털 어시스턴트의 효율성도 또한 자연 언어로 표현된 사용자 요청으로부터 정확한 액션가능 의도(들)를 추론하는 디지털 어시스턴트의 능력에 의존한다.
일부 실시예들에서, STT 프로세싱 모듈(330)로부터 획득된 토큰 시퀀스 외에도, 자연 언어 프로세서(332)는 또한 (예를 들어, I/O 프로세싱 모듈(328)로부터) 사용자 요청과 연관된 상황 정보를 수신한다. 자연 언어 프로세서(332)는 선택적으로 상황 정보를 이용하여, STT 프로세싱 모듈(330)로부터 수신된 토큰 시퀀스에 포함된 정보를 명확하게 하고, 보완하고, 그리고/또는 추가로 정의한다. 상황 정보는, 예를 들어 사용자 선호도들, 사용자 디바이스의 하드웨어 및/또는 소프트웨어 상태들, 사용자 요청 전, 요청 중, 또는 요청 직후에 수집되는 센서 정보, 디지털 어시스턴트와 사용자 사이의 이전 상호작용들(예컨대, 대화) 등을 포함한다.
일부 실시예들에서, 자연 언어 프로세싱은 온톨로지(334)에 기초한다. 온톨로지(334)는 많은 노드들을 포함하는 계층 구조(hierarchical structure)인데, 각각의 노드는 "액션가능 의도", 또는 "액션가능 의도들" 중 하나 이상에 관련된 "속성(property)", 또는 기타 "속성들" 중 어느 하나를 표현한다. 전술한 바와 같이, "액션가능 의도"는 디지털 어시스턴트가 수행할 수 있는(즉, 그것이 액션가능하거나 또는 영향을 미칠 수 있는) 태스크를 나타낸다. "속성"은 액션가능 의도 또는 다른 속성의 하위태양과 연관되는 파라미터를 나타낸다. 온톨로지(334) 내의 액션가능 의도 노드와 속성 노드 간의 연결성은 속성 노드에 의해 표현되는 파라미터가 액션가능 의도 노드에 의해 표현되는 태스크에 어떻게 관련되는지를 정의한다.
일부 실시예들에서, 온톨로지(334)는 액션가능 의도 노드들 및 속성 노드들로 구성된다. 온톨로지(334) 내에서, 각각의 액션가능 의도 노드는 직접적으로 또는 하나 이상의 중간 속성 노드들을 통해 하나 이상의 속성 노드들에 링크된다. 유사하게, 각각의 속성 노드는 직접적으로 또는 하나 이상의 중간 속성 노드들을 통해 하나 이상의 액션가능 의도 노드들에 링크된다. 예를 들어, 도 3c에 도시된 바와 같이, 온톨로지(334)는 선택적으로 "레스토랑 예약" 노드 - 액션가능 의도 노드 - 를 포함한다. 속성 노드들 "레스토랑", (예약을 위한) "날짜/시간", 및 "인원수"는 액션가능 의도 노드(즉, "레스토랑 예약" 노드)에 각각 직접적으로 링크된다. 추가로, 속성 노드 "요리", "가격대", "전화 번호", 및 "위치"는 속성 노드 "레스토랑"의 서브-노드이고, 중간 속성 노드 "레스토랑"을 통해 "레스토랑 예약" 노드에 각각 링크된다. 다른 예를 들어, 도 3c에 도시된 바와 같이, 온톨로지(334)는 또한 "리마인더 설정" 노드(즉, 다른 액션가능 의도 노드)를 포함할 수 있다. 속성 노드들 (리마인더를 설정하기 위한) "날짜/시간" 및 (리마인더를 위한) "주제"는 "리마인더 설정" 노드에 각각 링크된다. 속성 "날짜/시간"이 레스토랑 예약을 하는 태스크 및 리마인더를 설정하는 태스크 둘 모두에 관련되기 때문에, 속성 노드 "날짜/시간"은 온톨로지(334) 내의 "레스토랑 예약" 노드 및 "리마인더 설정" 노드 둘 모두에 링크된다.
액션가능 의도 노드는, 그의 링크된 속성 노드들과 함께, 때때로 "도메인"으로 기술된다. 본 논의에서, 각각의 도메인은 개별 액션가능 의도와 연관되고, 특정한 액션가능 의도와 연관된 노드들(및 이들 사이의 관계들)의 그룹을 지칭한다. 예를 들어, 도 3c에 도시된 온톨로지(334)는 온톨로지(334) 내의 레스토랑 예약 도메인(362)의 일례 및 리마인더 도메인(364)의 일례를 포함한다. 레스토랑 예약 도메인은 액션가능 의도 노드 "레스토랑 예약", 속성 노드들 "레스토랑", "날짜/시간", 및 "인원수", 및 하위속성 노드들 "요리", "가격대", "전화 번호", 및 "위치"를 포함한다. 리마인더 도메인(364)은 액션가능 의도 노드 "리마인더 설정", 및 속성 노드들 "주제" 및 "날짜/시간"을 포함한다. 일부 실시예들에서, 온톨로지(334)는 많은 도메인들로 구성된다. 각각의 도메인은 선택적으로, 하나 이상의 속성 노드들을 하나 이상의 다른 도메인들과 공유한다. 예를 들어, "날짜/시간" 속성 노드는 선택적으로, 레스토랑 예약 도메인(362) 및 리마인더 도메인(364) 외에도, 많은 상이한 도메인들(예컨대, 스케줄링 도메인, 여행 예약 도메인, 영화 티켓 도메인 등)과 연관된다.
도 3c는 온톨로지(334) 내의 2개의 예시적인 도메인들을 도시하지만, 다른 도메인들(또는 액션가능 의도들)은, 예를 들어, "전화 통화를 개시한다", "길안내를 찾는다", "미팅을 스케줄링한다", "메시지를 전송한다", 및 "질문에 대한 답변을 제공한다" 등을 포함한다. "메시지를 전송한다" 도메인은 "메시지를 전송한다" 액션가능 의도 노드와 연관되고, 선택적으로, "수신자(들)", "메시지 유형", 및 "메시지 본문"과 같은 속성 노드들을 추가로 포함한다. 속성 노드 "수신자"는 선택적으로, 예를 들어 "수신자 이름" 및 "메시지 주소"와 같은 하위속성 노드들에 의해 추가로 정의된다.
일부 실시예들에서, 온톨로지(334)는 디지털 어시스턴트가 이해할 수 있고 그에 의거하여 액션할 수 있는 모든 도메인들(및 그에 따른 액션가능 의도들)을 포함한다. 일부 실시예들에서, 온톨로지(334)는 선택적으로, 예컨대 온톨로지(334) 내에서 전체 도메인들 또는 노드들을 추가하거나 삭제함으로써 또는 노드들 사이의 관계를 수정함으로써 수정된다.
일부 실시예들에서, 다수의 관련 액션가능 의도들과 연관된 노드들은 선택적으로 온톨로지(334) 내에서 "상위 도메인" 아래에 군집된다. 예를 들어, "여행들" 상위 도메인은 선택적으로 여행에 관련된 속성 노드들 및 액션가능 의도 노드들의 군집을 포함한다. 여행에 관련된 액션가능 의도 노드들은 선택적으로 "항공 예약", "호텔 예약", "자동차 렌탈", "길찾기", "관심 지점 찾기" 등을 포함한다. 동일한 상위 도메인(예컨대, "여행들" 상위 도메인) 아래의 액션가능 의도 노드들은 때때로 많은 속성 노드들을 공동으로 갖는다. 예를 들어, "항공 예약", "호텔 예약", "자동차 렌탈", "길찾기", "관심 지점 찾기"에 대한 액션가능 의도 노드들은 때때로 속성 노드들 "시작 위치", "목적지", "출발 날짜/시간", "도착 날짜/시간", 및 "인원수" 중 하나 이상을 공유한다.
일부 실시예들에서, 온톨로지(334) 내의 각각의 노드는, 노드에 의해 표현되는 속성 또는 액션가능 의도와 관련된 단어들 및/또는 구절(phrase)들의 세트와 연관된다. 각각의 노드와 연관된 단어들 및/또는 구절들의 각각의 세트는 노드와 연관된 소위 "어휘"이다. 각각의 노드와 연관된 단어들 및/또는 구절들의 각각의 세트는 노드에 의해 표현되는 속성 또는 액션가능 의도와 관련하여 어휘 인덱스(336)에 저장될 수 있다. 예를 들어, 도 3b로 돌아와서, "레스토랑"의 속성에 대한 노드와 연관된 어휘는 선택적으로 "음식", "음료", "요리", "배고프다", "먹다", "피자", "패스트푸드", "식사" 등과 같은 단어들을 포함한다. 다른 예를 들어, "전화 통화를 개시한다"의 액션가능 의도에 대한 노드와 연관된 어휘는 선택적으로 "통화", "전화", "다이얼", "이 번호로 전화하다", "~에게 전화하다" 등과 같은 단어들 및 구절들을 포함한다. 어휘 인덱스(336)는 상이한 언어들의 단어들 및 구절들을 선택적으로 포함한다.
자연 언어 프로세서(332)는 STT 프로세싱 모듈(330)로부터 토큰 시퀀스(예컨대, 텍스트 스트링)를 수신하고, 토큰 시퀀스 내의 단어들에 의해 어떤 노드들이 연루되는지를 판정한다. 일부 실시예들에서, 토큰 시퀀스 내의 단어 또는 구절이 (어휘 인덱스(336)를 통해) 온톨로지(334) 내의 하나 이상의 노드들과 연관되는 것으로 밝혀지는 경우, 단어 또는 구절은 이들 노드들을 "트리거" 또는 "활성화"시킬 것이다. 활성화된 노드들의 양 및/또는 상대적 중요도에 기초하여, 자연 언어 프로세서(332)는 사용자가 디지털 어시스턴트로 하여금 수행하도록 의도했던 태스크로서 액션가능 의도들 중 하나를 선택할 것이다. 일부 실시예들에서, 가장 많이 "트리거"된 노드들을 갖는 도메인이 선택된다. 일부 실시예들에서, 가장 높은 신뢰도 값(예컨대, 그것의 다양한 트리거된 노드들의 상대적 중요도에 기초함)을 갖는 도메인이 선택된다. 일부 실시예들에서, 도메인은 트리거된 노드들의 수 및 중요도의 조합에 기초하여 선택된다. 일부 실시예들에서, 디지털 어시스턴트가 이전에 사용자로부터의 유사한 요청을 정확하게 해석했는지 여부와 같은 추가 요인들도 노드를 선택하는 데 있어 마찬가지로 고려된다.
일부 실시예들에서, 디지털 어시스턴트는 또한 어휘 인덱스(336) 내의 특정 엔티티들의 이름들을 저장하여, 이들 이름들 중 하나가 사용자 요청에서 검출되는 경우, 자연 언어 프로세서(332)가, 이름이 온톨로지 내의 속성 또는 하위속성의 특정 경우를 지칭하는 것임을 인식할 수 있게 할 것이다. 일부 실시예들에서, 특정 엔티티들의 이름들은 사업들, 레스토랑들, 사람들, 영화들 등의 이름들이다. 일부 실시예들에서, 디지털 어시스턴트는 다른 데이터 소스들, 예컨대 사용자의 주소록, 영화 데이터베이스, 음악가 데이터베이스 및/또는 레스토랑 데이터베이스로부터 특정 엔티티 이름들을 검색하고 식별한다. 일부 실시예들에서, 자연 언어 프로세서(332)가, 토큰 시퀀스 내의 단어가 특정 엔티티의 이름(예컨대, 사용자의 주소록 내의 이름)임을 식별하는 경우, 그 단어는 사용자 요청에 대한 온톨로지 내의 액션가능 의도를 선택하는 데 있어 추가적인 중요성을 부여받는다.
예를 들어, 단어들 "산토 씨(Mr. Santo)"가 사용자 요청에서 인식되고, 성(last name)인 "산토"가 사용자의 주소록 내의 연락처들 중 하나로서 어휘 인덱스(336)에서 발견되는 경우, 사용자 요청은 "메시지를 전송한다" 또는 "전화 통화를 개시한다" 도메인에 대응할 가능성이 있다. 다른 예를 들어, 단어들 "ABC 카페"가 사용자 요청에서 발견되고, 용어 "ABC 카페"가 사용자의 도시에 있는 특정 레스토랑의 이름으로서 어휘 인덱스(336)에서 발견되는 경우, 사용자 요청은 "레스토랑 예약" 또는 "레스토랑 찾기" 도메인에 대응할 가능성이 있다.
사용자 데이터(338)는 사용자 특정 정보, 예컨대 사용자 특정 어휘, 사용자 선호도, 사용자 주소 또는 집 주소, 사용자의 디폴트 언어 및 제2 언어, 사용자의 주소록, 및 각각의 사용자에 대한 기타 단기 또는 장기 정보를 포함한다. 일부 실시예들에서, 자연 언어 프로세서(332)는 사용자 특정 정보를 이용하여 사용자 입력에 포함된 정보를 보완하여 사용자 의도를 추가로 정의한다. 예를 들어, "내 생일 파티에 내 친구들을 초대하라"라는 사용자 요청에 대하여, 자연 언어 프로세서(332)는, "친구들"이 누구인지 그리고 "생일 파티"가 언제, 어디에서 열릴지를 판정하기 위해 사용자에게 그의/그녀의 요청에서 그러한 정보를 명확하게 제공하도록 요구하는 대신, 사용자 데이터(338)에 액세스할 수 있다.
토큰 스트링에 기초하여 온톨로지를 검색하는 다른 상세사항들이 2008년 12월 22일자로 출원된 "능동 온톨로지를 이용하여 검색하기 위한 방법 및 장치(Method and Apparatus for Searching Using an Active Ontology)"에 대한 미국 실용신안 출원 제12/341,743호에 기재되어 있으며, 이 출원의 전체 개시 내용은 본 명세서에 참고로 포함된다.
일부 실시예들에서, 일단 자연 언어 프로세서(332)가 사용자 요청에 기초하여 액션가능 의도(또는 도메인)를 식별하면, 자연 언어 프로세서(332)는 식별된 액션가능 의도를 나타내기 위해 구조화된 질의(structured query)를 생성한다. 일부 실시예들에서, 구조화된 질의는, 액션가능 의도를 위한 도메인 내의 하나 이상의 노드들에 대한 파라미터들을 포함하고, 파라미터들 중 적어도 일부에는 사용자 요청에 특정되는 특정 정보 및 요건이 덧붙여져 있다. 예를 들어, 사용자는 DA에게, "7시에 스시 가게에 저녁 식사 예약을 하라"라고 진술한다. 이러한 경우, 자연 언어 프로세서(332)는 사용자 입력에 기초하여 액션가능 의도가 "레스토랑 예약"이라고 정확하게 식별할 수 있다. 온톨로지에 따라, "레스토랑 예약" 도메인에 대한 구조화된 질의는 선택적으로 {요리}, {시간}, {날짜}, {인원수} 등과 같은 파라미터들을 포함한다. 일부 실시예들에서, 사용자의 발언에 포함된 정보에 기초하여, 자연 언어 프로세서(332)는 레스토랑 예약 도메인에 대하여 부분적으로 구조화된 질의를 생성하는데, 여기서 부분적으로 구조화된 질의는 파라미터들 {요리 = 스시} 및 {시간 = 오후 7시}를 포함한다. 그러나, 이러한 예에서, 사용자의 발언은 도메인과 연관된 구조화된 질의를 완성하기에는 불충분한 정보를 포함한다. 따라서, {인원수} 및 {날짜}와 같은 기타 필수 파라미터들은 현재 이용가능한 정보에 기초하여 구조화된 질의에 특정되어 있지 않다. 일부 실시예들에서, 자연 언어 프로세서(332)는 구조화된 질의의 일부 파라미터들에 수신된 상황 정보를 덧붙인다. 예를 들어, 일부 실시예들에서, 사용자가 "내 근처"의 스시 레스토랑을 요청했다면, 자연 언어 프로세서(332)는 구조화된 질의 내의 {위치} 파라미터에 사용자 디바이스(104)로부터의 GPS 좌표들을 덧붙인다.
일부 실시예들에서, 자연 언어 프로세서(332)는 구조화된 질의(임의의 완성된 파라미터들을 포함함)를 태스크 흐름 프로세싱 모듈(342)(때때로 본 명세서에서 "태스크 흐름 프로세서"라고도 함)로 전달한다. 태스크 흐름 프로세서(342)는 자연 언어 프로세서(332)로부터 구조화된 질의를 수신하도록, 필요하다면, 구조화된 질의를 완성하도록, 그리고 사용자의 궁극적인 요청을 "완료"하는 데 요구되는 액션들을 수행하도록 구성된다. 일부 실시예들에서, 이들 태스크들을 완료하는 데 필요한 다양한 절차들이 태스크 흐름 모델들(344)에서 제공된다. 일부 실시예들에서, 태스크 흐름 모델들(344)은 사용자로부터 추가 정보를 획득하기 위한 절차들, 및 액션가능 의도와 연관된 액션들을 수행하기 위한 태스크 흐름들을 포함한다.
전술한 바와 같이, 구조화된 질의를 완성하기 위해, 태스크 흐름 프로세서(342)는 때때로 추가 정보를 획득하고 그리고/또는 잠재적으로 중의적인 발언들을 명확히 구분하기 위해 사용자와의 추가 대화를 개시할 필요가 있다. 그러한 상호작용들이 필요한 경우, 태스크 흐름 프로세서(342)는 대화 흐름 프로세싱 모듈(340)(때때로 본 명세서에서 "대화 프로세서"라고도 함)을 호출하여 사용자와의 대화에 참여한다. 일부 실시예들에서, 대화 프로세서(340)는 어떻게(그리고/또는 언제) 사용자에게 추가 정보를 요청할 것인지를 판정하고, 사용자 응답들을 수신하여 프로세싱한다. 질문들은 I/O 프로세싱 모듈(328)을 통해 사용자들에게 제공되고 그들로부터 답변들이 수신된다. 일부 실시예들에서, 대화 프로세서(340)는 청각적 및/또는 시각적 출력을 통해 사용자에게 대화 출력을 제시하고, 구어적 또는 물리적(예컨대, 클릭킹) 응답들을 통해 사용자로부터 입력을 수신한다. 상기 예에 이어서, 태스크 흐름 프로세서(342)가 대화 프로세서(340)를 호출하여 도메인 "레스토랑 예약"과 연관된 구조화된 질의를 위한 "인원수" 및 "날짜" 정보를 판정하는 경우, 대화 프로세서(340)는 "몇 명입니까?" 및 "언제입니까?"와 같은 질문들을 생성하여 사용자에게 전달한다. 일단 사용자로부터 답변들이 수신되면, 대화 프로세서(340)는 구조화된 질의에 누락 정보를 덧붙이거나, 또는 태스크 흐름 프로세서(342)에 정보를 전달하여 구조화된 질의로부터 누락 정보를 완성한다.
일단 태스크 흐름 프로세서(342)가 액션가능 의도에 대한 구조화된 질의를 완성했다면, 태스크 흐름 프로세서(342)는 액션가능 의도와 연관된 궁극적인 태스크를 수행하도록 진행한다. 따라서, 태스크 흐름 프로세서(342)는 구조화된 질의에 포함된 특정 파라미터들에 따라 태스크 흐름 모델에서 단계들 및 명령어들을 실행한다. 예를 들어, "레스토랑 예약"의 액션가능 의도에 대한 태스크 흐름 모델은 선택적으로, 레스토랑에 연락하기 위한 그리고 특정 시간의 특정 인원수에 대한 예약을 실제로 요청하기 위한 단계들 및 명령어들을 포함한다. 예를 들어, 구조화된 질의, 예컨대 {레스토랑 예약, 레스토랑 = ABC 카페, 날짜 = 3/12/2012, 시간 = 오후 7시, 인원수 = 5}를 사용하여, 태스크 흐름 프로세서(342)는 선택적으로, (1) ABC 카페의 서버 또는 OPENTABLE?과 같은 레스토랑 예약 시스템에 로그온하는 단계, (2) 웹사이트 상의 소정 양식에 날짜, 시간, 및 인원수 정보를 입력하는 단계, (3) 양식을 제출하는 단계, 및 (4) 사용자의 캘린더에 예약에 대한 캘린더 엔트리를 작성하는 단계를 수행한다.
일부 실시예들에서, 태스크 흐름 프로세서(342)는 사용자 입력에서 요청된 태스크를 완료하거나 또는 사용자 입력에서 요청된 정보 제공형 답변을 제공하기 위해 서비스 프로세싱 모듈(346)(때때로 본 명세서에서 "서비스 프로세서"라고도 함)의 도움을 받는다. 예를 들어, 서비스 프로세서(346)는 태스크 흐름 프로세서(342)를 대신해서 전화 통화하도록, 캘린더 엔트리를 설정하도록, 지도 검색을 호출하도록, 사용자 디바이스 상에 설치된 다른 사용자 애플리케이션들을 호출하거나 그들과 상호작용하도록, 그리고 제3자 서비스들(예를 들어, 레스토랑 예약 포탈, 사회적 네트워킹 웹사이트, 은행업무 포탈 등)을 호출하거나 그들과 상호작용하도록 액션할 수 있다. 일부 실시예들에서, 각각의 서비스에 의해 요구되는 프로토콜들 및 애플리케이션 프로그래밍 인터페이스(API)들은 서비스 모델들(348) 중 개별 서비스 모델에 의해 특정될 수 있다. 서비스 프로세서(346)는 서비스를 위한 적절한 서비스 모델에 액세스하고, 서비스 모델에 따른 서비스에 의해 요구되는 프로토콜들 및 API들에 따라 서비스에 대한 요청들을 생성한다.
예를 들어, 레스토랑이 온라인 예약 서비스를 가능하게 했다면, 레스토랑은 예약을 하는 데 필요한 파라미터들 및 온라인 예약 서비스에 필요한 파라미터의 값들을 전달하기 위한 API들을 특정하는 서비스 모델을 제출할 수 있다. 태스크 흐름 프로세서(342)에 의해 요청되는 경우, 서비스 프로세서(346)는 서비스 모델에 저장된 웹 주소를 사용하여 온라인 예약 서비스와의 네트워크 접속을 확립할 수 있고, 온라인 예약 서비스의 API에 따른 포맷으로 예약의 필요한 파라미터들(예컨대, 시간, 날짜, 인원수)을 온라인 예약 인터페이스에 송신할 수 있다.
일부 실시예들에서, 자연 언어 프로세서(332), 대화 프로세서(340), 및 태스크 흐름 프로세서(342)는 사용자의 의도를 추론 및 정의하도록, 사용자 의도를 더 명확히 하고 세밀하게 하기 위해 정보를 획득하도록, 그리고 최종적으로 사용자의 의도를 이행하기 위해 응답(예컨대, 사용자에게로의 출력, 또는 태스크의 완수)을 생성하도록 총체적이고 반복적으로 사용된다.
일부 실시예들에서, 사용자의 요청을 이행하는 데 필요한 모든 태스크들이 수행된 후, 디지털 어시스턴트(326)는 확인(confirmation) 응답을 표현하고, I/O 프로세싱 모듈(328)을 통해 사용자에게 응답을 전송한다. 사용자 요청이 정보 제공형 답변을 구하는 경우, 확인 응답은 사용자에게 요청된 정보를 제시한다. 일부 실시예들에서, 디지털 어시스턴트는 또한 사용자에게 사용자가 디지털 어시스턴트(326)에 의해 생성된 응답에 만족하는지 여부를 나타내도록 요청한다.
자연 언어 프로세서(332)는 사용자 디바이스(104)(도 1)의 사용자로부터의 스피치 입력에 대응하는 토큰 시퀀스를 STT 프로세싱 모듈(330)로부터 수신한다. 일부 실시예들에서, 자연 언어 프로세서(332)는 스피치 입력이 하나 이상의 특정 송신자들로부터의 후속 인입 통신에 자동으로 응답하기 위한 명령어들을 포함한다고 추론한다. 명령어들이 적어도 (1) 하나 이상의 특정 송신자들 및 (2) 특정 액션을 포함하는 경우, 명령어들은 도 4와 관련하여 이하에서 더욱 상세하게 서술되는, 온톨로지(334)의 자동 응답 도메인(400)과 연관된 태스크 흐름을 트리거한다. 일부 다른 실시예들에서, 자연 언어 프로세서(332)는 자동 응답 도메인(400)과는 다른 개별 도메인이 트리거된다고 추론하고, 디지털 어시스턴트(326)는 개별 도메인(예컨대, 전술한 레스토랑 예약 도메인)과 연관된 태스크 흐름 모델을 진행한다.
일부 실시예들에서, 디지털 어시스턴트(326)는 자동 응답 모듈(350)을 포함한다. 일부 실시예들에서, 자동 응답 모듈(350)은 태스크 흐름 프로세서(342)의 컴포넌트이다. 일부 다른 실시예들에서, 자동 응답 모듈(350)은 태스크 흐름 프로세서(342)와는 별개이다. 자동 응답 모듈(350)은 자동 응답 도메인(400)을 트리거하는 사용자 요청을 이행하는 단계들을 수행하도록 구성된다. 다시 말하면, 자동 응답 모듈(350)은 자동 응답 도메인(400)에 관련된 태스크 흐름을 수행하도록 구성된다.
자연 언어 프로세서(332)가 자동 응답 도메인(400)이 트리거된다고 판정한 후에, 자동 응답 모듈(350)은 자연 언어 프로세서(332)로부터 명령어들을 획득하고 특정 액션을 수행하거나, 또는 하나 이상의 특정 송신자들 중 하나로부터의 후속 인입 통신의 수신에 응답하여, 특정 액션이 수행되게 한다. 일부 실시예들에서, 자동 응답 모듈(350)은 명령어 모듈(352), 판정 모듈(354), 구성 모듈(356), 및 수행 모듈(358)을 포함한다.
명령어 모듈(352)은 인입 통신에 응답하기 위해 스피치 입력에 포함된 명령어들을 저장하도록 구성된다. 저장된 명령어들은 적어도 특정 액션 및 하나 이상의 특정 송신자들을 포함한다. 일부 실시예들에서, 저장된 명령어들은 선택적으로, 하나 이상의 특정 통신 유형들, 명령어들에 대한 만료 기간, 및/또는 명령어들의 수행에 대한 선행 조건(condition precedent)을 포함한다. 일부 실시예들에서, 명령어 모듈(352)은 사용자로부터 수신되는 명령어들을 저장하기 위한 메모리를 포함한다. 일부 다른 실시예들에서, 명령어 모듈(352)은 명령어 모듈(352)로부터 분리된 메모리에 명령어들을 저장한다. 일부 실시예들에서, 스피치 입력(즉, 명령어들)에 포함되는 경우, 명령어 모듈(352)은 또한 명령어들에 대한 만료 기간(또는 지속기간)(예컨대, 앞으로 이틀 내에 또는 오늘 오후 5:00까지) 및 특정 액션의 수행에 대한 선행 조건을 저장하도록 구성된다. 명령어 모듈(352)은 또한 특정 액션의 수행 또는 만료 기간의 경과 시에 명령어들을 자동으로 삭제하도록 구성된다. 일부 실시예들에서, 명령어들은 만료 기간의 경과 또는 수행 시에 인간의 개입 또는 명령어 없이 즉시 삭제된다.
일부 실시예들에서, 사용자 디바이스(104)는, 사용자 디바이스(104)의 사용자와는 상이한 사용자와 연관된 기타 디바이스들(130) 중 하나로부터 통신 네트워크(들)(110)를 통해 인입 통신을 수신한다. 일부 실시예들에서, 판정 모듈(354)은 후속 인입 통신의 송신자(예컨대, 전화 통화, SMS, 또는 이메일의 송신자)가 명령어들에서 나타내는 하나 이상의 특정 송신자들 중 하나인지 여부를 확인하도록 구성된다. 일 실시예에서, 판정 모듈(354)은 사용자의 주소록에 적어도 부분적으로 기초하여, 후속 인입 통신의 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 확인한다. 예를 들어, 판정 모듈(354)은 인입 통신에 대응하는 전화 번호를 특정 사용자에 대응하는 사용자의 주소에서의 전화 번호와 비교한다. 다른 실시예에서, 판정 모듈(354)은 후속 인입 통신의 송신자와 연관된 발신자 식별 정보에 적어도 부분적으로 기초하여, 후속 인입 통신의 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 확인한다. 다른 실시예에서, 판정 모듈(354)은 후속 인입 통신(예컨대, VOIP 통화 또는 다른 인터넷 기반 통신)과 연관된 이메일 주소(또는 다른 고유 식별자)를 식별하고, 식별된 이메일 주소에 적어도 부분적으로 기초하여, 후속 인입 통신의 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 확인한다.
추가 실시예에서, 판정 모듈(354)은 후속 인입 통신의 후처리(post-processing)에 적어도 부분적으로 기초하여, 후속 인입 통신의 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 확인한다. 예를 들어, 판정 모듈(354)은, "안녕, 나는 존 화이트인데, 내게 전화해줘"와 같은 음성 메일 또는 음성 메시지에 남아 있는 이름, 전화 번호, 이메일 주소, 또는 다른 식별 정보에 기초하여 후속 인입 통신의 송신자의 아이덴티티(identity)를 판정 또는 추론한다. 다른 예에서, 판정 모듈(354)은 이메일의 서명 블록 내의 이름에 기초하여 후속 인입 통신의 송신자의 아이덴티티를 판정한다. 또 다른 예에서, 판정 모듈(354)은, "안녕, 나는 잭 화이트인데, 오늘밤 공연 주소를 내게 답장해줘"와 같은 SMS에 남아 있는 이름, 전화 번호, 이메일 주소, 또는 다른 식별 정보에 기초하여 후속 인입 통신의 송신자의 아이덴티티를 판정한다.
일부 실시예들에서, 판정 모듈(354)은 또한, 후속 인입 통신이 명령어들에 의해 특정되는 통신 유형에 관련되는지 여부를 판정하도록 구성된다. 예를 들어, 사용자는 DA에게, "엄마에게서 텍스트가 오면, 내가 집에 가는 중이라고 엄마에게 답장을 보내줘"라고 진술한다. 이 예에서, 특정 액션(예컨대, 엄마에게 텍스트를 보냄)은 엄마로부터 텍스트 메시지 또는 SMS가 수신되는 경우에만 수행되는 것이다. 다른 예에서, 사용자는 DA에게, "나의 아내에게서 전화가 오면, 내가 체육관에 있고 곧 집에 갈꺼라고 아내에게 알려줘."라고 진술한다. 이 예에서, 특정 액션(예컨대, 사용자가 체육관에 있고 곧 집에 갈꺼라고 사용자의 아내에게 알려줌)은 사용자의 아내로부터 전화 통화가 수신되는 경우에만 수행되는 것이다.
일부 실시예들에서, 명령어들이 만료 기간을 나타내는 경우, 판정 모듈(354)은 후속 인입 통신이 만료 기간 내에 수신되는지 여부를 판정하도록 추가로 구성된다. 일부 실시예들에서, 명령어들이 특정 액션의 수행에 대한 선행 조건을 나타내는 경우, 판정 모듈(354)은 후속 인입 통신을 수신하기 전에 또는 그를 수신함과 동시에 선행 조건이 만족되는지 여부를 판정하도록 추가로 구성된다.
구성 모듈(356)은 스피치 입력에 포함되는 명령어들에 기초하여 후속 인입 통신에 대한 응답을 구성하도록 구성된다. 일부 실시예들에서, 구성 모듈(356)은 응답을 구성할 때 상황적 정보(예컨대, 사용자와 연관된 위치, 과거 패턴들 또는 거동, 또는 캘린더)를 활용한다. 예를 들어, 사용자 디바이스(104)의 사용자가 DA에게, "나의 아내에게서 연락이 오면, '나는 집에 가는 중이야'라고 답장해줘"라고 부탁한다고 가정한다. 이 예에서, 사용자의 아내로부터 후속 인입 통신이 수신된다고 (예컨대, 전술한 절차들 중 하나에 기초하여) 판정한 후에, 디지털 어시스턴트는 사용자와 연관된 위치 정보 및 명령어들에 적어도 부분적으로 기초하여 사용자의 아내에게 보낼 텍스트 메시지를 구성한다. 예를 들어, 구성 모듈(356)에 의해 구성되는 텍스트 메시지는, "안녕 자기야. 나는 집에 가는 중인데 교통량에 따라 15분 정도 걸릴꺼야"를 진술한다. 이 예에서, 15분이라는 기간은 사용자의 현재 위치, 사용자의 집의 위치, 및/또는 현재 교통 상황에 기초하여 디지털 어시스턴트에 의해 추정된 것이다.
일부 실시예들에서, 수행 모듈(358)은 판정 모듈(354)이 후속 인입 통신의 송신자가 하나 이상의 특정 송신자들 중 하나라고 판정한 후에 명령어들에 의해 특정되는 액션을 수행하도록 구성된다. 일부 다른 실시예들에서, 수행 모듈(358)은 판정 모듈(354)이 후속 인입 통신이 하나 이상의 특정 통신 유형들 중 하나라고 판정한 후에 명령어들에 의해 특정되는 액션을 수행하게 하도록 구성된다. 예를 들어, 특정 액션은, 음성 메시지를 송신자에게 송신하는 것, SMS 또는 텍스트 메시지를 송신자에게 송신하는 것, MMS를 송신자에게 송신하는 것, 인스턴트 메시지를 송신자에게 송신하는 것, 이메일을 송신자에게 송신하는 것, 일부 다른 형태의 전자 또는 비전자 통신물을 송신자에게 송신하는 것, 이벤트 또는 캘린더 초대장을 송신자에게 송신하는 것, 미디어 콘텐츠(예컨대, 오디오 파일, 비디오 클립, 사진, URL 등)를 송신하거나 공유하는 것, 하나 이상의 캘린더 또는 약속 엔트리들을 송신자와 공유하는 것, 또는 하나 이상의 다른 커스텀 속성들(예컨대, 사용자에 의해 정의되는 정보 또는 미디어 콘텐츠의 다른 항목들)을 송신자와 공유하는 것이다. 일부 실시예들에서, 수행 모듈은 후속 인입 통신과 동일한 통신 수단을 사용하여 후속 인입 통신에 디폴트로 응답하도록 구성된다.
디지털 어시스턴트에 대한 더 많은 상세사항들은 2010년 1월 18일자로 출원되고 발명의 명칭이 "지능적 자동화된 어시스턴트(Intelligent Automated Assistant)"인 미국 실용신안 출원 제12/987,982호, 및 또한 2011년 6월 3일자로 출원되고 발명의 명칭이 "수행할 태스크를 표현하는 데이터 항목의 생성 및 프로세싱(Generating and Processing Data Items That Represent Tasks to Perform)"인 미국 실용신안 출원 제61/493,201호에서 찾을 수 있고, 이 출원들의 전체 개시 내용들은 본 명세서에 참고로 포함된다.
도 4는 하나 이상의 특정 송신자들 중 하나로부터의 후속 인입 통신의 수신에 응답하여 특정 액션을 자동으로 수행하는 액션가능 의도(402)(때때로 본 명세서에서 "자동 응답" 액션가능 의도라고도 함)와 연관된 온톨로지(334) 내의 자동 응답 도메인(400)을 예시한다.
특정 송신자 속성 노드(404)는 후속 인입 통신의 송신자를 나타낸다. 일부 실시예들에서, 특정 송신자 노드(404)는 사용자의 주소록에서의 이름, 전화 번호, 이메일 주소 등과 같이 특정 송신자를 식별하는 하위속성 노드들을 포함한다. 특정 액션 노드(406)는 특정 송신자로부터의 인입 통신이 수신되는 경우 수행될 액션을 나타낸다. 일부 실시예들에서, 특정 액션 노드(406)는 자동 응답에 포함될 상세사항들(414)(또는 정보) 및 수행될 액션 유형(416)을 식별하는 하위노드들을 포함한다.
일부 실시예들에서, 상세사항들 하위노드(414)는 스피치 입력으로부터의 텍스트 또는 녹음된 구어적 단어들, 사용자로부터 입력되는 텍스트의 디지털화된 버전 또는 텍스트-스피치 버전, 및/또는 자동 응답에 포함되는 사용자 디바이스(104)(도 1)의 현재 위치를 포함한다. 일부 실시예들에서, 사용자의 요청이 자동 응답 메시지를 구성하는 데 불충분한 상세사항들 또는 명령어들을 포함하는 경우, 자동 응답 모듈(350)(도 3a)은 대화 프로세싱 모듈(340)(도 3a)이 사용자와 대화를 개시하여 완전한 자동 응답 메시지를 구성하기 위한 추가적인 상세사항들 또는 명령어들을 이끌어내게 하도록 구성된다. 일부 다른 실시예들에서, 사용자의 요청이 자동 응답 메시지를 구성하는 데 불충분한 상세사항들 또는 명령어들을 포함하는 경우, 자동 응답 모듈(350)(도 3a)은 구성 모듈(356)(도 3a)이 자동 응답 메시지를 구성하기 위해 명령어들에 포함되지 않은 임의의 비본질적인 상세사항들을 완성하게 하도록 구성된다. 예를 들어, 구성 모듈(356)(도 3a)은 사용자의 주소록, 위치 정보, 패턴 또는 거동 정보, 사용자 로그, 또는 캘린더 엔트리들과 같이 사용자와 연관된 상황 정보의 이용을 채용하여 완전한 자동 응답 메시지를 구성한다.
일부 실시예들에서, 액션 유형 하위노드(416)는 음성 메일 또는 음성 메시지, SMS 또는 텍스트 메시지, MMS, 이메일, 이벤트 초대장, 미디어 콘텐츠, 하나 이상의 캘린더 엔트리들, 또는 하나 이상의 커스텀 속성들을 특정 송신자에게/와 송신하는 것/공유하는 것과 같이 수행될 액션의 유형을 특정한다. 일부 실시예들에서, DA는 정보를 특정 송신자에게 통신하기 위한 것이지만 통신 수단을 특정하지 않는다고 사용자의 요청이 진술하는 경우, 가장 빈번한 통신 수단 또는 디폴트 통신 수단이 응답 메시지를 위해 사용된다.
예를 들어, 사용자 디바이스(104)의 사용자는 DA에게, "나의 부모님이 내게 연락하려고 하면, 부모님께 나의 새로운 아파트 주소를 텍스트로 보내고 또한 내가 다시 전화할 것임을 알려드려."라고 진술한다. 이 경우에, 자연 언어 프로세서(332)(도 3a)는 스피치 입력이 하나 이상의 특정 송신자들(예컨대, 사용자의 부모님 중 어느 한 명) 및 수행될 특정 액션(예컨대, 텍스트 메시지를 송신하는 것)을 포함하기 때문에 액션가능 의도를 "자동 응답" 액션가능 의도(402)로서 식별한다. 온톨로지(334)에 따르면, 자동 응답 도메인(400)에 대한 구조화된 질의는 {특정 송신자(404)}, {상세사항들(414)}, 및 {액션 유형(416)}과 같은 파라미터들을 포함한다. 예를 들어, 구조화된 질의, 예컨대 {자동 응답, 특정 송신자 = 부모님, 상세사항들 = 사용자의 아파트 주소 및 "다시 전화할 것임", 액션 유형 = SMS 또는 텍스트 메시지}를 사용하여, 태스크 흐름 프로세서(342)(도 3a), 또는 그의 컴포넌트는, (1) 스피치 입력에 포함되는 명령어들을 저장하는 단계; (2) 후속 인입 통신(예컨대, 텍스트 메시지 또는 전화 통화)을 수신하는 단계; (3) 후속 인입 통신의 송신자가 특정 송신자(예컨대, 사용자의 부모님 중 어느 한 명)인지 여부를 판정하는 단계; (4) 명령어들에서 제공되는 상세사항들(또는 정보)에 따라 응답형 텍스트 메시지(예컨대, "나의 주소는 미국 캘리포니아주 94086 서니베일 엘윈 포레스트 드라이브 123이다. 내가 한가할 때 다시 전화할 것이다.")를 구성하는 단계; (5) 텍스트 메시지를 사용자의 부모님 중 한 명 또는 두 명 모두에게 송신하게 하는 단계; 및 (6) 텍스트 메시지를 송신하게 한 후에 명령어들을 자동으로 삭제하는 단계를 수행한다.
만료 기간 노드(408)는 하나 이상의 특정 송신자들로부터의 후속 인입 통신이 수신되어야 하는 기간을 특정한다. 예를 들어, 사용자 디바이스(104)의 사용자는 DA에게, "게리가 앞으로 30분 후에 나에게 연락하려고 하면, 내가 오늘 미팅을 위해 이용가능한 다음 시간 슬롯을 그에게 이메일로 보내줘"라고 진술한다. 이 경우에, 자연 언어 프로세서(332)(도 3a)는 스피치 입력이 하나 이상의 특정 송신자들(예컨대, 게리) 및 수행될 특정 액션(예컨대, 제안된 미팅 시간을 송신하는 것)을 포함하기 때문에 액션가능 의도를 "자동 응답" 액션가능 의도(402)로서 식별한다. 온톨로지(334)에 따르면, 자동 응답 도메인(400)에 대한 구조화된 질의는 {특정 송신자(404)}, {상세사항들(414)}, {액션 유형(416)} 및 {만료 기간(408)}과 같은 파라미터들을 포함한다. 예를 들어, 구조화된 질의, 예컨대 {자동 응답, 특정 송신자 = 게리, 상세사항들 = 다음 이용가능한 미팅 시간, 액션 유형 = 이메일, 만료 기간 = 30분}을 사용하여, 태스크 흐름 프로세서(342)(도 3a), 또는 그의 컴포넌트는, (1) 스피치 입력에 포함되는 명령어들을 저장하는 단계; (2) 후속 인입 통신(예컨대, 텍스트 메시지, 전화 통화, 또는 이메일)을 수신하는 단계; (3) 후속 인입 통신의 송신자가 특정 송신자(예컨대, 게리)인지 여부를 판정하는 단계; (4) 후속 인입 통신이 만료 기간 내에(예컨대, 명령어들을 수신하고 나서 30분 내에) 수신되었는지 여부를 판정하는 단계; (5) 명령어들에서 제공되는 상세사항들(또는 정보) 및 사용자의 캘린더에 따라 응답형 이메일(예컨대, "안녕 게리. 내 스케줄상 나는 오늘 오후 동부 서머 타임(EDT) 오후 1시에 미팅할 수 있어.")를 구성하는 단계; (6) 이메일을 게리에게 송신하게 하는 단계; 및 (7) 이메일을 송신하게 한 후에 명령어들을 자동으로 삭제하는 단계를 수행한다.
조건 노드(410)는 특정 액션을 수행하기 전에 만족되어야 하는 조건을 특정한다. 예를 들어, 사용자 디바이스(104)의 사용자는 DA에게, "수지가 내게 연락하려고 하면, 그녀가 내게 연락할 때 하프문베이(Half Moon Bay)에서 75°초과인 경우에만 그녀의 집 주소로부터 하프문베이로의 길안내를 송신해라."라고 진술한다. 이 경우에, 자연 언어 프로세서(332)(도 3a)는 스피치 입력이 하나 이상의 특정 송신자들(예컨대, 수지) 및 수행될 특정 액션(예컨대, 길안내를 송신하는 것)을 포함하기 때문에 액션가능 의도를 "자동 응답" 액션가능 의도(402)로서 식별한다. 온톨로지(334)에 따르면, 자동 응답 도메인(400)에 대한 구조화된 질의는 {특정 송신자(404)}, {특정 액션(406)}, {상세사항들(414)}, 및 {선행 조건(410)}과 같은 파라미터들을 포함한다. 예를 들어, 구조화된 질의, 예컨대 {자동 응답, 특정 송신자 = 수지, 특정 액션 = 길안내를 송신, 상세사항들 = 수지의 집 주소로부터 하프문베이로의 길안내, 선행 조건 = 수지가 연락할 때 하프문베이에서 75°초과의 온도}를 사용하여, 태스크 흐름 프로세서(342)(도 3a), 또는 그의 컴포넌트는, (1) 스피치 입력에 포함되는 명령어들을 저장하는 단계; (2) 후속 인입 통신(예컨대, 텍스트 메시지, 전화 통화, 또는 이메일)을 수신하는 단계; (3) 후속 인입 통신의 송신자가 특정 송신자(예컨대, 수지)인지 여부를 판정하는 단계; (4) 후속 인입 통신의 수신 시에 선행 조건(예컨대, 하프문베이에서의 온도가 75°초과임)이 만족되는지 여부를 판정하는 단계; (5) 수지의 집 주소로부터 하프문베이로의 길안내를 수지에게 (예컨대, 디폴트 통신 수단 또는 가장 빈번한 통신 수단을 사용하여) 송신하게 하는 단계; 및 (6) 길안내를 송신하게 한 후에 명령어들을 자동으로 삭제하는 단계를 수행한다.
특정 인입 통신 유형 노드(412)는 특정 액션을 수행하기 위해 후속 인입 통신이 수신되게 하여야 하는 통신 수단을 나타낸다. 일부 실시예들에서, 특정 인입 통신 유형 노드(412)는 SMS 또는 텍스트 메시지, 전화 통화, 이메일, VoIP, 영상 통화 등과 같은 통신 수단을 식별하는 하위노드들을 포함한다. 예를 들어, 사용자 디바이스(104)의 사용자는 DA에게, "바룬이 내게 텍스트를 보내면, 내가 15분 후에 온라인에 있을 것이라고 알려줘."라고 진술한다. 이 경우에, 자연 언어 프로세서(332)(도 3a)는 스피치 입력이 하나 이상의 특정 송신자들(예컨대, 바룬) 및 수행될 특정 액션(예컨대, 정보 제공형 메시지를 송신하는 것)을 포함하기 때문에 액션가능 의도를 "자동 응답" 액션가능 의도(402)로서 식별한다. 온톨로지(334)에 따르면, 자동 응답 도메인(400)에 대한 구조화된 질의는 {특정 송신자(404)}, {특정 액션(406)}, {상세사항들(414)}, 및 {특정 인입 통신 유형(412)}과 같은 파라미터들을 포함한다. 예를 들어, 구조화된 질의, 예컨대 {자동 응답, 특정 송신자 = 바룬, 특정 액션 = 정보 제공형 메시지를 송신함, 상세사항들 = 사용자는 15분 후에 온라인에 있을 것임, 특정 인입 통신 유형 = SMS 또는 텍스트 메시지}를 사용하여, 태스크 흐름 프로세서(342)(도 3a), 또는 그의 컴포넌트는, (1) 스피치 입력에 포함되는 명령어들을 저장하는 단계; (2) 후속 인입 통신(예컨대, 텍스트 메시지, 전화 통화, 또는 이메일)을 수신하는 단계; (3) 후속 인입 통신의 송신자가 특정 송신자(예컨대, 바룬)인지 여부를 판정하는 단계; (4) 후속 인입 통신이 특정 인입 통신 유형(예컨대, SMS 또는 텍스트 메시지)인지 여부를 판정하는 단계; (5) 명령어들에서 제공되는 상세사항들(또는 정보)에 따라 응답형 메시지(예컨대, "안녕 바룬. 나는 15분 후에 온라인에 있을 것이다.")를 구성하는 단계; (6) 정보 제공형 메시지를 데이비드에게 (예컨대, 디폴트 통신 수단 또는 가장 빈번한 통신 수단을 사용하여) 송신하게 하는 단계; 및 (7) 정보 제공형 메시지를 송신하게 한 후에 명령어들을 자동으로 삭제하는 단계를 수행한다.
도 5는 일부 실시예들에 따른 디지털 어시스턴트를 동작시키는 방법(500)의 흐름도를 도시한다. 일부 실시예들에서, 방법(500)은 하나 이상의 프로세서들 및 메모리를 포함하는 전자 디바이스(예컨대, 도 1의 개별 DA-클라이언트(102) 또는 DA-서버(106))에서 수행된다. 일부 실시예들에서, 방법(500)은 도 3a 및 도 3b에 도시되는 디지털 어시스턴트(326)에서 수행된다. 일부 실시예들에서, 방법(500)은 전자 디바이스의 하나 이상의 프로세서들에 의해 실행되는, 메모리(예컨대, 비일시적 컴퓨터 판독가능 저장 매체)에 저장된 명령어들의 세트에 의해 지배된다.
전자 디바이스(예컨대, 사용자 디바이스(104))는 사용자 디바이스(104)의 사용자로부터 스피치 입력을 수신한다(예컨대, 스피치 입력은 도 3a의 I/O 프로세싱 모듈(328)에서 수신된다). 예를 들어, 사용자는 디지털 어시스턴트(DA)에게, "크리스티나가 텍스트를 보내면, 내가 현재 운전 중이고 곧 거기로 갈꺼라고 알려줘."라고 진술한다. 다음으로, I/O 프로세싱 모듈(328)(도 3a)은 스피치 입력을 STT 프로세싱 모듈(330)(도 3a)로 송신한다. 스피치 입력을 프로세싱한 후에, STT 프로세싱 모듈(330)(도 3a)은 스피치 입력을 나타내는 토큰 시퀀스를 자연 언어 프로세서(332)(도 3a)로 송신한다.
자연 언어 프로세서(332)는 STT 프로세싱 모듈(330)로부터 토큰 시퀀스를 수신하고, 토큰 시퀀스를 디지털 어시스턴트에 의해 인식되는 하나 이상의 액션가능 의도들과 연관시키려고 한다(502).
자연 언어 프로세서(332)는 스피치 입력이 하나 이상의 특정 송신자들로부터의 후속 인입 통신에 자동으로 응답하기 위한 명령어들을 포함하는지 여부를 판정한다(504). 명령어들이 적어도 (1) 하나 이상의 특정 송신자들(예컨대, 크리스티나) 및 (2) 특정 액션(예컨대, 정보 제공형 응답)을 포함하는 경우, 명령어들은 온톨로지(334)의 자동 응답 도메인(400)과 연관된 태스크 흐름을 트리거한다.
스피치 입력이 하나 이상의 특정 송신자들로부터의 후속 인입 통신에 자동으로 응답하기 위한 명령어들을 포함하지 않는다고 판정할 시에("아니오" 분기), 디지털 어시스턴트는 자동 응답 도메인(400)(예컨대, 전술한 레스토랑 예약 도메인)과 연관된 태스크 흐름과는 상이한 태스크 흐름들과 연관된 하나 이상의 다른 프로세스들을 수행한다(506).
스피치 입력이 하나 이상의 특정 송신자들로부터의 후속 인입 통신에 자동으로 응답하기 위한 명령어들을 포함한다고 판정할 시에("예" 분기), 디지털 어시스턴트는 명령어들이 명령어들에 대한 만료 기간을 포함하는지 여부를 판정한다(508).
명령어들이 명령어들에 대한 만료 기간을 포함한다고 판정할 시에("예" 분기), 디지털 어시스턴트는 만료 기간을 저장한다(510). 예를 들어, 명령어 모듈(352)(도 3a)은, 명령어 모듈(352)과는 별개이거나 또는 그에 포함된 메모리에 명령어들에 대한 만료 기간을 저장한다.
만료 기간을 저장한 후에("예" 분기) 또는 명령어들이 명령어들에 대한 만료 기간을 포함하지 않는다고 판정할 시에("아니오" 분기), 디지털 어시스턴트는 명령어들이 특정 액션의 수행에 대한 선행 조건을 포함하는지 여부를 판정한다(512).
명령어들이 선행 조건을 포함한다고 판정할 시에("예" 분기), 디지털 어시스턴트는 선행 조건을 저장한다(514). 예를 들어, 명령어 모듈(352)(도 3a)은, 명령어 모듈(352)과는 별개이거나 또는 그에 포함된 메모리에 선행 조건을 저장한다.
선행 조건을 저장한 후에("예" 분기) 또는 명령어들이 선행 조건을 포함하지 않는다고 판정할 시에("아니오" 분기), 디지털 어시스턴트는 수신된 스피치 입력에 포함되는 명령어들이 완전한지(즉, 명령어들이 특정 액션을 수행하는 데 충분한 상세사항들 또는 정보를 포함하는지) 여부를 판정한다(516).
명령어들이 불완전하다고 판정할 시에("아니오" 분기), 자동 응답 모듈(350)은 대화 프로세싱 모듈(340)(도 3a)이 사용자와의 대화를 개시하여 특정 액션을 수행하기 위해 완전한 상세사항들 또는 명령어들을 수집하게 한다(518). 예를 들어, 사용자는 DA에게, "토니에게서 전화가 오면, 그에게 영화 시간들을 이메일로 보내."라고 부탁한다. 이 예에서, 사용자는 특정 영화 제목 및 상영 시간들에 대한 날짜 또는 시간 범위(들)를 나타내는 데 실패하였다. 이 경우에, 자동 응답 모듈(350)은 대화 프로세싱 모듈(340)이 사용자와의 대화를 개시하여 사용자가 토니에게 상영 시간들을 보내려고 하는 영화 제목 및 날짜를 판정하게 한다.
명령어들이 완전하다고 판정할 시에("예" 분기), 디지털 어시스턴트는 하나 이상의 특정 송신자들 및 특정 액션을 적어도 포함하는 명령어들을 저장한다(520). 예를 들어, 명령어 모듈(352)(도 3a)은, 명령어 모듈(352)과는 별개이거나 또는 그에 포함된 메모리에 하나 이상의 특정 송신자들 및 특정 액션을 저장한다.
도 6은 일부 실시예들에 따른 디지털 어시스턴트를 동작시키는 방법(600)의 흐름도를 도시한다. 일부 실시예들에서, 방법(600)은 하나 이상의 프로세서들 및 메모리를 포함하는 전자 디바이스(예컨대, 도 1의 개별 DA-클라이언트(102) 또는 DA-서버(106))에서 수행된다. 일부 실시예들에서, 방법(600)은 도 3a 및 도 3b에 도시되는 디지털 어시스턴트(326)에서 수행된다. 일부 실시예들에서, 방법(600)은 전자 디바이스의 하나 이상의 프로세서들에 의해 실행되는, 메모리(예컨대, 비일시적 컴퓨터 판독가능 저장 매체)에 저장된 명령어들의 세트에 의해 지배된다.
하나 이상의 특정 송신자들로부터의 후속 인입 통신에 자동으로 응답하기 위한 명령어들을 저장하는 것에 뒤이어, 전자 디바이스(예컨대, 도 1의 사용자 디바이스(104))는 개별 송신자로부터 인입 통신을 수신한다(602). 예를 들어, 인입 통신은 이메일, 전화 통화, 영상 통화, VOIP 통화, SMS 또는 텍스트 메시지, MMS, 음성 메시지 등 중 하나이다.
디지털 어시스턴트는 하나 이상의 특정 송신자들로부터의 후속 인입 통신에 자동으로 응답하기 위한 명령어들이 트리거되는지 여부를 판정한다(604). 자동 응답 모듈(350)(도 3a) 또는 그의 컴포넌트(예컨대, 도 3a의 판정 모듈(354))는 개별 송신자가 명령어들에 포함된 하나 이상의 특정 송신자들 중 하나인지 여부를 판정한다. 전술한 바와 같이, 후속 인입 통신의 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하기 위한 복수의 절차들이 있다. 일부 실시예들에서, 자동 응답 모듈(350)(도 3a) 또는 그의 컴포넌트(예컨대, 도 3a의 판정 모듈(354))는 또한 인입 통신이 명령어들에 의해 특정되는 통신 유형에 관련되는지 여부를 판정한다.
하나 이상의 특정 송신자들로부터의 후속 인입 통신에 자동으로 응답하기 위한 명령어들이 트리거된다고 판정할 시에, 방법(600)은 "예" 분기를 따라 단계 612(또는 명령어들이 만료 기간 및/또는 선행 조건을 포함하는 경우 단계 606 또는 단계 608 중 하나, 또는 일부 실시예들에서는 단계 610)로 이어진다. 예를 들어, 개별 송신자는 하나 이상의 특정 송신자들 중 하나이고, 일부 경우에, 인입 통신은 하나 이상의 특정 통신 유형들 중 하나를 활용한다. 하나 이상의 특정 송신자들로부터의 후속 인입 통신에 자동으로 응답하기 위한 명령어들이 트리거되지 않는다고 판정할 시에, 방법(600)은 "아니오" 분기를 따라 단계 602로 이어져서 다른 인입 통신을 수신하고 판정 프로세스를 반복한다.
일부 실시예들에서, 명령어들이 만료 기간을 포함하는 경우, 디지털 어시스턴트 또는 그의 컴포넌트(예컨대, 도 3a의 판정 모듈(354))는 만료 기간이 경과되었는지 여부를 판정한다(606). 인입 통신을 수신하기 전에 만료 기간이 경과되었다고 판정할 시에, 방법(600)은 "예" 분기를 따라 단계 614로 이어지고, 자동 응답 모듈(350)(도 3a) 또는 그의 컴포넌트(예컨대, 도 3a의 명령어 모듈(352))는 명령어들을 자동으로 삭제한다. 인입 통신을 수신하기 전에 만료 기간이 경과되지 않았다고 판정할 시에, 방법(600)은 "아니오" 분기를 따라 단계 612(또는 일부 실시예들에서는 단계 608 또는 단계 610)로 이어진다.
일부 실시예들에서, 명령어들이 특정 액션의 수행에 대한 선행 조건을 포함하는 경우, 디지털 어시스턴트 또는 그의 컴포넌트(예컨대, 도 3a의 판정 모듈(354))는 선행 조건이 만족되어 있는지 여부를 판정한다(608). 인입 통신을 수신하기 전에 또는 그와 동시에 선행 조건이 만족되어 있지 않다고 판정할 시에, 방법(600)은 "아니오" 분기를 따라 단계 602로 이어져서 다른 인입 통신을 수신하고 판정 프로세스를 반복한다. 인입 통신을 수신하기 전에 또는 그와 동시에 선행 조건이 만족되어 있다고 판정할 시에, 방법(600)은 "예" 분기를 따라 단계 612(또는 일부 실시예들에서는 단계 610)로 이어진다.
일부 실시예들에서, 디지털 어시스턴트 또는 그의 컴포넌트(예컨대, 도 3a의 구성 모듈(356))는 개별 송신자에 대한 맞춤형 응답을 구성한다(610). 맞춤형 응답은 명령어들에 포함된 상세사항들 또는 정보에 따라 구성되고, 선택적으로, 도 1의 사용자 디바이스(104)의 사용자와 연관된 상황 정보(예컨대, 사용자와 연관된 위치, 패턴 또는 거동 정보 또는 캘린더 또는 스케줄)에 기초한다. 예를 들어, 사용자는 디지털 어시스턴트에게, "스와프닐이 내게 연락하려고 하면, 그에게 내가 미팅 중임을 알려주고 오늘 오후 이용가능한 시간 동안의 미팅을 제안해줘"라고 부탁한다. 이 예에서, (예컨대, 사용자와 연관된 주소록에 기초하여) 후속 인입 통신이 스와프닐로부터 수신된다고 판정한 후에, 디지털 어시스턴트는, "나는 지금 미팅 중이며 고객 문제를 논의하기 위해 오후 4시에 만납시다."라고 진술하는 스와프닐로의 메시지를 구성하고, 오늘 오후 4시에 대한 캘린더 초대장을 스와프닐에게 송신한다. 이 예에서, DA는 적어도 부분적으로 하루 동안의 사용자의 캘린더 또는 스케줄(예컨대, 상황 정보)에 대해 스와프닐로의 메시지를 구성한다.
하나 이상의 특정 송신자들로부터의 후속 인입 통신에 자동으로 응답하기 위한 명령어들이 트리거된다고 판정할 시에, 디지털 어시스턴트는 특정 액션을 수행한다(612). 예를 들어, 자동 응답 모듈(350)(도 3a) 또는 그의 컴포넌트(예컨대, 도 3a의 수행 모듈(358))는 복수의 통신 수단 중 하나를 통해 개별 사용자에게 맞춤형 응답(예컨대, 단계 610에서 도 3a의 구성 모듈(356)에 의해 구성됨)을 송신한다. 일부 실시예들에서, 수행 모듈은 인입 통신을 위해 사용되었는 것과 동일한 통신 수단을 사용하여 맞춤형 응답을 송신한다. 예를 들어, 특정 액션은 이메일, 전화 통화, 영상 통화, VOIP 통화, SMS 또는 텍스트 메시지, MMS, 음성 메시지 등 중 하나를 특정 송신자에게 송신하는 것을 포함한다.
일부 실시예들에서, 수행 모듈은 사용자로부터의 추가 검토 또는 명령어 없이 특정 액션을 수행하도록 구성된다. 일부 실시예들에서, 특정 액션을 수행하는 것은, 제1 서브액션을 수행하는 것 및 제2 서브액션을 수행하는 것을 포함한다. 예를 들어, 사용자는 DA에게, "나의 아내에게서 전화가 오면, 그녀에게 오늘밤 시라노의 레스토랑에서 나와 만나자고 말해주고, 또한 텍스트를 보낸 후 30분 뒤에 '밤 데이트'라는 제목으로 오후 7시에 대한 캘린더 초대장을 그녀에게 보내줘."라고 부탁한다. 이 예에서, 사용자의 아내로부터의 인입 전화 통화를 수신하는 것에 응답하여, 수행 모듈(358)(도 3a)은 명령어들에 포함되는 제1 서브액션(예컨대, "오늘밤 시라노에서 만나자"라고 진술하는 텍스트 메시지를 사용자의 아내에게 송신하는 것)을 수행하도록 구성된다. 그리고, 추가로 이 예에서, 수행 모듈(358)(도 3a)은 또한 사용자의 아내에게 텍스트 메시지를 송신한 후 30분 뒤에 명령어들에 포함되는 제2 서브액션(예컨대, 그날 저녁 오후 7시에 대한 '밤 데이트'라는 제목의 캘린더 초대장을 사용자의 아내에게 송신하는 것)을 수행하도록 구성된다.
일 예에서, 자동 응답 모듈(350)(도 3a)은 명령어들을 수신하기 전에 녹음된 스피치 입력 또는 명령어들을 포함하는 스피치 입력으로부터의 사용자의 음성의 녹음물을 포함하는 음성 메시지를 특정 송신자에게 송신함으로써 특정 송신자로부터의 인입 전화 통화에 응답한다. 다른 예에서, 자동 응답 모듈(350)(도 3a)은 사용자로부터 입력되는 텍스트의 디지털화된 버전 또는 텍스트-스피치 버전인 음성 메시지를 특정 송신자에게 송신함으로써 특정 송신자로부터의 인입 통신 전화에 응답한다.
특정 액션을 수행한 후에, 전자 디바이스는 명령어들을 자동으로 삭제한다(614). 예를 들어, 자동 응답 모듈(350)(도 3a) 또는 그의 컴포넌트(예컨대, 도 3a의 명령어 모듈(352))는, 명령어 모듈(352)(도 3a)과는 별개이거나 또는 그에 포함된 메모리에 저장된 명령어들을 삭제한다. 일부 실시예들에서, 명령어 모듈(352)(도 3a)은 명령어들에 포함되는 특정 액션 및 하나 이상의 특정 송신자들 외에도 만료 기간 및/또는 선행 조건을 자동으로 삭제한다.
도 5 및 도 6에서의 동작들이 기술되는 특정한 순서는 단지 예시적이며, 설명된 순서가 동작들이 수행될 수 있는 유일한 순서임을 나타내도록 의도되지 않는다는 것을 이해하여야 한다. 당업자는 본 명세서에 기술된 동작들을 재순서화하는 다양한 방식들을 인식할 것이다.
일부 실시예들에 따르면, 도 7은 다양하게 기술된 실시예들의 원리들에 따라 구성된 전자 디바이스(700)의 기능 블록도를 도시한다. 디바이스의 기능 블록들은, 선택적으로, 다양하게 기술된 실시예들의 원리들을 실행하기 위한 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현된다. 다양하게 기술된 실시예들의 원리들을 구현하기 위해 도 7에서 기술된 기능 블록들이 선택적으로 조합되거나 하위 블록들로 분리된다는 것이 당업자에 의해 이해된다. 따라서, 본 명세서에서의 설명은 선택적으로 본 명세서에 기술된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가적 정의를 지원한다.
도 7에 도시된 바와 같이, 전자 디바이스(700)는 사용자로부터의 스피치 입력을 획득하도록 구성된 사운드 수신 유닛(702)을 포함한다. 일부 실시예들에서, 전자 디바이스(700)는 선택적으로, 사운드를 생성하도록 구성된 스피커 유닛(704), 및 정보를 디스플레이하도록 그리고 하나 이상의 터치 입력들을 수신하도록 구성된 터치 스크린 디스플레이 유닛(706)을 포함한다. 전자 디바이스(700)는 또한 사운드 수신 유닛(702)에 연결된 (그리고, 선택적으로, 스피커 유닛(704) 및 터치 스크린 디스플레이 유닛(706)에 연결된) 프로세싱 유닛(708)을 포함한다. 일부 실시예들에서, 프로세싱 유닛(708)은 명령어 판정 유닛(710), 저장 유닛(712), 통신 획득 유닛(714), 송신자 확인 유닛(716), 수행 유닛(718), 삭제 유닛(720), 통신 유형 판정 유닛(722), 변환 유닛(724), 및 구성 유닛(726)을 포함한다.
프로세싱 유닛(708)은, 스피치 입력을 획득하는 것에 응답하여, 스피치 입력이 하나 이상의 특정 송신자들로부터의 후속 인입 통신의 수신에 응답하여 특정 액션을 수행하기 위한 명령어들을 포함하는지 여부를 (예컨대, 명령어 판정 유닛(710)을 이용하여) 판정하도록; 그리고 명령어들을 (예컨대, 저장 유닛(712)을 이용하여) 저장하도록 구성된다. 프로세싱 유닛(708)은 또한, 명령어들을 저장한 후에, 개별 송신자로부터 인입 통신을 (예컨대, 통신 획득 유닛(714)을 이용하여) 획득하도록; 그리고 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 (예컨대, 송신자 확인 유닛(716)을 이용하여) 판정하도록 구성된다. 프로세싱 유닛(708)은 추가로, 개별 송신자가 하나 이상의 특정 송신자들 중 하나라고 판정할 시에 명령어들에 따라 특정 액션을 (예컨대, 수행 유닛(718)을 이용하여) 수행하도록 그리고 그 후에 명령어들을 (예컨대, 삭제 유닛(720)을 이용하여) 자동으로 삭제하도록 구성된다.
일부 실시예들에서, 스피치 입력이 명령어들을 포함하는지 여부를 판정하는 것은, 스피치 입력이 하나 이상의 특정 송신자들로부터의 하나 이상의 특정 후속 인입 통신 유형들의 수신에 응답하여 특정 액션을 수행하기 위한 명령어들을 포함하는지 여부를 (예컨대, 명령어 판정 유닛(710)을 이용하여) 판정하는 것을 포함하고; 프로세싱 유닛(708)은 인입 통신이 하나 이상의 특정 후속 인입 통신 유형들 중 하나인지 여부를 (예컨대, 통신 유형 판정 유닛(722)을 이용하여) 판정하도록 구성되고; 특정 액션을 수행하는 것은, 개별 송신자가 하나 이상의 특정 송신자들 중 하나이며 인입 통신이 하나 이상의 특정 후속 인입 통신 유형들 중 하나라고 판정할 시에, 명령어들에 따라 특정 액션을 (예컨대, 수행 유닛(718)을 이용하여) 수행하는 것과 그 후에 명령어들을 (예컨대, 삭제 유닛(720)을 이용하여) 자동으로 삭제하는 것을 포함한다.
일부 실시예들에서, 하나 이상의 특정 후속 인입 통신 유형들의 개별 특정 후속 인입 통신 유형은 전화 통화, 음성 메시지, 음성 메일, 영상 통화, SMS, MMS, VOIP 통화, 또는 이메일 중 하나이다.
일부 실시예들에서, 인입 통신은 전화 통화이고, 특정 액션은 음성 메시지를 송신하는 것이다.
일부 실시예들에서, 음성 메시지 중 적어도 일부는 사용자의 음성의 녹음물이다.
일부 실시예들에서, 음성 메시지 중 적어도 일부는 입력 텍스트의 디지털화된 버전 또는 텍스트-스피치 버전이다.
일부 실시예들에서, 프로세싱 유닛(708)은, 스피치 입력을 텍스트로 변환하기 위해 스피치 입력에 대한 자연 언어 프로세싱을 (예컨대, 변환 유닛(724)을 이용하여) 수행하도록 구성되는데, 여기서 명령어들을 저장하는 것은 명령어들을 텍스트로서 저장하는 것을 포함한다.
일부 실시예들에서, 특정 액션을 수행하는 것은, 명령어들에 따라 개별 송신자에 대한 응답을 (예컨대, 구성 유닛(726)을 이용하여) 구성하는 것; 및 응답을 송신자에게 (예컨대, 수행 유닛(718)을 이용하여) 통신하는 것을 포함한다.
일부 실시예들에서, 통신하는 것은 전화 통화, 음성 메일, 영상 통화, SMS, MMS, VOIP 통화, 또는 이메일 중 하나이다.
일부 실시예들에서, 통신하는 것은 인입 통신과 동일한 통신 수단을 이용한다.
일부 실시예들에서, 구성하는 것은 명령어들에 따라서 그리고 상황적 정보에 적어도 부분적으로 기초하여 개별 송신자에 대한 응답을 (예컨대, 구성 유닛(726)을 이용하여) 구성하는 것을 포함한다.
일부 실시예들에서, 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하는 것은, 디바이스의 사용자와 연관된 연락처들의 목록에 기초하여 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 (예컨대, 송신자 확인 유닛(716)을 이용하여) 확인하는 것을 포함한다.
일부 실시예들에서, 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하는 것은, 개별 송신자와 연관된 발신자 ID에 기초하여 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 (예컨대, 송신자 확인 유닛(716)을 이용하여) 확인하는 것을 포함한다.
일부 실시예들에서, 프로세싱 유닛(708)은, 통신의 송신자와 연관된 주소를 (예컨대, 송신자 확인 유닛(716)을 이용하여) 식별하도록 구성되고; 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하는 것은, 통신의 개별 송신자와 연관된 주소에 기초하여 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 (예컨대, 송신자 확인 유닛(716)을 이용하여) 확인하는 것을 포함한다.
일부 실시예들에서, 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하는 것은, 개별 송신자로부터 수신되는 인입 통신의 콘텐츠에 기초하여 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 (예컨대, 송신자 확인 유닛(716)을 이용하여) 확인하는 것을 포함한다.
일부 실시예들에서, 인입 통신은 전화 통화, 음성 메시지, 음성 메일, 영상 통화, SMS, MMS, VOIP 통화, 또는 이메일 중 하나이다.
일부 실시예들에서, 액션은, 음성 메시지를 송신자에게 송신하는 것; SMS 메시지를 송신자에게 송신하는 것; MMS 또는 사진을 송신자에게 송신하는 것; 이메일을 송신자에게 송신하는 것; 이벤트 초대장을 송신자에게 송신하는 것; 하나 이상의 캘린더 엔트리들을 송신자와 공유하는 것; 및 하나 이상의 커스텀 속성들을 송신자와 공유하는 것으로 이루어진 그룹으로부터 선택된다.
일부 실시예들에서, (예컨대, 수행 유닛(718)을 이용하여) 수행하는 것 및 (예컨대, 삭제 유닛(720)을 이용하여) 삭제하는 것은, 전자 디바이스(700)의 사용자로부터의 추가 검토 또는 명령어 없이 자동으로 수행된다.
일부 실시예들에서, 특정 액션을 수행하는 것은, 제1 서브액션을 (예컨대, 수행 유닛(718)을 이용하여) 수행하는 것; 및 제1 서브액션과는 상이한 제2 서브액션을 (예컨대, 수행 유닛(718)을 이용하여) 수행하는 것을 포함한다.
일부 실시예들에서, 명령어들은 만료 기간을 추가로 특정하고, 프로세싱 유닛(708)은, 개별 송신자가 하나 이상의 특정 송신자들 중 하나가 아니며 만료 기간이 경과되었다고 판정할 시에, 명령어들을 (예컨대, 삭제 유닛(720)을 이용하여) 자동으로 삭제하도록 구성된다.
일부 실시예들에서, 개별 송신자는 제1 개별 송신자이고, 프로세싱 유닛(708)은, 제1 개별 송신자가 하나 이상의 특정 송신자들 중 하나가 아니며 만료 기간이 경과되지 않았다고 판정할 시에, 명령어들의 삭제를 보류하도록; 제1 개별 송신자와는 상이한 제2 개별 송신자로부터 인입 통신을 (예컨대, 통신 획득 유닛(714)을 이용하여) 획득하도록; 제2 개별 송신자가 하나 이상의 특정 송신자들 중 하나인지 여부를 (예컨대, 송신자 확인 유닛(716)을 이용하여) 판정하도록; 그리고 제2 개별 송신자가 하나 이상의 특정 송신자들 중 하나이며 만료 기간이 경과되지 않았다고 판정할 시에, 명령어들에 따라 특정 액션을 (예컨대, 수행 유닛(718)을 이용하여) 수행하고 그 후에 명령어들을 자동으로 삭제하도록 구성된다.
상기의 기술된 내용은 설명을 위해 특정 구현예들을 참조하여 기재되었다. 그러나, 상기의 예시적인 논의들은 개시된 구현예들을 망라하거나 또는 개시된 정확한 형태들로 제한하려는 의도는 아니다. 많은 수정들 및 변형들이 상기 교시내용들의 관점에서 가능하다. 구현예들은 개시된 아이디어들의 원리들 및 실제 응용들을 가장 잘 설명하여, 이로써 당업자가 이들을 고려되는 특정 용도에 맞춰진 바와 같은 다양한 수정들과 함께 가장 잘 활용할 수 있게 하기 위해 선택되었고 기술되었다.
용어들 "제1", "제2" 등이 본 명세서에서 다양한 요소들을 기술하는 데 사용될 수 있지만, 이들 요소들은 이들 용어들로 제한되어서는 안 된다. 이들 용어들은 하나의 요소를 다른 요소로부터 구별하는 데에만 사용된다. 예를 들어, "제1 스피치 입력"의 모든 발생들이 지속적으로 재명명되고 "제2 스피치 입력"의 모든 발생들이 지속적으로 재명명되는 한, 설명의 의미를 변화시킴이 없이, 제1 스피치 입력이 제2 스피치 입력으로 지칭될 수 있고, 유사하게, 제2 스피치 입력이 제1 스피치 입력으로 지칭될 수 있다. 제1 스피치 입력 및 제2 스피치 입력은 둘 모두 스피치 입력들이지만, 이들은 동일한 스피치 입력이 아니다.
본 명세서에서 사용되는 용어는 단지 특정 구현예들만을 기술하는 목적을 위한 것이고, 청구범위의 제한사항이 되도록 의도되는 것은 아니다. 본 구현예들의 설명 및 첨부된 청구범위에 사용되는 바와 같이, 단수의 형태("a", "an" 및 "the")는 문맥상 명백히 다르게 나타나지 않는다면 복수의 형태들도 마찬가지로 포함하려는 것으로 의도된다. 또한, 본 명세서에서 사용되는 바와 같은 용어 "및/또는"은 열거되는 연관된 항목들 중 하나 이상의 항목의 임의의 그리고 모든 가능한 조합들을 나타내고 그들을 포괄하는 것임이 이해될 것이다. 본 명세서에서 사용될 때 "포함한다(comprise)" 및/또는 "포함하는(comprising)"이라는 용어들은 진술되는 특징들, 정수들, 단계들, 동작들, 요소들, 및/또는 컴포넌트들의 존재를 특정하지만, 하나 이상의 다른 특징들, 정수들, 단계들, 동작들, 요소들, 컴포넌트들 및/또는 이들의 그룹들의 존재 또는 추가를 배제하지 않는다는 것이 추가로 이해될 것이다.
본 명세서에서 사용되는 바와 같이, 상황에 따라 진술된 선행 조건이 사실"인 경우(if)"라는 용어는 그가 사실"일 때(when)", 그가 사실"일 시(upon)" 또는 그가 사실"이라는 판정에 응답하여(in response to determining)" 또는 그가 사실"이라는 판정에 따라(in accordance with a determination)" 또는 그가 사실"임을 검출하는 것에 응답하여(in response to detecting)"를 의미하는 것으로 해석될 수 있다. 유사하게, "[진술된 선행 조건이 사실]로 판정되는 경우" 또는 "[진술된 선행 조건이 사실]인 경우" 또는 "[진술된 선행 조건이 사실]일 때"라는 구절은, 상황에 따라 진술된 선행 조건이 사실"인 것으로 판정할 시(upon determining)" 또는 그가 사실"인 것으로 판정 시(upon a determination that)" 또는 그가 사실"인 것으로 판정하는 것에 응답하여(in response to determining)" 또는 그가 사실"이라는 판정에 따라(in accordance with a determination)" 또는 그가 사실"이라는 것을 검출할 시(upon detecting)" 또는 그가 사실"이라는 것을 검출하는 것에 응답하여(in response to detecting)"를 의미하는 것으로 해석될 수 있다.

Claims (53)

  1. 디지털 어시스턴트(digital assistant)가 인입 통신(incoming communication)들에 자동으로 응답하게 하는 방법으로서,
    하나 이상의 프로세서들 및 메모리를 각각 갖는 하나 이상의 전자 디바이스들에서:
    사용자로부터 스피치 입력을 획득하는 단계;
    상기 스피치 입력을 획득하는 것에 응답하여, 상기 스피치 입력이 하나 이상의 특정 송신자들로부터의 후속 인입 통신의 수신에 응답하여 특정 액션을 수행하기 위한 명령어들을 포함하는지 여부를 판정하는 단계;
    상기 명령어들을 저장하는 단계;
    상기 명령어들을 저장한 후에, 개별 송신자로부터 인입 통신을 획득하는 단계;
    상기 개별 송신자가 상기 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하는 단계; 및
    상기 개별 송신자가 상기 하나 이상의 특정 송신자들 중 하나라고 판정할 시에, 상기 명령어들에 따라 상기 특정 액션을 수행하는 단계와 그 후에 상기 명령어들을 자동으로 삭제하는 단계를 포함하는, 방법.
  2. 제1항에 있어서, 상기 스피치 입력이 명령어들을 포함하는지 여부를 판정하는 단계는, 상기 스피치 입력이 하나 이상의 특정 송신자들로부터의 하나 이상의 특정 후속 인입 통신 유형들의 수신에 응답하여 특정 액션을 수행하기 위한 명령어들을 포함하는지 여부를 판정하는 단계를 포함하고,
    상기 방법은, 상기 인입 통신이 상기 하나 이상의 특정 후속 인입 통신 유형들 중 하나인지 여부를 판정하는 단계를 포함하고,
    상기 특정 액션을 수행하는 단계는, 상기 개별 송신자가 상기 하나 이상의 특정 송신자들 중 하나이며 상기 인입 통신이 상기 하나 이상의 특정 후속 인입 통신 유형들 중 하나라고 판정할 시에, 상기 명령어들에 따라 상기 특정 액션을 수행하는 단계와 그 후에 상기 명령어들을 자동으로 삭제하는 단계를 포함하는, 방법.
  3. 제2항에 있어서, 상기 하나 이상의 특정 후속 인입 통신 유형들의 개별 특정 후속 인입 통신 유형은 전화 통화, 음성 메시지, 음성 메일, 영상 통화, SMS, MMS, VOIP 통화, 또는 이메일 중 하나인, 방법.
  4. 제1항 내지 제3항 중 어느 한 항에 있어서, 상기 인입 통신은 전화 통화이고, 상기 특정 액션은 음성 메시지를 송신하는 것인, 방법.
  5. 제4항에 있어서, 상기 음성 메시지 중 적어도 일부는 상기 사용자의 음성의 녹음물인, 방법.
  6. 제4항에 있어서, 상기 음성 메시지 중 적어도 일부는 입력 텍스트의 디지털화된 버전 또는 텍스트-스피치(text-to-speech) 버전인, 방법.
  7. 제1항 내지 제3항 중 어느 한 항에 있어서, 상기 스피치 입력을 텍스트로 변환하기 위해 상기 스피치 입력에 대한 자연 언어 프로세싱을 수행하는 단계를 포함하고, 상기 명령어들을 저장하는 단계는 상기 명령어들을 텍스트로서 저장하는 단계를 포함하는, 방법.
  8. 제1항 내지 제3항 중 어느 한 항에 있어서, 상기 특정 액션을 수행하는 단계는,
    상기 명령어들에 따라 상기 개별 송신자에 대한 응답을 구성하는 단계; 및
    상기 응답을 상기 송신자에게 통신하는 단계를 포함하는, 방법.
  9. 제8항에 있어서, 상기 통신하는 단계는 전화 통화, 음성 메일, 영상 통화, SMS, MMS, VOIP 통화, 또는 이메일 중 하나인, 방법.
  10. 제8항에 있어서, 상기 통신하는 단계는 상기 인입 통신과 동일한 통신 수단을 이용하는, 방법.
  11. 제8항에 있어서, 상기 구성하는 단계는 상기 명령어들에 따라서 그리고 상황적 정보(contextual information)에 적어도 부분적으로 기초하여 상기 개별 송신자에 대한 응답을 구성하는 단계를 포함하는, 방법.
  12. 제11항에 있어서, 상기 상황적 정보는 상기 사용자와 연관된 거동 정보, 패턴 정보, 또는 위치 정보 중 하나 이상을 포함하는, 방법.
  13. 제1항 내지 제3항 중 어느 한 항에 있어서, 상기 개별 송신자가 상기 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하는 단계는, 상기 디바이스의 상기 사용자와 연관된 연락처들의 목록에 기초하여 상기 개별 송신자가 상기 하나 이상의 특정 송신자들 중 하나인지 여부를 확인하는 단계를 포함하는, 방법.
  14. 제1항 내지 제3항 중 어느 한 항에 있어서, 상기 개별 송신자가 상기 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하는 단계는, 상기 개별 송신자와 연관된 발신자 ID에 기초하여 상기 개별 송신자가 상기 하나 이상의 특정 송신자들 중 하나인지 여부를 확인하는 단계를 포함하는, 방법.
  15. 제1항 내지 제3항 중 어느 한 항에 있어서, 상기 통신의 상기 송신자와 연관된 주소를 식별하는 단계를 포함하고,
    상기 개별 송신자가 상기 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하는 단계는, 상기 통신의 상기 개별 송신자와 연관된 주소에 기초하여 상기 송신자가 상기 하나 이상의 특정 송신자들 중 하나인지 여부를 확인하는 단계를 포함하는, 방법.
  16. 제1항 내지 제3항 중 어느 한 항에 있어서, 상기 개별 송신자가 상기 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하는 단계는, 상기 개별 송신자로부터 수신되는 상기 인입 통신의 콘텐츠에 기초하여 상기 송신자가 상기 하나 이상의 특정 송신자들 중 하나인지 여부를 확인하는 단계를 포함하는, 방법.
  17. 제1항 내지 제3항 중 어느 한 항에 있어서, 상기 인입 통신은 전화 통화, 음성 메시지, 음성 메일, 영상 통화, SMS, MMS, VOIP 통화, 또는 이메일 중 하나인, 방법.
  18. 제1항 내지 제3항 중 어느 한 항에 있어서, 상기 액션은,
    음성 메시지를 상기 송신자에게 송신하는 것;
    SMS 메시지를 상기 송신자에게 송신하는 것;
    MMS 또는 사진을 상기 송신자에게 송신하는 것;
    이메일을 상기 송신자에게 송신하는 것;
    이벤트 초대장을 상기 송신자에게 송신하는 것;
    하나 이상의 캘린더 엔트리들을 상기 송신자와 공유하는 것; 및
    하나 이상의 커스텀 속성(custom attribute)들을 상기 송신자와 공유하는 것으로 이루어진 그룹으로부터 선택되는, 방법.
  19. 제1항 내지 제3항 중 어느 한 항에 있어서, 상기 수행하는 단계 및 삭제하는 단계는 상기 디바이스의 상기 사용자로부터의 추가 검토 또는 명령어 없이 자동으로 수행되는, 방법.
  20. 제1항 내지 제3항 중 어느 한 항에 있어서, 상기 특정 액션을 수행하는 단계는,
    제1 서브액션을 수행하는 단계; 및
    상기 제1 서브액션과는 상이한 제2 서브액션을 수행하는 단계를 포함하는, 방법.
  21. 제1항 내지 제3항 중 어느 한 항에 있어서, 상기 명령어들은 만료 기간을 추가로 특정하고,
    상기 방법은, 상기 개별 송신자가 상기 하나 이상의 특정 송신자들 중 하나가 아니며 상기 만료 기간이 경과되었다고 판정할 시에, 상기 명령어들을 자동으로 삭제하는 단계를 포함하는, 방법.
  22. 제21항에 있어서, 상기 개별 송신자는 제1 개별 송신자이고,
    상기 방법은,
    상기 제1 개별 송신자가 상기 하나 이상의 특정 송신자들 중 하나가 아니며 상기 만료 기간이 경과되지 않았다고 판정할 시에, 상기 명령어들의 삭제를 보류하는 단계;
    상기 제1 개별 송신자와는 상이한 제2 개별 송신자로부터 인입 통신을 획득하는 단계;
    상기 제2 개별 송신자가 상기 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하는 단계; 및
    상기 제2 개별 송신자가 상기 하나 이상의 특정 송신자들 중 하나이며 상기 만료 기간이 경과되지 않았다고 판정할 시에, 상기 명령어들에 따라 상기 특정 액션을 수행하는 단계와 그 후에 상기 명령어들을 자동으로 삭제하는 단계를 포함하는, 방법.
  23. 하나 이상의 프로그램들을 저장하는 비일시적 컴퓨터 판독가능 저장 매체로서, 상기 하나 이상의 프로그램들은 디지털 어시스턴트를 동작시키기 위한 명령어들을 포함하고, 상기 명령어들은, 하나 이상의 프로세서들을 갖는 전자 디바이스에 의해 실행될 때, 상기 디바이스로 하여금 동작들을 수행하게 하며, 상기 동작들은,
    사용자로부터 스피치 입력을 획득하는 것;
    상기 스피치 입력을 획득하는 것에 응답하여, 상기 스피치 입력이 하나 이상의 특정 송신자들로부터의 후속 인입 통신의 수신에 응답하여 특정 액션을 수행하기 위한 명령어들을 포함하는지 여부를 판정하는 것;
    상기 명령어들을 저장한 후에, 개별 송신자로부터 인입 통신을 획득하는 것;
    상기 개별 송신자가 상기 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하는 것; 및
    상기 개별 송신자가 상기 하나 이상의 특정 송신자들 중 하나라고 판정할 시에, 상기 명령어들에 따라 상기 특정 액션을 수행하는 것과 그 후에 상기 명령어들을 자동으로 삭제하는 것을 포함하는, 비일시적 컴퓨터 판독가능 저장 매체.
  24. 전자 디바이스로서,
    하나 이상의 프로세서들; 및
    디지털 어시스턴트를 동작시키기 위한 명령어들을 저장하는 메모리를 포함하고, 상기 명령어들은, 상기 하나 이상의 프로세서들에 의해 실행될 때, 상기 프로세서들로 하여금 동작들을 수행하게 하며, 상기 동작들은,
    사용자로부터 스피치 입력을 획득하는 것;
    상기 스피치 입력을 획득하는 것에 응답하여, 상기 스피치 입력이 하나 이상의 특정 송신자들로부터의 후속 인입 통신의 수신에 응답하여 특정 액션을 수행하기 위한 명령어들을 포함하는지 여부를 판정하는 것;
    상기 명령어들을 저장한 후에, 개별 송신자로부터 인입 통신을 획득하는 것;
    상기 개별 송신자가 상기 하나 이상의 특정 송신자들 중 하나인지 여부를 판정하는 것; 및
    상기 개별 송신자가 상기 하나 이상의 특정 송신자들 중 하나라고 판정할 시에, 상기 명령어들에 따라 상기 특정 액션을 수행하는 것과 그 후에 상기 명령어들을 자동으로 삭제하는 것을 포함하는, 전자 디바이스.
  25. 제1항에 있어서, 상기 스피치 입력이 하나 이상의 특정 송신자들로부터의 후속 인입 통신의 수신에 응답하여 특정 액션을 수행하기 위한 명령어들을 포함하는지 여부를 판정하는 단계는,
    상기 스피치 입력이 하나 이상의 특정 송신자들로부터의 후속 인입 통신의 수신에 응답하여 특정 액션을 수행하기 위한 불완전한 명령어들을 포함한다는 판정에 따라, 상기 사용자로부터 추가 정보를 획득하는 단계를 포함하는, 방법.
  26. 제25항에 있어서, 상기 사용자로부터 추가 정보를 획득하는 단계는,
    상기 사용자와의 대화를 개시(initiate)하는 단계;
    상기 사용자로부터 제2 스피치 입력을 획득하는 단계; 및
    상기 사용자로부터 물리적 입력을 획득하는 단계 중 적어도 하나를 포함하는, 방법.
  27. 제1항에 있어서, 상기 스피치 입력이 하나 이상의 특정 송신자들로부터의 후속 인입 통신의 수신에 응답하여 특정 액션을 수행하기 위한 명령어들을 포함하는지 여부를 판정하는 단계는,
    상기 스피치 입력에 기초해서 단어들 또는 토큰들의 시퀀스를 생성하는 단계;
    상기 단어들 또는 토큰들의 시퀀스에 기초해서 자연 언어 프로세싱을 수행하는 단계; 및
    상기 자연 언어 프로세싱의 결과들에 기초해서, 상기 스피치 입력이 하나 이상의 특정 송신자들로부터의 후속 인입 통신의 수신에 응답해서 특정 액션을 수행하기 위한 명령어들을 포함하는지 여부를 추론하는 단계
    를 포함하는, 방법.
  28. 삭제
  29. 삭제
  30. 삭제
  31. 삭제
  32. 삭제
  33. 삭제
  34. 삭제
  35. 삭제
  36. 삭제
  37. 삭제
  38. 삭제
  39. 삭제
  40. 삭제
  41. 삭제
  42. 삭제
  43. 삭제
  44. 삭제
  45. 삭제
  46. 삭제
  47. 삭제
  48. 삭제
  49. 삭제
  50. 삭제
  51. 삭제
  52. 삭제
  53. 삭제
KR1020167005742A 2013-08-06 2014-08-04 원격 디바이스로부터의 활동에 기초한 스마트 응답의 자동 활성화 KR101749009B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361862927P 2013-08-06 2013-08-06
US61/862,927 2013-08-06
PCT/US2014/049568 WO2015020942A1 (en) 2013-08-06 2014-08-04 Auto-activating smart responses based on activities from remote devices

Publications (2)

Publication Number Publication Date
KR20160040279A KR20160040279A (ko) 2016-04-12
KR101749009B1 true KR101749009B1 (ko) 2017-06-19

Family

ID=51483648

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020167005742A KR101749009B1 (ko) 2013-08-06 2014-08-04 원격 디바이스로부터의 활동에 기초한 스마트 응답의 자동 활성화

Country Status (8)

Country Link
US (2) US10791216B2 (ko)
JP (1) JP6163266B2 (ko)
KR (1) KR101749009B1 (ko)
CN (1) CN105453026A (ko)
AU (1) AU2014306221B2 (ko)
DE (1) DE112014003653T5 (ko)
TW (1) TWI553507B (ko)
WO (1) WO2015020942A1 (ko)

Families Citing this family (186)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US20120309363A1 (en) 2011-06-03 2012-12-06 Apple Inc. Triggering notifications associated with tasks items that represent tasks to perform
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US10019995B1 (en) 2011-03-01 2018-07-10 Alice J. Stiebel Methods and systems for language learning based on a series of pitch patterns
US11062615B1 (en) 2011-03-01 2021-07-13 Intelligibility Training LLC Methods and systems for remote language learning in a pandemic-aware world
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
KR102579086B1 (ko) 2013-02-07 2023-09-15 애플 인크. 디지털 어시스턴트를 위한 음성 트리거
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
CN110442699A (zh) 2013-06-09 2019-11-12 苹果公司 操作数字助理的方法、计算机可读介质、电子设备和系统
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US10224056B1 (en) * 2013-12-17 2019-03-05 Amazon Technologies, Inc. Contingent device actions during loss of network connectivity
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
WO2015184186A1 (en) 2014-05-30 2015-12-03 Apple Inc. Multi-command single utterance input method
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
JP6242773B2 (ja) * 2014-09-16 2017-12-06 株式会社東芝 会議情報蓄積装置、方法およびプログラム
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US20160285788A1 (en) * 2015-03-25 2016-09-29 II Antonio Sabarez Method and Apparatus for Preprogrammed Informational Reply to an Identified Communications Connection Request
US10114676B2 (en) * 2015-05-05 2018-10-30 Microsoft Technology Licensing, Llc Building multimodal collaborative dialogs with task frames
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10446142B2 (en) * 2015-05-20 2019-10-15 Microsoft Technology Licensing, Llc Crafting feedback dialogue with a digital assistant
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
CN105094894A (zh) * 2015-06-24 2015-11-25 叶春林 电脑手机类操作系统的智能快捷方式
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US9755996B2 (en) 2015-08-11 2017-09-05 International Business Machines Corporation Messaging in attention critical environments
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10372755B2 (en) * 2015-09-23 2019-08-06 Motorola Solutions, Inc. Apparatus, system, and method for responding to a user-initiated query with a context-based response
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) * 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10560573B2 (en) * 2015-12-21 2020-02-11 Saronikos Trading And Services, Unipessoal Lda Apparatus and method for managing communications
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US20170249309A1 (en) * 2016-02-29 2017-08-31 Microsoft Technology Licensing, Llc Interpreting and Resolving Conditional Natural Language Queries
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US10133612B2 (en) * 2016-03-17 2018-11-20 Nuance Communications, Inc. Session processing interaction between two or more virtual assistants
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179309B1 (en) 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
KR20220064419A (ko) * 2016-06-13 2022-05-18 구글 엘엘씨 인간 운영자로의 에스컬레이션
TWI612818B (zh) * 2016-06-24 2018-01-21 禾聯碩股份有限公司 電視控制家電之系統及其方法
US10802671B2 (en) * 2016-07-11 2020-10-13 Google Llc Contextual information for a displayed resource that includes an image
WO2018045303A1 (en) * 2016-09-02 2018-03-08 Bose Corporation Application-based messaging system using headphones
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10666808B2 (en) * 2016-09-21 2020-05-26 Motorola Solutions, Inc. Method and system for optimizing voice recognition and information searching based on talkgroup activities
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US11170757B2 (en) * 2016-09-30 2021-11-09 T-Mobile Usa, Inc. Systems and methods for improved call handling
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
KR20180075009A (ko) * 2016-12-26 2018-07-04 현대자동차주식회사 음성 처리 장치, 이를 포함하는 차량 및 음성 처리 방법
US11204787B2 (en) * 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US10735589B1 (en) * 2019-03-18 2020-08-04 Virtual Hold Technology Solutions, Llc System and method for mobile device active callback integration
US11553089B2 (en) * 2017-01-20 2023-01-10 Virtual Hold Technology Solutions, Llc System and method for mobile device active callback prioritization
US10277743B1 (en) * 2017-03-21 2019-04-30 Amazon Technologies, Inc. Configurable natural language contact flow
US11363132B2 (en) * 2017-04-20 2022-06-14 Maxell, Ltd. Information processing terminal and automatic response method
US9858943B1 (en) 2017-05-09 2018-01-02 Sony Corporation Accessibility for the hearing impaired using measurement and object based audio
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
DK201770428A1 (en) 2017-05-12 2019-02-18 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
US11048995B2 (en) 2017-05-16 2021-06-29 Google Llc Delayed responses by computational assistant
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
WO2018213788A1 (en) 2017-05-18 2018-11-22 Aiqudo, Inc. Systems and methods for crowdsourced actions and commands
US11043206B2 (en) 2017-05-18 2021-06-22 Aiqudo, Inc. Systems and methods for crowdsourced actions and commands
US11056105B2 (en) 2017-05-18 2021-07-06 Aiqudo, Inc Talk back from actions in applications
US11340925B2 (en) * 2017-05-18 2022-05-24 Peloton Interactive Inc. Action recipes for a crowdsourced digital assistant system
US20180349447A1 (en) * 2017-06-02 2018-12-06 Apple Inc. Methods and systems for customizing suggestions using user-specific information
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US10805676B2 (en) 2017-07-10 2020-10-13 Sony Corporation Modifying display region for people with macular degeneration
US10650702B2 (en) 2017-07-10 2020-05-12 Sony Corporation Modifying display region for people with loss of peripheral vision
US10303427B2 (en) 2017-07-11 2019-05-28 Sony Corporation Moving audio from center speaker to peripheral speaker of display device for macular degeneration accessibility
US10845954B2 (en) 2017-07-11 2020-11-24 Sony Corporation Presenting audio video display options as list or matrix
US10051331B1 (en) * 2017-07-11 2018-08-14 Sony Corporation Quick accessibility profiles
KR102417029B1 (ko) * 2017-07-24 2022-07-06 삼성전자주식회사 자연어 표현 생성 방법 및 전자 장치
US10885901B2 (en) * 2017-08-21 2021-01-05 Sony Interactive Entertainment LLC Network-based learning models for natural language processing
CN107590096B (zh) * 2017-08-31 2021-06-15 联想(北京)有限公司 用于电子设备中处理器的方法和处理器
US10796687B2 (en) 2017-09-06 2020-10-06 Amazon Technologies, Inc. Voice-activated selective memory for voice-capturing devices
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10431219B2 (en) * 2017-10-03 2019-10-01 Google Llc User-programmable automated assistant
US10747954B2 (en) * 2017-10-31 2020-08-18 Baidu Usa Llc System and method for performing tasks based on user inputs using natural language processing
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10586537B2 (en) * 2017-11-30 2020-03-10 International Business Machines Corporation Filtering directive invoking vocal utterances
US10884104B2 (en) * 2017-12-20 2021-01-05 Ecolink Intelligent Technology, Inc. Monitoring device having 360 degree sensing capabilities
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
KR102361458B1 (ko) * 2018-01-25 2022-02-10 삼성전자주식회사 사용자 발화 응답 방법 및 이를 지원하는 전자 장치
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11049076B2 (en) * 2018-05-07 2021-06-29 Microsoft Techology Licensing, Llc Routing of meeting requests and follow-up queries by digital assistants
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK179822B1 (da) * 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US10944859B2 (en) 2018-06-03 2021-03-09 Apple Inc. Accelerated task performance
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11381675B2 (en) * 2018-12-12 2022-07-05 Samsung Electronics Co., Ltd. Command based interactive system and a method thereof
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11030019B2 (en) 2019-04-09 2021-06-08 International Business Machines Corporation Deletion of events based on a plurality of factors in a connected car computing environment
US11217251B2 (en) 2019-05-06 2022-01-04 Apple Inc. Spoken notifications
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11468890B2 (en) 2019-06-01 2022-10-11 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11190911B2 (en) * 2019-07-11 2021-11-30 International Business Machines Corporation Automatic query-based communication system
US11488406B2 (en) 2019-09-25 2022-11-01 Apple Inc. Text detection using global geometry estimators
US20210105332A1 (en) * 2019-10-07 2021-04-08 Microsoft Technology Licensing, Llc Intelligent status indicators for predicted availability of users
US11038934B1 (en) 2020-05-11 2021-06-15 Apple Inc. Digital assistant hardware abstraction
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
TWI770867B (zh) * 2021-03-10 2022-07-11 財團法人車輛研究測試中心 語音辨識裝置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090313014A1 (en) * 2008-06-12 2009-12-17 Jong-Ho Shin Mobile terminal and method for recognizing voice thereof
US20100098231A1 (en) * 2008-10-22 2010-04-22 Randolph Wohlert Systems and Methods for Providing a Personalized Communication Processing Service
US20110045841A1 (en) * 2009-08-19 2011-02-24 Matthew Kuhlke Matching a location of a contact with a task location

Family Cites Families (2651)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US1559320A (en) 1924-11-17 1925-10-27 Albert A Hirsh Tooth cleaner
US2180522A (en) 1938-11-01 1939-11-21 Henne Isabelle Dental floss throw-away unit and method of making same
US3828132A (en) 1970-10-30 1974-08-06 Bell Telephone Labor Inc Speech synthesis by concatenation of formant encoded words
US3710321A (en) 1971-01-18 1973-01-09 Ibm Machine recognition of lexical symbols
US3704345A (en) 1971-03-19 1972-11-28 Bell Telephone Labor Inc Conversion of printed text into synthetic speech
US3979557A (en) 1974-07-03 1976-09-07 International Telephone And Telegraph Corporation Speech processor system for pitch period extraction using prediction filters
US4013085A (en) 1974-07-17 1977-03-22 Wright Charles E Dental cleaning means and method of manufacture therefor
US4108211A (en) 1975-04-28 1978-08-22 Fuji Photo Optical Co., Ltd. Articulated, four-way bendable tube structure
US4107784A (en) 1975-12-22 1978-08-15 Bemmelen Henri M Van Management control terminal method and apparatus
US4090216A (en) 1976-05-26 1978-05-16 Gte Sylvania Incorporated Ambient light contrast and color control circuit
BG24190A1 (en) 1976-09-08 1978-01-10 Antonov Method of synthesis of speech and device for effecting same
US4081631A (en) 1976-12-08 1978-03-28 Motorola, Inc. Dual purpose, weather resistant data terminal keyboard assembly including audio porting
US4384169A (en) 1977-01-21 1983-05-17 Forrest S. Mozer Method and apparatus for speech synthesizing
US4159536A (en) 1977-04-08 1979-06-26 Willard E. Kehoe Portable electronic language translation device
GB1545406A (en) 1977-12-16 1979-05-10 Ibm Keyboard apparatus
US4181821A (en) 1978-10-31 1980-01-01 Bell Telephone Laboratories, Incorporated Multiple template speech recognition system
JPS597120B2 (ja) 1978-11-24 1984-02-16 日本電気株式会社 音声分析装置
US4241286A (en) 1979-01-04 1980-12-23 Mack Gordon Welding helmet lens assembly
US4253477A (en) 1979-08-02 1981-03-03 Eichman John J Dental floss holder
JPH0122634B2 (ko) 1979-12-10 1989-04-27 Nippon Electric Co
US4310721A (en) 1980-01-23 1982-01-12 The United States Of America As Represented By The Secretary Of The Army Half duplex integral vocoder modem system
US4348553A (en) 1980-07-02 1982-09-07 International Business Machines Corporation Parallel pattern verifier with dynamic time warping
JPS5741731U (ko) 1980-08-25 1982-03-06
US4332464A (en) 1980-09-22 1982-06-01 Xerox Corporation Interactive user-machine interface method and apparatus for copier/duplicator
NZ199001A (en) 1981-01-30 1984-02-03 Mobil Oil Corp Alkylation of aromatic compounds using catalyst with metal component and a zeolite
JPH0123798B2 (ko) 1981-04-27 1989-05-08 Nippon Electric Co
US4495644A (en) 1981-04-27 1985-01-22 Quest Automation Public Limited Company Apparatus for signature verification
US4433377A (en) 1981-06-29 1984-02-21 Eustis Mary S Data processing with format varying
US4386345A (en) 1981-09-22 1983-05-31 Sperry Corporation Color and brightness tracking in a cathode ray tube display system
DE3382478D1 (de) 1982-06-11 1992-01-30 Mitsubishi Electric Corp Vektor-groessenwandler.
US4451849A (en) 1982-06-23 1984-05-29 Rca Corporation Plural operating mode ambient light responsive television picture control
US4485439A (en) 1982-07-27 1984-11-27 S.A. Analis Standard hardware-software interface for connecting any instrument which provides a digital output stream with any digital host computer
US4513379A (en) 1982-09-07 1985-04-23 General Electric Company Customization window for a computer numerical control system
US4555775B1 (en) 1982-10-07 1995-12-05 Bell Telephone Labor Inc Dynamic generation and overlaying of graphic windows for multiple active program storage areas
JPS5957336U (ja) 1982-10-08 1984-04-14 株式会社明治ゴム化成 把手付大型飲料用容器
US4587670A (en) 1982-10-15 1986-05-06 At&T Bell Laboratories Hidden Markov model speech recognition arrangement
US4688195A (en) 1983-01-28 1987-08-18 Texas Instruments Incorporated Natural-language interface generating system
US4831551A (en) 1983-01-28 1989-05-16 Texas Instruments Incorporated Speaker-dependent connected speech word recognizer
US4586158A (en) 1983-02-22 1986-04-29 International Business Machines Corp. Screen management system
DE3381300D1 (de) 1983-03-31 1990-04-12 Ibm Abbildungsraumverwaltung und wiedergabe in einem bestimmten teil des bildschirms eines virtuellen mehrfunktionsterminals.
US4654875A (en) 1983-05-23 1987-03-31 The Research Foundation Of State University Of New York System to achieve automatic recognition of linguistic strings
SE8303123L (sv) 1983-06-02 1984-12-03 Fixfabriken Ab Festanordning
US4618984A (en) 1983-06-08 1986-10-21 International Business Machines Corporation Adaptive automatic discrete utterance recognition
JPS603056A (ja) 1983-06-21 1985-01-09 Toshiba Corp 情報整理装置
US4611346A (en) 1983-09-29 1986-09-09 International Business Machines Corporation Method and apparatus for character recognition accommodating diacritical marks
DE3335358A1 (de) 1983-09-29 1985-04-11 Siemens AG, 1000 Berlin und 8000 München Verfahren zur bestimmung von sprachspektren fuer die automatische spracherkennung und sprachcodierung
US4802223A (en) 1983-11-03 1989-01-31 Texas Instruments Incorporated Low data rate speech encoding employing syllable pitch patterns
US4797930A (en) 1983-11-03 1989-01-10 Texas Instruments Incorporated constructed syllable pitch patterns from phonological linguistic unit string data
US5164900A (en) 1983-11-14 1992-11-17 Colman Bernath Method and device for phonetically encoding Chinese textual data for data processing entry
US5212638A (en) 1983-11-14 1993-05-18 Colman Bernath Alphabetic keyboard arrangement for typing Mandarin Chinese phonetic data
US4680805A (en) 1983-11-17 1987-07-14 Texas Instruments Incorporated Method and apparatus for recognition of discontinuous text
US4589022A (en) 1983-11-28 1986-05-13 General Electric Company Brightness control system for CRT video display
JPH023224B2 (ko) 1983-11-29 1990-01-22 Enu Kee Bii Kk
US4736296A (en) 1983-12-26 1988-04-05 Hitachi, Ltd. Method and apparatus of intelligent guidance in natural language
US4726065A (en) 1984-01-26 1988-02-16 Horst Froessl Image manipulation by speech signals
US4955047A (en) 1984-03-26 1990-09-04 Dytel Corporation Automated attendant with direct inward system access
US4811243A (en) 1984-04-06 1989-03-07 Racine Marsh V Computer aided coordinate digitizing system
US4692941A (en) 1984-04-10 1987-09-08 First Byte Real-time text-to-speech conversion system
US4709390A (en) 1984-05-04 1987-11-24 American Telephone And Telegraph Company, At&T Bell Laboratories Speech message code modifying arrangement
JPH067397Y2 (ja) 1984-07-30 1994-02-23 カシオ計算機株式会社 文書入力装置
JPH0724055B2 (ja) 1984-07-31 1995-03-15 株式会社日立製作所 単語分割処理方法
US4783807A (en) 1984-08-27 1988-11-08 John Marley System and method for sound recognition with feature selection synchronized to voice pitch
JP2607457B2 (ja) 1984-09-17 1997-05-07 株式会社東芝 パターン認識装置
JPH0510703B2 (ko) 1984-10-29 1993-02-10 Hitachi Ltd
US4718094A (en) 1984-11-19 1988-01-05 International Business Machines Corp. Speech recognition system
US5165007A (en) 1985-02-01 1992-11-17 International Business Machines Corporation Feneme-based Markov models for words
US4783804A (en) 1985-03-21 1988-11-08 American Telephone And Telegraph Company, At&T Bell Laboratories Hidden Markov model speech recognition arrangement
US4944013A (en) 1985-04-03 1990-07-24 British Telecommunications Public Limited Company Multi-pulse speech coder
US4670848A (en) 1985-04-10 1987-06-02 Standard Systems Corporation Artificial intelligence system
US4658425A (en) 1985-04-19 1987-04-14 Shure Brothers, Inc. Microphone actuation control system suitable for teleconference systems
US4833712A (en) 1985-05-29 1989-05-23 International Business Machines Corporation Automatic generation of simple Markov model stunted baseforms for words in a vocabulary
US4819271A (en) 1985-05-29 1989-04-04 International Business Machines Corporation Constructing Markov model word baseforms from multiple utterances by concatenating model sequences for word segments
US4698625A (en) 1985-05-30 1987-10-06 International Business Machines Corp. Graphic highlight adjacent a pointing cursor
US4829583A (en) 1985-06-03 1989-05-09 Sino Business Machines, Inc. Method and apparatus for processing ideographic characters
US5067158A (en) 1985-06-11 1991-11-19 Texas Instruments Incorporated Linear predictive residual representation via non-iterative spectral reconstruction
US5175803A (en) 1985-06-14 1992-12-29 Yeh Victor C Method and apparatus for data processing and word processing in Chinese using a phonetic Chinese language
US4713775A (en) 1985-08-21 1987-12-15 Teknowledge, Incorporated Intelligent assistant for using and operating computer system capabilities to solve problems
EP0218859A3 (en) 1985-10-11 1989-09-06 International Business Machines Corporation Signal processor communication interface
US4754489A (en) 1985-10-15 1988-06-28 The Palantir Corporation Means for resolving ambiguities in text based upon character context
US5133023A (en) 1985-10-15 1992-07-21 The Palantir Corporation Means for resolving ambiguities in text based upon character context
US4655233A (en) 1985-11-04 1987-04-07 Laughlin Patrick E Dental flossing tool
US4776016A (en) 1985-11-21 1988-10-04 Position Orientation Systems, Inc. Voice control system
NL8503304A (nl) 1985-11-29 1987-06-16 Philips Nv Werkwijze en inrichting voor het segmenteren van een uit een akoestisch signaal, bij voorbeeld een spraaksignaal, afgeleid elektrisch signaal.
JPH0833744B2 (ja) 1986-01-09 1996-03-29 株式会社東芝 音声合成装置
US4680429A (en) 1986-01-15 1987-07-14 Tektronix, Inc. Touch panel
US4807752A (en) 1986-01-21 1989-02-28 Placontrol Corporation Dental floss holders and package assembly of same
US4724542A (en) 1986-01-22 1988-02-09 International Business Machines Corporation Automatic reference adaptation during dynamic signature verification
US5759101A (en) 1986-03-10 1998-06-02 Response Reward Systems L.C. Central and remote evaluation of responses of participatory broadcast audience with automatic crediting and couponing
US5057915A (en) 1986-03-10 1991-10-15 Kohorn H Von System and method for attracting shoppers to sales outlets
US5032989A (en) 1986-03-19 1991-07-16 Realpro, Ltd. Real estate search and location system and method
EP0241170B1 (en) 1986-03-28 1992-05-27 AT&T Corp. Adaptive speech feature signal generation arrangement
JPS62235998A (en) 1986-04-05 1987-10-16 Sharp Kk Syllable identification system
JPH0814822B2 (ja) 1986-04-30 1996-02-14 カシオ計算機株式会社 命令入力装置
US4903305A (en) 1986-05-12 1990-02-20 Dragon Systems, Inc. Method for representing word models for use in speech recognition
US4837798A (en) 1986-06-02 1989-06-06 American Telephone And Telegraph Company Communication system having unified messaging
GB8618665D0 (en) 1986-07-31 1986-09-10 British Telecomm Graphical workstation
US4790028A (en) 1986-09-12 1988-12-06 Westinghouse Electric Corp. Method and apparatus for generating variably scaled displays
US5765131A (en) 1986-10-03 1998-06-09 British Telecommunications Public Limited Company Language translation system and method
DE3788488T2 (de) 1986-10-03 1994-05-11 British Telecomm Sprachenübersetzungssystem.
US4837831A (en) 1986-10-15 1989-06-06 Dragon Systems, Inc. Method for creating and using multiple-word sound models in speech recognition
US5083268A (en) 1986-10-15 1992-01-21 Texas Instruments Incorporated System and method for parsing natural language by unifying lexical features of words
USRE34562E (en) 1986-10-16 1994-03-15 Mitsubishi Denki Kabushiki Kaisha Amplitude-adaptive vector quantization system
US5123103A (en) 1986-10-17 1992-06-16 Hitachi, Ltd. Method and system of retrieving program specification and linking the specification by concept to retrieval request for reusing program parts
US4829576A (en) 1986-10-21 1989-05-09 Dragon Systems, Inc. Voice recognition system
US4887212A (en) 1986-10-29 1989-12-12 International Business Machines Corporation Parser for natural language text
US4852168A (en) 1986-11-18 1989-07-25 Sprague Richard P Compression of stored waveforms for artificial speech
US4833718A (en) 1986-11-18 1989-05-23 First Byte Compression of stored waveforms for artificial speech
US4727354A (en) 1987-01-07 1988-02-23 Unisys Corporation System for selecting best fit vector code in vector quantization encoding
US4827520A (en) 1987-01-16 1989-05-02 Prince Corporation Voice actuated control system for use in a vehicle
US5179627A (en) 1987-02-10 1993-01-12 Dictaphone Corporation Digital dictation system
US4965763A (en) 1987-03-03 1990-10-23 International Business Machines Corporation Computer method for automatic extraction of commonly specified information from business correspondence
JP2595235B2 (ja) 1987-03-18 1997-04-02 富士通株式会社 音声合成装置
US4755811A (en) 1987-03-24 1988-07-05 Tektronix, Inc. Touch controlled zoom of waveform displays
US4803729A (en) 1987-04-03 1989-02-07 Dragon Systems, Inc. Speech recognition method
US5027408A (en) 1987-04-09 1991-06-25 Kroeker John P Speech-recognition circuitry employing phoneme estimation
US5125030A (en) 1987-04-13 1992-06-23 Kokusai Denshin Denwa Co., Ltd. Speech signal coding/decoding system based on the type of speech signal
US5644727A (en) 1987-04-15 1997-07-01 Proprietary Financial Products, Inc. System for the operation and management of one or more financial accounts through the use of a digital communication and computation system for exchange, investment and borrowing
AT386947B (de) 1987-04-17 1988-11-10 Rochus Marxer Spannbarer faden, behaelter fuer diesen faden und halter zur zahnpflege, insbesondere zur reinigung von zahnzwischenraeumen
JPS63285598A (en) 1987-05-18 1988-11-22 Kokusai Denshin Denwa Co Ltd Phoneme connection type parameter rule synthesization system
CA1295064C (en) 1987-05-29 1992-01-28 Kuniyoshi Marui Voice recognition system used in telephone apparatus
US5231670A (en) 1987-06-01 1993-07-27 Kurzweil Applied Intelligence, Inc. Voice controlled system and method for generating text from a voice controlled input
CA1265623A (en) 1987-06-11 1990-02-06 Eddy Lee Method of facilitating computer sorting
DE3723078A1 (de) 1987-07-11 1989-01-19 Philips Patentverwaltung Verfahren zur erkennung von zusammenhaengend gesprochenen woertern
CA1288516C (en) 1987-07-31 1991-09-03 Leendert M. Bijnagte Apparatus and method for communicating textual and image information between a host computer and a remote display terminal
US4974191A (en) 1987-07-31 1990-11-27 Syntellect Software Inc. Adaptive natural language computer interface system
US4827518A (en) 1987-08-06 1989-05-02 Bell Communications Research, Inc. Speaker verification system using integrated circuit cards
CA1280215C (en) 1987-09-28 1991-02-12 Eddy Lee Multilingual ordered data retrieval system
JP2602847B2 (ja) 1987-09-29 1997-04-23 株式会社日立製作所 マルチメディアメールシステム
US5022081A (en) 1987-10-01 1991-06-04 Sharp Kabushiki Kaisha Information recognition system
JPH03504897A (ja) 1987-10-09 1991-10-24 サウンド エンタテインメント インコーポレーテッド デジタル的に記憶され調音された言語セグメントからの言語の発生
JPH0355838B2 (ko) 1987-10-12 1991-08-26
US4852173A (en) 1987-10-29 1989-07-25 International Business Machines Corporation Design and construction of a binary-tree system for language modelling
US5072452A (en) 1987-10-30 1991-12-10 International Business Machines Corporation Automatic determination of labels and Markov word models in a speech recognition system
EP0314908B1 (en) 1987-10-30 1992-12-02 International Business Machines Corporation Automatic determination of labels and markov word models in a speech recognition system
US4914586A (en) 1987-11-06 1990-04-03 Xerox Corporation Garbage collector for hypermedia systems
US4992972A (en) 1987-11-18 1991-02-12 International Business Machines Corporation Flexible context searchable on-line information system with help files and modules for on-line computer system documentation
US4908867A (en) 1987-11-19 1990-03-13 British Telecommunications Public Limited Company Speech synthesis
US5220657A (en) 1987-12-02 1993-06-15 Xerox Corporation Updating local copy of shared data in a collaborative system
JP2739945B2 (ja) 1987-12-24 1998-04-15 株式会社東芝 音声認識方法
US5053758A (en) 1988-02-01 1991-10-01 Sperry Marine Inc. Touchscreen control panel with sliding touch control
US4984177A (en) 1988-02-05 1991-01-08 Advanced Products And Technologies, Inc. Voice language translator
GB2219178A (en) 1988-02-11 1989-11-29 Benchmark Technologies State machine controlled video processor
US5194950A (en) 1988-02-29 1993-03-16 Mitsubishi Denki Kabushiki Kaisha Vector quantizer
US5079723A (en) 1988-03-04 1992-01-07 Xerox Corporation Touch dialogue user interface for reproduction machines
US4994966A (en) 1988-03-31 1991-02-19 Emerson & Stern Associates, Inc. System and method for natural language parsing by initiating processing prior to entry of complete sentences
FI80536C (fi) 1988-04-15 1990-06-11 Nokia Mobira Oy Matrisdisplay.
US4914590A (en) 1988-05-18 1990-04-03 Emhart Industries, Inc. Natural language understanding system
US4975975A (en) 1988-05-26 1990-12-04 Gtx Corporation Hierarchical parametric apparatus and method for recognizing drawn characters
US5315689A (en) 1988-05-27 1994-05-24 Kabushiki Kaisha Toshiba Speech recognition system having word-based and phoneme-based recognition means
US5029211A (en) 1988-05-30 1991-07-02 Nec Corporation Speech analysis and synthesis system
US5111423A (en) 1988-07-21 1992-05-05 Altera Corporation Programmable interface for computer system peripheral circuit card
FR2636163B1 (fr) 1988-09-02 1991-07-05 Hamon Christian Procede et dispositif de synthese de la parole par addition-recouvrement de formes d'onde
US5161102A (en) 1988-09-09 1992-11-03 Compaq Computer Corporation Computer interface for the configuration of computer system and circuit boards
US5353432A (en) 1988-09-09 1994-10-04 Compaq Computer Corporation Interactive method for configuration of computer system and circuit boards with user specification of system resources and computer resolution of resource conflicts
US5257387A (en) 1988-09-09 1993-10-26 Compaq Computer Corporation Computer implemented method and apparatus for dynamic and automatic configuration of a computer system and circuit boards including computer resource allocation conflict resolution
US4839853A (en) 1988-09-15 1989-06-13 Bell Communications Research, Inc. Computer information retrieval using latent semantic structure
JPH0286397A (en) 1988-09-22 1990-03-27 Nippon Telegr & Teleph Corp <Ntt> Microphone array
JPH0581917B2 (ko) 1988-09-30 1993-11-16 Ibm
US5201034A (en) 1988-09-30 1993-04-06 Hitachi Ltd. Interactive intelligent interface
US4905163A (en) 1988-10-03 1990-02-27 Minnesota Mining & Manufacturing Company Intelligent optical navigator dynamic information presentation and navigation system
US5282265A (en) 1988-10-04 1994-01-25 Canon Kabushiki Kaisha Knowledge information processing system
US4918723A (en) 1988-10-07 1990-04-17 Jerry R. Iggulden Keyboard to facsimile machine transmission system
DE3837590A1 (de) 1988-11-05 1990-05-10 Ant Nachrichtentech Verfahren zum reduzieren der datenrate von digitalen bilddaten
DE68913669T2 (de) 1988-11-23 1994-07-21 Digital Equipment Corp Namenaussprache durch einen Synthetisator.
US5027110A (en) 1988-12-05 1991-06-25 At&T Bell Laboratories Arrangement for simultaneously displaying on one or more display terminals a series of images
US5027406A (en) 1988-12-06 1991-06-25 Dragon Systems, Inc. Method for interactive speech recognition and training
JPH02153415A (en) 1988-12-06 1990-06-13 Hitachi Ltd Keyboard device
GB8828796D0 (en) 1988-12-09 1989-01-18 British Telecomm Data compression
US4935954A (en) 1988-12-28 1990-06-19 At&T Company Automated message retrieval system
US5127055A (en) 1988-12-30 1992-06-30 Kurzweil Applied Intelligence, Inc. Speech recognition apparatus & method having dynamic reference pattern adaptation
EP0375805B1 (en) 1988-12-30 1995-05-24 Yozan Inc. Vectorizing method
US5293448A (en) 1989-10-02 1994-03-08 Nippon Telegraph And Telephone Corporation Speech analysis-synthesis method and apparatus therefor
US5047614A (en) 1989-01-23 1991-09-10 Bianco James S Method and apparatus for computer-aided shopping
JP2574892B2 (ja) 1989-02-15 1997-01-22 株式会社日立製作所 自動車における負荷分担制御方法
US5086792A (en) 1989-02-16 1992-02-11 Placontrol Corp. Dental floss loop devices, and methods of manufacture and packaging same
US4928307A (en) 1989-03-02 1990-05-22 Acs Communications Time dependent, variable amplitude threshold output circuit for frequency variant and frequency invariant signal discrimination
SE466029B (sv) 1989-03-06 1991-12-02 Ibm Svenska Ab Anordning och foerfarande foer analys av naturligt spraak i ett datorbaserat informationsbehandlingssystem
JP2763322B2 (ja) 1989-03-13 1998-06-11 キヤノン株式会社 音声処理方法
JPH0636156B2 (ja) 1989-03-13 1994-05-11 インターナショナル・ビジネス・マシーンズ・コーポレーション 音声認識装置
US5033087A (en) 1989-03-14 1991-07-16 International Business Machines Corp. Method and apparatus for the automatic determination of phonological rules as for a continuous speech recognition system
JPH0782544B2 (ja) 1989-03-24 1995-09-06 インターナショナル・ビジネス・マシーンズ・コーポレーション マルチテンプレートを用いるdpマツチング方法及び装置
US5003577A (en) 1989-04-05 1991-03-26 At&T Bell Laboratories Voice and data interface to a voice-mail service system
US4977598A (en) 1989-04-13 1990-12-11 Texas Instruments Incorporated Efficient pruning algorithm for hidden markov model speech recognition
US5197005A (en) 1989-05-01 1993-03-23 Intelligent Business Systems Database retrieval system having a natural language interface
US4994983A (en) 1989-05-02 1991-02-19 Itt Corporation Automatic speech recognition system using seed templates
US5287448A (en) 1989-05-04 1994-02-15 Apple Computer, Inc. Method and apparatus for providing help information to users of computers
JP2904283B2 (ja) 1989-05-22 1999-06-14 マツダ株式会社 車両用多重伝送装置
US4953106A (en) 1989-05-23 1990-08-28 At&T Bell Laboratories Technique for drawing directed graphs
US5010574A (en) 1989-06-13 1991-04-23 At&T Bell Laboratories Vector quantizer search arrangement
JPH03163623A (en) 1989-06-23 1991-07-15 Articulate Syst Inc Voice control computer interface
JP2527817B2 (ja) 1989-07-14 1996-08-28 シャープ株式会社 主題連想装置および単語連想装置
JP2940005B2 (ja) 1989-07-20 1999-08-25 日本電気株式会社 音声符号化装置
JPH03113578A (en) 1989-09-27 1991-05-14 Fujitsu Ltd Graphic output processing system
US5091945A (en) 1989-09-28 1992-02-25 At&T Bell Laboratories Source dependent channel coding with error protection
US5276616A (en) 1989-10-16 1994-01-04 Sharp Kabushiki Kaisha Apparatus for automatically generating index
CA2027705C (en) 1989-10-17 1994-02-15 Masami Akamine Speech coding system utilizing a recursive computation technique for improvement in processing speed
US5075896A (en) 1989-10-25 1991-12-24 Xerox Corporation Character and phoneme recognition based on probability clustering
US4980916A (en) 1989-10-26 1990-12-25 General Electric Company Method for improving speech quality in code excited linear predictive speech coding
US5020112A (en) 1989-10-31 1991-05-28 At&T Bell Laboratories Image recognition method using two-dimensional stochastic grammars
EP0427485B1 (en) 1989-11-06 1996-08-14 Canon Kabushiki Kaisha Speech synthesis apparatus and method
US5220639A (en) 1989-12-01 1993-06-15 National Science Council Mandarin speech input method for Chinese computers and a mandarin speech recognition machine
US5021971A (en) 1989-12-07 1991-06-04 Unisys Corporation Reflective binary encoder for vector quantization
US5179652A (en) 1989-12-13 1993-01-12 Anthony I. Rozmanith Method and apparatus for storing, transmitting and retrieving graphical and tabular data
US5077669A (en) 1989-12-27 1991-12-31 International Business Machines Corporation Method for quasi-key search within a national language support (nls) data processing system
US5091790A (en) 1989-12-29 1992-02-25 Morton Silverberg Multipurpose computer accessory for facilitating facsimile communication
EP0438662A3 (ko) 1990-01-23 1994-01-26 Ibm
US5175814A (en) 1990-01-30 1992-12-29 Digital Equipment Corporation Direct manipulation interface for boolean information retrieval
US5218700A (en) 1990-01-30 1993-06-08 Allen Beechick Apparatus and method for sorting a list of items
US5255386A (en) 1990-02-08 1993-10-19 International Business Machines Corporation Method and apparatus for intelligent help that matches the semantic similarity of the inferred intent of query or command to a best-fit predefined command intent
CH681573A5 (en) 1990-02-13 1993-04-15 Astral Automatic teller arrangement involving bank computers - is operated by user data card carrying personal data, account information and transaction records
EP0443548B1 (en) 1990-02-22 2003-07-23 Nec Corporation Speech coder
US5067503A (en) 1990-03-21 1991-11-26 Stile Thomas W Dental apparatus for flossing teeth
US5266949A (en) 1990-03-29 1993-11-30 Nokia Mobile Phones Ltd. Lighted electronic keyboard
US5299284A (en) 1990-04-09 1994-03-29 Arizona Board Of Regents, Acting On Behalf Of Arizona State University Pattern classification using linear programming
US5125022A (en) 1990-05-15 1992-06-23 Vcs Industries, Inc. Method for recognizing alphanumeric strings spoken over a telephone network
US5127043A (en) 1990-05-15 1992-06-30 Vcs Industries, Inc. Simultaneous speaker-independent voice recognition and verification over a telephone network
US5301109A (en) 1990-06-11 1994-04-05 Bell Communications Research, Inc. Computerized cross-language document retrieval using latent semantic indexing
JP3266246B2 (ja) 1990-06-15 2002-03-18 インターナシヨナル・ビジネス・マシーンズ・コーポレーシヨン 自然言語解析装置及び方法並びに自然言語解析用知識ベース構築方法
US5202952A (en) 1990-06-22 1993-04-13 Dragon Systems, Inc. Large-vocabulary continuous speech prefiltering and processing system
EP0464712A3 (en) 1990-06-28 1993-01-13 Kabushiki Kaisha Toshiba Display/input control system for software keyboard in information processing apparatus having integral display/input device
DE4023318A1 (de) 1990-07-21 1992-02-20 Fraunhofer Ges Forschung Verfahren zur durchfuehrung eines variablen dialogs mit technischen geraeten
US5175536A (en) 1990-08-01 1992-12-29 Westinghouse Electric Corp. Apparatus and method for adapting cards designed for a VME bus for use in a VXI bus system
US5103498A (en) 1990-08-02 1992-04-07 Tandy Corporation Intelligent help system
JPH0493894A (en) 1990-08-03 1992-03-26 Canon Inc Method and device for character processing
EP0545988B1 (en) 1990-08-09 1999-12-01 Semantic Compaction System Communication system with text message retrieval based on concepts inputted via keyboard icons
GB9017600D0 (en) 1990-08-10 1990-09-26 British Aerospace An assembly and method for binary tree-searched vector quanisation data compression processing
DE4126902C2 (de) 1990-08-15 1996-06-27 Ricoh Kk Sprachintervall - Feststelleinheit
US5309359A (en) 1990-08-16 1994-05-03 Boris Katz Method and apparatus for generating and utlizing annotations to facilitate computer text retrieval
US5404295A (en) 1990-08-16 1995-04-04 Katz; Boris Method and apparatus for utilizing annotations to facilitate computer retrieval of database material
US5297170A (en) 1990-08-21 1994-03-22 Codex Corporation Lattice and trellis-coded quantization
EP0473864A1 (en) 1990-09-04 1992-03-11 International Business Machines Corporation Method and apparatus for paraphrasing information contained in logical forms
US5400434A (en) 1990-09-04 1995-03-21 Matsushita Electric Industrial Co., Ltd. Voice source for synthetic speech system
JPH0833739B2 (ja) 1990-09-13 1996-03-29 三菱電機株式会社 パターン表現モデル学習装置
US5119079A (en) 1990-09-17 1992-06-02 Xerox Corporation Touch screen user interface with expanding touch locations for a reprographic machine
US5216747A (en) 1990-09-20 1993-06-01 Digital Voice Systems, Inc. Voiced/unvoiced estimation of an acoustic signal
US5276794A (en) 1990-09-25 1994-01-04 Grid Systems Corporation Pop-up keyboard system for entering handwritten data into computer generated forms
US5164982A (en) 1990-09-27 1992-11-17 Radish Communications Systems, Inc. Telecommunication display system
US5305205A (en) 1990-10-23 1994-04-19 Weber Maria L Computer-assisted transcription apparatus
US5128672A (en) 1990-10-30 1992-07-07 Apple Computer, Inc. Dynamic predictive keyboard
US5317507A (en) 1990-11-07 1994-05-31 Gallant Stephen I Method for document retrieval and for word sense disambiguation using neural networks
US5325298A (en) 1990-11-07 1994-06-28 Hnc, Inc. Methods for generating or revising context vectors for a plurality of word stems
US5260697A (en) 1990-11-13 1993-11-09 Wang Laboratories, Inc. Computer with separate display plane and user interface processor
US5450523A (en) 1990-11-15 1995-09-12 Matsushita Electric Industrial Co., Ltd. Training module for estimating mixture Gaussian densities for speech unit models in speech recognition systems
US5247579A (en) 1990-12-05 1993-09-21 Digital Voice Systems, Inc. Methods for speech transmission
US5345536A (en) 1990-12-21 1994-09-06 Matsushita Electric Industrial Co., Ltd. Method of speech recognition
US5127053A (en) 1990-12-24 1992-06-30 General Electric Company Low-complexity method for improving the performance of autocorrelation-based pitch detectors
US5133011A (en) 1990-12-26 1992-07-21 International Business Machines Corporation Method and apparatus for linear vocal control of cursor position
US5210689A (en) 1990-12-28 1993-05-11 Semantic Compaction Systems System and method for automatically selecting among a plurality of input modes
US5196838A (en) 1990-12-28 1993-03-23 Apple Computer, Inc. Intelligent scrolling
US5497319A (en) 1990-12-31 1996-03-05 Trans-Link International Corp. Machine translation and telecommunications system
JPH04236624A (en) 1991-01-18 1992-08-25 Sony Corp Control system
US5712949A (en) 1991-01-29 1998-01-27 Sony Corporation Disc reproduction system with sequential reproduction of audio and image data
FI88345C (fi) 1991-01-29 1993-04-26 Nokia Mobile Phones Ltd Belyst tastatur
US5268990A (en) 1991-01-31 1993-12-07 Sri International Method for recognizing speech using linguistically-motivated hidden Markov models
US5369577A (en) 1991-02-01 1994-11-29 Wang Laboratories, Inc. Text searching system
US5689618A (en) 1991-02-19 1997-11-18 Bright Star Technology, Inc. Advanced tools for speech synchronized animation
US5167004A (en) 1991-02-28 1992-11-24 Texas Instruments Incorporated Temporal decorrelation method for robust speaker verification
JPH0911616A (ja) 1991-03-12 1997-01-14 Nippon Soda Co Ltd 記録材料
GB9105367D0 (en) 1991-03-13 1991-04-24 Univ Strathclyde Computerised information-retrieval database systems
EP0505621A3 (en) 1991-03-28 1993-06-02 International Business Machines Corporation Improved message recognition employing integrated speech and handwriting information
US5212821A (en) 1991-03-29 1993-05-18 At&T Bell Laboratories Machine-based learning system
US5327342A (en) 1991-03-31 1994-07-05 Roy Prannoy L Method and apparatus for generating personalized handwriting
JP2970964B2 (ja) 1991-09-18 1999-11-02 株式会社日立製作所 監視装置
DE4290947T1 (ko) 1991-04-08 1993-04-01 Hitachi, Ltd., Tokio/Tokyo, Jp
US5303406A (en) 1991-04-29 1994-04-12 Motorola, Inc. Noise squelch circuit with adaptive noise shaping
US5274771A (en) 1991-04-30 1993-12-28 Hewlett-Packard Company System for configuring an input/output board in a computer
US5367640A (en) 1991-04-30 1994-11-22 Hewlett-Packard Company System for configuring an input/output board in a computer
US5341466A (en) 1991-05-09 1994-08-23 New York University Fractal computer user centerface with zooming capability
JP3123558B2 (ja) 1991-05-09 2001-01-15 ソニー株式会社 情報入力処理装置および方法
US5202828A (en) 1991-05-15 1993-04-13 Apple Computer, Inc. User interface system having programmable user interface elements
US5500905A (en) 1991-06-12 1996-03-19 Microelectronics And Computer Technology Corporation Pattern recognition neural network with saccade-like operation
US5241619A (en) 1991-06-25 1993-08-31 Bolt Beranek And Newman Inc. Word dependent N-best search method
US5475587A (en) 1991-06-28 1995-12-12 Digital Equipment Corporation Method and apparatus for efficient morphological text analysis using a high-level language for compact specification of inflectional paradigms
US5293452A (en) 1991-07-01 1994-03-08 Texas Instruments Incorporated Voice log-in using spoken name input
US5442780A (en) 1991-07-11 1995-08-15 Mitsubishi Denki Kabushiki Kaisha Natural language database retrieval system using virtual tables to convert parsed input phrases into retrieval keys
US5477451A (en) 1991-07-25 1995-12-19 International Business Machines Corp. Method and system for natural language translation
US5687077A (en) 1991-07-31 1997-11-11 Universal Dynamics Limited Method and apparatus for adaptive control
US5278980A (en) 1991-08-16 1994-01-11 Xerox Corporation Iterative technique for phrase query formation and an information retrieval system employing same
US5450522A (en) 1991-08-19 1995-09-12 U S West Advanced Technologies, Inc. Auditory model for parametrization of speech
US5326270A (en) 1991-08-29 1994-07-05 Introspect Technologies, Inc. System and method for assessing an individual's task-processing style
US5199077A (en) 1991-09-19 1993-03-30 Xerox Corporation Wordspotting for voice editing and indexing
DE4131387A1 (de) 1991-09-20 1993-03-25 Siemens Ag Verfahren zur erkennung von mustern in zeitvarianten messsignalen
US5488727A (en) 1991-09-30 1996-01-30 International Business Machines Corporation Methods to support multimethod function overloading with compile-time type checking
JP2662120B2 (ja) 1991-10-01 1997-10-08 インターナショナル・ビジネス・マシーンズ・コーポレイション 音声認識装置および音声認識用処理ユニット
JPH05108065A (ja) 1991-10-15 1993-04-30 Kawai Musical Instr Mfg Co Ltd 自動演奏装置
JP3155577B2 (ja) 1991-10-16 2001-04-09 キヤノン株式会社 文字認識方法及び装置
US5222146A (en) 1991-10-23 1993-06-22 International Business Machines Corporation Speech recognition apparatus having a speech coder outputting acoustic prototype ranks
US5371853A (en) 1991-10-28 1994-12-06 University Of Maryland At College Park Method and system for CELP speech coding and codebook for use therewith
US5757979A (en) 1991-10-30 1998-05-26 Fuji Electric Co., Ltd. Apparatus and method for nonlinear normalization of image
KR940002854B1 (ko) 1991-11-06 1994-04-04 한국전기통신공사 음성 합성시스팀의 음성단편 코딩 및 그의 피치조절 방법과 그의 유성음 합성장치
US5386494A (en) 1991-12-06 1995-01-31 Apple Computer, Inc. Method and apparatus for controlling a speech recognition function using a cursor control device
JPH05165459A (ja) 1991-12-19 1993-07-02 Toshiba Corp 拡大表示方式
US5475796A (en) 1991-12-20 1995-12-12 Nec Corporation Pitch pattern generation apparatus
US5903454A (en) 1991-12-23 1999-05-11 Hoffberg; Linda Irene Human-factored interface corporating adaptive pattern recognition based controller apparatus
US6081750A (en) 1991-12-23 2000-06-27 Hoffberg; Steven Mark Ergonomic man-machine interface incorporating adaptive pattern recognition based control system
US5502790A (en) 1991-12-24 1996-03-26 Oki Electric Industry Co., Ltd. Speech recognition method and system using triphones, diphones, and phonemes
US5349645A (en) 1991-12-31 1994-09-20 Matsushita Electric Industrial Co., Ltd. Word hypothesizer for continuous speech decoding using stressed-vowel centered bidirectional tree searches
JPH05188994A (ja) 1992-01-07 1993-07-30 Sony Corp 騒音抑圧装置
JPH05204859A (ja) 1992-01-24 1993-08-13 Shikoku Nippon Denki Software Kk Osのコマンド格納方式
US5392419A (en) 1992-01-24 1995-02-21 Hewlett-Packard Company Language identification system and method for a peripheral unit
US5357431A (en) 1992-01-27 1994-10-18 Fujitsu Limited Character string retrieval system using index and unit for making the index
US5274818A (en) 1992-02-03 1993-12-28 Thinking Machines Corporation System and method for compiling a fine-grained array based source program onto a course-grained hardware
US5267345A (en) 1992-02-10 1993-11-30 International Business Machines Corporation Speech recognition apparatus which predicts word classes from context and words from word classes
US5621806A (en) 1992-02-14 1997-04-15 Texas Instruments Incorporated Apparatus and methods for determining the relative displacement of an object
US5412735A (en) 1992-02-27 1995-05-02 Central Institute For The Deaf Adaptive noise reduction circuit for a sound reproduction system
EP0559349B1 (en) 1992-03-02 1999-01-07 AT&T Corp. Training method and apparatus for speech recognition
US5353376A (en) 1992-03-20 1994-10-04 Texas Instruments Incorporated System and method for improved speech acquisition for hands-free voice telecommunication in a noisy environment
US6055514A (en) 1992-03-20 2000-04-25 Wren; Stephen Corey System for marketing foods and services utilizing computerized centraland remote facilities
US5333266A (en) 1992-03-27 1994-07-26 International Business Machines Corporation Method and apparatus for message handling in computer systems
US5390236A (en) 1992-03-31 1995-02-14 Klausner Patent Technologies Telephone answering device linking displayed data with recorded audio message
US5283818A (en) 1992-03-31 1994-02-01 Klausner Patent Technologies Telephone answering device linking displayed data with recorded audio message
US5757358A (en) 1992-03-31 1998-05-26 The United States Of America As Represented By The Secretary Of The Navy Method and apparatus for enhancing computer-user selection of computer-displayed objects through dynamic selection area and constant visual feedback
CA2088080C (en) 1992-04-02 1997-10-07 Enrico Luigi Bocchieri Automatic speech recognizer
US5317647A (en) 1992-04-07 1994-05-31 Apple Computer, Inc. Constrained attribute grammars for syntactic pattern recognition
JPH05293126A (ja) 1992-04-15 1993-11-09 Matsushita Electric Works Ltd 歯科用フロス
US5412804A (en) 1992-04-30 1995-05-02 Oracle Corporation Extending the semantics of the outer join operator for un-nesting queries to a data base
US5745873A (en) 1992-05-01 1998-04-28 Massachusetts Institute Of Technology Speech recognition using final decision based on tentative decisions
US5377103A (en) 1992-05-15 1994-12-27 International Business Machines Corporation Constrained natural language interface for a computer that employs a browse function
US5369575A (en) 1992-05-15 1994-11-29 International Business Machines Corporation Constrained natural language interface for a computer system
US5293584A (en) 1992-05-21 1994-03-08 International Business Machines Corporation Speech recognition system for natural language translation
US5434777A (en) 1992-05-27 1995-07-18 Apple Computer, Inc. Method and apparatus for processing natural language
US5477447A (en) 1992-05-27 1995-12-19 Apple Computer, Incorporated Method and apparatus for providing computer-implemented assistance
US5463696A (en) 1992-05-27 1995-10-31 Apple Computer, Inc. Recognition system and method for user inputs to a computer system
US5390281A (en) 1992-05-27 1995-02-14 Apple Computer, Inc. Method and apparatus for deducing user intent and providing computer implemented services
US5734789A (en) 1992-06-01 1998-03-31 Hughes Electronics Voiced, unvoiced or noise modes in a CELP vocoder
JP2795058B2 (ja) 1992-06-03 1998-09-10 松下電器産業株式会社 時系列信号処理装置
US5543588A (en) 1992-06-08 1996-08-06 Synaptics, Incorporated Touch pad driven handheld computing device
US5502774A (en) 1992-06-09 1996-03-26 International Business Machines Corporation Automatic recognition of a consistent message using multiple complimentary sources of information
AU4013693A (en) 1992-06-16 1993-12-23 Honeywell Inc. A method for utilizing a low resolution touch screen system in a high resolution graphics environment
JPH064093A (ja) 1992-06-18 1994-01-14 Matsushita Electric Ind Co Ltd Hmm作成装置、hmm記憶装置、尤度計算装置及び、認識装置
US5333275A (en) 1992-06-23 1994-07-26 Wheatley Barbara J System and method for time aligning speech
US5325297A (en) 1992-06-25 1994-06-28 System Of Multiple-Colored Images For Internationally Listed Estates, Inc. Computer implemented method and system for storing and retrieving textual data and compressed image data
US5835732A (en) 1993-10-28 1998-11-10 Elonex Ip Holdings, Ltd. Miniature digital assistant having enhanced host communication
JPH0619965A (ja) 1992-07-01 1994-01-28 Canon Inc 自然言語処理装置
US5303308A (en) 1992-07-07 1994-04-12 Gn Netcom A/S Audio frequency signal compressing system
JP3230319B2 (ja) 1992-07-09 2001-11-19 ソニー株式会社 音響再生装置
US5625554A (en) 1992-07-20 1997-04-29 Xerox Corporation Finite-state transduction of related word forms for text indexing and retrieval
US5325462A (en) 1992-08-03 1994-06-28 International Business Machines Corporation System and method for speech synthesis employing improved formant composition
US5999908A (en) 1992-08-06 1999-12-07 Abelow; Daniel H. Customer-based product design module
JPH0669954A (ja) 1992-08-18 1994-03-11 Fujitsu Ltd メッセージ廃棄通達方式
US5412806A (en) 1992-08-20 1995-05-02 Hewlett-Packard Company Calibration of logical cost formulae for queries in a heterogeneous DBMS using synthetic database
GB9220404D0 (en) 1992-08-20 1992-11-11 Nat Security Agency Method of identifying,retrieving and sorting documents
US5305768A (en) 1992-08-24 1994-04-26 Product Development (Zgs) Ltd. Dental flosser units and method of making same
US5425108A (en) 1992-09-04 1995-06-13 Industrial Technology Research Institute Mobile type of automatic identification system for a car plate
DE4229577A1 (de) 1992-09-04 1994-03-10 Daimler Benz Ag Verfahren zur Spracherkennung mit dem eine Anpassung von Mikrofon- und Sprachcharakteristiken erreicht wird
US5333236A (en) 1992-09-10 1994-07-26 International Business Machines Corporation Speech recognizer having a speech coder for an acoustic match based on context-dependent speech-transition acoustic models
US5982352A (en) 1992-09-18 1999-11-09 Pryor; Timothy R. Method for providing human input to a computer
US5384893A (en) 1992-09-23 1995-01-24 Emerson & Stern Associates, Inc. Method and apparatus for speech synthesis based on prosodic analysis
FR2696036B1 (fr) 1992-09-24 1994-10-14 France Telecom Procédé de mesure de ressemblance entre échantillons sonores et dispositif de mise en Óoeuvre de ce procédé.
JPH0772840B2 (ja) 1992-09-29 1995-08-02 日本アイ・ビー・エム株式会社 音声モデルの構成方法、音声認識方法、音声認識装置及び音声モデルの訓練方法
JP2779886B2 (ja) 1992-10-05 1998-07-23 日本電信電話株式会社 広帯域音声信号復元方法
JP2851977B2 (ja) 1992-10-14 1999-01-27 シャープ株式会社 再生装置
US5758313A (en) 1992-10-16 1998-05-26 Mobile Information Systems, Inc. Method and apparatus for tracking vehicle location
US5353374A (en) 1992-10-19 1994-10-04 Loral Aerospace Corporation Low bit rate voice transmission for use in a noisy environment
US5850627A (en) 1992-11-13 1998-12-15 Dragon Systems, Inc. Apparatuses and methods for training and operating speech recognition systems
US6092043A (en) 1992-11-13 2000-07-18 Dragon Systems, Inc. Apparatuses and method for training and operating speech recognition systems
US5636325A (en) 1992-11-13 1997-06-03 International Business Machines Corporation Speech synthesis and analysis of dialects
EP0598598B1 (en) 1992-11-18 2000-02-02 Canon Information Systems, Inc. Text-to-speech processor, and parser for use in such a processor
US5455888A (en) 1992-12-04 1995-10-03 Northern Telecom Limited Speech bandwidth extension method and apparatus
US5465401A (en) 1992-12-15 1995-11-07 Texas Instruments Incorporated Communication system and methods for enhanced information transfer
US5335276A (en) 1992-12-16 1994-08-02 Texas Instruments Incorporated Communication system and methods for enhanced information transfer
WO1994014270A1 (en) 1992-12-17 1994-06-23 Bell Atlantic Network Services, Inc. Mechanized directory assistance
US5533182A (en) 1992-12-22 1996-07-02 International Business Machines Corporation Aural position indicating mechanism for viewable objects
US5412756A (en) 1992-12-22 1995-05-02 Mitsubishi Denki Kabushiki Kaisha Artificial intelligence software shell for plant operation simulation
DE69310187T2 (de) 1992-12-23 1997-11-27 Taligent Inc Objektorientiertes fachwerksystem
US5373566A (en) 1992-12-24 1994-12-13 Motorola, Inc. Neural network-based diacritical marker recognition system and method
FR2700055B1 (fr) 1992-12-30 1995-01-27 Sextant Avionique Procédé de débruitage vectoriel de la parole et dispositif de mise en Óoeuvre.
US5463725A (en) 1992-12-31 1995-10-31 International Business Machines Corp. Data processing system graphical user interface which emulates printed material
US5390279A (en) 1992-12-31 1995-02-14 Apple Computer, Inc. Partitioning speech rules by context for speech recognition
US6311157B1 (en) 1992-12-31 2001-10-30 Apple Computer, Inc. Assigning meanings to utterances in a speech recognition system
US5613036A (en) 1992-12-31 1997-03-18 Apple Computer, Inc. Dynamic categories for a speech recognition system
US5384892A (en) 1992-12-31 1995-01-24 Apple Computer, Inc. Dynamic language model for speech recognition
US5734791A (en) 1992-12-31 1998-03-31 Apple Computer, Inc. Rapid tree-based method for vector quantization
US5335011A (en) 1993-01-12 1994-08-02 Bell Communications Research, Inc. Sound localization system for teleconferencing using self-steering microphone arrays
JP2752309B2 (ja) 1993-01-19 1998-05-18 松下電器産業株式会社 表示装置
US6122616A (en) 1993-01-21 2000-09-19 Apple Computer, Inc. Method and apparatus for diphone aliasing
US5490234A (en) 1993-01-21 1996-02-06 Apple Computer, Inc. Waveform blending technique for text-to-speech system
US5642466A (en) 1993-01-21 1997-06-24 Apple Computer, Inc. Intonation adjustment in text-to-speech systems
US5878396A (en) 1993-01-21 1999-03-02 Apple Computer, Inc. Method and apparatus for synthetic speech in facial animation
DE69418908T2 (de) 1993-01-26 2000-01-20 Sun Microsystems Inc Verfahren und Gerät zum Informationsanschauen in einer Rechnerdatenbank
US5491758A (en) 1993-01-27 1996-02-13 International Business Machines Corporation Automatic handwriting recognition using both static and dynamic parameters
US5890122A (en) 1993-02-08 1999-03-30 Microsoft Corporation Voice-controlled computer simulateously displaying application menu and list of available commands
US5449368A (en) 1993-02-18 1995-09-12 Kuzmak; Lubomyr I. Laparoscopic adjustable gastric banding device and method for implantation and removal thereof
US5864844A (en) 1993-02-18 1999-01-26 Apple Computer, Inc. System and method for enhancing a user interface with a computer based training tool
US5473728A (en) 1993-02-24 1995-12-05 The United States Of America As Represented By The Secretary Of The Navy Training of homoscedastic hidden Markov models for automatic speech recognition
US5467425A (en) 1993-02-26 1995-11-14 International Business Machines Corporation Building scalable N-gram language models using maximum likelihood maximum entropy N-gram models
CA2091658A1 (en) 1993-03-15 1994-09-16 Matthew Lennig Method and apparatus for automation of directory assistance using speech recognition
CA2119397C (en) 1993-03-19 2007-10-02 Kim E.A. Silverman Improved automated voice synthesis employing enhanced prosodic treatment of text, spelling of text and rate of annunciation
JPH06274586A (ja) 1993-03-22 1994-09-30 Mitsubishi Electric Corp 表示方式
US6055531A (en) 1993-03-24 2000-04-25 Engate Incorporated Down-line transcription system having context sensitive searching capability
SG47774A1 (en) 1993-03-26 1998-04-17 British Telecomm Text-to-waveform conversion
US5536902A (en) 1993-04-14 1996-07-16 Yamaha Corporation Method of and apparatus for analyzing and synthesizing a sound by extracting and controlling a sound parameter
US5444823A (en) 1993-04-16 1995-08-22 Compaq Computer Corporation Intelligent search engine for associated on-line documentation having questionless case-based knowledge base
US6496793B1 (en) 1993-04-21 2002-12-17 Borland Software Corporation System and methods for national language support with embedded locale-specific language driver identifiers
CA2095452C (en) 1993-05-04 1997-03-18 Phillip J. Beaudet Dynamic hierarchical selection menu
US5428731A (en) 1993-05-10 1995-06-27 Apple Computer, Inc. Interactive multimedia delivery engine
US5860064A (en) 1993-05-13 1999-01-12 Apple Computer, Inc. Method and apparatus for automatic generation of vocal emotion in a synthetic text-to-speech system
DE69432199T2 (de) 1993-05-24 2004-01-08 Sun Microsystems, Inc., Mountain View Graphische Benutzerschnittstelle mit Verfahren zur Schnittstellebildung mit fernsteuernden Einrichtungen
US5652897A (en) 1993-05-24 1997-07-29 Unisys Corporation Robust language processor for segmenting and parsing-language containing multiple instructions
JPH06332617A (ja) 1993-05-25 1994-12-02 Pfu Ltd タッチパネル入力装置における表示方法
US5710922A (en) 1993-06-02 1998-01-20 Apple Computer, Inc. Method for synchronizing and archiving information between computer systems
WO1994029788A1 (en) 1993-06-15 1994-12-22 Honeywell Inc. A method for utilizing a low resolution touch screen system in a high resolution graphics environment
KR950001695A (ko) 1993-06-18 1995-01-03 오오가 노리오 디스크 재생장치
US5481739A (en) 1993-06-23 1996-01-02 Apple Computer, Inc. Vector quantization using thresholds
US5574823A (en) 1993-06-23 1996-11-12 Her Majesty The Queen In Right Of Canada As Represented By The Minister Of Communications Frequency selective harmonic coding
US5515475A (en) 1993-06-24 1996-05-07 Northern Telecom Limited Speech recognition method using a two-pass search
JPH0756933A (ja) 1993-06-24 1995-03-03 Xerox Corp 文書検索方法
JP2648558B2 (ja) 1993-06-29 1997-09-03 インターナショナル・ビジネス・マシーンズ・コーポレイション 情報選択装置及び情報選択方法
JP3685812B2 (ja) 1993-06-29 2005-08-24 ソニー株式会社 音声信号送受信装置
US5860075A (en) 1993-06-30 1999-01-12 Matsushita Electric Industrial Co., Ltd. Document data filing apparatus for generating visual attribute values of document data to be filed
US5973676A (en) 1993-06-30 1999-10-26 Kabushiki Kaisha Toshiba Input apparatus suitable for portable electronic device
US5794207A (en) 1996-09-04 1998-08-11 Walker Asset Management Limited Partnership Method and apparatus for a cryptographically assisted commercial network system designed to facilitate buyer-driven conditional purchase offers
WO1995002221A1 (en) 1993-07-07 1995-01-19 Inference Corporation Case-based organizing and querying of a database
JPH0736882A (ja) 1993-07-19 1995-02-07 Fujitsu Ltd 辞書検索装置
US5818182A (en) 1993-08-13 1998-10-06 Apple Computer, Inc. Removable media ejection system
US5495604A (en) 1993-08-25 1996-02-27 Asymetrix Corporation Method and apparatus for the modeling and query of database structures using natural language-like constructs
US5619694A (en) 1993-08-26 1997-04-08 Nec Corporation Case database storage/retrieval system
US5940811A (en) 1993-08-27 1999-08-17 Affinity Technology Group, Inc. Closed loop financial transaction method and apparatus
US5377258A (en) 1993-08-30 1994-12-27 National Medical Research Council Method and apparatus for an automated and interactive behavioral guidance system
US5627939A (en) 1993-09-03 1997-05-06 Microsoft Corporation Speech recognition system and method employing data compression
US5500937A (en) 1993-09-08 1996-03-19 Apple Computer, Inc. Method and apparatus for editing an inked object while simultaneously displaying its recognized object
US5568540A (en) 1993-09-13 1996-10-22 Active Voice Corporation Method and apparatus for selecting and playing a voice mail message
US6594688B2 (en) 1993-10-01 2003-07-15 Collaboration Properties, Inc. Dedicated echo canceler for a workstation
US5689641A (en) 1993-10-01 1997-11-18 Vicor, Inc. Multimedia collaboration system arrangement for routing compressed AV signal through a participant site without decompressing the AV signal
US5873056A (en) 1993-10-12 1999-02-16 The Syracuse University Natural language processing system for semantic vector representation which accounts for lexical ambiguity
JP2986345B2 (ja) 1993-10-18 1999-12-06 インターナショナル・ビジネス・マシーンズ・コーポレイション 音声記録指標化装置及び方法
US5708659A (en) 1993-10-20 1998-01-13 Lsi Logic Corporation Method for hashing in a packet network switching system
JP3697276B2 (ja) 1993-10-27 2005-09-21 ゼロックス コーポレイション 画像ディスプレイ方法及び画像ディスプレイ装置並びに画像スケーリング方法
JP2813728B2 (ja) 1993-11-01 1998-10-22 インターナショナル・ビジネス・マシーンズ・コーポレイション ズーム/パン機能付パーソナル通信機
US5422656A (en) 1993-11-01 1995-06-06 International Business Machines Corp. Personal communicator having improved contrast control for a liquid crystal, touch sensitive display
US5977950A (en) 1993-11-29 1999-11-02 Motorola, Inc. Manually controllable cursor in a virtual image
AU1303595A (en) 1993-12-14 1995-07-03 Apple Computer, Inc. Method and apparatus for transferring data between a computer and a peripheral storage device
US5578808A (en) 1993-12-22 1996-11-26 Datamark Services, Inc. Data card that can be used for transactions involving separate card issuers
US5384671A (en) 1993-12-23 1995-01-24 Quantum Corporation PRML sampled data channel synchronous servo detector
EP0736203A1 (en) 1993-12-23 1996-10-09 Diacom Technologies, Inc. Method and apparatus for implementing user feedback
JP2610114B2 (ja) 1993-12-30 1997-05-14 インターナショナル・ビジネス・マシーンズ・コーポレイション ポインティング・システム、コンピュータ・システムおよび力応答方法
US5621859A (en) 1994-01-19 1997-04-15 Bbn Corporation Single tree method for grammar directed, very large vocabulary speech recognizer
US5577164A (en) 1994-01-28 1996-11-19 Canon Kabushiki Kaisha Incorrect voice command recognition prevention and recovery processing method and apparatus
US5583993A (en) 1994-01-31 1996-12-10 Apple Computer, Inc. Method and apparatus for synchronously sharing data among computer
US5577135A (en) 1994-03-01 1996-11-19 Apple Computer, Inc. Handwriting signal processing front-end for handwriting recognizers
AU684872B2 (en) 1994-03-10 1998-01-08 Cable And Wireless Plc Communication system
US5548507A (en) 1994-03-14 1996-08-20 International Business Machines Corporation Language identification process using coded language words
US5724406A (en) 1994-03-22 1998-03-03 Ericsson Messaging Systems, Inc. Call processing system and method for providing a variety of messaging services
US5584024A (en) 1994-03-24 1996-12-10 Software Ag Interactive database query system and method for prohibiting the selection of semantically incorrect query parameters
US5574824A (en) 1994-04-11 1996-11-12 The United States Of America As Represented By The Secretary Of The Air Force Analysis/synthesis-based microphone array speech enhancer with variable signal distortion
CH689410A5 (de) 1994-04-21 1999-03-31 Info Byte Ag Verfahren und Vorrichtung zur sprachgesteuerten Fernbedienung elektrischer Verbraucher.
GB9408042D0 (en) 1994-04-22 1994-06-15 Hewlett Packard Co Device for managing voice data
US5642519A (en) 1994-04-29 1997-06-24 Sun Microsystems, Inc. Speech interpreter with a unified grammer compiler
US5786803A (en) 1994-05-09 1998-07-28 Apple Computer, Inc. System and method for adjusting the illumination characteristics of an output device
US5670985A (en) 1994-05-09 1997-09-23 Apple Computer, Inc. System and method for adjusting the output of an output device to compensate for ambient illumination
US5828768A (en) 1994-05-11 1998-10-27 Noise Cancellation Technologies, Inc. Multimedia personal computer with active noise reduction and piezo speakers
US5596260A (en) 1994-05-13 1997-01-21 Apple Computer, Inc. Apparatus and method for determining a charge of a battery
JPH07320051A (ja) 1994-05-20 1995-12-08 Nippon Telegr & Teleph Corp <Ntt> 図形の任意領域拡大縮小表示方法及び図形の任意領域拡大縮小表示装置
JPH07320079A (ja) 1994-05-20 1995-12-08 Nippon Telegr & Teleph Corp <Ntt> 図形の部分拡大表示方法及び図形の部分拡大表示装置
EP0684607B1 (en) 1994-05-25 2001-03-14 Victor Company Of Japan, Limited Variable transfer rate data reproduction apparatus
JPH07325591A (ja) 1994-05-31 1995-12-12 Nec Corp 疑似音楽演奏環境生成方法および装置
US5485372A (en) 1994-06-01 1996-01-16 Mitsubishi Electric Research Laboratories, Inc. System for underlying spelling recovery
US5537317A (en) 1994-06-01 1996-07-16 Mitsubishi Electric Research Laboratories Inc. System for correcting grammer based parts on speech probability
US5521816A (en) 1994-06-01 1996-05-28 Mitsubishi Electric Research Laboratories, Inc. Word inflection correction system
US5535121A (en) 1994-06-01 1996-07-09 Mitsubishi Electric Research Laboratories, Inc. System for correcting auxiliary verb sequences
US5477448A (en) 1994-06-01 1995-12-19 Mitsubishi Electric Research Laboratories, Inc. System for correcting improper determiners
US5644656A (en) 1994-06-07 1997-07-01 Massachusetts Institute Of Technology Method and apparatus for automated text recognition
US5493677A (en) 1994-06-08 1996-02-20 Systems Research & Applications Corporation Generation, archiving, and retrieval of digital images with evoked suggestion-set captions and natural language interface
US5812697A (en) 1994-06-10 1998-09-22 Nippon Steel Corporation Method and apparatus for recognizing hand-written characters using a weighting dictionary
US5675819A (en) 1994-06-16 1997-10-07 Xerox Corporation Document information retrieval using global word co-occurrence patterns
JPH0869470A (ja) 1994-06-21 1996-03-12 Canon Inc 自然言語処理装置及びその方法
US5948040A (en) 1994-06-24 1999-09-07 Delorme Publishing Co. Travel reservation information and planning system
US5610812A (en) 1994-06-24 1997-03-11 Mitsubishi Electric Information Technology Center America, Inc. Contextual tagger utilizing deterministic finite state transducer
US5581484A (en) 1994-06-27 1996-12-03 Prince; Kevin R. Finger mounted computer input device
WO1996001453A1 (en) 1994-07-01 1996-01-18 Palm Computing, Inc. Multiple pen stroke character set and handwriting recognition system
US6442523B1 (en) 1994-07-22 2002-08-27 Steven H. Siegel Method for the auditory navigation of text
US5568536A (en) 1994-07-25 1996-10-22 International Business Machines Corporation Selective reconfiguration method and apparatus in a multiple application personal communications device
CN1059303C (zh) 1994-07-25 2000-12-06 国际商业机器公司 在个人通讯设备的显示屏幕上标记文本的装置和方法
JP3359745B2 (ja) 1994-07-29 2002-12-24 シャープ株式会社 動画像再生装置、及び動画像記録装置
JP3586777B2 (ja) 1994-08-17 2004-11-10 富士通株式会社 音声入力装置
JP3565453B2 (ja) 1994-08-23 2004-09-15 キヤノン株式会社 画像入出力装置
US6137476A (en) 1994-08-25 2000-10-24 International Business Machines Corp. Data mouse
JPH0877173A (ja) 1994-09-01 1996-03-22 Fujitsu Ltd 文字列修正システムとその方法
US5559301A (en) 1994-09-15 1996-09-24 Korg, Inc. Touchscreen interface having pop-up variable adjustment displays for controllers and audio processing systems
EP0703525B1 (en) 1994-09-22 2001-12-05 Aisin Aw Co., Ltd. Touch display type information input system
GB9419388D0 (en) 1994-09-26 1994-11-09 Canon Kk Speech analysis
JP3027321B2 (ja) 1994-09-27 2000-04-04 財団法人工業技術研究院 拘束のない手書き英数字のオンライン認識の方法及び装置
US5799268A (en) 1994-09-28 1998-08-25 Apple Computer, Inc. Method for extracting knowledge from online documentation and creating a glossary, index, help database or the like
US5682539A (en) 1994-09-29 1997-10-28 Conrad; Donovan Anticipated meaning natural language interface
IT1266943B1 (it) 1994-09-29 1997-01-21 Cselt Centro Studi Lab Telecom Procedimento di sintesi vocale mediante concatenazione e parziale sovrapposizione di forme d'onda.
US5715468A (en) 1994-09-30 1998-02-03 Budzinski; Robert Lucius Memory system for storing and retrieving experience and knowledge with natural language
GB2293667B (en) 1994-09-30 1998-05-27 Intermation Limited Database management system
US5777614A (en) 1994-10-14 1998-07-07 Hitachi, Ltd. Editing support system including an interactive interface
US5661787A (en) 1994-10-27 1997-08-26 Pocock; Michael H. System for on-demand remote access to a self-generating audio recording, storage, indexing and transaction system
US5845255A (en) 1994-10-28 1998-12-01 Advanced Health Med-E-Systems Corporation Prescription management system
JPH08138321A (ja) 1994-11-11 1996-05-31 Pioneer Electron Corp ディスクプレーヤ
US5613122A (en) 1994-11-14 1997-03-18 Object Technology Licensing Corp. Object-oriented operating system
US5652884A (en) 1994-11-14 1997-07-29 Object Technology Licensing Corp. Method and apparatus for dynamic update of an existing object in an object editor
US5577241A (en) 1994-12-07 1996-11-19 Excite, Inc. Information retrieval system and method with implementation extensible query architecture
US5748974A (en) 1994-12-13 1998-05-05 International Business Machines Corporation Multimodal natural language interface for cross-application tasks
DE4445023A1 (de) 1994-12-16 1996-06-20 Thomson Brandt Gmbh Erschütterungsresistentes Abspielgerät mit verringertem Energieverbrauch
JPH08185265A (ja) 1994-12-28 1996-07-16 Fujitsu Ltd タッチパネル制御装置
US5682475A (en) 1994-12-30 1997-10-28 International Business Machines Corporation Method and system for variable password access
US5774859A (en) 1995-01-03 1998-06-30 Scientific-Atlanta, Inc. Information system having a speech interface
US5794050A (en) 1995-01-04 1998-08-11 Intelligent Text Processing, Inc. Natural language understanding system
US5835077A (en) 1995-01-13 1998-11-10 Remec, Inc., Computer control device
US5634084A (en) 1995-01-20 1997-05-27 Centigram Communications Corporation Abbreviation and acronym/initialism expansion procedures for a text to speech reader
CN1276321C (zh) 1995-02-13 2006-09-20 英特特拉斯特技术公司 用于安全交易管理和电子权利保护的系统和方法
US5565888A (en) 1995-02-17 1996-10-15 International Business Machines Corporation Method and apparatus for improving visibility and selectability of icons
JPH08227341A (ja) 1995-02-22 1996-09-03 Mitsubishi Electric Corp ユーザインターフェース
US6009237A (en) 1995-02-24 1999-12-28 Hitachi Ltd. Optical disk and optical disk reproduction apparatus
US5748512A (en) 1995-02-28 1998-05-05 Microsoft Corporation Adjusting keyboard
US5543897A (en) 1995-03-07 1996-08-06 Eastman Kodak Company Reproduction apparatus having touch screen operator interface and auxiliary keyboard
US5701400A (en) 1995-03-08 1997-12-23 Amado; Carlos Armando Method and apparatus for applying if-then-else rules to data sets in a relational data base and generating from the results of application of said rules a database of diagnostics linked to said data sets to aid executive analysis of financial data
US5564446A (en) 1995-03-27 1996-10-15 Wiltshire; Curtis B. Dental floss device and applicator assembly
US5749081A (en) 1995-04-06 1998-05-05 Firefly Network, Inc. System and method for recommending items to a user
DE69615832T2 (de) 1995-04-12 2002-04-25 British Telecomm Sprachsynthese mit wellenformen
US5616876A (en) 1995-04-19 1997-04-01 Microsoft Corporation System and methods for selecting music on the basis of subjective content
US5943049A (en) 1995-04-27 1999-08-24 Casio Computer Co., Ltd. Image processor for displayed message, balloon, and character's face
US5642464A (en) 1995-05-03 1997-06-24 Northern Telecom Limited Methods and apparatus for noise conditioning in digital speech compression systems using linear predictive coding
US5696721A (en) 1995-05-05 1997-12-09 Texas Instruments Incorporated Dynamic random access memory having row decoder with level translator for driving a word line voltage above and below an operating supply voltage range
US5812698A (en) 1995-05-12 1998-09-22 Synaptics, Inc. Handwriting recognition system and method
US5708822A (en) 1995-05-31 1998-01-13 Oracle Corporation Methods and apparatus for thematic parsing of discourse
TW338815B (en) 1995-06-05 1998-08-21 Motorola Inc Method and apparatus for character recognition of handwritten input
US6268859B1 (en) 1995-06-06 2001-07-31 Apple Computer, Inc. Method and system for rendering overlapping opaque graphical objects in graphic imaging systems
US5920327A (en) 1995-06-06 1999-07-06 Microsoft Corporation Multiple resolution data display
US5664055A (en) 1995-06-07 1997-09-02 Lucent Technologies Inc. CS-ACELP speech compression system with adaptive pitch prediction filter gain based on a measure of periodicity
US5991441A (en) 1995-06-07 1999-11-23 Wang Laboratories, Inc. Real time handwriting recognition system
US6496182B1 (en) 1995-06-07 2002-12-17 Microsoft Corporation Method and system for providing touch-sensitive screens for the visually impaired
FI99072C (fi) 1995-06-08 1997-09-25 Nokia Telecommunications Oy Menetelmä toimitusvahvistusten antamiseksi puhelinverkossa suoritetuista sanomatoimituksista
EP0832481B1 (en) 1995-06-13 2002-04-03 BRITISH TELECOMMUNICATIONS public limited company Speech synthesis
JP3385146B2 (ja) 1995-06-13 2003-03-10 シャープ株式会社 会話文翻訳装置
US5710886A (en) 1995-06-16 1998-01-20 Sellectsoft, L.C. Electric couponing method and apparatus
JP3284832B2 (ja) 1995-06-22 2002-05-20 セイコーエプソン株式会社 音声認識対話処理方法および音声認識対話装置
JPH0916598A (ja) 1995-07-03 1997-01-17 Fujitsu Ltd エラー・パターンを用いた文字列修正システムおよび方法
JPH0918585A (ja) 1995-07-03 1997-01-17 Matsushita Electric Ind Co Ltd ボイスメールシステム
US6038533A (en) 1995-07-07 2000-03-14 Lucent Technologies Inc. System and method for selecting training text
US5684513A (en) 1995-07-17 1997-11-04 Decker; Mark Randall Electronic luminescence keyboard system for a portable device
US5760760A (en) 1995-07-17 1998-06-02 Dell Usa, L.P. Intelligent LCD brightness control system
US5949961A (en) 1995-07-19 1999-09-07 International Business Machines Corporation Word syllabification in speech synthesis system
US5999895A (en) 1995-07-24 1999-12-07 Forest; Donald K. Sound operated menu method and apparatus
US5864815A (en) 1995-07-31 1999-01-26 Microsoft Corporation Method and system for displaying speech recognition status information in a visual notification area
KR0183726B1 (ko) 1995-07-31 1999-04-15 윤종용 씨디 오케이와 비디오 씨디로부터 신호를 재생하는 씨디 재생장치
US5724985A (en) 1995-08-02 1998-03-10 Pacesetter, Inc. User interface for an implantable medical device using an integrated digitizer display screen
JPH0955792A (ja) 1995-08-11 1997-02-25 Ricoh Co Ltd ボイスメールシステム
US6026388A (en) 1995-08-16 2000-02-15 Textwise, Llc User interface and other enhancements for natural language information retrieval system and method
US5835721A (en) 1995-08-21 1998-11-10 Apple Computer, Inc. Method and system for data transmission over a network link between computers with the ability to withstand temporary interruptions
JP3697748B2 (ja) 1995-08-21 2005-09-21 セイコーエプソン株式会社 端末、音声認識装置
WO1997008685A2 (en) 1995-08-28 1997-03-06 Philips Electronics N.V. Method and system for pattern recognition based on dynamically constructing a subset of reference vectors
KR100419334B1 (ko) 1995-09-02 2004-05-31 뉴 트랜스듀서스 리미티드 음향장치
US5570324A (en) 1995-09-06 1996-10-29 Northrop Grumman Corporation Underwater sound localization system
US5712957A (en) 1995-09-08 1998-01-27 Carnegie Mellon University Locating and correcting erroneously recognized portions of utterances by rescoring based on two n-best lists
DE19533541C1 (de) 1995-09-11 1997-03-27 Daimler Benz Aerospace Ag Verfahren zur automatischen Steuerung eines oder mehrerer Geräte durch Sprachkommandos oder per Sprachdialog im Echtzeitbetrieb und Vorrichtung zum Ausführen des Verfahrens
AU724111B2 (en) 1995-09-14 2000-09-14 Ericsson Inc. System for adaptively filtering audio signals to enhance speech intelligibility in noisy environmental conditions
US5790978A (en) 1995-09-15 1998-08-04 Lucent Technologies, Inc. System and method for determining pitch contours
US5737734A (en) 1995-09-15 1998-04-07 Infonautics Corporation Query word relevance adjustment in a search of an information retrieval system
US6173261B1 (en) 1998-09-30 2001-01-09 At&T Corp Grammar fragment acquisition using syntactic and semantic clustering
JPH0981320A (ja) 1995-09-20 1997-03-28 Matsushita Electric Ind Co Ltd ペン入力式選択入力装置及びその方法
US5771276A (en) 1995-10-10 1998-06-23 Ast Research, Inc. Voice templates for interactive voice mail and voice response system
JPH09116616A (ja) 1995-10-13 1997-05-02 Nec Corp 留守番電話システム
US5884323A (en) 1995-10-13 1999-03-16 3Com Corporation Extendible method and apparatus for synchronizing files on two different computer systems
US20030051136A1 (en) 1995-11-06 2003-03-13 Pavel Curtis Multimedia coordination system
US5799276A (en) 1995-11-07 1998-08-25 Accent Incorporated Knowledge-based speech recognition system and methods having frame length computed based upon estimated pitch period of vocalic intervals
JPH09146708A (ja) 1995-11-09 1997-06-06 Internatl Business Mach Corp <Ibm> タッチパネルの駆動方法及びタッチ入力方法
JP3152871B2 (ja) 1995-11-10 2001-04-03 富士通株式会社 ラティスをキーとした検索を行う辞書検索装置および方法
US5799279A (en) 1995-11-13 1998-08-25 Dragon Systems, Inc. Continuous speech recognition of text and commands
US6064959A (en) 1997-03-28 2000-05-16 Dragon Systems, Inc. Error correction in speech recognition
US5794237A (en) 1995-11-13 1998-08-11 International Business Machines Corporation System and method for improving problem source identification in computer systems employing relevance feedback and statistical source ranking
US5802526A (en) 1995-11-15 1998-09-01 Microsoft Corporation System and method for graphically displaying and navigating through an interactive voice response menu
US5801692A (en) 1995-11-30 1998-09-01 Microsoft Corporation Audio-visual user interface controls
US6240384B1 (en) 1995-12-04 2001-05-29 Kabushiki Kaisha Toshiba Speech synthesis method
US5987401A (en) 1995-12-08 1999-11-16 Apple Computer, Inc. Language translation for real-time text-based conversations
US5880731A (en) 1995-12-14 1999-03-09 Microsoft Corporation Use of avatars with automatic gesturing and bounded interaction in on-line chat session
US5761640A (en) 1995-12-18 1998-06-02 Nynex Science & Technology, Inc. Name and address processor
US5706442A (en) 1995-12-20 1998-01-06 Block Financial Corporation System for on-line financial services using distributed objects
JPH09179719A (ja) 1995-12-26 1997-07-11 Nec Corp 音声合成装置
US5787422A (en) 1996-01-11 1998-07-28 Xerox Corporation Method and apparatus for information accesss employing overlapping clusters
US6119101A (en) 1996-01-17 2000-09-12 Personal Agents, Inc. Intelligent agents for electronic commerce
WO1997026612A1 (en) 1996-01-17 1997-07-24 Personal Agents, Inc. Intelligent agents for electronic commerce
US6125356A (en) 1996-01-18 2000-09-26 Rosefaire Development, Ltd. Portable sales presentation system with selective scripted seller prompts
US6011585A (en) 1996-01-19 2000-01-04 Apple Computer, Inc. Apparatus and method for rotating the display orientation of a captured image
JPH09265731A (ja) 1996-01-24 1997-10-07 Sony Corp 音声再生装置及び方法、音声録音装置及び方法、音声録音再生システム、音声データの転送方法、情報受信装置、記録媒体
US5987404A (en) 1996-01-29 1999-11-16 International Business Machines Corporation Statistical natural language understanding using hidden clumpings
US5729694A (en) 1996-02-06 1998-03-17 The Regents Of The University Of California Speech coding, reconstruction and recognition using acoustics and electromagnetic waves
US6535610B1 (en) 1996-02-07 2003-03-18 Morgan Stanley & Co. Incorporated Directional microphone utilizing spaced apart omni-directional microphones
US6076088A (en) 1996-02-09 2000-06-13 Paik; Woojin Information extraction system and method using concept relation concept (CRC) triples
US5864868A (en) 1996-02-13 1999-01-26 Contois; David C. Computer control system and user interface for media playing devices
US5737487A (en) 1996-02-13 1998-04-07 Apple Computer, Inc. Speaker adaptation based on lateral tying for large-vocabulary continuous speech recognition
US5835893A (en) 1996-02-15 1998-11-10 Atr Interpreting Telecommunications Research Labs Class-based word clustering for speech recognition using a three-level balanced hierarchical similarity
FI102343B (fi) 1996-02-20 1998-11-13 Sonera Oyj Järjestelmä ja menetelmä datan lähettämiseksi
GB2310559B (en) 1996-02-23 2000-09-20 Nokia Mobile Phones Ltd Audio output apparatus for a mobile communication device
US5864855A (en) 1996-02-26 1999-01-26 The United States Of America As Represented By The Secretary Of The Army Parallel document clustering process
WO1997032299A1 (en) 1996-02-27 1997-09-04 Philips Electronics N.V. Method and apparatus for automatic speech segmentation into phoneme-like units
US6226533B1 (en) 1996-02-29 2001-05-01 Sony Corporation Voice messaging transceiver message duration indicator and method
US5895448A (en) 1996-02-29 1999-04-20 Nynex Science And Technology, Inc. Methods and apparatus for generating and using speaker independent garbage models for speaker dependent speech recognition purpose
US5842165A (en) 1996-02-29 1998-11-24 Nynex Science & Technology, Inc. Methods and apparatus for generating and using garbage models for speaker dependent speech recognition purposes
US6069622A (en) 1996-03-08 2000-05-30 Microsoft Corporation Method and system for generating comic panels
GB9605216D0 (en) 1996-03-12 1996-05-15 Ncr Int Inc Display system and method of moving a cursor of the display system
JP3160707B2 (ja) 1996-03-22 2001-04-25 富士通株式会社 データ送受信装置、データ送信装置及びデータ受信装置
NZ331431A (en) 1996-03-29 2000-06-23 British Telecomm Speech processing via voice recognition
US5901287A (en) 1996-04-01 1999-05-04 The Sabre Group Inc. Information aggregation and synthesization system
US5790671A (en) 1996-04-04 1998-08-04 Ericsson Inc. Method for automatically adjusting audio response for improved intelligibility
US5867799A (en) 1996-04-04 1999-02-02 Lang; Andrew K. Information system and method for filtering a massive flow of information entities to meet user information classification needs
US6173194B1 (en) 1996-04-15 2001-01-09 Nokia Mobile Phones Limited Mobile terminal having improved user interface
US5963924A (en) 1996-04-26 1999-10-05 Verifone, Inc. System, method and article of manufacture for the use of payment instrument holders and payment instruments in network electronic commerce
US5987140A (en) 1996-04-26 1999-11-16 Verifone, Inc. System, method and article of manufacture for secure network electronic payment and credit collection
US5913193A (en) 1996-04-30 1999-06-15 Microsoft Corporation Method and system of runtime acoustic unit selection for speech synthesis
US5857184A (en) 1996-05-03 1999-01-05 Walden Media, Inc. Language and method for creating, organizing, and retrieving data from a database
FR2748342B1 (fr) 1996-05-06 1998-07-17 France Telecom Procede et dispositif de filtrage par egalisation d'un signal de parole, mettant en oeuvre un modele statistique de ce signal
US5828999A (en) 1996-05-06 1998-10-27 Apple Computer, Inc. Method and system for deriving a large-span semantic language model for large-vocabulary recognition systems
US5917487A (en) 1996-05-10 1999-06-29 Apple Computer, Inc. Data-driven method and system for drawing user interface objects
US5826261A (en) 1996-05-10 1998-10-20 Spencer; Graham System and method for querying multiple, distributed databases by selective sharing of local relative significance information for terms related to the query
US6366883B1 (en) 1996-05-15 2002-04-02 Atr Interpreting Telecommunications Concatenation of speech segments by use of a speech synthesizer
US5758314A (en) 1996-05-21 1998-05-26 Sybase, Inc. Client/server database system with methods for improved soundex processing in a heterogeneous language environment
US5727950A (en) 1996-05-22 1998-03-17 Netsage Corporation Agent based instruction system and method
US6556712B1 (en) 1996-05-23 2003-04-29 Apple Computer, Inc. Methods and apparatus for handwriting recognition
US5848386A (en) 1996-05-28 1998-12-08 Ricoh Company, Ltd. Method and system for translating documents using different translation resources for different portions of the documents
US5850480A (en) 1996-05-30 1998-12-15 Scan-Optics, Inc. OCR error correction methods and apparatus utilizing contextual comparison
JP2856390B2 (ja) 1996-07-26 1999-02-10 株式会社日立製作所 情報記録媒体及びそれを用いた記録再生方法
US5966533A (en) 1996-06-11 1999-10-12 Excite, Inc. Method and system for dynamically synthesizing a computer program by differentially resolving atoms based on user context data
US5915249A (en) 1996-06-14 1999-06-22 Excite, Inc. System and method for accelerated query evaluation of very large full-text databases
US5987132A (en) 1996-06-17 1999-11-16 Verifone, Inc. System, method and article of manufacture for conditionally accepting a payment method utilizing an extensible, flexible architecture
US5832433A (en) 1996-06-24 1998-11-03 Nynex Science And Technology, Inc. Speech synthesis method for operator assistance telecommunications calls comprising a plurality of text-to-speech (TTS) devices
JP2973944B2 (ja) 1996-06-26 1999-11-08 富士ゼロックス株式会社 文書処理装置および文書処理方法
US5912952A (en) 1996-06-27 1999-06-15 At&T Corp Voice response unit with a visual menu interface
US5802466A (en) 1996-06-28 1998-09-01 Mci Communications Corporation Personal communication device voice mail notification apparatus and method
US5825881A (en) 1996-06-28 1998-10-20 Allsoft Distributing Inc. Public network merchandising system
US6070147A (en) 1996-07-02 2000-05-30 Tecmark Services, Inc. Customer identification and marketing analysis systems
US6054990A (en) 1996-07-05 2000-04-25 Tran; Bao Q. Computer system with handwriting annotation
US5915238A (en) 1996-07-16 1999-06-22 Tjaden; Gary S. Personalized audio information delivery system
DE69735486T2 (de) 1996-07-22 2006-12-14 Cyva Research Corp., San Diego Werkzeug zur sicherheit und zum austauch von persönlichen daten
US5862223A (en) 1996-07-24 1999-01-19 Walker Asset Management Limited Partnership Method and apparatus for a cryptographically-assisted commercial network system designed to facilitate and support expert-based commerce
US6453281B1 (en) 1996-07-30 2002-09-17 Vxi Corporation Portable audio database device with icon-based graphical user-interface
KR100260760B1 (ko) 1996-07-31 2000-07-01 모리 하루오 터치패널을 병설한 정보표시장치
US5818924A (en) 1996-08-02 1998-10-06 Siemens Business Communication Systems, Inc. Combined keypad and protective cover
US5797008A (en) 1996-08-09 1998-08-18 Digital Equipment Corporation Memory storing an integrated index of database records
US5765168A (en) 1996-08-09 1998-06-09 Digital Equipment Corporation Method for maintaining an index
US5818451A (en) 1996-08-12 1998-10-06 International Busienss Machines Corporation Computer programmed soft keyboard system, method and apparatus having user input displacement
US7113958B1 (en) 1996-08-12 2006-09-26 Battelle Memorial Institute Three-dimensional display of document set
US6298174B1 (en) 1996-08-12 2001-10-02 Battelle Memorial Institute Three-dimensional display of document set
US6216102B1 (en) 1996-08-19 2001-04-10 International Business Machines Corporation Natural language determination using partial words
US7191135B2 (en) 1998-04-08 2007-03-13 Symbol Technologies, Inc. Speech recognition system and method for employing the same
US5822730A (en) 1996-08-22 1998-10-13 Dragon Systems, Inc. Lexical tree pre-filtering in speech recognition
US5950123A (en) 1996-08-26 1999-09-07 Telefonaktiebolaget L M Cellular telephone network support of audible information delivery to visually impaired subscribers
EP0922275A4 (en) 1996-08-28 2002-08-21 Via Inc SYSTEMS AND METHODS RELATING TO A TOUCH SCREEN
US5999169A (en) 1996-08-30 1999-12-07 International Business Machines Corporation Computer graphical user interface method and system for supporting multiple two-dimensional movement inputs
US5878393A (en) 1996-09-09 1999-03-02 Matsushita Electric Industrial Co., Ltd. High quality concatenative reading system
US5745116A (en) 1996-09-09 1998-04-28 Motorola, Inc. Intuitive gesture-based graphical user interface
US5850629A (en) 1996-09-09 1998-12-15 Matsushita Electric Industrial Co., Ltd. User interface controller for text-to-speech synthesizer
EP0829811A1 (en) 1996-09-11 1998-03-18 Nippon Telegraph And Telephone Corporation Method and system for information retrieval
US6035267A (en) 1996-09-26 2000-03-07 Mitsubishi Denki Kabushiki Kaisha Interactive processing apparatus having natural language interfacing capability, utilizing goal frames, and judging action feasibility
US6181935B1 (en) 1996-09-27 2001-01-30 Software.Com, Inc. Mobility extended telephone application programming interface and method of use
US5876396A (en) 1996-09-27 1999-03-02 Baxter International Inc. System method and container for holding and delivering a solution
US5794182A (en) 1996-09-30 1998-08-11 Apple Computer, Inc. Linear predictive speech encoding systems with efficient combination pitch coefficients computation
US5721827A (en) 1996-10-02 1998-02-24 James Logan System for electrically distributing personalized information
US5732216A (en) 1996-10-02 1998-03-24 Internet Angles, Inc. Audio message exchange system
US20070026852A1 (en) 1996-10-02 2007-02-01 James Logan Multimedia telephone system
US20020120925A1 (en) 2000-03-28 2002-08-29 Logan James D. Audio and video program recording, editing and playback systems using metadata
US6199076B1 (en) 1996-10-02 2001-03-06 James Logan Audio program player including a dynamic program selection controller
US5913203A (en) 1996-10-03 1999-06-15 Jaesent Inc. System and method for pseudo cash transactions
US5930769A (en) 1996-10-07 1999-07-27 Rose; Andrea System and method for fashion shopping
US7051096B1 (en) 1999-09-02 2006-05-23 Citicorp Development Center, Inc. System and method for providing global self-service financial transaction terminals with worldwide web content, centralized management, and local and remote administration
US6073033A (en) 1996-11-01 2000-06-06 Telxon Corporation Portable telephone with integrated heads-up display and data terminal functions
DE69626285T2 (de) 1996-11-04 2004-01-22 Molex Inc., Lisle Elektrischer Verbinder für Telefonhandapparat
US6233318B1 (en) 1996-11-05 2001-05-15 Comverse Network Systems, Inc. System for accessing multimedia mailboxes and messages over the internet and via telephone
US5956667A (en) 1996-11-08 1999-09-21 Research Foundation Of State University Of New York System and methods for frame-based augmentative communication
US5918303A (en) 1996-11-25 1999-06-29 Yamaha Corporation Performance setting data selecting apparatus
US5836771A (en) 1996-12-02 1998-11-17 Ho; Chi Fai Learning method and system based on questioning
US5875427A (en) 1996-12-04 1999-02-23 Justsystem Corp. Voice-generating/document making apparatus voice-generating/document making method and computer-readable medium for storing therein a program having a computer execute voice-generating/document making sequence
US6665639B2 (en) 1996-12-06 2003-12-16 Sensory, Inc. Speech recognition in consumer electronic products
US6078914A (en) 1996-12-09 2000-06-20 Open Text Corporation Natural language meta-search system and method
JP3349905B2 (ja) 1996-12-10 2002-11-25 松下電器産業株式会社 音声合成方法および装置
US6023676A (en) 1996-12-12 2000-02-08 Dspc Israel, Ltd. Keyword recognition system and method
US6157935A (en) 1996-12-17 2000-12-05 Tran; Bao Q. Remote data access and management system
US5839106A (en) 1996-12-17 1998-11-17 Apple Computer, Inc. Large-vocabulary speech recognition using an integrated syntactic and semantic statistical language model
US6177931B1 (en) 1996-12-19 2001-01-23 Index Systems, Inc. Systems and methods for displaying and recording control interface with television programs, video, advertising information and program scheduling information
US5926789A (en) 1996-12-19 1999-07-20 Bell Communications Research, Inc. Audio-based wide area information system
US5966126A (en) 1996-12-23 1999-10-12 Szabo; Andrew J. Graphic user interface for database system
US5739451A (en) 1996-12-27 1998-04-14 Franklin Electronic Publishers, Incorporated Hand held electronic music encyclopedia with text and note structure search
US5932869A (en) 1996-12-27 1999-08-03 Graphic Technology, Inc. Promotional system with magnetic stripe and visual thermo-reversible print surfaced medium
US6111562A (en) 1997-01-06 2000-08-29 Intel Corporation System for generating an audible cue indicating the status of a display object
US7787647B2 (en) 1997-01-13 2010-08-31 Micro Ear Technology, Inc. Portable system for programming hearing aids
JP3579204B2 (ja) 1997-01-17 2004-10-20 富士通株式会社 文書要約装置およびその方法
US5933477A (en) 1997-01-22 1999-08-03 Lucent Technologies Inc. Changing-urgency-dependent message or call delivery
US5815225A (en) 1997-01-22 1998-09-29 Gateway 2000, Inc. Lighting apparatus for a portable computer with illumination apertures
US5953541A (en) 1997-01-24 1999-09-14 Tegic Communications, Inc. Disambiguating system for disambiguating ambiguous input sequences by displaying objects associated with the generated input sequences in the order of decreasing frequency of use
US6684376B1 (en) 1997-01-27 2004-01-27 Unisys Corporation Method and apparatus for selecting components within a circuit design database
US6006274A (en) 1997-01-30 1999-12-21 3Com Corporation Method and apparatus using a pass through personal computer connected to both a local communication link and a computer network for indentifying and synchronizing a preferred computer with a portable computer
US5924068A (en) 1997-02-04 1999-07-13 Matsushita Electric Industrial Co. Ltd. Electronic news reception apparatus that selectively retains sections and searches by keyword or index for text to speech conversion
EP0863469A3 (en) 1997-02-10 2002-01-09 Nippon Telegraph And Telephone Corporation Scheme for automatic data conversion definition generation according to data feature in visual multidimensional data analysis tool
US5926769A (en) 1997-02-18 1999-07-20 Nokia Mobile Phones Limited Cellular telephone having simplified user interface for storing and retrieving telephone numbers
US5930783A (en) 1997-02-21 1999-07-27 Nec Usa, Inc. Semantic and cognition based image retrieval
US5941944A (en) 1997-03-03 1999-08-24 Microsoft Corporation Method for providing a substitute for a requested inaccessible object by identifying substantially similar objects using weights corresponding to object features
US6076051A (en) 1997-03-07 2000-06-13 Microsoft Corporation Information retrieval utilizing semantic representation of text
US5930801A (en) 1997-03-07 1999-07-27 Xerox Corporation Shared-data environment in which each file has independent security properties
US6144377A (en) 1997-03-11 2000-11-07 Microsoft Corporation Providing access to user interface elements of legacy application programs
US6604124B1 (en) 1997-03-13 2003-08-05 A:\Scribes Corporation Systems and methods for automatically managing work flow based on tracking job step completion status
US6260013B1 (en) 1997-03-14 2001-07-10 Lernout & Hauspie Speech Products N.V. Speech recognition system employing discriminatively trained models
US6078898A (en) 1997-03-20 2000-06-20 Schlumberger Technologies, Inc. System and method of transactional taxation using secure stored data devices
DE19712632A1 (de) 1997-03-26 1998-10-01 Thomson Brandt Gmbh Verfahren und Vorrichtung zur Sprachfernsteuerung von Geräten
US6097391A (en) 1997-03-31 2000-08-01 Menai Corporation Method and apparatus for graphically manipulating objects
US6041127A (en) 1997-04-03 2000-03-21 Lucent Technologies Inc. Steerable and variable first-order differential microphone array
US5822743A (en) 1997-04-08 1998-10-13 1215627 Ontario Inc. Knowledge-based information retrieval system
US6954899B1 (en) 1997-04-14 2005-10-11 Novint Technologies, Inc. Human-computer interface including haptically controlled interactions
US5912951A (en) 1997-04-17 1999-06-15 At&T Corp Voice mail system with multi-retrieval mailboxes
JP3704925B2 (ja) 1997-04-22 2005-10-12 トヨタ自動車株式会社 移動端末装置及びその音声出力プログラムを記録した媒体
US5970474A (en) 1997-04-24 1999-10-19 Sears, Roebuck And Co. Registry information system for shoppers
US7321783B2 (en) 1997-04-25 2008-01-22 Minerva Industries, Inc. Mobile entertainment and communication device
US6073036A (en) 1997-04-28 2000-06-06 Nokia Mobile Phones Limited Mobile station with touch input having automatic symbol magnification function
US5895464A (en) 1997-04-30 1999-04-20 Eastman Kodak Company Computer program product and a method for using natural language for the description, search and retrieval of multi-media objects
US6233545B1 (en) 1997-05-01 2001-05-15 William E. Datig Universal machine translator of arbitrary languages utilizing epistemic moments
US6226614B1 (en) 1997-05-21 2001-05-01 Nippon Telegraph And Telephone Corporation Method and apparatus for editing/creating synthetic speech message and recording medium with the method recorded thereon
US6803905B1 (en) 1997-05-30 2004-10-12 International Business Machines Corporation Touch sensitive apparatus and method for improved visual feedback
US5930751A (en) 1997-05-30 1999-07-27 Lucent Technologies Inc. Method of implicit confirmation for automatic speech recognition
US6582342B2 (en) 1999-01-12 2003-06-24 Epm Development Systems Corporation Audible electronic exercise monitor
DE69816185T2 (de) 1997-06-12 2004-04-15 Hewlett-Packard Co. (N.D.Ges.D.Staates Delaware), Palo Alto Bildverarbeitungsverfahren und -vorrichtung
US5930754A (en) 1997-06-13 1999-07-27 Motorola, Inc. Method, device and article of manufacture for neural-network based orthography-phonetics transformation
US6415250B1 (en) 1997-06-18 2002-07-02 Novell, Inc. System and method for identifying language using morphologically-based techniques
US6138098A (en) 1997-06-30 2000-10-24 Lernout & Hauspie Speech Products N.V. Command parsing and rewrite system
EP1008084A1 (en) 1997-07-02 2000-06-14 Philippe J. M. Coueignoux System and method for the secure discovery, exploitation and publication of information
JP3593241B2 (ja) 1997-07-02 2004-11-24 株式会社日立製作所 計算機の再起動方法
CA2242065C (en) 1997-07-03 2004-12-14 Henry C.A. Hyde-Thomson Unified messaging system with automatic language identification for text-to-speech conversion
EP0889626A1 (en) 1997-07-04 1999-01-07 Octel Communications Corporation Unified messaging system with automatic language identifacation for text-to-speech conversion
WO1999003101A1 (en) 1997-07-09 1999-01-21 Advanced Audio Devices, Llc Optical storage device
US6587404B1 (en) 1997-07-09 2003-07-01 Advanced Audio Devices, Llc Optical storage device capable of recording a set of sound tracks on a compact disc
JP3224760B2 (ja) 1997-07-10 2001-11-05 インターナショナル・ビジネス・マシーンズ・コーポレーション 音声メールシステム、音声合成装置およびこれらの方法
US5860063A (en) 1997-07-11 1999-01-12 At&T Corp Automated meaningful phrase clustering
US5940841A (en) 1997-07-11 1999-08-17 International Business Machines Corporation Parallel file system with extended file attributes
US20020138254A1 (en) 1997-07-18 2002-09-26 Takehiko Isaka Method and apparatus for processing speech signals
US5933822A (en) 1997-07-22 1999-08-03 Microsoft Corporation Apparatus and methods for an information retrieval system that employs natural language processing of search results to improve overall precision
US6356864B1 (en) 1997-07-25 2002-03-12 University Technology Corporation Methods for analysis and evaluation of the semantic content of a writing based on vector length
JPH1145241A (ja) 1997-07-28 1999-02-16 Just Syst Corp かな漢字変換システムおよびそのシステムの各手段としてコンピュータを機能させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体
US5974146A (en) 1997-07-30 1999-10-26 Huntington Bancshares Incorporated Real time bank-centric universal payment system
US6904110B2 (en) 1997-07-31 2005-06-07 Francois Trans Channel equalization system and method
CA2266923A1 (en) 1997-07-31 1999-02-11 Kyoyu Corporation Voice monitoring system using laser beam
JPH1153384A (ja) 1997-08-05 1999-02-26 Mitsubishi Electric Corp キーワード抽出装置及びキーワード抽出方法並びにキーワード抽出プログラムを格納したコンピュータ読み取り可能な記録媒体
US6016476A (en) 1997-08-11 2000-01-18 International Business Machines Corporation Portable information and transaction processing system and method utilizing biometric authorization and digital certificate security
US5943052A (en) 1997-08-12 1999-08-24 Synaptics, Incorporated Method and apparatus for scroll bar control
US5895466A (en) 1997-08-19 1999-04-20 At&T Corp Automated natural language understanding customer service system
US6081774A (en) 1997-08-22 2000-06-27 Novell, Inc. Natural language information retrieval system and method
JP3516328B2 (ja) 1997-08-22 2004-04-05 株式会社日立製作所 情報通信端末装置
US7385359B2 (en) 1997-08-26 2008-06-10 Philips Solid-State Lighting Solutions, Inc. Information systems
US5974412A (en) 1997-09-24 1999-10-26 Sapient Health Network Intelligent query system for automatically indexing information in a database and automatically categorizing users
US6404876B1 (en) 1997-09-25 2002-06-11 Gte Intelligent Network Services Incorporated System and method for voice activated dialing and routing under open access network control
US7046813B1 (en) 1997-09-25 2006-05-16 Fumio Denda Auditory sense training method and sound processing method for auditory sense training
RU2214620C2 (ru) 1997-09-25 2003-10-20 Теджик Коммьюникейшнз, Инк. Система устранения неоднозначности с уменьшенной клавиатурой
US6587836B1 (en) 1997-09-26 2003-07-01 Worldcom, Inc. Authentication and entitlement for users of web based data management programs
US6169911B1 (en) 1997-09-26 2001-01-02 Sun Microsystems, Inc. Graphical user interface for a portable telephone
US6023684A (en) 1997-10-01 2000-02-08 Security First Technologies, Inc. Three tier financial transaction system with cache memory
US6018705A (en) 1997-10-02 2000-01-25 Personal Electronic Devices, Inc. Measuring foot contact time and foot loft time of a person in locomotion
US6611789B1 (en) 1997-10-02 2003-08-26 Personal Electric Devices, Inc. Monitoring activity of a user in locomotion on foot
US6163769A (en) 1997-10-02 2000-12-19 Microsoft Corporation Text-to-speech using clustered context-dependent phoneme-based units
US6882955B1 (en) 1997-10-02 2005-04-19 Fitsense Technology, Inc. Monitoring activity of a user in locomotion on foot
US6298314B1 (en) 1997-10-02 2001-10-02 Personal Electronic Devices, Inc. Detecting the starting and stopping of movement of a person on foot
US6336365B1 (en) 1999-08-24 2002-01-08 Personal Electronic Devices, Inc. Low-cost accelerometer
US6493652B1 (en) 1997-10-02 2002-12-10 Personal Electronic Devices, Inc. Monitoring activity of a user in locomotion on foot
US6876947B1 (en) 1997-10-02 2005-04-05 Fitsense Technology, Inc. Monitoring activity of a user in locomotion on foot
US6560903B1 (en) 2000-03-07 2003-05-13 Personal Electronic Devices, Inc. Ambulatory foot pod
US6122340A (en) 1998-10-01 2000-09-19 Personal Electronic Devices, Inc. Detachable foot mount for electronic device
US6385662B1 (en) 1997-10-03 2002-05-07 Ericsson Inc. Method of processing information using a personal communication assistant
EP0979497A1 (en) 1997-10-08 2000-02-16 Koninklijke Philips Electronics N.V. Vocabulary and/or language model training
US7027568B1 (en) 1997-10-10 2006-04-11 Verizon Services Corp. Personal message service with enhanced text to speech synthesis
KR100238189B1 (ko) 1997-10-16 2000-01-15 윤종용 다중 언어 tts장치 및 다중 언어 tts 처리 방법
US6035336A (en) 1997-10-17 2000-03-07 International Business Machines Corporation Audio ticker system and method for presenting push information including pre-recorded audio
US6304846B1 (en) 1997-10-22 2001-10-16 Texas Instruments Incorporated Singing voice synthesis
EP0911808B1 (en) 1997-10-23 2002-05-08 Sony International (Europe) GmbH Speech interface in a home network environment
GB2330670B (en) 1997-10-24 2002-09-11 Sony Uk Ltd Data processing
US5990887A (en) 1997-10-30 1999-11-23 International Business Machines Corp. Method and system for efficient network desirable chat feedback over a communication network
US6108627A (en) 1997-10-31 2000-08-22 Nortel Networks Corporation Automatic transcription tool
US6230322B1 (en) 1997-11-05 2001-05-08 Sony Corporation Music channel graphical user interface
US6182028B1 (en) 1997-11-07 2001-01-30 Motorola, Inc. Method, device and system for part-of-speech disambiguation
US5896321A (en) 1997-11-14 1999-04-20 Microsoft Corporation Text completion system for a miniature computer
US6034621A (en) 1997-11-18 2000-03-07 Lucent Technologies, Inc. Wireless remote synchronization of data between PC and PDA
US5943670A (en) 1997-11-21 1999-08-24 International Business Machines Corporation System and method for categorizing objects in combined categories
KR100287366B1 (ko) 1997-11-24 2001-04-16 윤순조 엠피이지 방식을 이용한 휴대용 음향 재생장치 및 방법
US5960422A (en) 1997-11-26 1999-09-28 International Business Machines Corporation System and method for optimized source selection in an information retrieval system
US6047255A (en) 1997-12-04 2000-04-04 Nortel Networks Corporation Method and system for producing speech signals
US6026375A (en) 1997-12-05 2000-02-15 Nortel Networks Corporation Method and apparatus for processing orders from customers in a mobile environment
US6163809A (en) 1997-12-08 2000-12-19 Microsoft Corporation System and method for preserving delivery status notification when moving from a native network to a foreign network
US6983138B1 (en) 1997-12-12 2006-01-03 Richard J. Helferich User interface for message access
US6295541B1 (en) 1997-12-16 2001-09-25 Starfish Software, Inc. System and methods for synchronizing two or more datasets
US6064963A (en) 1997-12-17 2000-05-16 Opus Telecom, L.L.C. Automatic key word or phrase speech recognition for the corrections industry
US6064960A (en) 1997-12-18 2000-05-16 Apple Computer, Inc. Method and apparatus for improved duration modeling of phonemes
US6094649A (en) 1997-12-22 2000-07-25 Partnet, Inc. Keyword searches of structured databases
US6310400B1 (en) 1997-12-29 2001-10-30 Intel Corporation Apparatus for capacitively coupling electronic devices
US6116907A (en) 1998-01-13 2000-09-12 Sorenson Vision, Inc. System and method for encoding and retrieving visual signals
US6064767A (en) 1998-01-16 2000-05-16 Regents Of The University Of California Automatic language identification by stroke geometry analysis
JP3216084B2 (ja) 1998-01-19 2001-10-09 株式会社ネットワークコミュニティクリエイション チャット画面表示方法
US20020002039A1 (en) 1998-06-12 2002-01-03 Safi Qureshey Network-enabled audio device
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US20060033724A1 (en) 2004-07-30 2006-02-16 Apple Computer, Inc. Virtual input device placement on a touch screen user interface
US6782510B1 (en) 1998-01-27 2004-08-24 John N. Gross Word checking tool for controlling the language content in documents using dictionaries with modifyable status fields
JP2938420B2 (ja) 1998-01-30 1999-08-23 インターナショナル・ビジネス・マシーンズ・コーポレイション ファンクション選択方法及び装置、ファンクションを選択するための制御プログラムを格納した記憶媒体、オブジェクトの操作方法及び装置、オブジェクトを操作するための制御プログラムを格納した記憶媒体、複合アイコンを格納した記憶媒体
US6035303A (en) 1998-02-02 2000-03-07 International Business Machines Corporation Object management system for digital libraries
US6216131B1 (en) 1998-02-06 2001-04-10 Starfish Software, Inc. Methods for mapping data fields from one data set to another in a data processing environment
US6226403B1 (en) 1998-02-09 2001-05-01 Motorola, Inc. Handwritten character recognition using multi-resolution models
US6421707B1 (en) 1998-02-13 2002-07-16 Lucent Technologies Inc. Wireless multi-media messaging communications method and apparatus
US6249606B1 (en) 1998-02-19 2001-06-19 Mindmaker, Inc. Method and system for gesture category recognition and training using a feature vector
US6295391B1 (en) * 1998-02-19 2001-09-25 Hewlett-Packard Company Automatic data routing via voice command annotation
US20020080163A1 (en) 1998-02-23 2002-06-27 Morey Dale D. Information retrieval system
US6623529B1 (en) 1998-02-23 2003-09-23 David Lakritz Multilingual electronic document translation, management, and delivery system
US6345250B1 (en) 1998-02-24 2002-02-05 International Business Machines Corp. Developing voice response applications from pre-recorded voice and stored text-to-speech prompts
US5995590A (en) 1998-03-05 1999-11-30 International Business Machines Corporation Method and apparatus for a communication device for use by a hearing impaired/mute or deaf person or in silent environments
US6356920B1 (en) 1998-03-09 2002-03-12 X-Aware, Inc Dynamic, hierarchical data exchange system
JP3854713B2 (ja) 1998-03-10 2006-12-06 キヤノン株式会社 音声合成方法および装置および記憶媒体
US6173287B1 (en) 1998-03-11 2001-01-09 Digital Equipment Corporation Technique for ranking multimedia annotations of interest
US6272456B1 (en) 1998-03-19 2001-08-07 Microsoft Corporation System and method for identifying the language of written text having a plurality of different length n-gram profiles
US6671745B1 (en) 1998-03-23 2003-12-30 Microsoft Corporation Application program interfaces and structures in a resource limited operating system
US6963871B1 (en) 1998-03-25 2005-11-08 Language Analysis Systems, Inc. System and method for adaptive multi-cultural searching and matching of personal names
US6675233B1 (en) 1998-03-26 2004-01-06 O2 Micro International Limited Audio controller for portable electronic devices
US6335962B1 (en) 1998-03-27 2002-01-01 Lucent Technologies Inc. Apparatus and method for grouping and prioritizing voice messages for convenient playback
US6195641B1 (en) 1998-03-27 2001-02-27 International Business Machines Corp. Network universal spoken language vocabulary
US6026393A (en) 1998-03-31 2000-02-15 Casebank Technologies Inc. Configuration knowledge as an aid to case retrieval
US6233559B1 (en) 1998-04-01 2001-05-15 Motorola, Inc. Speech control of multiple applications using applets
US6173279B1 (en) 1998-04-09 2001-01-09 At&T Corp. Method of using a natural language interface to retrieve information from one or more data resources
US6151401A (en) 1998-04-09 2000-11-21 Compaq Computer Corporation Planar speaker for multimedia laptop PCs
US7194471B1 (en) 1998-04-10 2007-03-20 Ricoh Company, Ltd. Document classification system and method for classifying a document according to contents of the document
US6018711A (en) 1998-04-21 2000-01-25 Nortel Networks Corporation Communication system user interface with animated representation of time remaining for input to recognizer
US6240303B1 (en) 1998-04-23 2001-05-29 Motorola Inc. Voice recognition button for mobile telephones
US6088731A (en) 1998-04-24 2000-07-11 Associative Computing, Inc. Intelligent assistant for use with a local computer and with the internet
KR100454541B1 (ko) 1998-04-27 2004-11-03 산요덴키가부시키가이샤 수기 문자 인식 방법 및 시스템
WO1999056227A1 (en) 1998-04-27 1999-11-04 British Telecommunications Public Limited Company Database access tool
US6081780A (en) 1998-04-28 2000-06-27 International Business Machines Corporation TTS and prosody based authoring system
US6931255B2 (en) 1998-04-29 2005-08-16 Telefonaktiebolaget L M Ericsson (Publ) Mobile terminal with a text-to-speech converter
US6029132A (en) 1998-04-30 2000-02-22 Matsushita Electric Industrial Co. Method for letter-to-sound in text-to-speech synthesis
US5891180A (en) 1998-04-29 1999-04-06 Medtronic Inc. Interrogation of an implantable medical device using audible sound communication
US6016471A (en) 1998-04-29 2000-01-18 Matsushita Electric Industrial Co., Ltd. Method and apparatus using decision trees to generate and score multiple pronunciations for a spelled word
US5998972A (en) 1998-04-30 1999-12-07 Apple Computer, Inc. Method and apparatus for rapidly charging a battery of a portable computing device
US6222347B1 (en) 1998-04-30 2001-04-24 Apple Computer, Inc. System for charging portable computer's battery using both the dynamically determined power available based on power consumed by sub-system devices and power limits from the battery
US6285786B1 (en) 1998-04-30 2001-09-04 Motorola, Inc. Text recognizer and method using non-cumulative character scoring in a forward search
US6343267B1 (en) 1998-04-30 2002-01-29 Matsushita Electric Industrial Co., Ltd. Dimensionality reduction for speaker normalization and speaker and environment adaptation using eigenvoice techniques
US6076060A (en) 1998-05-01 2000-06-13 Compaq Computer Corporation Computer method and apparatus for translating text to sound
US6144938A (en) 1998-05-01 2000-11-07 Sun Microsystems, Inc. Voice user interface with personality
US6297818B1 (en) 1998-05-08 2001-10-02 Apple Computer, Inc. Graphical user interface having sound effects for operating control elements and dragging objects
JPH11327870A (ja) 1998-05-15 1999-11-30 Fujitsu Ltd ドキュメント読み上げ装置、読み上げ制御方法及び記 録媒体
US6438523B1 (en) 1998-05-20 2002-08-20 John A. Oberteuffer Processing handwritten and hand-drawn input and speech input
FI981154A (fi) 1998-05-25 1999-11-26 Nokia Mobile Phones Ltd Menetelmä ja laite puheen tunnistamiseksi
US6101470A (en) 1998-05-26 2000-08-08 International Business Machines Corporation Methods for generating pitch and duration contours in a text to speech system
US6424983B1 (en) 1998-05-26 2002-07-23 Global Information Research And Technologies, Llc Spelling and grammar checking system
US6778970B2 (en) 1998-05-28 2004-08-17 Lawrence Au Topological methods to organize semantic network data flows for conversational applications
US20070094222A1 (en) 1998-05-28 2007-04-26 Lawrence Au Method and system for using voice input for performing network functions
US7711672B2 (en) 1998-05-28 2010-05-04 Lawrence Au Semantic network methods to disambiguate natural language meaning
US7266365B2 (en) 1998-05-29 2007-09-04 Research In Motion Limited System and method for delayed transmission of bundled command messages
JP3180764B2 (ja) 1998-06-05 2001-06-25 日本電気株式会社 音声合成装置
US6563769B1 (en) 1998-06-11 2003-05-13 Koninklijke Philips Electronics N.V. Virtual jukebox
US6411932B1 (en) 1998-06-12 2002-06-25 Texas Instruments Incorporated Rule-based learning of word pronunciations from training corpora
US5969283A (en) 1998-06-17 1999-10-19 Looney Productions, Llc Music organizer and entertainment center
US6542171B1 (en) 1998-07-08 2003-04-01 Nippon Telegraph Amd Telephone Corporation Scheme for graphical user interface using polygonal-shaped slider
US6144958A (en) 1998-07-15 2000-11-07 Amazon.Com, Inc. System and method for correcting spelling errors in search queries
US6105865A (en) 1998-07-17 2000-08-22 Hardesty; Laurence Daniel Financial transaction system with retirement saving benefit
US6421708B2 (en) 1998-07-31 2002-07-16 Glenayre Electronics, Inc. World wide web access for voice mail and page
JP2000059497A (ja) 1998-08-04 2000-02-25 Hitachi Ltd 電話機
JP3865946B2 (ja) 1998-08-06 2007-01-10 富士通株式会社 文字メッセージ通信システム、文字メッセージ通信装置、文字メッセージ通信サーバ、文字メッセージ通信プログラムを記録したコンピュータ読み取り可能な記録媒体、文字メッセージ通信管理プログラムを記録したコンピュータ読み取り可能な記録媒体、文字メッセージ送受信方法及び文字メッセージ通信管理方法
US6389114B1 (en) 1998-08-06 2002-05-14 At&T Corp. Method and apparatus for relaying communication
US6169538B1 (en) 1998-08-13 2001-01-02 Motorola, Inc. Method and apparatus for implementing a graphical user interface keyboard and a text buffer on electronic devices
US6359970B1 (en) 1998-08-14 2002-03-19 Maverick Consulting Services, Inc. Communications control method and apparatus
US6490563B2 (en) 1998-08-17 2002-12-03 Microsoft Corporation Proofreading with text to speech feedback
US6493428B1 (en) 1998-08-18 2002-12-10 Siemens Information & Communication Networks, Inc Text-enhanced voice menu system
JP2000105598A (ja) 1998-08-24 2000-04-11 Saehan Information Syst Inc 携帯用デ―タの記録/再生装置、デジタルデ―タの記録及び再生方泡並びにコンピュ―タ音楽ファイルデ―タの記録及び再生システム
US6173263B1 (en) 1998-08-31 2001-01-09 At&T Corp. Method and system for performing concatenative speech synthesis using half-phonemes
US6542584B1 (en) 1998-08-31 2003-04-01 Intel Corporation Digital telephone system with automatic voice mail redirection
US6208964B1 (en) 1998-08-31 2001-03-27 Nortel Networks Limited Method and apparatus for providing unsupervised adaptation of transcriptions
US6271835B1 (en) 1998-09-03 2001-08-07 Nortel Networks Limited Touch-screen input device
US6359572B1 (en) 1998-09-03 2002-03-19 Microsoft Corporation Dynamic keyboard
US6141644A (en) 1998-09-04 2000-10-31 Matsushita Electric Industrial Co., Ltd. Speaker verification and speaker identification based on eigenvoices
US6499013B1 (en) 1998-09-09 2002-12-24 One Voice Technologies, Inc. Interactive user interface using speech recognition and natural language processing
US6434524B1 (en) 1998-09-09 2002-08-13 One Voice Technologies, Inc. Object interactive user interface using speech recognition and natural language processing
DE29825146U1 (de) 1998-09-11 2005-08-18 Püllen, Rainer Teilnehmereinheit und System für einen Multimediadienst
US6266637B1 (en) 1998-09-11 2001-07-24 International Business Machines Corporation Phrase splicing and variable substitution using a trainable speech synthesizer
US6792082B1 (en) 1998-09-11 2004-09-14 Comverse Ltd. Voice mail system with personal assistant provisioning
US6594673B1 (en) 1998-09-15 2003-07-15 Microsoft Corporation Visualizations for collaborative information
US6317831B1 (en) 1998-09-21 2001-11-13 Openwave Systems Inc. Method and apparatus for establishing a secure connection over a one-way data path
US6154551A (en) 1998-09-25 2000-11-28 Frenkel; Anatoly Microphone having linear optical transducers
US9037451B2 (en) 1998-09-25 2015-05-19 Rpx Corporation Systems and methods for multiple mode voice and data communications using intelligently bridged TDM and packet buses and methods for implementing language capabilities using the same
AU5996399A (en) 1998-09-28 2000-04-17 Varicom Communications Ltd A method of sending and forwarding e-mail messages to a telephone
AU1097300A (en) 1998-09-30 2000-04-17 Brian Gladstein Graphic user interface for navigation in speech recognition system grammars
JP2000105595A (ja) 1998-09-30 2000-04-11 Victor Co Of Japan Ltd 歌唱装置及び記録媒体
US6324511B1 (en) 1998-10-01 2001-11-27 Mindmaker, Inc. Method of and apparatus for multi-modal information presentation to computer users with dyslexia, reading disabilities or visual impairment
US7003463B1 (en) 1998-10-02 2006-02-21 International Business Machines Corporation System and method for providing network coordinated conversational services
US6275824B1 (en) 1998-10-02 2001-08-14 Ncr Corporation System and method for managing data privacy in a database management system
CN1151488C (zh) 1998-10-02 2004-05-26 国际商业机器公司 通过一般分层对象进行有效语音导航的结构框架
US6161087A (en) 1998-10-05 2000-12-12 Lernout & Hauspie Speech Products N.V. Speech-recognition-assisted selective suppression of silent and filled speech pauses during playback of an audio recording
US6360237B1 (en) 1998-10-05 2002-03-19 Lernout & Hauspie Speech Products N.V. Method and system for performing text edits during audio recording playback
GB9821969D0 (en) 1998-10-08 1998-12-02 Canon Kk Apparatus and method for processing natural language
WO2000022820A1 (en) 1998-10-09 2000-04-20 Sarnoff Corporation Method and apparatus for providing vcr-type controls for compressed digital video sequences
US6928614B1 (en) 1998-10-13 2005-08-09 Visteon Global Technologies, Inc. Mobile office with speech recognition
GB2342802B (en) 1998-10-14 2003-04-16 Picturetel Corp Method and apparatus for indexing conference content
US6487663B1 (en) 1998-10-19 2002-11-26 Realnetworks, Inc. System and method for regulating the transmission of media data
JP2000122781A (ja) 1998-10-20 2000-04-28 Sony Corp 情報処理装置および方法、並びに提供媒体
US6768979B1 (en) 1998-10-22 2004-07-27 Sony Corporation Apparatus and method for noise attenuation in a speech recognition system
US6453292B2 (en) 1998-10-28 2002-09-17 International Business Machines Corporation Command boundary identifier for conversational natural language
JP3551044B2 (ja) 1998-10-29 2004-08-04 松下電器産業株式会社 ファクシミリ装置
US6208971B1 (en) 1998-10-30 2001-03-27 Apple Computer, Inc. Method and apparatus for command recognition using data-driven semantic inference
US6321092B1 (en) 1998-11-03 2001-11-20 Signal Soft Corporation Multiple input data management for wireless location-based applications
US6839669B1 (en) 1998-11-05 2005-01-04 Scansoft, Inc. Performing actions identified in recognized speech
US6469732B1 (en) 1998-11-06 2002-10-22 Vtel Corporation Acoustic source location using a microphone array
US6519565B1 (en) 1998-11-10 2003-02-11 Voice Security Systems, Inc. Method of comparing utterances for security control
US6446076B1 (en) 1998-11-12 2002-09-03 Accenture Llp. Voice interactive web-based agent system responsive to a user location for prioritizing and formatting information
EP1138038B1 (en) 1998-11-13 2005-06-22 Lernout &amp; Hauspie Speech Products N.V. Speech synthesis using concatenation of speech waveforms
US6421305B1 (en) 1998-11-13 2002-07-16 Sony Corporation Personal music device with a graphical display for contextual information
US6606599B2 (en) 1998-12-23 2003-08-12 Interactive Speech Technologies, Llc Method for integrating computing processes with an interface controlled by voice actuated grammars
IL127073A0 (en) 1998-11-15 1999-09-22 Tiktech Software Ltd Software translation system and method
CA2351404A1 (en) 1998-11-17 2000-05-25 Lernout & Hauspie Speech Products N.V. Method and apparatus for improved part-of-speech tagging
US6574632B2 (en) 1998-11-18 2003-06-03 Harris Corporation Multiple engine information retrieval and visualization system
US6122614A (en) 1998-11-20 2000-09-19 Custom Speech Usa, Inc. System and method for automating transcription services
US6298321B1 (en) 1998-11-23 2001-10-02 Microsoft Corporation Trie compression using substates and utilizing pointers to replace or merge identical, reordered states
US6144939A (en) 1998-11-25 2000-11-07 Matsushita Electric Industrial Co., Ltd. Formant-based speech synthesizer employing demi-syllable concatenation with independent cross fade in the filter parameter and source domains
US6260016B1 (en) 1998-11-25 2001-07-10 Matsushita Electric Industrial Co., Ltd. Speech synthesis employing prosody templates
US6246981B1 (en) 1998-11-25 2001-06-12 International Business Machines Corporation Natural language task-oriented dialog manager and method
US6292772B1 (en) 1998-12-01 2001-09-18 Justsystem Corporation Method for identifying the language of individual words
US7082397B2 (en) 1998-12-01 2006-07-25 Nuance Communications, Inc. System for and method of creating and browsing a voice web
US6260024B1 (en) 1998-12-02 2001-07-10 Gary Shkedy Method and apparatus for facilitating buyer-driven purchase orders on a commercial network system
US7319957B2 (en) 2004-02-11 2008-01-15 Tegic Communications, Inc. Handwriting and voice input with automatic correction
US7881936B2 (en) 1998-12-04 2011-02-01 Tegic Communications, Inc. Multimodal disambiguation of speech recognition
US7712053B2 (en) 1998-12-04 2010-05-04 Tegic Communications, Inc. Explicit character filtering of ambiguous text entry
US7679534B2 (en) 1998-12-04 2010-03-16 Tegic Communications, Inc. Contextual prediction of user words and user actions
US6317707B1 (en) 1998-12-07 2001-11-13 At&T Corp. Automatic clustering of tokens from a corpus for grammar acquisition
US20030187925A1 (en) 1998-12-08 2003-10-02 Inala Suman Kumar Software engine for enabling proxy chat-room interaction
US6177905B1 (en) 1998-12-08 2001-01-23 Avaya Technology Corp. Location-triggered reminder for mobile user devices
US6460015B1 (en) 1998-12-15 2002-10-01 International Business Machines Corporation Method, system and computer program product for automatic character transliteration in a text string object
US6308149B1 (en) 1998-12-16 2001-10-23 Xerox Corporation Grouping words with equivalent substrings by automatic clustering based on suffix relationships
JP2000181993A (ja) 1998-12-16 2000-06-30 Fujitsu Ltd 文字認識方法および装置
US6523172B1 (en) 1998-12-17 2003-02-18 Evolutionary Technologies International, Inc. Parser translator system and method
GB9827930D0 (en) 1998-12-19 1999-02-10 Symbian Ltd Keyboard system for a computing device with correction of key based input errors
US6259436B1 (en) 1998-12-22 2001-07-10 Ericsson Inc. Apparatus and method for determining selection of touchable items on a computer touchscreen by an imprecise touch
CA2284304A1 (en) 1998-12-22 2000-06-22 Nortel Networks Corporation Communication systems and methods employing automatic language indentification
US6460029B1 (en) 1998-12-23 2002-10-01 Microsoft Corporation System for improving search text
US6191939B1 (en) 1998-12-23 2001-02-20 Gateway, Inc. Keyboard illumination via reflection of LCD light
US6167369A (en) 1998-12-23 2000-12-26 Xerox Company Automatic language identification using both N-gram and word information
FR2787902B1 (fr) 1998-12-23 2004-07-30 France Telecom Modele et procede d'implementation d'un agent rationnel dialoguant, serveur et systeme multi-agent pour la mise en oeuvre
US7036128B1 (en) 1999-01-05 2006-04-25 Sri International Offices Using a community of distributed electronic agents to support a highly mobile, ambient computing environment
US6742021B1 (en) 1999-01-05 2004-05-25 Sri International, Inc. Navigating network-based electronic information using spoken input with multimodal error feedback
US6513063B1 (en) 1999-01-05 2003-01-28 Sri International Accessing network-based electronic information through scripted online interfaces using spoken input
US6851115B1 (en) 1999-01-05 2005-02-01 Sri International Software-based architecture for communication and cooperation among distributed electronic agents
US6757718B1 (en) 1999-01-05 2004-06-29 Sri International Mobile navigation of network-based electronic information using spoken input
US6523061B1 (en) 1999-01-05 2003-02-18 Sri International, Inc. System, method, and article of manufacture for agent-based navigation in a speech-based data navigation system
US7152070B1 (en) 1999-01-08 2006-12-19 The Regents Of The University Of California System and method for integrating and accessing multiple data sources within a data warehouse architecture
JP2000206982A (ja) 1999-01-12 2000-07-28 Toshiba Corp 音声合成装置及び文音声変換プログラムを記録した機械読み取り可能な記録媒体
US6179432B1 (en) 1999-01-12 2001-01-30 Compaq Computer Corporation Lighting system for a keyboard
WO2000044173A1 (en) 1999-01-19 2000-07-27 Integra5 Communications, Inc. Method and apparatus for selecting and displaying multi-media messages
US6598054B2 (en) 1999-01-26 2003-07-22 Xerox Corporation System and method for clustering data objects in a collection
US6385586B1 (en) 1999-01-28 2002-05-07 International Business Machines Corporation Speech recognition text-based language conversion and text-to-speech in a client-server configuration to enable language translation devices
US6282507B1 (en) 1999-01-29 2001-08-28 Sony Corporation Method and apparatus for interactive source language expression recognition and alternative hypothesis presentation and selection
US6360227B1 (en) 1999-01-29 2002-03-19 International Business Machines Corporation System and method for generating taxonomies with applications to content-based recommendations
US7966078B2 (en) 1999-02-01 2011-06-21 Steven Hoffberg Network media appliance system and method
US6505183B1 (en) 1999-02-04 2003-01-07 Authoria, Inc. Human resource knowledge modeling and delivery system
WO2000046701A1 (en) 1999-02-08 2000-08-10 Huntsman Ici Chemicals Llc Method for retrieving semantically distant analogies
US6377530B1 (en) 1999-02-12 2002-04-23 Compaq Computer Corporation System and method for playing compressed audio data
US6332175B1 (en) 1999-02-12 2001-12-18 Compaq Computer Corporation Low power system and method for playing compressed audio data
US6983251B1 (en) 1999-02-15 2006-01-03 Sharp Kabushiki Kaisha Information selection apparatus selecting desired information from plurality of audio information by mainly using audio
US6606632B1 (en) 1999-02-19 2003-08-12 Sun Microsystems, Inc. Transforming transient contents of object-oriented database into persistent textual form according to grammar that includes keywords and syntax
US6961699B1 (en) 1999-02-19 2005-11-01 Custom Speech Usa, Inc. Automated transcription system and method using two speech converting instances and computer-assisted correction
GB2347239B (en) 1999-02-22 2003-09-24 Nokia Mobile Phones Ltd A communication terminal having a predictive editor application
US6317718B1 (en) 1999-02-26 2001-11-13 Accenture Properties (2) B.V. System, method and article of manufacture for location-based filtering for shopping agent in the physical world
US6462778B1 (en) 1999-02-26 2002-10-08 Sony Corporation Methods and apparatus for associating descriptive data with digital image files
GB9904662D0 (en) 1999-03-01 1999-04-21 Canon Kk Natural language search method and apparatus
US20020013852A1 (en) 2000-03-03 2002-01-31 Craig Janik System for providing content, management, and interactivity for thin client devices
US6356905B1 (en) 1999-03-05 2002-03-12 Accenture Llp System, method and article of manufacture for mobile communication utilizing an interface support framework
EP1159688A2 (en) 1999-03-05 2001-12-05 Canon Kabushiki Kaisha Database annotation and retrieval
WO2000054256A1 (de) 1999-03-08 2000-09-14 Siemens Aktiengesellschaft Verfahren und anordnung zur ermittlung einer merkmalsbeschreibung eines sprachsignals
US6374217B1 (en) 1999-03-12 2002-04-16 Apple Computer, Inc. Fast update implementation for efficient latent semantic language modeling
US6185533B1 (en) 1999-03-15 2001-02-06 Matsushita Electric Industrial Co., Ltd. Generation and synthesis of prosody templates
US6928404B1 (en) 1999-03-17 2005-08-09 International Business Machines Corporation System and methods for acoustic and language modeling for automatic speech recognition with large vocabularies
US6584464B1 (en) 1999-03-19 2003-06-24 Ask Jeeves, Inc. Grammar template query system
US6862710B1 (en) 1999-03-23 2005-03-01 Insightful Corporation Internet navigation using soft hyperlinks
US6510406B1 (en) 1999-03-23 2003-01-21 Mathsoft, Inc. Inverse inference engine for high performance web search
US6469712B1 (en) 1999-03-25 2002-10-22 International Business Machines Corporation Projected audio for computer displays
WO2000058946A1 (en) 1999-03-26 2000-10-05 Koninklijke Philips Electronics N.V. Client-server speech recognition
US6041023A (en) 1999-03-29 2000-03-21 Lakhansingh; Cynthia Portable digital radio and compact disk player
US6377928B1 (en) 1999-03-31 2002-04-23 Sony Corporation Voice recognition for animated agent-based navigation
US6356854B1 (en) 1999-04-05 2002-03-12 Delphi Technologies, Inc. Holographic object position and type sensing system and method
US6631346B1 (en) 1999-04-07 2003-10-07 Matsushita Electric Industrial Co., Ltd. Method and apparatus for natural language parsing using multiple passes and tags
WO2000060435A2 (en) 1999-04-07 2000-10-12 Rensselaer Polytechnic Institute System and method for accessing personal information
US6631186B1 (en) 1999-04-09 2003-10-07 Sbc Technology Resources, Inc. System and method for implementing and accessing call forwarding services
US6647260B2 (en) 1999-04-09 2003-11-11 Openwave Systems Inc. Method and system facilitating web based provisioning of two-way mobile communications devices
US6408272B1 (en) 1999-04-12 2002-06-18 General Magic, Inc. Distributed voice user interface
US6262724B1 (en) 1999-04-15 2001-07-17 Apple Computer, Inc. User interface for presenting media information
US6502194B1 (en) 1999-04-16 2002-12-31 Synetix Technologies System for playback of network audio material on demand
JP3711411B2 (ja) 1999-04-19 2005-11-02 沖電気工業株式会社 音声合成装置
EP1171988B1 (en) 1999-04-19 2011-10-19 Kyocera Corporation Portable telephone set
US7558381B1 (en) 1999-04-22 2009-07-07 Agere Systems Inc. Retrieval of deleted voice messages in voice messaging system
JP2000305585A (ja) 1999-04-23 2000-11-02 Oki Electric Ind Co Ltd 音声合成装置
US6924828B1 (en) 1999-04-27 2005-08-02 Surfnotes Method and apparatus for improved information representation
US6697780B1 (en) 1999-04-30 2004-02-24 At&T Corp. Method and apparatus for rapid acoustic unit selection from a large speech corpus
GB9910448D0 (en) 1999-05-07 1999-07-07 Ensigma Ltd Cancellation of non-stationary interfering signals for speech recognition
US6741264B1 (en) 1999-05-11 2004-05-25 Gific Corporation Method of generating an audible indication of data stored in a database
US6928149B1 (en) 1999-05-17 2005-08-09 Interwoven, Inc. Method and apparatus for a user controlled voicemail management system
US6161944A (en) 1999-05-18 2000-12-19 Micron Electronics, Inc. Retractable keyboard illumination device
US7030863B2 (en) 2000-05-26 2006-04-18 America Online, Incorporated Virtual keyboard system with automatic correction
WO2000074240A1 (en) 1999-05-27 2000-12-07 America Online Keyboard system with automatic correction
US7821503B2 (en) 2003-04-09 2010-10-26 Tegic Communications, Inc. Touch screen and graphical user interface
US7286115B2 (en) 2000-05-26 2007-10-23 Tegic Communications, Inc. Directional input system with automatic correction
US20020032564A1 (en) 2000-04-19 2002-03-14 Farzad Ehsani Phrase-based dialogue modeling with particular application to creating a recognition grammar for a voice-controlled user interface
JP2003505778A (ja) 1999-05-28 2003-02-12 セーダ インコーポレイテッド 音声制御ユーザインタフェース用の認識文法作成の特定用途を有する句ベースの対話モデル化
JP2000339137A (ja) 1999-05-31 2000-12-08 Sanyo Electric Co Ltd 電子メール受信システム
US6728675B1 (en) 1999-06-03 2004-04-27 International Business Machines Corporatiion Data processor controlled display system with audio identifiers for overlapping windows in an interactive graphical user interface
US6931384B1 (en) 1999-06-04 2005-08-16 Microsoft Corporation System and method providing utility-based decision making about clarification dialog given communicative uncertainty
US6598039B1 (en) 1999-06-08 2003-07-22 Albert-Inc. S.A. Natural language interface for searching database
US6701305B1 (en) 1999-06-09 2004-03-02 The Boeing Company Methods, apparatus and computer program products for information retrieval and document classification utilizing a multidimensional subspace
US7093693B1 (en) 1999-06-10 2006-08-22 Gazdzinski Robert F Elevator access control system and method
US6615175B1 (en) 1999-06-10 2003-09-02 Robert F. Gazdzinski “Smart” elevator system and method
US7711565B1 (en) 1999-06-10 2010-05-04 Gazdzinski Robert F “Smart” elevator system and method
US8065155B1 (en) 1999-06-10 2011-11-22 Gazdzinski Robert F Adaptive advertising apparatus and methods
US6611802B2 (en) 1999-06-11 2003-08-26 International Business Machines Corporation Method and system for proofreading and correcting dictated text
US6658577B2 (en) 1999-06-14 2003-12-02 Apple Computer, Inc. Breathing status LED indicator
US6711585B1 (en) 1999-06-15 2004-03-23 Kanisa Inc. System and method for implementing a knowledge management system
US6401065B1 (en) 1999-06-17 2002-06-04 International Business Machines Corporation Intelligent keyboard interface with use of human language processing
US7190883B2 (en) 1999-06-18 2007-03-13 Intel Corporation Systems and methods for fast random access and backward playback of video frames using decoded frame cache
KR19990073234A (ko) 1999-06-24 1999-10-05 이영만 엠피3데이터의송수신장치
JP2001014306A (ja) 1999-06-30 2001-01-19 Sony Corp 電子文書処理方法及び電子文書処理装置並びに電子文書処理プログラムが記録された記録媒体
AUPQ138199A0 (en) 1999-07-02 1999-07-29 Telstra R & D Management Pty Ltd A search system
US6615176B2 (en) 1999-07-13 2003-09-02 International Business Machines Corporation Speech enabling labeless controls in an existing graphical user interface
US6442518B1 (en) 1999-07-14 2002-08-27 Compaq Information Technologies Group, L.P. Method for refining time alignments of closed captions
US6904405B2 (en) 1999-07-17 2005-06-07 Edwin A. Suominen Message recognition using shared language model
CA2379862A1 (en) 1999-07-21 2001-01-25 Avaya Technology Corp. Improved text to speech conversion
WO2001008032A2 (en) 1999-07-23 2001-02-01 Merck & Co., Inc. Method and storage/retrieval system of chemical substances in a database
JP3361291B2 (ja) 1999-07-23 2003-01-07 コナミ株式会社 音声合成方法、音声合成装置及び音声合成プログラムを記録したコンピュータ読み取り可能な媒体
US6421672B1 (en) 1999-07-27 2002-07-16 Verizon Services Corp. Apparatus for and method of disambiguation of directory listing searches utilizing multiple selectable secondary search keys
IL131135A0 (en) 1999-07-27 2001-01-28 Electric Lighthouse Software L A method and system for electronic mail
US6628808B1 (en) 1999-07-28 2003-09-30 Datacard Corporation Apparatus and method for verifying a scanned image
US6553263B1 (en) 1999-07-30 2003-04-22 Advanced Bionics Corporation Implantable pulse generators using rechargeable zero-volt technology lithium-ion batteries
US6493667B1 (en) 1999-08-05 2002-12-10 International Business Machines Corporation Enhanced likelihood computation using regression in a speech recognition system
US9167073B2 (en) 1999-08-12 2015-10-20 Hewlett-Packard Development Company, L.P. Method and apparatus for accessing a contacts database and telephone services
US7743188B2 (en) 1999-08-12 2010-06-22 Palm, Inc. Method and apparatus for accessing a contacts database and telephone services
US7451177B1 (en) 1999-08-12 2008-11-11 Avintaquin Capital, Llc System for and method of implementing a closed loop response architecture for electronic commerce
US8064886B2 (en) 1999-08-12 2011-11-22 Hewlett-Packard Development Company, L.P. Control mechanisms for mobile devices
US7007239B1 (en) 2000-09-21 2006-02-28 Palm, Inc. Method and apparatus for accessing a contacts database and telephone services
US6721802B1 (en) 1999-08-12 2004-04-13 Point2 Technologies Inc. Method, apparatus and program for the central storage of standardized image data
US7069220B2 (en) 1999-08-13 2006-06-27 International Business Machines Corporation Method for determining and maintaining dialog focus in a conversational speech system
JP2001056233A (ja) 1999-08-17 2001-02-27 Arex:Kk 車載用音声情報サービス装置及び該装置を利用する音声情報サービスシステム
US6622121B1 (en) 1999-08-20 2003-09-16 International Business Machines Corporation Testing speech recognition systems using test data generated by text-to-speech conversion
US6792086B1 (en) 1999-08-24 2004-09-14 Microstrategy, Inc. Voice network access provider system and method
EP1079387A3 (en) 1999-08-26 2003-07-09 Matsushita Electric Industrial Co., Ltd. Mechanism for storing information about recorded television broadcasts
US6324512B1 (en) 1999-08-26 2001-11-27 Matsushita Electric Industrial Co., Ltd. System and method for allowing family members to access TV contents and program media recorder over telephone or internet
US6912499B1 (en) 1999-08-31 2005-06-28 Nortel Networks Limited Method and apparatus for training a multilingual speech model set
US6601234B1 (en) 1999-08-31 2003-07-29 Accenture Llp Attribute dictionary in a business logic services environment
US6697824B1 (en) 1999-08-31 2004-02-24 Accenture Llp Relationship management in an E-commerce application framework
US6470347B1 (en) 1999-09-01 2002-10-22 International Business Machines Corporation Method, system, program, and data structure for a dense array storing character strings
US6671856B1 (en) 1999-09-01 2003-12-30 International Business Machines Corporation Method, system, and program for determining boundaries in a string using a dictionary
GB2353927B (en) 1999-09-06 2004-02-11 Nokia Mobile Phones Ltd User interface for text to speech conversion
US6448986B1 (en) 1999-09-07 2002-09-10 Spotware Technologies Llc Method and system for displaying graphical objects on a display screen
US6675169B1 (en) 1999-09-07 2004-01-06 Microsoft Corporation Method and system for attaching information to words of a trie
AU4674400A (en) 1999-09-10 2001-04-10 Avantgo, Inc. System, method, and computer program product for interactive interfacing with mobile devices
US7127403B1 (en) 1999-09-13 2006-10-24 Microstrategy, Inc. System and method for personalizing an interactive voice broadcast of a voice service based on particulars of a request
US6885734B1 (en) 1999-09-13 2005-04-26 Microstrategy, Incorporated System and method for the creation and automatic deployment of personalized, dynamic and interactive inbound and outbound voice services, with real-time interactive voice database queries
US6633932B1 (en) 1999-09-14 2003-10-14 Texas Instruments Incorporated Method and apparatus for using a universal serial bus to provide power to a portable electronic device
DE19943875A1 (de) 1999-09-14 2001-03-15 Thomson Brandt Gmbh System zur Sprachsteuerung mit einem Mikrofonarray
US6217183B1 (en) 1999-09-15 2001-04-17 Michael Shipman Keyboard having illuminated keys
US6918677B2 (en) 1999-09-15 2005-07-19 Michael Shipman Illuminated keyboard
US6601026B2 (en) 1999-09-17 2003-07-29 Discern Communications, Inc. Information retrieval by natural language querying
US6453315B1 (en) 1999-09-22 2002-09-17 Applied Semantics, Inc. Meaning-based information organization and retrieval
US6463128B1 (en) 1999-09-29 2002-10-08 Denso Corporation Adjustable coding detection in a portable telephone
US6879957B1 (en) 1999-10-04 2005-04-12 William H. Pechter Method for producing a speech rendition of text from diphone sounds
US6789231B1 (en) 1999-10-05 2004-09-07 Microsoft Corporation Method and system for providing alternatives for text derived from stochastic input sources
US6868385B1 (en) 1999-10-05 2005-03-15 Yomobile, Inc. Method and apparatus for the provision of information signals based upon speech recognition
US6192253B1 (en) 1999-10-06 2001-02-20 Motorola, Inc. Wrist-carried radiotelephone
US6625583B1 (en) 1999-10-06 2003-09-23 Goldman, Sachs & Co. Handheld trading system interface
US6505175B1 (en) 1999-10-06 2003-01-07 Goldman, Sachs & Co. Order centric tracking system
DE69904822T2 (de) 1999-10-07 2003-11-06 Zlatan Ribic Verfahren und Anordnung zur Aufnahme von Schallsignalen
US7020685B1 (en) 1999-10-08 2006-03-28 Openwave Systems Inc. Method and apparatus for providing internet content to SMS-based wireless devices
US7219123B1 (en) 1999-10-08 2007-05-15 At Road, Inc. Portable browser device with adaptive personalization capability
US7176372B2 (en) 1999-10-19 2007-02-13 Medialab Solutions Llc Interactive digital music recorder and player
US6353794B1 (en) 1999-10-19 2002-03-05 Ar Group, Inc. Air travel information and computer data compilation, retrieval and display method and system
US6192340B1 (en) 1999-10-19 2001-02-20 Max Abecassis Integration of music from a personal library with real-time information
KR100812109B1 (ko) 1999-10-19 2008-03-12 소니 일렉트로닉스 인코포레이티드 자연어 인터페이스 제어 시스템
WO2001030046A2 (en) 1999-10-22 2001-04-26 Tellme Networks, Inc. Streaming content over a telephone interface
US6807574B1 (en) 1999-10-22 2004-10-19 Tellme Networks, Inc. Method and apparatus for content personalization over a telephone interface
US6970915B1 (en) 1999-11-01 2005-11-29 Tellme Networks, Inc. Streaming content over a telephone interface
US6473630B1 (en) 1999-10-22 2002-10-29 Sony Corporation Method and apparatus for powering a wireless headset used with a personal electronic device
JP2001125896A (ja) 1999-10-26 2001-05-11 Victor Co Of Japan Ltd 自然言語対話システム
US7310600B1 (en) 1999-10-28 2007-12-18 Canon Kabushiki Kaisha Language recognition using a similarity measure
GB2355834A (en) 1999-10-29 2001-05-02 Nokia Mobile Phones Ltd Speech recognition
US6772195B1 (en) 1999-10-29 2004-08-03 Electronic Arts, Inc. Chat clusters for a virtual world application
AU1335401A (en) 1999-11-02 2001-05-14 Iomega Corporation Portable audio playback device and removable disk drive
US6725190B1 (en) 1999-11-02 2004-04-20 International Business Machines Corporation Method and system for speech reconstruction from speech recognition features, pitch and voicing with resampled basis functions providing reconstruction of the spectral envelope
US6535983B1 (en) 1999-11-08 2003-03-18 3Com Corporation System and method for signaling and detecting request for power over ethernet
US6665640B1 (en) 1999-11-12 2003-12-16 Phoenix Solutions, Inc. Interactive speech based learning/training system formulating search queries based on natural language parsing of recognized user queries
US9076448B2 (en) 1999-11-12 2015-07-07 Nuance Communications, Inc. Distributed real time speech recognition system
US6546262B1 (en) 1999-11-12 2003-04-08 Altec Lansing Technologies, Inc. Cellular telephone accessory device for a personal computer system
US7050977B1 (en) 1999-11-12 2006-05-23 Phoenix Solutions, Inc. Speech-enabled server for internet website and method
US6615172B1 (en) 1999-11-12 2003-09-02 Phoenix Solutions, Inc. Intelligent query engine for processing voice based queries
US7392185B2 (en) 1999-11-12 2008-06-24 Phoenix Solutions, Inc. Speech based learning/training system using semantic decoding
US7725307B2 (en) 1999-11-12 2010-05-25 Phoenix Solutions, Inc. Query engine for processing voice based queries including semantic decoding
US6633846B1 (en) 1999-11-12 2003-10-14 Phoenix Solutions, Inc. Distributed realtime speech recognition system
DE19955720C2 (de) 1999-11-16 2002-04-11 Hosseinzadeh Dolkhani Boris Verfahren und tragbares Trainingsgerät zum Durchführen eines Trainings
JP2001148899A (ja) 1999-11-19 2001-05-29 Matsushita Electric Ind Co Ltd 通信装置、補聴器、および補聴器の調整方法
US7412643B1 (en) 1999-11-23 2008-08-12 International Business Machines Corporation Method and apparatus for linking representation and realization data
US6532446B1 (en) 1999-11-24 2003-03-11 Openwave Systems Inc. Server based speech recognition user interface for wireless devices
US6526382B1 (en) 1999-12-07 2003-02-25 Comverse, Inc. Language-oriented user interfaces for voice activated services
US6755743B1 (en) 1999-12-08 2004-06-29 Kabushiki Kaisha Sega Enterprises Communication game system and processing method thereof
US6340937B1 (en) 1999-12-09 2002-01-22 Matej Stepita-Klauco System and method for mapping multiple identical consecutive keystrokes to replacement characters
US20010030660A1 (en) 1999-12-10 2001-10-18 Roustem Zainoulline Interactive graphical user interface and method for previewing media products
GB2357395A (en) 1999-12-14 2001-06-20 Nokia Mobile Phones Ltd Message exchange between wireless terminals.
US7024363B1 (en) 1999-12-14 2006-04-04 International Business Machines Corporation Methods and apparatus for contingent transfer and execution of spoken language interfaces
US6377925B1 (en) 1999-12-16 2002-04-23 Interactive Solutions, Inc. Electronic translator for assisting communications
US6978127B1 (en) 1999-12-16 2005-12-20 Koninklijke Philips Electronics N.V. Hand-ear user interface for hand-held device
US7434177B1 (en) 1999-12-20 2008-10-07 Apple Inc. User interface for providing consolidation and access
US6760412B1 (en) 1999-12-21 2004-07-06 Nortel Networks Limited Remote reminder of scheduled events
US20060184886A1 (en) 1999-12-22 2006-08-17 Urbanpixel Inc. Spatial chat in a multiple browser environment
US6397186B1 (en) 1999-12-22 2002-05-28 Ambush Interactive, Inc. Hands-free, voice-operated remote control transmitter
US6526395B1 (en) 1999-12-31 2003-02-25 Intel Corporation Application of personality models and interaction with synthetic characters in a computing system
US20010042107A1 (en) 2000-01-06