KR20030046494A - 언어 독립적 음성-기반 검색 시스템 - Google Patents

언어 독립적 음성-기반 검색 시스템 Download PDF

Info

Publication number
KR20030046494A
KR20030046494A KR10-2003-7005005A KR20037005005A KR20030046494A KR 20030046494 A KR20030046494 A KR 20030046494A KR 20037005005 A KR20037005005 A KR 20037005005A KR 20030046494 A KR20030046494 A KR 20030046494A
Authority
KR
South Korea
Prior art keywords
language
text
search
user
keyword
Prior art date
Application number
KR10-2003-7005005A
Other languages
English (en)
Other versions
KR100653862B1 (ko
Inventor
즈호우구오준
Original Assignee
인텔 코오퍼레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인텔 코오퍼레이션 filed Critical 인텔 코오퍼레이션
Publication of KR20030046494A publication Critical patent/KR20030046494A/ko
Application granted granted Critical
Publication of KR100653862B1 publication Critical patent/KR100653862B1/ko

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/005—Language recognition
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33—Querying
    • G06F16/3331—Query processing
    • G06F16/3332—Query translation
    • G06F16/3334—Selection or weighting of terms from queries, including natural language queries
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33—Querying
    • G06F16/3331—Query processing
    • G06F16/3332—Query translation
    • G06F16/3337—Translation of the query language, e.g. Chinese to English
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33—Querying
    • G06F16/3331—Query processing
    • G06F16/334—Query execution
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/263—Language identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/20—Natural language analysis
    • G06F40/279—Recognition of textual entities
    • G06F40/289—Phrasal analysis, e.g. finite state techniques or chunking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/30—Semantic analysis
    • G06F40/35—Discourse or dialogue representation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/40—Processing or translation of natural language
    • G06F40/42—Data-driven translation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/40—Processing or translation of natural language
    • G06F40/55—Rule-based translation
    • G06F40/56—Natural language generation
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L2015/088—Word spotting
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/226—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics
    • G10L2015/228—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics of application context

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Machine Translation (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Navigation (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

언어 독립적인 음성-기반 사용자 인터페이스 방법은, 사용자로부터 음성 입력 데이터를 수신하는 단계, 상기 음성 입력 데이터로부터 상기 사용자에 의해 사용된 언어를 식별하는 단계, 적어도 부분적으로 상기 언어 식별자에 기반하여 상기 음성 입력 데이터에서 상기 사용자의 음성을 인식함으로써, 상기 음성 입력 데이터를 상기 식별된 언어로 이루어진 제1 텍스트로 변환하는 단계, 키워드를 추출하기 위해 상기 제1 텍스트를 분석하는 단계, 및 상기 키워드를 애플리케이션에 대한 커맨드로 사용하는 단계를 포함한다. 또한, 상기 커맨드에 대한 결과를 수신하는 단계, 상기 결과를 상기 식별된 언어에 따른 자연 언어 형식의 제2 텍스트로 변환하는 단계, 및 상기 사용자에 의한 지각을 위해 상기 제2 텍스트를 렌더링하는 단계를 더 포함한다.

Description

언어 독립적 음성-기반 검색 시스템{LANGUAGE INDEPENDENT VOICE-BASED SEARCH SYSTEM}
최근, 인터넷이 다른 소스보다 더 많은 정보를 사용자들에게 제공하고 있다. 그러나, 종종 누군가가 원하는 정보를 찾는 것이 어려울 때가 있다. 그 결과, 원하는 정보의 위치를 찾는 것을 돕기 위해 검색 엔진이 개발되어 왔다. 검색 엔진을 사용하기 위해, 사용자는 통상적으로 키보드를 이용하여 검색어에 타이핑하거나, 또는 마우스를 이용하여 검색 카테고리를 선택한다. 그러면, 검색 엔진은 그 검색어에 기반하여 인터넷 또는 인트라넷을 검색하여 관련된 정보를 찾는다. 검색어에 영어로 타이핑하는 것이 어려운 사용자들(예로, 중국어 또는 일어만을 사용하는 사람들)은 이러한 검색 엔진을 사용하는 것이 쉽지 않기 때문에, 이러한 사용자 인터페이스의 제약은 인터넷 또는 인트라넷 상에서 정보의 위치를 찾기 위해 웹 브라우저를 사용할 수 있는 사용자들의 수를 제한한다.
검색 엔진 또는 웹 포털이 다수의 언어로 디스플레이를 지원하면, 검색 엔진 또는 포털은 통상적으로, 사용자가 마우스를 이용하여 출력으로 요구된 언어를 선택한 후에만, 특정 언어로 사전에 준비된 웹 페이지를 디스플레이한다.
최근에, 일부 인터넷 포털은 음성 입력 서비스를 구현하여, 이로써 사용자는 사용자의 컴퓨터 시스템에 연결된 마이크 및 음성 인식 애플리케이션을 이용하여 날씨, 스포츠, 주가 등의 토픽에 관한 정보를 요청할 수 있다. 이 경우에, 디스플레이될 웹 페이지를 선택하기 위해, 음성 데이터는 그 포털이 인식하는 소정의 커맨드로 변환된다. 그러나, 통상적으로 영어가 지원되는 유일한 언어이고, 그 음성은 대화형이 아니다. 검색 엔진이 직접 음성 검색 질의를 지원하는 것은 알려져 있지 않다.
본 발명은 일반적으로 웹 브라우저 및 검색 엔진에 관한 것으로, 특히, 상이한 언어의 음성을 사용하는 웹 브라우저를 위한 사용자 인터페이스에 관한 것이다.
본 발명의 특징 및 장점들은 첨부된 도면 및 다음의 상세한 설명으로부터 명확해 질 것이다.
도1은 본 발명의 일실시예에 따른 언어 독립적 음성-기반 검색 시스템을 도시한 블록도.
도2는 본 발명의 일실시예에 따른 언어 독립적 음성-기반 검색 과정을 도시한 순서도.
도3은 본 발명의 일실시예에 따른 언어 독립적 음성-기반 검색 시스템으로 동작될 수 있는 샘플 프로세싱 시스템을 도시한 블록도.
발명의 요약
언어 독립적인 음성-기반 사용자 인터페이스 방법은, 사용자로부터 음성 입력 데이터를 수신하는 단계, 상기 음성 입력 데이터로부터 상기 사용자에 의해 사용된 언어를 식별하는 단계, 적어도 부분적으로 상기 언어 식별자에 기반하여 상기 음성 입력 데이터에서 상기 사용자의 음성을 인식함으로써, 상기 음성 입력 데이터를 상기 식별된 언어로 이루어진 제1 텍스트로 변환하는 단계, 키워드를 추출하기 위해 상기 제1 텍스트를 분석하는 단계, 및 상기 키워드를 애플리케이션에 대한 커맨드로 사용하는 단계를 포함한다. 또한, 상기 커맨드에 대한 결과를 수신하는 단계, 상기 결과를 상기 식별된 언어에 따른 자연 언어 형식의 제2 텍스트로 변환하는 단계, 및 상기 사용자에 의한 지각을 위해 상기 제2 텍스트를 렌더링하는 단계를 더 포함한다.
본 발명의 일실시예는 언어 독립적 음성-기반 인터넷 또는 인트라넷 검색 시스템을 위한 방법 및 장치에 관한 것이다. 본 발명은 사용자가 그들의 모국어를 통해 원하는 정보를 검색하도록 함으로써, 현재의 인터넷 또는 인트라넷 검색 구조를 향상시키는데 사용될 수 있다. 일실시예에서, 검색 시스템은 대화 방식으로 말해진 사용자로부터의 음성 입력 데이터를 수신하고, 사용자에 의해 사용된 언어를 자동으로 식별하고, 그 음성(voice) 입력 데이터 내에서 음성(speech)을 인식하고, 그 음성을 검색 엔진에 검색 질의하기 위한 입력 데이터로 사용하여 요구된 검색을 수행한다. 보다 강력한 언어 독립적 음성-기반 검색 시스템을 만들기 위해, 몇몇 특징들이 시스템 내에 포함될 수 있다. 사용자가 검색어를 정확하게 말할 필요가 없도록, 자연스럽게 말해진 질의로부터 검색어를 추출하기 위해 자연 언어 처리(natural language processing: NLP)가 사용될 수 있다(이에 따라 대화형 언어를 지원하게 된다). 검색 공간이 실질적으로 확장될 수 있도록, 다수의 언어에 걸쳐 검색어 뿐만 아니라 검색 결과를 변환하기 위해 기계 번역(machine translation)이 사용될 수 있다. 결과가 잘 정리되지 않거나 사용자가 선호하는 방식으로 나타나지 않는 경우, 검색 결과를 요약하기 위해 자동 요약 기술(automatic summarization techniques)이 사용될 수 있다. 검색 결과를 사용자의 모국어로 사용자에게 다시 말로 나타내기 위해, 자연 언어 생성 및 텍스트-음성(text to speech: TTS) 기술이 사용될 수 있다. 본 발명의 범용 음성 검색 개념은, 인터넷 또는 인트라넷 검색 엔진과 통합되면, 가장 편리한 방식으로 인터넷 또는 인트라넷 상에서 이용가능한 정보를 사용하기 위해 상이한 언어를 말하는 사람들을 위한 강력한 툴이 될 수 있다. 이 시스템은 사용하기 보다 쉬운 검색 엔진 또는 다른 웹 사이트를 만듦으로써, 비-영어권 사람들 사이에 인터넷 사용의 증가를 촉진할 수 있다.
본 명세서에서 본 발명의 "하나의 실시예" 또는 "일실시예"에 대한 언급은, 그 실시예와 관련하여 설명되는 특정한 형태, 구조 또는 특성이 본 발명의 적어도하나의 실시예에 포함된다는 것을 의미한다. 따라서, 본 명세서 전체를 통해 여러 곳에서 나타나는 "일실시예에서"라는 용어는 반드시 모두 동일한 실시예를 언급하는 것은 아니다.
본 발명의 실시예들은 적어도 몇 가지의 특징들을 제공한다. 음성 인식(speech recognition)은 사용자가 자신의 음성과 같은 가장 자연스럽고 효과적인 매체로 인터넷 검색 엔진과 상호 작용할 수 있게 한다. 이것은 특히, 사용자들이 그 기록 언어의 특성으로 인해 그들의 모국어를 신속하게 타이핑할 수 없는 여러 아시아 국가들에서 유용할 수 있다. 자동 언어 식별(automatic language identification)은, 그들이 말하는 언어가 어떤 언어인지를 특별히 시스템에 말하지 않아도, 그들 자신의 음성을 통해 단일 시스템을 이용하여 인터넷 또는 인트라넷을 검색하기 위해, 사용자가 상이한 언어를 말할 수 있도록 한다. 이 특징은 검색 엔진, 및 포괄적으로 월드 와이드 웹(WWW)에 대한 인터넷 사용자 인구에서의 상당한 증가를 촉진할 수 있다. 자연 언어 처리(natural language processing)는 사용자가 대화 방식으로 자연스럽게 검색 질의에 그들 자신의 검색어를 말할 수 있도록 사용될 수 있다. 예를 들면, 사용자가 "저에게 남북 전쟁에 대한 기사를 검색해 주실 수 있을까요?"라고 말하면, 자연 언어 처리 기능은, 사용자에게 "남북 전쟁"이라고 정확하게 말하도록 요구하는 대신에, 상기 전체 문장을 검색어 "남북 전쟁"으로 변환할 수 있다.
또한, 언어의 기계 번역(machine translation)은 검색 엔진이 교차 언어 검색을 수행하도록 하는데 사용될 수 있다. 예를 들면, 사용자가 검색어를 중국어로말하는 경우, 기계 번역은 그 검색어를 다른 언어(예로, 영어, 스페인어, 프랑스어, 독일어 등)로 번역하여, 인터넷을 통해 보다 넓은 검색을 수행할 수 있다. 그 검색 질의에 관련된 것이 검색되었지만, 웹 페이지가 중국어 이외의 언어로 기록된 경우, 본 발명은 그 검색 결과를 중국어(본래 음성 검색 질의 언어)로 다시 번역한다. 예를 들면, 검색 결과가 긴 문서로 산재되어 있거나, 또는, 검색 엔진에 의해 검색어에 관련하여 판정된 정보 내에서 식별하기 어려운 경우, 그 검색 결과를 요약하는 것을 돕기 위해 자동 요약 기술(automatic summarization technique)이 사용될 수 있다. 검색 결과가 사용자가 선호하지 않는 형식으로 나타나는 경우, 본 발명은 그 결과를 요약하여, 그것을 사용자에게 상이한 방식으로 제공할 수 있다. 예를 들면, 그 결과가 컬러 형태로 나타나는데, 사용자가 어떤 컬러를 구별하기 어려운 경우, 본 발명은 그 형태의 컨텐츠를 요약하여, 그 정보를 사용자에게 텍스트 형식으로 제공한다.
자연 언어 생성(natural language generation)은 검색 결과를 체계화하여 요구된 출력 언어인, 자연스런 구어로 응답을 생성하도록 돕는다. 즉, 그 결과는 언어-특정 방식으로 수정될 수 있다. 사용자가 청취 모드 출력을 선택한 경우, 청취 방식으로 검색 결과를 렌더링하기 위해 텍스트-음성(TTS) 기능이 사용될 수 있다. 예를 들면, 사용자의 눈이 바쁘거나, 또는 사용자가 구두 검색 질의에 대해 구두 응답을 선호할 수 있다.
언어 독립적 음성-기반 검색 시스템 구조가 도1에 도시되어 있다. 사용자(미도시)는 입력 장치(10) 및 출력 장치(12)와 상호 작용한다. 입력 장치에 있어서,시스템은 최소한 전형적인 키보드 및 마우스(14) 기능과, 음성(16) 입력 기능을 지원한다. 음성 입력은, 시스템에 연결된 마이크로부터 음성 또는 다른 가청 음향을 수신함으로써, 주지된 방식으로 지원될 수 있다. 수신된 오디오 데이터는 디지털화되어, 음성 인식 모듈 또는 언어 인식 모듈이 허용하는 형식으로 변환될 수 있다. 출력 장치에 있어서, 시스템은 전형적인 방식으로 디스플레이(18) 상에 검색 결과를 텍스트 또는 이미지로 렌더링할 수 있다. 대안적으로, 시스템은 주지된 텍스트-음성(TTS) 기능(20)을 이용하여 검색 결과를 들을 수 있게 렌더링할 수 있다. 각각의 식별된 입력 및 출력에서의 처리는 이 기술분야에서 통상의 지식을 가진 자에게는 주지되어 있으므로, 여기서 더 상세히 기재되지는 않을 것이다. 다른 실시예에서는, 본 발명의 범위를 제한하지 않고, 다른 입력 및/또는 출력 처리가 사용될 수도 있다.
사용자가 검색을 수행하기 위해 자신의 음성을 사용하도록 결정하면, 그 사용자는 시스템에 연결된 마이크를 이용하여, 그 사용자가 관심있는 것을 찾아달라고 시스템에게 요청한다. 예를 들면, 사용자가 "음음, 나에게 누가 2000년도 NFL 슈퍼볼에서 우승, 어, 우승했는지에 관한 정보를 찾아주세요" 라고 말할 수 있다. 또한, 사용자는 이것은 시스템에 의해 지원되는 다른 언어로 말할 수 있다. 예를 들면, 시스템은 중국어, 일어, 영어, 프랑스어, 스페인어 및 러시아어를 입력 언어로 지원하도록 구현될 수 있다. 여러 실시예에서, 상이한 세트의 언어들이 지원될 수 있다.
음성 입력 데이터가 포착되어 디지털화되면, 사용자가 말하는 언어가 어떤언어인지를 판단하기 위해, 그 음성 입력 데이터는 언어 독립적 사용자 인터페이스(24) 내의 언어 식별 모듈(22)로 전달될 수 있다. 언어 식별 모듈(22)은 어떤 언어가 구사되고 있는지를 식별하기 위해 음성 입력 데이터로부터 특징을 추출하여, 사용된 언어의 식별자를 출력한다. 음성 데이터로부터 언어를 자동으로 식별하기 위한 여러 알고리즘은 이 기술분야에서 주지되어 있다. 일반적으로, 히든 마르코프 모델(Hidden Markov model) 또는 신경망이 식별 알고리즘에 사용될 수 있다. 본 발명의 일실시예에서는, J.L. Hieronymus 및 S. Kadambe에 의해 "Robust Spoken Language Identification Using Large Vocabulary Speech Recognition(1997, IEEE International Conference on Acoustics, Speech and Signal Processing)"에 기재된 것과 같은 구어 식별 시스템(spoken language identification system)이 사용될 수 있다. 다른 실시예에서는, F. Pellegrino 및 R. Andre-Obrecht에 의해 "An Unsupervised Approach to Language Identification(1999, IEEE International Conference on Acoustics, Speech and Signal Processing)"에 기재된 것과 같은 구어 식별 시스템이 사용될 수 있다. 다른 실시예에서는, 현재 알려져 있거나 또는 아직 개발 중인 다른 자동 언어 식별 시스템이 사용될 수 있다. 사용된 언어 식별 시스템에 관계없이, 시스템 개발자는 검색 시스템에 의해 지원되는 선택된 세트의 언어들을 인식하도록 언어 식별 시스템 내의 모듈을 사용할 수 있다.
적어도 부분적으로 검출된 언어에 기반하여, 텍스트 형식으로 변환되도록 하기 위해 음성 입력 데이터가 음성 인식 모듈(23)에 전달될 수 있다. 일부 실시예에서는, 이 처리과정의 일부분들이 언어 식별 모듈(22)과 병렬로 수행될 수 있다. 음성 인식 모듈(23)은 변환될 음성 데이터와 언어 식별자를 수신하고, 어떤 단어가 사용되었는지를 인식하여, 그 정보를 텍스트로 변환한다. 이에 따라, 음성 인식 모듈(23)은 주지된 음성-텍스트 기능을 제공한다. 상용화된 여러 음성-텍스트 소프트웨어 애플리케이션 중 어느 하나가 이 목적을 위해 본 발명에 사용될 수 있다. 예를 들면, IBM(International Business Machines) 코퍼레이션사로부터 상용화된 ViaVoiceTM은 사용자가 여러 애플리케이션 프로그램으로 직접 명령하도록 한다. ViaVoiceTM의 다른 버전은 다수의 언어(예로, 영어, 중국어, 프랑스어 및 이태리어)를 지원한다.
많은 경우에, 음성 인식 모듈에 의해 판정된 텍스트는 문법적으로 부정확할 수 있다. 음성 입력은 사용자에 의한 자발적인 음성이기 때문에, 결과로서 생성되는 텍스트는 채움 단어, 관용구, 반복 등을 포함할 수 있다. 자연 언어 처리 모듈(26)은 이 텍스트로부터 키워드를 추출하는데 사용될 수 있다. 자연 언어 처리 모듈은, 키워드를 식별하고, 그 텍스트 내의 중요하지 않은 단어를 폐기하기 위해, 음성 인식 모듈에 의해 출력되는 텍스트를 분석하기 위한 파서(parser)를 포함한다. 상기의 예에서, "음음, 나에게, 누가, ~에서, 우승, 어, ~에 관한, 정보, 찾아주세요" 라는 단어 및 사운드는 폐기되고, "2000년 NFL 슈퍼 볼" 이라는 단어가 키워드로 식별될 수 있다. 구어로부터 선택된 음성 어구를 추출하도록 파서를 구현하기 위한 여러 알고리즘 및 시스템은 이 기술분야에서 주지되어 있다. 본 발명의 일실시예에서는, Wayne Ward에 의해 "Extracting Information in Spontaneous Speech"(1994, Proceedings of the International Conference on Spoken Language Processing : ICSLP)에 기재된 것과 같은 파서가 사용될 수 있다. 다른 실시예에서는, S. Seneff에 의해 "TINA: A Natural Language System for Spoken Language Applications"(Computational Linguistics, March, 1992)에 기재된 것과 같은 파서가 사용될 수 있다. 그 밖의 실시예에서는, 현재 알려져 있거나 또는 아직 개발 중인 다른 자연 언어 처리 시스템이 사용될 수 있다.
텍스트로부터 키워드가 추출되고 나면, 그 키워드는 기계 번역 모듈(28)에 의해 다수의 지원 언어로 번역될 수 있다. 키워드를 다수의 언어로 번역하고, 그 키워드를 검색어로 사용함으로써, 검색이 상이한 언어로 이루어진 문서에 걸쳐 수행될 수 있고, 이에 따라, 사용되는 검색 공간을 상당히 확장할 수 있다. 언어의 기계 번역을 구현하기 위한 여러 알고리즘 및 시스템은 이 기술분야에서 주지되어 있다. 본 발명의 일실시예에서는, E. Nyberg, T.Mitamura 및 J. Carbonell에 의해 "The KANT Machine Translation System: From R&D to Initial Deployment"(Presentation at 1997 LISA Workshop on Integrating Advanced Translation Technology)에 기재된 것과 같은 기계 번역이 사용될 수 있다. 다른 실시예에서는, 현재 알려져 있거나 또는 아직 개발 중인 다른 기계 번역 시스템이 사용될 수 있다.
키워드는 상이한 언어(30)의 검색어로 검색 엔진(32)에 자동적으로 입력될 수 있다. 여러 주지된 검색 엔진 중의 하나 또는 그 이상이 사용될 수 있다(예로,Yahoo, Excite, AltaVista, Google, Northern Lights 등). 검색 엔진은 인터넷 또는 특정 인트라넷을 검색하여, 상이한 언어의 검색 결과(34)를 언어 독립적 사용자 인터페이스(24)로 리턴시킨다. 검색 결과에 따라, 그 결과들이 단일 언어 또는 다수의 언어로 이루어질 수 있다. 검색 결과가 다수의 언어로 이루어지는 경우, 그 검색 결과를 사용자에 의해 사용된 언어로 번역하기 위해 기계 번역 모듈(28)이 사용될 수 있다. 검색 모듈이 사용자의 언어가 아닌 단일 언어로 이루어진 경우, 그 결과는 사용자의 언어로 번역될 수 있다.
필요에 따라, 검색 결과를 요약하기 위해, 자동 요약 모듈(36)이 사용될 수 있다. 본 발명의 일실시예에서는, T. Kristjansson, T. Huang, P. Ramesh 및 B. Juang에 의해 "A Unified Structure-Based Framework for Indexing and Gisting of Meetings(1999 IEEE International Conference on Multimedia Computing and Systems)"에 기재된 것과 같은 자동 요약 기술이 사용될 수 있다. 다른 실시예에서는, 현재 알려져 있거나 또는 아직 개발 중인 다른 정보 요약 기술이 사용될 수 있다.
요약된 검색 결과를 사용자 언어로 취하여, 그 결과를 자연스러운 구어 형식으로 생성하기 위해 자연 언어 생성 모듈(38)이 사용될 수 있다. 그 결과들은 선택된 운율 패턴(prosodic pattern)을 이용하여 판독가능한 문장으로 적합하게 수정되어, 그 결과가 사용자에게 렌더링되면 자연스럽고 문법적으로 올바르게 들린다. 본 발명의 일실시예에서, J. Glass, J. Polifroni 및 S. Seneff에 의해 "Multilingual Language Generation Across Multiple Domains(1994 Proceeding of InternationalConference on Spoken Language Processing: ICSLP)"에 기재된 것과 같은 자연 언어 생성 시스템이 사용될 수 있고, 그 밖에, 현재 알려져 있거나 또는 아직 개발 중인 다른 자연 언어 생성 처리 기술이 사용될 수도 있다.
자연 언어 생성 모듈의 출력은 텍스트-음성 모듈(20)로 전달되어, 텍스트를 오디오 형식으로 변환하고, 그 오디오 데이터를 사용자에게 렌더링하게 된다. 대안적으로, 텍스트는 통상의 방식으로 디스플레이(18) 상에 보여질 수 있다. 이 기술분야에서는 여러 텍스트-음성 구현예가 주지되어 있다. 일실시예에서는, IBM 코퍼레이션사로부터 상용화된 ViaVoiceTMText-To-Speech(TTS) 기술이 사용될 수 있다. Lucent Technologies Bell Laboratories로부터 상용화된 다중언어 텍스트-음성 시스템과 같은 다른 구현예가 사용될 수도 있다. 다른 실시예에서는, 검색 결과가 사용자를 위해 청각적으로 렌더링되면서, 합성된 음성과 동기되어 애니메이팅된 표정 이미지(예로, 토킹 헤드(talking head))를 디스플레이하기 위해 시각적 TTS가 사용될 수도 있다. 음성과 매칭되는 토킹 헤드의 실감나는 입 움직임은 말하고 있는 이미지에 대한 지각을 제공할 뿐만 아니라, 렌더링되는 음성의 가해성(intelligibility)을 증가시킬 수 있다. 토킹 헤드와 같은 에니메이팅된 주체는 검색이 진행되는 동안에 사용자가 기다리기 쉽도록 할 수 있다.
상기의 논의는 언어 독립적 음성-기반 입력에 대한 애플리케이션으로서 검색 엔진에 포커싱되었지만, 구어 입력의 자동 언어 식별을 지원하는 다른 주지된 애플리케이션도 역시 본 발명으로부터 이득을 얻을 수 있다. 본 발명을 포함하는 웹 브라우저는 검색 엔진 이외에 웹 사이트 또는 애플리케이션과의 인터페이스를 위해 사용될 수 있다. 예를 들면, 상이한 언어로 음성 입력을 지원하기 위해 웹 포털이 본 발명을 포함할 수 있다. 전자 상거래 웹 사이트는 상이한 언어로 음성-기반 주문을 받아서, 그 확인 정보를 구매자에 의해 사용된 언어로 말로 대답해 줄 수 있다. 예를 들면, 언어 독립적 사용자 인터페이스에 의해 웹 사이트로 전송된 키워드는 시스템에 의해 지원되는 어떤 언어로 본래 말해지는 제품 정보에 대한 요구 또는 구매 주문일 수 있다. 뉴스 웹 사이트는, 상이한 언어로 말하는 사용자로부터의 특정 뉴스 아이템에 대한 구두 요구를 수신하여, 요구된 뉴스 아이템을 사용자에 의해 사용된 언어로 대답할 수 있다. 많은 다른 애플리케이션 및 웹 사이트들이 본 발명에 의해 제공되는 능력의 이득을 얻을 수 있다.
다른 실시예에서는, 요구에 따라, 언어 독립적 사용자 인터페이스 내의 일부 모듈이 생략될 수 있다. 예를 들면, 자동 요약 모듈이 생략되거나, 또는 단지 하나의 언어만이 지원되는 경우, 기계 번역 모듈이 생략될 수 있다.
도2는 본 발명의 일실시예에 따른 언어 독립적 음성-기반 검색 과정을 도시한 순서도이다. 블록(100)에서, 사용자로부터 음성이 수신되어, 디지털 표현으로 변환된다. 블록(102)에서, 사용자에 의해 사용된 언어를 식별하기 위해 디지털화된 음성이 분석될 수 있다. 블록(104)에서, 식별된 언어에 따라 음성이 텍스트로 변화될 수 있다. 블록(106)에서, 그 텍스트를 분석함으로써 텍스트로부터 키워드가 추출될 수 있다. 블록(108)에서, 키워드가 다수의 언어로 번역될 수 있다. 블록(110)에서, 다수의 언어로 이루어진 키워드가 하나 또는 그 이상의 검색 엔진에 질의하기 위한 검색어로서 사용될 수 있다. 블록(112)에서, 하나 또는 그 이상의 검색 엔진으로부터의 다수의 언어로 이루어진 검색 결과가 사용자에 의해 사용된 언어로 번역될 수 있다. 다음으로, 블록(114)에서, 그 검색 결과가 (필요에 따라) 요약될 수 있다. 블록(116)에서, 검색 결과가 사용자 언어에 대한 자연 언어 구문을 표현하는 텍스트 형식으로 생성될 수 있다. 블록(118)에서, 텍스트-음성 모듈을 이용하여 텍스트가 음성으로 변환되어, 사용자가 들을 수 있는 방식으로 렌더링될 수 있다.
상기의 설명에서, 본 발명의 여러 양태들이 기재되었다. 설명의 목적으로, 본 발명의 완전한 이해를 제공하기 위해, 특정 수, 시스템 및 구성이 제시되었다. 그러나, 이 기술분야에서 통상의 지식을 가진 자에게는, 본 발명이 이 특정한 세부사항없이 실시될 수 있다는 것이 명백할 것이다. 다른 예에서, 본 발명을 모호하지 않게 하기 위해, 주지된 특징들을 생략하거나 간략화되었다.
본 발명의 실시예들은 하드웨어 또는 소프트웨어, 또는 이들의 조합으로 구현될 수 있다. 그러나, 본 발명의 실시예들은 적어도 하나의 프로세서, 데이터 저장 시스템(휘발성 및 비휘발성 메모리 및/또는 저장 소자를 포함), 적어도 하나의 입력 장치 및 적어도 하나의 출력 장치를 포함하는 프로그램가능 시스템 상에서 실행되는 컴퓨터 프로그램으로서 구현될 수 있다. 여기서 기재된 기능들을 수행하도록 프로그램 코드가 입력 데이터로 사용되어, 출력 정보를 생성할 수 있다. 출력 정보는 주지된 방식으로 하나 또는 그 이상의 출력 장치에 인가될 수 있다. 본 발명을 위해, 재생 장치 소자를 내장한 프로세싱 시스템은, 예를 들면, 디지털 신호프로세서(DSP), 마이크로컨트롤러, 주문형 집적회로(ASIC) 또는 마이크로프로세서와 같은 프로세서를 갖는 어떤 시스템을 포함한다.
프로세싱 시스템과 통신하기 위해, 프로그램들은 고레벨 절차 또는 객체 지향 프로그래밍 언어로 구현될 수 있다. 프로그램은 또한, 요구에 따라, 어셈블리 또는 기계어로 구현될 수도 있다. 실제로, 본 발명은 어떠한 특정 프로그래밍 언어로 그 범위가 제한되지는 않는다. 어떤 경우에, 그 언어는 컴파일링되거나 또는 기계어로 해석된 언어일 수 있다.
전술된 절차를 수행하기 위해, 저장 매체 또는 장치가 프로세싱 시스템에 의해 판독되는 경우, 프로세싱 시스템을 구성하고 동작시키기 위해, 상기 프로그램들은 범용 또는 특수 목적의 프로그램가능 프로세싱 시스템에 의해 판독가능한 저장 매체 또는 장치(예로, 하드디스크 드라이브, 플로피 디스크 드라이브, ROM, CD-ROM 장치, 플래시 메모리 장치, DVD, 또는 그 밖의 저장 장치) 상에 저장될 수 있다. 또한, 본 발명의 실시예들은 프로세싱 시스템과 함께 사용하기 위해 구성된 머신-판독가능 매체로 구현되는 것으로 간주될 수 있으며, 여기서, 이와 같이 구성된 저장 매체는, 전술된 기능을 수행하기 위해, 프로세싱 시스템으로 하여금 특정 방식 및 소정의 방식으로 동작하도록 야기한다.
이러한 형태의 프로세싱 시스템 중 하나의 예가 도3에 도시되어 있지만, 다른 시스템이 사용될 수도 있고, 도시된 시스템의 모든 구성요소가 본 발명에 반드시 요구되지는 않는다. 샘플 시스템(400)은, 예를 들면, 전술된 실시예와 같은, 본 발명에 따른 언어 독립적 음성-기반 검색 시스템의 실시예들을 위한 프로세싱을 실행하기 위해 사용될 수 있다. 상기 샘플 시스템(400)은 인텔 코퍼레이션사로부터 상용화된 PENTIUM?Ⅱ, PENTIUM?Ⅲ 및 CELERONTM마이크로프로세서에 기반한 프로세싱 시스템을 대표하지만, (다른 마이크로프로세서를 갖는 퍼스널 컴퓨터, 공학용 워크스테이션, 그 밖의 셋탑 박스 등을 포함한) 다른 시스템 및 아키텍처가 사용될 수도 있다.
도3은 본 발명의 일실시예에 따른 시스템(400)의 블록도이다. 시스템(400)은 데이터 신호를 처리하는 프로세서(402)를 포함한다. 프로세서(402)는, 프로세서(402)와 시스템(400) 내의 다른 구성요소들 사이에 데이터 신호를 전송하는 프로세서 버스(404)에 연결될 수 있다.
시스템(400)은 메모리(406)를 포함한다. 메모리(406)는 프로세서(402)에 의해 실행될 수 있는 데이터 신호로 표현되는 데이터 및/또는 명령어를 저장할 수 있다. 명령어 및/또는 데이터는 본 발명의 기술의 일부 및/또는 전부를 수행하기 위한 코드를 포함할 수 있다. 메모리(406)는 또한 추가의 소프트웨어 및/또는 데이터(미도시)를 포함할 수도 있다. 캐시 메모리(408)는 프로세서(402) 내에 위치할 수 있고, 메모리(406)에 저장된 데이터 신호를 저장한다.
브리지/메모리 제어기(410)가 프로세서 버스(404) 및 메모리(406)에 연결될 수 있다. 브리지/메모리 제어기(410)는 프로세서(402), 메모리(406) 및 시스템(400)내이 다른 구성요소들 사이에 데이터 신호를 지시하고, 프로세서 버스(404), 메모리(406) 및 제1 입/출력(I/O) 버스(412) 사이에서 데이터 신호를중개한다. 본 실시예에서는, 그래픽 제어기(413)에 의해 처리되거나 또는 렌더링되는 이미지를 사용자에게 디스플레이하기 위해, 그래픽 제어기(413)는 디스플레이 장치(미도시)에 대해 인터페이스로 동작한다.
제1 I/O 버스(412)는 단일 버스 또는 다수 버스의 조합을 포함할 수 있다. 제1 I/O 버스(412)는 시스템(400)내의 구성요소들 사이에 통신 링크를 제공한다. 네트워크 제어기(414)가 제1 I/O 버스(412)에 연결될 수 있다. 일부 실시예에서는, 디스플레이 장치 제어기(416)가 제1 I/O 버스(412)에 연결될 수 있다. 디스플레이 장치 제어기(416)는 디스플레이 장치를 시스템(400)에 연결시키고, 디스플레이 장치(미도시)와 시스템 사이의 인터페이스로 동작한다. 디스플레이 장치는 디스플레이 장치 제어기(416)를 통해 프로세서(402)로부터의 데이터 신호를 수신하고, 그 데이터 신호에 포함된 정보를 시스템(400)의 사용자에게 디스플레이한다.
제2 I/O 버스(420)는 단일 버스 또는 다수 버스의 조합을 포함할 수 있다. 제2 I/O 버스(420)는 시스템(400)내의 구성요소들 사이에 통신 링크를 제공한다. 데이터 저장 장치(422)가 제2 I/O 버스(420)에 연결될 수 있다. 키보드 인터페이스(424)가 제2 I/O 버스(420)에 연결될 수 있다. 사용자 입력 인터페이스(425)가 제2 I/O 버스(420)에 연결될 수 있다. 사용자 입력 인터페이스는, 예를 들면, 컴퓨터 시스템으로 입력 데이터를 제공하기 위해, 리모콘, 마우스, 조이스틱 또는 트랙볼과 같은 사용자 입력 장치에 연결될 수 있다. 버스 브리지(428)가 제1 I/O 버스(412)와 제2 I/O 버스(420)를 연결한다.
본 발명의 실시예들은 언어 독립적 음성-기반 검색 시스템으로 시스템(400)을 사용하는 것에 관한 것이다. 일실시예에 따르면, 이러한 프로세싱은 메모리(404)내의 명령어 시퀀스를 실행하는 프로세서(402)에 응답하여 시스템(400)에 의해 수행될 수 있다. 이러한 명령어는, 예를 들면, 데이터 저장 장치(422)와 같은 다른 컴퓨터-판독가능 매체, 또는 네트워크 제어기(414)를 통해 다른 소스로부터 메모리(404)로 판독될 수 있다. 명령어 시퀀스의 실행은 프로세서(402)로 하여금 본 발명의 실시예에 따른 언어 독립적 사용자 인터페이스 프로세싱을 실행하도록 야기한다. 대안의 실시예에서는, 본 발명의 실시예들을 구현하기 위해, 하드웨어 회로가 소프트웨어 명령어 대신에, 또는 이와 조합하여 사용될 수 있다. 따라서, 본 발명은 하드웨어 및 소프트웨어의 특정 조합으로 제한되지는 않는다.
시스템(400)의 구성요소들은 이 기술분야에서 주지된 방식으로 그들의 통상의 기능들을 수행한다. 특히, 데이터 저장 장치(422)는 본 발명에 따른 언어 독립적 음성-기반 검색 시스템의 실시예를 위한 실행가능 명령어 및 데이터 구조에 대해 장기간(long-term) 저장을 제공하는데 사용되는 반면에, 메모리(406)는 프로세서(402)에 의해 실행되는 동안에, 본 발명에 따른 언어 독립적 음성-기반 검색 시스템의 실시예의 실행가능 명령어를 단기간 저장하는데 사용될 수 있다.
이상에서, 본 발명이 특정 실시예를 참조하여 설명되었지만, 이 상세한 설명은 제한적인 의미로 의도된 것은 아니다. 이 기술분야에서 통상의 기술을 가진 자에게 본 발명이 속하는 것으로 이해될 수 있는 예시된 실시예의 여러 변형예들과 본 발명의 다른 실시예들은 본 발명의 사상 및 범위 내에 포함되는 것으로 간주되어야 한다.

Claims (35)

  1. 시스템과 인터페이싱하는 방법에 있어서,
    사용자로부터 음성 입력 데이터를 수신하는 단계;
    상기 음성 입력 데이터로부터 상기 사용자에 의해 사용된 언어를 식별하는 단계;
    적어도 부분적으로 상기 언어 식별자에 기반하여 상기 음성 입력 데이터에서 상기 사용자의 음성을 인식함으로써, 상기 음성 입력 데이터를 상기 식별된 언어로 이루어진 제1 텍스트로 변환하는 단계;
    키워드를 추출하기 위해 상기 제1 텍스트를 분석하는 단계; 및
    상기 키워드를 애플리케이션에 대한 커맨드(command)로 사용하는 단계
    를 포함하는 방법.
  2. 제1항에 있어서,
    상기 커맨드에 대한 결과를 수신하는 단계;
    상기 결과를 상기 식별된 언어에 따른 자연 언어 형식(natural language format)으로 이루어진 제2 텍스트로 변환하는 단계; 및
    상기 사용자에 의한 지각을 위해 상기 제2 텍스트를 렌더링하는 단계
    를 더 포함하는 방법.
  3. 제2항에 있어서,
    상기 렌더링 단계는 상기 제2 텍스트를 음성으로 변환하고, 상기 음성을 상기 사용자에게 렌더링하는 단계를 포함하는
    방법.
  4. 제1항에 있어서,
    상기 키워드를 상기 식별된 언어 이외의 다수의 언어로 번역하고, 상기 번역된 키워드를 상기 커맨드로 사용하는 단계
    를 더 포함하는 방법.
  5. 제2항에 있어서,
    상기 키워드를 검색 엔진에 대한 검색 질의로 사용하는 단계 - 여기서, 상기 결과는 상기 검색 질의에 대해 동작하는 상기 검색 엔진으로부터의 검색 결과를 포함함 -
    를 더 포함하는 방법.
  6. 제2항에 있어서,
    상기 결과를 상기 제2 텍스트로 변환하기 전에, 상기 결과를 자동으로 요약하는 단계
    를 더 포함하는 방법.
  7. 제2항에 있어서,
    상기 키워드를 상기 식별된 언어 이외의 다수의 언어로 번역하고, 상기 번역된 키워드를 검색 엔진에 대한 검색 질의로 사용하는 단계 - 여기서, 상기 결과는 상기 검색 질의에 대해 동작하는 상기 검색 엔진으로부터의 검색 결과를 포함함 -
    를 더 포함하는 방법.
  8. 제7항에 있어서,
    상기 식별된 언어 이외의 언어로 이루어진 검색 결과를 상기 식별된 언어로 번역하는 단계
    를 더 포함하는 방법.
  9. 제1항에 있어서,
    상기 애플리케이션은 웹 브라우저를 포함하는
    방법.
  10. 제9항에 있어서,
    상기 웹 브라우저는 검색 엔진과 인터페이싱하고, 상기 커맨드는 검색 질의를 포함하는
    방법.
  11. 제9항에 있어서,
    상기 웹 브라우저는 쇼핑 웹 사이트와 인터페이싱하고, 상기 커맨드는 제품 정보에 대한 요구 및 구입 주문 중 적어도 하나를 포함하는
    방법.
  12. 제1항에 있어서,
    상기 음성은 대화형(conversational) 음성을 포함하는
    방법.
  13. 다수의 머신-판독가능 명령어를 저장하는 저장 매체
    를 포함하고,
    여기서, 상기 명령어는 프로세서에 의해 실행되는 경우, 사용자로부터 음성 입력 데이터를 수신하고, 상기 음성 입력 데이터로부터 상기 사용자에 의해 사용된 언어를 식별하고, 적어도 부분적으로 상기 언어 식별자에 기반하여 상기 음성 입력 데이터에서 상기 사용자의 음성을 인식함으로써, 상기 음성 입력 데이터를 상기 식별된 언어로 이루어진 제1 텍스트로 변환하고, 키워드를 추출하기 위해 상기 제1 텍스트를 분석하며, 상기 키워드를 애플리케이션에 대한 커맨드로 사용함으로써, 시스템에 대한 인터페이스를 제공하는
    물품(article).
  14. 제13항에 있어서,
    상기 커맨드에 대한 결과를 수신하고, 상기 결과를 상기 식별된 언어에 따른 자연 언어 형식으로 이루어진 제2 텍스트로 변환하고, 상기 사용자에 의한 지각을 위해 상기 제2 텍스트를 렌더링하기 위한 명령어를 더 포함하는
    물품.
  15. 제14항에 있어서,
    상기 렌더링하기 위한 명령어는 상기 제2 텍스트를 음성으로 변환하고, 상기 음성을 상기 사용자에게 렌더링하기 위한 명령어를 포함하는
    물품.
  16. 제13항에 있어서,
    상기 키워드를 상기 식별된 언어 이외의 다수의 언어로 번역하고, 상기 번역된 키워드를 상기 커맨드로 사용하기 위한 명령어를 더 포함하는
    물품.
  17. 제14항에 있어서,
    상기 키워드를 검색 엔진에 대한 검색 질의로 사용하기 위한 명령어 - 여기서, 상기 결과는 상기 검색 질의에 대해 동작하는 상기 검색 엔진으로부터의 검색 결과를 포함함 - 를 더 포함하는
    물품.
  18. 제14항에 있어서,
    상기 결과를 상기 제2 텍스트로 변환하기 전에, 상기 결과를 자동으로 요약하기 위한 명령어를 더 포함하는
    물품.
  19. 제14항에 있어서,
    상기 키워드를 상기 식별된 언어 이외의 다수의 언어로 번역하고, 상기 번역된 키워드를 검색 엔진에 대한 검색 질의로 사용하기 위한 명령어 - 여기서, 상기 결과는 상기 검색 질의에 대해 동작하는 상기 검색 엔진으로부터의 검색 결과를 포함함 - 를 더 포함하는
    물품.
  20. 제19항에 있어서,
    상기 식별된 언어 이외의 언어로 이루어진 검색 결과를 상기 식별된 언어로 번역하기 위한 명령어를 더 포함하는
    물품.
  21. 제13항에 있어서,
    상기 애플리케이션은 웹 브라우저를 포함하는
    물품.
  22. 제21항에 있어서,
    상기 웹 브라우저는 검색 엔진과 인터페이싱하고, 상기 커맨드는 검색 질의를 포함하는
    물품.
  23. 제21항에 있어서,
    상기 웹 브라우저는 쇼핑 웹 사이트와 인터페이싱하고, 상기 커맨드는 제품 정보에 대한 요구 및 구입 주문 중 적어도 하나를 포함하는
    물품.
  24. 제13항에 있어서,
    상기 음성은 대화형 음성을 포함하는
    물품.
  25. 언어 독립적 음성-기반 사용자 인터페이스 시스템에 있어서,
    사용자로부터 음성 입력 데이터를 수신하여, 상기 사용자에 의해 사용된 언어를 식별하기 위한 언어 식별자;
    상기 음성 입력 데이터 및 상기 언어 식별자를 수신하여, 적어도 부분적으로 상기 언어 식별자에 기반하여 상기 음성 입력 데이터를 제1 텍스트로 변환하기 위한 음성 인식기;
    키워드를 추출하기 위해 상기 제1 텍스트를 분석하기 위한 자연 언어 처리 모듈; 및
    제2 텍스트를 상기 식별된 언어에 따른 자연 언어 형식으로 변환하기 위한 자연 언어 생성기
    를 포함하는 시스템.
  26. 제25항에 있어서,
    상기 제2 텍스트를 상기 사용자가 들을 수 있게 렌더링하기 위한 텍스트-음성(TTS) 모듈
    을 더 포함하는 시스템.
  27. 제25항에 있어서,
    상기 키워드를 다수의 언어로 번역하고, 상기 제2 텍스트를 상기 자연 언어 형식으로 변환하기 전에, 상기 제2 텍스트를 상기 식별된 언어로 번역하기 위한 언어 번역기
    를 더 포함하는 시스템.
  28. 제25항에 있어서,
    상기 제2 텍스트를 상기 자연 언어 형식으로 변환하기 전에, 상기 제2 텍스트를 자동으로 요약하기 위한 자동 요약 모듈
    을 더 포함하는 시스템.
  29. 제25항에 있어서,
    상기 시스템은 웹 브라우저에 연결되는
    시스템.
  30. 제29항에 있어서,
    상기 웹 브라우저는 검색 엔진과 인터페이싱하고, 상기 키워드는 상기 검색 엔진에 대한 검색 질의를 포함하고, 상기 제2 텍스트는 상기 검색 엔진으로부터의 검색 결과를 포함하는
    시스템.
  31. 제30항에 있어서,
    상기 키워드를 상기 검색 질의로 사용하기 위해 제1 다수 언어로 번역하고, 상기 제2 텍스트를 상기 자연 언어 형식으로 변환하기 전에, 상기 제2 텍스트를 상기 식별된 언어로 번역하기 위한 언어 번역기 - 여기서, 상기 제2 텍스트는 제2 다수의 언어로 이루어진 텍스트를 포함함 -
    를 더 포함하는 시스템.
  32. 제29항에 있어서,
    상기 웹 브라우저는 쇼핑 웹 사이트와 인터페이싱하고, 상기 키워드는 제품 정보에 대한 요구 및 구입 주문 중 적어도 하나를 포함하는
    시스템.
  33. 언어 독립적 음성-기반 검색 시스템에 있어서,
    사용자로부터 음성 입력 데이터를 수신하여, 상기 사용자에 의해 사용된 언어를 식별하기 위한 언어 식별자;
    상기 음성 입력 데이터 및 상기 언어 식별자를 수신하고, 적어도 부분적으로 상기 언어 식별자에 기반하여 상기 음성 입력 데이터를 제1 텍스트로 변환하기 위한 음성 인식기;
    키워드를 추출하기 위해 상기 제1 텍스트를 분석하기 위한 자연 언어 처리 모듈;
    상기 키워드를 검색어로 사용하고, 검색 결과를 리턴하기 위한 검색 엔진;
    상기 검색 엔진으로 입력되기 전에, 상기 키워드를 다수의 언어로 번역하고, 상기 검색 결과가 다수의 언어로 이루어진 경우, 상기 검색 결과를 상기 식별된 언어로 이루어진 제2 텍스트로 번역하기 위한 언어 번역기; 및
    상기 제2 텍스트를 상기 식별된 언어에 따른 자연 언어 형식으로 변환하기 위한 자연 언어 생성기
    를 포함하는 시스템.
  34. 제33항에 있어서,
    상기 제2 텍스트를 상기 자연 언어 형식으로 변환하기 전에, 상기 제2 텍스트를 자동으로 요약하기 위한 자동 요약 모듈
    을 더 포함하는 시스템.
  35. 제33항에 있어서,
    상기 제2 텍스트를 상기 사용자가 들을 수 있게 렌더링하기 위한 텍스트-음성 모듈
    을 더 포함하는 시스템.
KR1020037005005A 2000-10-10 2001-10-03 언어 독립적 음성-기반 검색 시스템 KR100653862B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US09/685,419 2000-10-10
US09/685,419 US6999932B1 (en) 2000-10-10 2000-10-10 Language independent voice-based search system
PCT/US2001/031162 WO2002031814A1 (en) 2000-10-10 2001-10-03 Language independent voice-based search system

Publications (2)

Publication Number Publication Date
KR20030046494A true KR20030046494A (ko) 2003-06-12
KR100653862B1 KR100653862B1 (ko) 2006-12-04

Family

ID=24752129

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020037005005A KR100653862B1 (ko) 2000-10-10 2001-10-03 언어 독립적 음성-기반 검색 시스템

Country Status (10)

Country Link
US (1) US6999932B1 (ko)
EP (1) EP1330816B1 (ko)
JP (1) JP4028375B2 (ko)
KR (1) KR100653862B1 (ko)
CN (1) CN1290076C (ko)
AT (1) ATE349056T1 (ko)
AU (1) AU2002211438A1 (ko)
DE (1) DE60125397T2 (ko)
HK (1) HK1054813A1 (ko)
WO (1) WO2002031814A1 (ko)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100723404B1 (ko) * 2005-03-29 2007-05-30 삼성전자주식회사 음성 인식 및 반응을 위한 음성 처리 장치와 방법
KR100792208B1 (ko) * 2005-12-05 2008-01-08 한국전자통신연구원 음성 대화 시스템에서 답변 문장 생성 방법 및 장치
KR100861860B1 (ko) * 2005-11-03 2008-10-06 인터내셔널 비지네스 머신즈 코포레이션 합성 데이터 음성 렌더링의 동적 운율 조정 방법, 시스템및 컴퓨터 프로그램 제품
WO2011115768A2 (en) * 2010-03-16 2011-09-22 Empire Technology Development Llc Search engine inference based virtual assistance
KR20150029719A (ko) * 2012-07-30 2015-03-18 텐센트 테크놀로지(센젠) 컴퍼니 리미티드 웹 브라우저 동작 방법 및 시스템
US9485330B2 (en) 2012-07-30 2016-11-01 Tencent Technology (Shenzhen) Company Limited Web browser operation method and system

Families Citing this family (331)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6343116B1 (en) * 1998-09-21 2002-01-29 Microsoft Corporation Computer telephony application programming interface
US7251315B1 (en) * 1998-09-21 2007-07-31 Microsoft Corporation Speech processing for telephony API
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US6604107B1 (en) * 2000-04-24 2003-08-05 Ebay Inc. Generic attribute database system for storing items of different categories having shared attributes
US20030200535A1 (en) * 2000-06-09 2003-10-23 Mcnamara Benedict Bede System for program source code conversion
US7660740B2 (en) * 2000-10-16 2010-02-09 Ebay Inc. Method and system for listing items globally and regionally, and customized listing according to currency or shipping area
US7191116B2 (en) * 2001-06-19 2007-03-13 Oracle International Corporation Methods and systems for determining a language of a document
US20030018468A1 (en) * 2001-07-20 2003-01-23 Johnson Deanna G. Universal search engine
US7752266B2 (en) 2001-10-11 2010-07-06 Ebay Inc. System and method to facilitate translation of communications between entities over a network
US7295982B1 (en) * 2001-11-19 2007-11-13 At&T Corp. System and method for automatic verification of the understandability of speech
DE10209928A1 (de) * 2002-03-07 2003-09-18 Philips Intellectual Property Verfahren zum Betrieb eines Sprach-Dialogsystems
US7941348B2 (en) * 2002-06-10 2011-05-10 Ebay Inc. Method and system for scheduling transaction listings at a network-based transaction facility
US8078505B2 (en) 2002-06-10 2011-12-13 Ebay Inc. Method and system for automatically updating a seller application utilized in a network-based transaction facility
US8719041B2 (en) * 2002-06-10 2014-05-06 Ebay Inc. Method and system for customizing a network-based transaction facility seller application
DE10256935A1 (de) * 2002-12-05 2004-07-01 Siemens Ag Auswahl der Benutzersprache an einem rein akustisch gesteuerten Telefon
US20040138988A1 (en) * 2002-12-20 2004-07-15 Bart Munro Method to facilitate a search of a database utilizing multiple search criteria
US7548858B2 (en) * 2003-03-05 2009-06-16 Microsoft Corporation System and method for selective audible rendering of data to a user based on user input
US8170863B2 (en) * 2003-04-01 2012-05-01 International Business Machines Corporation System, method and program product for portlet-based translation of web content
CN100483404C (zh) * 2003-05-12 2009-04-29 皇家飞利浦电子股份有限公司 用于搜索媒体对象的方法
US7742985B1 (en) 2003-06-26 2010-06-22 Paypal Inc. Multicurrency exchanges between participants of a network-based transaction facility
DE10330263B3 (de) * 2003-07-04 2005-03-03 Lisa Dräxlmaier GmbH Vorrichtung zum Herausziehen bzw. Einsetzen einer Sicherung
US20050192811A1 (en) * 2004-02-26 2005-09-01 Wendy Parks Portable translation device
US9189568B2 (en) 2004-04-23 2015-11-17 Ebay Inc. Method and system to display and search in a language independent manner
US7672845B2 (en) * 2004-06-22 2010-03-02 International Business Machines Corporation Method and system for keyword detection using voice-recognition
US20060206310A1 (en) * 2004-06-29 2006-09-14 Damaka, Inc. System and method for natural language processing in a peer-to-peer hybrid communications network
US8050272B2 (en) 2004-06-29 2011-11-01 Damaka, Inc. System and method for concurrent sessions in a peer-to-peer hybrid communications network
US8009586B2 (en) 2004-06-29 2011-08-30 Damaka, Inc. System and method for data transfer in a peer-to peer hybrid communication network
EP1612660A1 (en) * 2004-06-29 2006-01-04 GMB Tech (Holland) B.V. Sound recording communication system and method
US7778187B2 (en) * 2004-06-29 2010-08-17 Damaka, Inc. System and method for dynamic stability in a peer-to-peer hybrid communications network
US7623476B2 (en) * 2004-06-29 2009-11-24 Damaka, Inc. System and method for conferencing in a peer-to-peer hybrid communications network
US20070078720A1 (en) * 2004-06-29 2007-04-05 Damaka, Inc. System and method for advertising in a peer-to-peer hybrid communications network
US7623516B2 (en) * 2004-06-29 2009-11-24 Damaka, Inc. System and method for deterministic routing in a peer-to-peer hybrid communications network
US7570636B2 (en) 2004-06-29 2009-08-04 Damaka, Inc. System and method for traversing a NAT device for peer-to-peer hybrid communications
US8437307B2 (en) 2007-09-03 2013-05-07 Damaka, Inc. Device and method for maintaining a communication session during a network transition
US7656870B2 (en) 2004-06-29 2010-02-02 Damaka, Inc. System and method for peer-to-peer hybrid communications
US7933260B2 (en) 2004-06-29 2011-04-26 Damaka, Inc. System and method for routing and communicating in a heterogeneous network environment
US20060015335A1 (en) * 2004-07-13 2006-01-19 Ravigopal Vennelakanti Framework to enable multimodal access to applications
US7640162B2 (en) * 2004-12-14 2009-12-29 Microsoft Corporation Semantic canvas
JP4423327B2 (ja) * 2005-02-08 2010-03-03 日本電信電話株式会社 情報通信端末、情報通信システム、情報通信方法、情報通信プログラムおよびそれを記録した記録媒体
JP2006350705A (ja) * 2005-06-16 2006-12-28 Fujifilm Holdings Corp 情報提供装置および方法並びにプログラム
US7672931B2 (en) * 2005-06-30 2010-03-02 Microsoft Corporation Searching for content using voice search queries
US20070021960A1 (en) * 2005-07-20 2007-01-25 Mclean Marc System and method for communicating with a network
US9152982B2 (en) 2005-08-19 2015-10-06 Nuance Communications, Inc. Method of compensating a provider for advertisements displayed on a mobile phone
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US8073700B2 (en) 2005-09-12 2011-12-06 Nuance Communications, Inc. Retrieval and presentation of network service results for mobile device using a multimodal browser
US20070106653A1 (en) * 2005-10-12 2007-05-10 Yu Sun Search engine
US8498999B1 (en) * 2005-10-14 2013-07-30 Wal-Mart Stores, Inc. Topic relevant abbreviations
US8229745B2 (en) * 2005-10-21 2012-07-24 Nuance Communications, Inc. Creating a mixed-initiative grammar from directed dialog grammars
US7477909B2 (en) * 2005-10-31 2009-01-13 Nuance Communications, Inc. System and method for conducting a search using a wireless mobile device
JP2007219190A (ja) * 2006-02-17 2007-08-30 Murata Mach Ltd 音声認識装置と認識方法及びそのプログラム
US7689554B2 (en) * 2006-02-28 2010-03-30 Yahoo! Inc. System and method for identifying related queries for languages with multiple writing systems
US7698140B2 (en) * 2006-03-06 2010-04-13 Foneweb, Inc. Message transcription, voice query and query delivery system
US7835903B2 (en) 2006-04-19 2010-11-16 Google Inc. Simplifying query terms with transliteration
US8762358B2 (en) * 2006-04-19 2014-06-24 Google Inc. Query language determination using query terms and interface language
US8442965B2 (en) * 2006-04-19 2013-05-14 Google Inc. Query language identification
US8255376B2 (en) 2006-04-19 2012-08-28 Google Inc. Augmenting queries with synonyms from synonyms map
US8380488B1 (en) 2006-04-19 2013-02-19 Google Inc. Identifying a property of a document
WO2007124385A2 (en) 2006-04-19 2007-11-01 Google Inc. Processing of query terms
KR20080000203A (ko) * 2006-06-27 2008-01-02 엘지전자 주식회사 음성인식을 이용한 음악 파일 검색 방법
CA2601207C (en) * 2006-07-07 2014-04-08 Jean Girard Single-leg support
US8639782B2 (en) 2006-08-23 2014-01-28 Ebay, Inc. Method and system for sharing metadata between interfaces
US20080077393A1 (en) * 2006-09-01 2008-03-27 Yuqing Gao Virtual keyboard adaptation for multilingual input
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
EP1902906B1 (en) * 2006-09-22 2017-07-26 Harman Becker Automotive Systems GmbH Add-on module for externally controlling a speech dialog system
JP4398966B2 (ja) * 2006-09-26 2010-01-13 株式会社東芝 機械翻訳を行う装置、システム、方法およびプログラム
US8972268B2 (en) 2008-04-15 2015-03-03 Facebook, Inc. Enhanced speech-to-speech translation system and methods for adding a new word
US9070363B2 (en) 2007-10-26 2015-06-30 Facebook, Inc. Speech translation with back-channeling cues
US11222185B2 (en) 2006-10-26 2022-01-11 Meta Platforms, Inc. Lexicon development via shared translation database
US20080126095A1 (en) * 2006-10-27 2008-05-29 Gil Sideman System and method for adding functionality to a user interface playback environment
US20100027768A1 (en) * 2006-11-03 2010-02-04 Foskett James J Aviation text and voice communication system
US7742922B2 (en) * 2006-11-09 2010-06-22 Goller Michael D Speech interface for search engines
US7873517B2 (en) 2006-11-09 2011-01-18 Volkswagen Of America, Inc. Motor vehicle with a speech interface
DE102006057159A1 (de) * 2006-12-01 2008-06-05 Deutsche Telekom Ag Verfahren zur Klassifizierung der gesprochenen Sprache in Sprachdialogsystemen
US7818176B2 (en) * 2007-02-06 2010-10-19 Voicebox Technologies, Inc. System and method for selecting and presenting advertisements based on natural language processing of voice-based input
WO2008109781A2 (en) * 2007-03-06 2008-09-12 Cognitive Code Corp. Artificial intelligence system
US8843376B2 (en) 2007-03-13 2014-09-23 Nuance Communications, Inc. Speech-enabled web content searching using a multimodal browser
JP4213755B2 (ja) * 2007-03-28 2009-01-21 株式会社東芝 音声翻訳装置、方法およびプログラム
US7818170B2 (en) * 2007-04-10 2010-10-19 Motorola, Inc. Method and apparatus for distributed voice searching
US8620658B2 (en) * 2007-04-16 2013-12-31 Sony Corporation Voice chat system, information processing apparatus, speech recognition method, keyword data electrode detection method, and program for speech recognition
US8032383B1 (en) * 2007-05-04 2011-10-04 Foneweb, Inc. Speech controlled services and devices using internet
DE102007027363A1 (de) 2007-06-11 2008-12-24 Avaya Gmbh & Co. Kg Verfahren zum Betreiben eines Voice-Mail-Systems
US7890493B2 (en) 2007-07-20 2011-02-15 Google Inc. Translating a search query into multiple languages
US8782171B2 (en) * 2007-07-20 2014-07-15 Voice Enabling Systems Technology Inc. Voice-enabled web portal system
WO2009043016A2 (en) 2007-09-28 2009-04-02 Damaka, Inc. System and method for transitioning a communication session between networks that are not commonly controlled
US9134904B2 (en) 2007-10-06 2015-09-15 International Business Machines Corporation Displaying documents to a plurality of users of a surface computer
US8139036B2 (en) * 2007-10-07 2012-03-20 International Business Machines Corporation Non-intrusive capture and display of objects based on contact locality
US20090091539A1 (en) * 2007-10-08 2009-04-09 International Business Machines Corporation Sending A Document For Display To A User Of A Surface Computer
US20090091529A1 (en) * 2007-10-09 2009-04-09 International Business Machines Corporation Rendering Display Content On A Floor Surface Of A Surface Computer
US8024185B2 (en) * 2007-10-10 2011-09-20 International Business Machines Corporation Vocal command directives to compose dynamic display text
US8131712B1 (en) 2007-10-15 2012-03-06 Google Inc. Regional indexes
US9754022B2 (en) 2007-10-30 2017-09-05 At&T Intellectual Property I, L.P. System and method for language sensitive contextual searching
US8380859B2 (en) 2007-11-28 2013-02-19 Damaka, Inc. System and method for endpoint handoff in a hybrid peer-to-peer networking environment
US9203833B2 (en) * 2007-12-05 2015-12-01 International Business Machines Corporation User authorization using an automated Turing Test
US7984034B1 (en) 2007-12-21 2011-07-19 Google Inc. Providing parallel resources in search results
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US10176827B2 (en) * 2008-01-15 2019-01-08 Verint Americas Inc. Active lab
US8615388B2 (en) * 2008-03-28 2013-12-24 Microsoft Corporation Intra-language statistical machine translation
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US20090276414A1 (en) * 2008-04-30 2009-11-05 Microsoft Corporation Ranking model adaptation for searching
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
CN101345051B (zh) * 2008-08-19 2010-11-10 南京师范大学 带定量参数的地理信息系统语音控制方法
CN101383150B (zh) * 2008-08-19 2010-11-10 南京师范大学 语音软开关的控制方法及其在地理信息系统中的应用
US20100082328A1 (en) * 2008-09-29 2010-04-01 Apple Inc. Systems and methods for speech preprocessing in text to speech synthesis
US8712776B2 (en) 2008-09-29 2014-04-29 Apple Inc. Systems and methods for selective text to speech synthesis
WO2010067118A1 (en) 2008-12-11 2010-06-17 Novauris Technologies Limited Speech recognition involving a mobile device
US10489434B2 (en) 2008-12-12 2019-11-26 Verint Americas Inc. Leveraging concepts with information retrieval techniques and knowledge bases
KR101548907B1 (ko) * 2009-01-06 2015-09-02 삼성전자 주식회사 다중언어의 대화시스템 및 그 제어방법
US8650634B2 (en) * 2009-01-14 2014-02-11 International Business Machines Corporation Enabling access to a subset of data
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US20130219333A1 (en) * 2009-06-12 2013-08-22 Adobe Systems Incorporated Extensible Framework for Facilitating Interaction with Devices
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US20110138286A1 (en) * 2009-08-07 2011-06-09 Viktor Kaptelinin Voice assisted visual search
WO2011039773A2 (en) * 2009-09-14 2011-04-07 Tata Consultancy Services Ltd. Tv news analysis system for multilingual broadcast channels
US8943094B2 (en) 2009-09-22 2015-01-27 Next It Corporation Apparatus, system, and method for natural language processing
US8379801B2 (en) 2009-11-24 2013-02-19 Sorenson Communications, Inc. Methods and systems related to text caption error correction
US8610924B2 (en) * 2009-11-24 2013-12-17 International Business Machines Corporation Scanning and capturing digital images using layer detection
US8441702B2 (en) * 2009-11-24 2013-05-14 International Business Machines Corporation Scanning and capturing digital images using residue detection
US20110122459A1 (en) * 2009-11-24 2011-05-26 International Business Machines Corporation Scanning and Capturing digital Images Using Document Characteristics Detection
US11592723B2 (en) 2009-12-22 2023-02-28 View, Inc. Automated commissioning of controllers in a window network
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
DE202011111062U1 (de) 2010-01-25 2019-02-19 Newvaluexchange Ltd. Vorrichtung und System für eine Digitalkonversationsmanagementplattform
US20110288859A1 (en) * 2010-02-05 2011-11-24 Taylor Andrew E Language context sensitive command system and method
US8725895B2 (en) * 2010-02-15 2014-05-13 Damaka, Inc. NAT traversal by concurrently probing multiple candidates
US8874785B2 (en) 2010-02-15 2014-10-28 Damaka, Inc. System and method for signaling and data tunneling in a peer-to-peer environment
US8892646B2 (en) 2010-08-25 2014-11-18 Damaka, Inc. System and method for shared session appearance in a hybrid peer-to-peer environment
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US8689307B2 (en) * 2010-03-19 2014-04-01 Damaka, Inc. System and method for providing a virtual peer-to-peer environment
US9043488B2 (en) 2010-03-29 2015-05-26 Damaka, Inc. System and method for session sweeping between devices
US9191416B2 (en) 2010-04-16 2015-11-17 Damaka, Inc. System and method for providing enterprise voice call continuity
US8352563B2 (en) 2010-04-29 2013-01-08 Damaka, Inc. System and method for peer-to-peer media routing using a third party instant messaging system for signaling
US20110307484A1 (en) * 2010-06-11 2011-12-15 Nitin Dinesh Anand System and method of addressing and accessing information using a keyword identifier
US20110313995A1 (en) * 2010-06-18 2011-12-22 Abraham Lederman Browser based multilingual federated search
US8446900B2 (en) 2010-06-18 2013-05-21 Damaka, Inc. System and method for transferring a call between endpoints in a hybrid peer-to-peer network
US8611540B2 (en) 2010-06-23 2013-12-17 Damaka, Inc. System and method for secure messaging in a hybrid peer-to-peer network
US9633656B2 (en) 2010-07-27 2017-04-25 Sony Corporation Device registration process from second display
US10496714B2 (en) 2010-08-06 2019-12-03 Google Llc State-dependent query response
US8468010B2 (en) 2010-09-24 2013-06-18 Damaka, Inc. System and method for language translation in a hybrid peer-to-peer environment
US8743781B2 (en) 2010-10-11 2014-06-03 Damaka, Inc. System and method for a reverse invitation in a hybrid peer-to-peer environment
US9122744B2 (en) 2010-10-11 2015-09-01 Next It Corporation System and method for providing distributed intelligent assistance
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
US11054792B2 (en) 2012-04-13 2021-07-06 View, Inc. Monitoring sites containing switchable optical devices and controllers
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US9760566B2 (en) 2011-03-31 2017-09-12 Microsoft Technology Licensing, Llc Augmented conversational understanding agent to identify conversation context between two humans and taking an agent action thereof
US9842168B2 (en) 2011-03-31 2017-12-12 Microsoft Technology Licensing, Llc Task driven user intents
US9858343B2 (en) 2011-03-31 2018-01-02 Microsoft Technology Licensing Llc Personalization of queries, conversations, and searches
US10642934B2 (en) 2011-03-31 2020-05-05 Microsoft Technology Licensing, Llc Augmented conversational understanding architecture
US9298287B2 (en) 2011-03-31 2016-03-29 Microsoft Technology Licensing, Llc Combined activation for natural user interface systems
US9244984B2 (en) 2011-03-31 2016-01-26 Microsoft Technology Licensing, Llc Location based conversational understanding
US8407314B2 (en) 2011-04-04 2013-03-26 Damaka, Inc. System and method for sharing unsupported document types between communication devices
US9015030B2 (en) * 2011-04-15 2015-04-21 International Business Machines Corporation Translating prompt and user input
US8655645B1 (en) * 2011-05-10 2014-02-18 Google Inc. Systems and methods for translation of application metadata
US9454962B2 (en) 2011-05-12 2016-09-27 Microsoft Technology Licensing, Llc Sentence simplification for spoken language understanding
US9064006B2 (en) 2012-08-23 2015-06-23 Microsoft Technology Licensing, Llc Translating natural language utterances to keyword search queries
US8694587B2 (en) 2011-05-17 2014-04-08 Damaka, Inc. System and method for transferring a call bridge between communication devices
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
CN102867512A (zh) * 2011-07-04 2013-01-09 余喆 自然语音识别方法和装置
CN102867511A (zh) * 2011-07-04 2013-01-09 余喆 自然语音识别方法和装置
US8478890B2 (en) 2011-07-15 2013-07-02 Damaka, Inc. System and method for reliable virtual bi-directional data stream communications with single socket point-to-multipoint capability
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US9098533B2 (en) 2011-10-03 2015-08-04 Microsoft Technology Licensing, Llc Voice directed context sensitive visual search
CN102523349A (zh) * 2011-12-22 2012-06-27 苏州巴米特信息科技有限公司 一种特色的手机语音搜索的方法
KR101749143B1 (ko) * 2011-12-26 2017-06-20 인텔 코포레이션 탑승자 오디오 및 시각적 입력의 차량 기반 결정
US9836177B2 (en) 2011-12-30 2017-12-05 Next IT Innovation Labs, LLC Providing variable responses in a virtual-assistant environment
CN102629246B (zh) * 2012-02-10 2017-06-27 百纳（武汉）信息技术有限公司 识别浏览器语音命令的服务器及浏览器语音命令识别方法
US8838459B2 (en) 2012-02-29 2014-09-16 Google Inc. Virtual participant-based real-time translation and transcription system for audio and video teleconferences
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US9275635B1 (en) 2012-03-08 2016-03-01 Google Inc. Recognizing different versions of a language
US9129591B2 (en) 2012-03-08 2015-09-08 Google Inc. Recognizing speech in multiple languages
US10964320B2 (en) 2012-04-13 2021-03-30 View, Inc. Controlling optically-switchable devices
US9223537B2 (en) 2012-04-18 2015-12-29 Next It Corporation Conversation user interface
US9098494B2 (en) * 2012-05-10 2015-08-04 Microsoft Technology Licensing, Llc Building multi-language processes from existing single-language processes
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US20150128185A1 (en) * 2012-05-16 2015-05-07 Tata Consultancy Services Limited System and method for personalization of an applicance by using context information
US20130315385A1 (en) * 2012-05-23 2013-11-28 Huawei Technologies Co., Ltd. Speech recognition based query method and apparatus
US10019994B2 (en) 2012-06-08 2018-07-10 Apple Inc. Systems and methods for recognizing textual identifiers within a plurality of words
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9536049B2 (en) 2012-09-07 2017-01-03 Next It Corporation Conversational virtual healthcare assistant
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
US20140164422A1 (en) * 2012-12-07 2014-06-12 Verizon Argentina SRL Relational approach to systems based on a request and response model
US9195644B2 (en) * 2012-12-18 2015-11-24 Lenovo Enterprise Solutions (Singapore) Pte. Ltd. Short phrase language identification
KR20240132105A (ko) 2013-02-07 2024-09-02 애플 인크. 디지털 어시스턴트를 위한 음성 트리거
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
AU2014233517B2 (en) 2013-03-15 2017-05-25 Apple Inc. Training an at least partial voice command system
KR20140116642A (ko) * 2013-03-25 2014-10-06 삼성전자주식회사 음성 인식 기반의 기능 제어 방법 및 장치
US10445115B2 (en) 2013-04-18 2019-10-15 Verint Americas Inc. Virtual assistant focused user interfaces
CN104182432A (zh) * 2013-05-28 2014-12-03 天津点康科技有限公司 基于人体生理参数检测结果的信息检索与发布系统及方法
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
KR101772152B1 (ko) 2013-06-09 2017-08-28 애플 인크. 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
EP3008964B1 (en) 2013-06-13 2019-09-25 Apple Inc. System and method for emergency calls initiated by voice command
US10529013B2 (en) 2013-07-01 2020-01-07 Intuit Inc. Identifying business type using public information
US9027032B2 (en) 2013-07-16 2015-05-05 Damaka, Inc. System and method for providing additional functionality to existing software in an integrated manner
DE112014003653B4 (de) 2013-08-06 2024-04-18 Apple Inc. Automatisch aktivierende intelligente Antworten auf der Grundlage von Aktivitäten von entfernt angeordneten Vorrichtungen
CN104050965A (zh) * 2013-09-02 2014-09-17 广东外语外贸大学 具有情感识别功能的英语语音发音质量评价系统及方法
US9357016B2 (en) 2013-10-18 2016-05-31 Damaka, Inc. System and method for virtual parallel resource management
TWM484733U (zh) * 2013-10-29 2014-08-21 Bai Xu Technology Co Ltd 語意商業智慧系統
KR102188090B1 (ko) * 2013-12-11 2020-12-04 엘지전자 주식회사 스마트 가전제품, 그 작동방법 및 스마트 가전제품을 이용한 음성인식 시스템
US9823811B2 (en) 2013-12-31 2017-11-21 Next It Corporation Virtual assistant team identification
US9589564B2 (en) 2014-02-05 2017-03-07 Google Inc. Multiple speech locale-specific hotword classifiers for selection of a speech locale
US10102848B2 (en) * 2014-02-28 2018-10-16 Google Llc Hotwords presentation framework
RU2019109013A (ru) 2014-03-05 2019-05-06 Вью, Инк. Мониторинг объектов, содержащих переключаемые оптические устройства и контроллеры
US9659003B2 (en) * 2014-03-26 2017-05-23 Lenovo (Singapore) Pte. Ltd. Hybrid language processing
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
CN110797019B (zh) 2014-05-30 2023-08-29 苹果公司 多命令单一话语输入方法
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9536521B2 (en) * 2014-06-30 2017-01-03 Xerox Corporation Voice recognition
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
CN104102346A (zh) * 2014-07-01 2014-10-15 华中科技大学 一种家用信息采集和用户情感识别设备及其工作方法
WO2016022574A1 (en) 2014-08-05 2016-02-11 Damaka, Inc. System and method for providing unified communications and collaboration (ucc) connectivity between incompatible systems
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US20160071517A1 (en) 2014-09-09 2016-03-10 Next It Corporation Evaluating Conversation Data based on Risk Factors
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
CN105632498A (zh) * 2014-10-31 2016-06-01 株式会社东芝 生成会议记录的方法、装置和系统
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US10134386B2 (en) 2015-07-21 2018-11-20 Rovi Guides, Inc. Systems and methods for identifying content corresponding to a language spoken in a household
CN106372054B (zh) * 2015-07-24 2020-10-09 中兴通讯股份有限公司 一种多语言语义解析的方法和装置
CN105069146B (zh) * 2015-08-20 2019-04-02 百度在线网络技术（北京）有限公司 声音搜索方法和装置
CN105095509B (zh) * 2015-09-06 2019-01-25 百度在线网络技术（北京）有限公司 语音搜索方法及装置
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
EP3394801A1 (en) * 2015-12-23 2018-10-31 Sita Information Networking Computing Ireland Limited Method and system for communication between users and computer systems
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US10091025B2 (en) 2016-03-31 2018-10-02 Damaka, Inc. System and method for enabling use of a single user identifier across incompatible networks for UCC functionality
KR102521231B1 (ko) * 2016-04-26 2023-04-12 뷰, 인크. 광학적으로 스위칭 가능한 장치 제어
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179588B1 (en) 2016-06-09 2019-02-22 Apple Inc. INTELLIGENT AUTOMATED ASSISTANT IN A HOME ENVIRONMENT
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
US10418026B2 (en) 2016-07-15 2019-09-17 Comcast Cable Communications, Llc Dynamic language and command recognition
CN106294643A (zh) * 2016-08-03 2017-01-04 王晓光 不同语言在大数据中实现实时搜索方法及系统
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US10331795B2 (en) * 2016-09-28 2019-06-25 Panasonic Intellectual Property Corporation Of America Method for recognizing speech sound, mobile terminal, and recording medium
JP2018055422A (ja) * 2016-09-29 2018-04-05 株式会社東芝 情報処理システム、情報処理装置、情報処理方法、及びプログラム
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK179549B1 (en) 2017-05-16 2019-02-12 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
WO2019049089A1 (en) * 2017-09-11 2019-03-14 Indian Institute Of Technology, Delhi METHOD, SYSTEM AND APPARATUS FOR SEARCHING MULTILINGUAL AND MULTIMODAL KEYWORDS IN A MULTILINGUAL ORAL CORPUS
US10769210B2 (en) 2017-09-29 2020-09-08 Rovi Guides, Inc. Recommending results in multiple languages for search queries based on user profile
US10747817B2 (en) * 2017-09-29 2020-08-18 Rovi Guides, Inc. Recommending language models for search queries based on user profile
US11451511B1 (en) * 2017-11-07 2022-09-20 Verisign, Inc. Audio-based systems, devices, and methods for domain services
CN109840062B (zh) * 2017-11-28 2022-10-28 株式会社东芝 输入辅助装置以及记录介质
KR20190093794A (ko) * 2018-01-17 2019-08-12 주식회사 오리지널메이커스 음성 인식을 이용한 주문 처리 시스템 및 그 주문 처리 방법
US10896213B2 (en) 2018-03-07 2021-01-19 Google Llc Interface for a distributed network system
CN112055876A (zh) * 2018-04-27 2020-12-08 语享路有限责任公司 利用语音识别技术的多方对话记录/输出方法及用于其的装置
US11568175B2 (en) 2018-09-07 2023-01-31 Verint Americas Inc. Dynamic intent classification based on environment variables
CN110888967B (zh) * 2018-09-11 2023-04-28 阿里巴巴集团控股有限公司 搜索方法、装置及设备
US10878804B2 (en) 2018-10-10 2020-12-29 International Business Machines Corporation Voice controlled keyword generation for automated test framework
US11232264B2 (en) 2018-10-19 2022-01-25 Verint Americas Inc. Natural language processing with non-ontological hierarchy models
CN111161706A (zh) * 2018-10-22 2020-05-15 阿里巴巴集团控股有限公司 交互方法、装置、设备和系统
US11196863B2 (en) 2018-10-24 2021-12-07 Verint Americas Inc. Method and system for virtual assistant conversations
US20200135189A1 (en) * 2018-10-25 2020-04-30 Toshiba Tec Kabushiki Kaisha System and method for integrated printing of voice assistant search results
US11069353B1 (en) * 2019-05-06 2021-07-20 Amazon Technologies, Inc. Multilingual wakeword detection
CN110427455A (zh) * 2019-06-24 2019-11-08 卓尔智联(武汉)研究院有限公司 一种客服服务方法、装置和存储介质
KR20210046334A (ko) * 2019-10-18 2021-04-28 삼성전자주식회사 전자 장치 및 그의 제어 방법
US11308542B2 (en) 2019-11-05 2022-04-19 Shopify Inc. Systems and methods for using keywords extracted from reviews
US11188967B2 (en) 2019-11-05 2021-11-30 Shopify Inc. Systems and methods for using keywords extracted from reviews
US11328029B2 (en) * 2019-11-05 2022-05-10 Shopify Inc. Systems and methods for using keywords extracted from reviews
CN111078937B (zh) * 2019-12-27 2021-08-10 北京世纪好未来教育科技有限公司 语音信息检索方法、装置、设备和计算机可读存储介质
CN111401323A (zh) * 2020-04-20 2020-07-10 Oppo广东移动通信有限公司 文字翻译方法、装置、存储介质及电子设备
JP2021179821A (ja) * 2020-05-14 2021-11-18 コニカミノルタ株式会社 情報処理装置及び宛先検索方法
US20220067279A1 (en) * 2020-08-31 2022-03-03 Recruit Co., Ltd., Systems and methods for multilingual sentence embeddings
US11902343B1 (en) 2021-04-19 2024-02-13 Damaka, Inc. System and method for highly scalable browser-based audio/video conferencing
US11770584B1 (en) 2021-05-23 2023-09-26 Damaka, Inc. System and method for optimizing video communications based on device capabilities
CN113506565B (zh) * 2021-07-12 2024-06-04 北京捷通华声科技股份有限公司 语音识别的方法、装置、计算机可读存储介质与处理器
US12118981B2 (en) * 2021-09-15 2024-10-15 Google Llc Determining multilingual content in responses to a query

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3704345A (en) * 1971-03-19 1972-11-28 Bell Telephone Labor Inc Conversion of printed text into synthetic speech
US5740349A (en) 1993-02-19 1998-04-14 Intel Corporation Method and apparatus for reliably storing defect information in flash disk memories
US5956740A (en) 1996-10-23 1999-09-21 Iti, Inc. Document searching system for multilingual documents
CA2284304A1 (en) 1998-12-22 2000-06-22 Nortel Networks Corporation Communication systems and methods employing automatic language indentification
US6314398B1 (en) 1999-03-01 2001-11-06 Matsushita Electric Industrial Co., Ltd. Apparatus and method using speech understanding for automatic channel selection in interactive television
US6324512B1 (en) * 1999-08-26 2001-11-27 Matsushita Electric Industrial Co., Ltd. System and method for allowing family members to access TV contents and program media recorder over telephone or internet
US7590538B2 (en) 1999-08-31 2009-09-15 Accenture Llp Voice recognition system for navigating on the internet

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100723404B1 (ko) * 2005-03-29 2007-05-30 삼성전자주식회사 음성 인식 및 반응을 위한 음성 처리 장치와 방법
US8185397B2 (en) 2005-03-29 2012-05-22 Samsung Electronics Co., Ltd. Speech processing apparatus, medium, and method recognizing and responding to speech using entity information
KR100861860B1 (ko) * 2005-11-03 2008-10-06 인터내셔널 비지네스 머신즈 코포레이션 합성 데이터 음성 렌더링의 동적 운율 조정 방법, 시스템및 컴퓨터 프로그램 제품
KR100792208B1 (ko) * 2005-12-05 2008-01-08 한국전자통신연구원 음성 대화 시스템에서 답변 문장 생성 방법 및 장치
WO2011115768A2 (en) * 2010-03-16 2011-09-22 Empire Technology Development Llc Search engine inference based virtual assistance
WO2011115768A3 (en) * 2010-03-16 2013-09-12 Empire Technology Development Llc Search engine inference based virtual assistance
US9201970B2 (en) 2010-03-16 2015-12-01 Empire Technology Development Llc Search engine inference based virtual assistance
US10380206B2 (en) 2010-03-16 2019-08-13 Empire Technology Development Llc Search engine inference based virtual assistance
KR20150029719A (ko) * 2012-07-30 2015-03-18 텐센트 테크놀로지(센젠) 컴퍼니 리미티드 웹 브라우저 동작 방법 및 시스템
US9485330B2 (en) 2012-07-30 2016-11-01 Tencent Technology (Shenzhen) Company Limited Web browser operation method and system

Also Published As

Publication number Publication date
CN1526132A (zh) 2004-09-01
ATE349056T1 (de) 2007-01-15
AU2002211438A1 (en) 2002-04-22
WO2002031814A1 (en) 2002-04-18
JP4028375B2 (ja) 2007-12-26
DE60125397T2 (de) 2007-10-18
EP1330816B1 (en) 2006-12-20
DE60125397D1 (de) 2007-02-01
HK1054813A1 (en) 2003-12-12
US6999932B1 (en) 2006-02-14
CN1290076C (zh) 2006-12-13
JP2004511867A (ja) 2004-04-15
KR100653862B1 (ko) 2006-12-04
EP1330816A1 (en) 2003-07-30

Similar Documents

Publication Publication Date Title
KR100653862B1 (ko) 언어 독립적 음성-기반 검색 시스템
Waibel et al. Multilinguality in speech and spoken language systems
KR100661687B1 (ko) 대화형 음성 응답 애플리케이션 구현 장치 및 방법, 머신 판독가능 매체 및 대화형 음성 응답 시스템
JP4050755B2 (ja) コミュニケーション支援装置、コミュニケーション支援方法およびコミュニケーション支援プログラム
EP0262938B1 (en) Language translation system
US6374224B1 (en) Method and apparatus for style control in natural language generation
US6278968B1 (en) Method and apparatus for adaptive speech recognition hypothesis construction and selection in a spoken language translation system
US5819220A (en) Web triggered word set boosting for speech interfaces to the world wide web
US6356865B1 (en) Method and apparatus for performing spoken language translation
US6243669B1 (en) Method and apparatus for providing syntactic analysis and data structure for translation knowledge in example-based language translation
US6442524B1 (en) Analyzing inflectional morphology in a spoken language translation system
US6952665B1 (en) Translating apparatus and method, and recording medium used therewith
US6282507B1 (en) Method and apparatus for interactive source language expression recognition and alternative hypothesis presentation and selection
US6266642B1 (en) Method and portable apparatus for performing spoken language translation
US6223150B1 (en) Method and apparatus for parsing in a spoken language translation system
JP4439431B2 (ja) コミュニケーション支援装置、コミュニケーション支援方法およびコミュニケーション支援プログラム
Hemphill et al. Surfing the Web by voice
JP2007220045A (ja) コミュニケーション支援装置、コミュニケーション支援方法およびコミュニケーション支援プログラム
House Spoken-language access to multimedia(SLAM): a multimodal interface to the World-Wide Web
Hemphill et al. Speech-aware multimedia
JP2008243222A (ja) コミュニケーション支援装置、コミュニケーション支援方法およびコミュニケーション支援プログラム
JP2001117921A (ja) 翻訳装置および翻訳方法、並びに記録媒体
JP2001117922A (ja) 翻訳装置および翻訳方法、並びに記録媒体
JP2001100788A (ja) 音声処理装置および音声処理方法、並びに記録媒体
Xu et al. A multilingual-supporting dialog system using a common dialog controller

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20091120

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee