KR0138002B1 - 객체 지향 사용자 인터페이스 내에 다중 매체 프리젠테이션을 통합시키기 위한 방법 및 시스템 - Google Patents

객체 지향 사용자 인터페이스 내에 다중 매체 프리젠테이션을 통합시키기 위한 방법 및 시스템

Info

Publication number
KR0138002B1
KR0138002B1 KR1019940034083A KR19940034083A KR0138002B1 KR 0138002 B1 KR0138002 B1 KR 0138002B1 KR 1019940034083 A KR1019940034083 A KR 1019940034083A KR 19940034083 A KR19940034083 A KR 19940034083A KR 0138002 B1 KR0138002 B1 KR 0138002B1
Authority
KR
South Korea
Prior art keywords
data
processing system
multimedia
data processing
presentation
Prior art date
Application number
KR1019940034083A
Other languages
English (en)
Inventor
이. 베리 리차드
엔. 리차즈 토마스
Original Assignee
윌리엄 티. 엘리스
인터내셔널 비지네스 머신즈 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 윌리엄 티. 엘리스, 인터내셔널 비지네스 머신즈 코포레이션 filed Critical 윌리엄 티. 엘리스
Application granted granted Critical
Publication of KR0138002B1 publication Critical patent/KR0138002B1/ko

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance

Abstract

캡슐화 데이타 및 기능성을 각자 갖고 있는 복수의 폴리모픽 객체들을 포함하는 객체 지향 사용자 인터페이스 내에 다중 매체 프리젠테이션들을 통합시키기 위한 방법 및 시스템이 기재되어 있다. 복수의 분리 사용자 선택가능 데이타 뷰들은 객체와 연관되어 있는 데이타의 서로 다른 뷰들을 제공하는 각각의 객체마다 한정되어 있다. 객체에 대해 사용자가 오디오 또는 비디오 데이타 뷰를 선택하는 것은 오디오 또는 비디오 데이타를 적절한 디바이스에 자동 결합시키므로써 다중 매체 프리젠테이션의 프로비젼을 만든다. 오디오 데이타는 객체와 직접 연관될 수 있거나, 텍스트 음성간 프로세스 또는 다른 유사 기술을 사용하여 오디오 데이타 뷰를 선택함에 따라 유도될 수 있다. 객체 내에 다중 매체 데이타의 캡슐화는 사용자에 의해 조작되어야 하는 분리 오디오 또는 비디오 객체들을 요구하지 않고도, 객체 내에 다중 매체 프리젠테이션 자격(capability)을 통합시킨다.

Description

객체 지향 사용자 인터페이스 내에 다중 매체 프리젠테이션을 통합시키기 위한 방법 및 시스템
제 1도는 본 발명의 방법 및 시스템을 구현하기 위해 사용될 수 있는 데이타 처리 시스템의 하이 레벨의 블록도.
제 2도는 본 발명의 방법 및 시스템에 따라 객체 지향 사용자 인터페이스 내에 제공된 다중 폴리모픽 객체들의 데이타 처리 시스템 디스플레이의 그림 도면.
제 3a 내지 3c도는 본 발명의 방법 및 시스템에 따라 제공된 폴리모픽 객체의 다중 데이타 뷰들의 그림 도면.
제 4도는 본 발명의 방법 및 시스템에 따라 객체 지향 사용자 인터페이스 내에 제공된 제 2폴리모픽 객체의 그림 도면
제 5도는 본 발명의 방법 및 시스템에 따른 폴리모픽 객체의 다중 데이타 뷰들의 프로비전을 나타내는 하이 레벨의 논리 플로우챠트.
* 도면의 주요 부분에 대한 부호의 설명
10:데이타 처리 시스템12:중앙 처리 유닛
14:사용자 입력 디바이스16:디스플레이
18:메모리
20:직접 엑세스 저장 디바이스(DASD)
22:오디오 출력 디바이스24:비디오 출력 디바이스
26, 28:스피커32, 50, 54, 60:윈도우
34, 36, 38, 40:다중 폴리모픽 객체42:마우스 포인터
44:팝-업 메뉴46:서브-메뉴
52:스크롤 바62:코맨드 바
본 발명은 일반적으로 데이타 처리 시스템 내에서 향상된 다중 매체 프리젠테이션(multimedia presentation)에 관한 것으로, 특히 데이타 처리 시스템에서 객체 지향 사용자 인터페이스(object oriented user interface) 내에 다중 매체 프리젠테이션을 통합시키기 위한 방법 및 시스템에 관한 것이다. 더군다나, 본 발명은 각각의 객체에 대한 다양한 사용자 선택가능 데이타 뷰(view)들을 사용하여 객체 지향 사용자 인터페이스 내에 선택가능 다중 매체 프리젠테이션을 제공하기 위한 방법 및 시스템에 관한 것이다.
컴퓨터 사용자 인터페이스 내에 다중 매체의 사용은 매우 빠르게 확산되고 있다. 텍스트, 그래픽, 영상, 오디오, 및 비디오 등의 다양한 매체는 상위 대화식 및 통신 사용자 인터페이스(highly interactive and communicative user interface)를 제공하도록 결합될 수 있기 때문에, 생산성 및 사용자 만족도에 있어서 전체적으로 상당히 증가시킬 수 있다.
데이타 처리 시스템 내에 다중 매체의 공지된 지원 방법은 전형적으로 각각의 다중 매체 객체에 플레이어(player) 인터페이스를 제공한다. 예를들어, 오디오 및 비디오는 전형적으로 개별 객체들로서 취급되고, 카셋트 테이프 플레이어, 비디오 카셋트 레코더, 레이저 디스크 플레이어 및 다른 디바이스들을 나타내는 제어 패널들은 사용자가 오디오 또는 비디오 객체를 플레이어 디바이스를 이용하여 그래픽 조작하므로써 기록된 정보에 엑세스할 수 있도록 하기 위해서 그래픽으로 디스플레이된다.
이러한 방법은 논리적으로 효과적인 기술을 제공하므로써 다중 매체가 데이타 처리 시스템 내에 사용될 수 있는 반면, 각각 상이한 형태의 다중 매체 출력을 억세스하기 위해서 다양한 플레이어 디바이스들의 그래픽 리프리젠테이션들을 제공하기 위한 조건은 프로그래머에게 상당히 번거로울 수 있다. 이는 또한, 일반적으로 그들의 데이타에 주의를 집중시키기를 원하는 사용자들에게는 상당히 혼란스러울 수 있다.
최근에는, 소위 객체 지향 프로그래밍 인터페이스들의 복잡한 컴퓨터 시스템에 이용되는 것이 제안되어 왔다. 객체 지향형의 인터페이스는 전형적으로 3가지 중요한 특징들이 있는데, 이 3가지 특징들은 전통적인 프로그래밍 언어들로부터 그러한 시스템들을 구별시킨다. 먼저, 객체 지향 프로그래밍 시스템 내의 객체들은 전형적으로 폴리모픽(polymorphic)이다. 즉, 각각의 객체는 서로 다른 방식으로 동일한 메시지에 응답할 수 있다. 따라서, 객체가 코맨드를 수신하면, 해석기는 객체의 어느 응답이 코맨드의 형태로 되는 지를 결정한다.
다음에, 객체지향 사용자 인터페이스 내의 객체들은 다른 객체로부터 데이타 및 기능성(functionality)을 자동적으로 이끌어 내기 위해 객체의 상속(inheritance) 또는 능력(ability)을 입증한다. 마지막으로, 객체는 전용데이타가 외부 엑세스로부터 보호될 때 캡슐화(encapsulated)된다고 말한다. 즉, 다른 객체는 객체의 내부 데이타에 억세스할 수 없다.
객체 지향 사용자 인터페이스의 다른 공통적인 특성은 데이타 뷰 분리 모델(data view separation model)에 있다. 이러한 모델은 객체지향 사용자 인터페이스 내의 객체들이 데이타와 이 데이타의 뷰들로 분리가능하다고 단일 객체가 동일한 데이타의 복수 다양한 뷰들을 제공할 수 있다는 전제하에 가능하다. 예를들면,오늘날 스프레드쉬트 프로그래밍 시스템에서는 데이타의 선택된 파일은 수치적 스프레드쉬트 또는 그래픽 차트로서 뷰(viewed)될 수 있다.
객체 지향 사용자 인터페이스가 이런 다양한 데이타 뷰 자격(capability)를 제공하는 것으로 알려진 반면에, 객체 지향 사용자 인터페이스 내의 다중 매체 파일들의 프리젠테이션은 여전히, 매체 형태로 특징지워지고 특정 플레이어 디바이스를 사용하여 출력되는 출력 파일들의 그래픽 조작을 통해 보통 달성된다. 따라서, 다중 매체 프리젠테이션들을 객체지향 사용자 인터페이스 내에 통합시키기 위해 좀 더 직관적으로 효과적인 기술을 제공하는 방법 및 시스템이 필요하다는 것이 명백해졌다.
따라서, 본 발명의 목적은 데이타 처리 시스템에 향상된 다중 매체 프리젠테이션을 제공하는 것이다.
본 발명의 다른 목적인 데이타 처리 시스템에서 객체 지향 사용자 인터페이스 내에 다중 매체 프리젠테이션들을 통합시키기 위한 향상된 방법 및 시스템을 제공하는 것이다.
본 발명의 또 다른 목적은 각각의 객체의 다양한 사용자 선택가능 데이타 뷰들을 이용하여 객체 지향 사용자 인터페이스 내에 선택가능 다중 매체 프리젠테이션들을 제공하기 위한 향상된 방법 및 시스템을 제공하는 것이다.
상기 목적들은 이제 기술되는 바와 같이, 달성된다. 본 발명의 방법 및 시스템은 각각이 연상 캡슐화 데이타 및 기능성을 갖는 복수의 폴리모픽 객체들을 포함하는 객체 지향 사용자 인터페이스 내에 다중 매체 프리젠테이션들을 통합시키는데 이용될 수 있다. 복수의 분리 사용자 데이타 뷰들은 객체와 연관된 데이타의 서로 다른 뷰들을 제공하는 각각의 객체에 대해 정의된다. 객체에 대한 오디오 또는 비디오 데이타 뷰의 사용자 선택은 오디오 또는 비디오 데이타를 적절한 디바이스에 자동 결합시키므로써 다중 매체 프리젠테이션의 프로비전(provision)을 만든다. 오디오 데이타는 텍스트 음성간(text-to-speech) 프로세스 또는 다른 유사한 기술을 사용하여, 객체와 직접 연관되거나 오디오 데이타 뷰의 선택에 응답하여 유도될 수 있다. 객체 내의 캡슐화 다중 매체 데이타는 사용자가 조작해야 하는 분리 오디오 또는 비디오 객체들을 필요로 하지 않고도 객체 내에 다중 매체 프리젠테이션 자격(capability)을 통합시킨다. 상기 외에 본 발명의 추가 목적, 특징 및 장점들은 다음 설명에서 명백해진다.
이하 첨부된 도면을 참조하여 본 발명을 상세히 설명한다.
제1도를 참조하면, 본 발명의 방법 및 시스템을 구현하는데 사용될 수 있는 데이타 처리 시스템(10)이 나타나 있다. 본 발명의 양호한 실시예의 데이타 처리 시스템(10)은 객체 지향 사용자 인터페이스를 지원하는 소정의 데이타 처리 시스템이 사용될 수 있더라도, IBM사(International Business Machines Corporation)의 PS/2 퍼스널 컴퓨터와 같은 소위, 퍼스널 컴퓨터를 사용하여 구현될 수 있다. 설명된 바와 같이, 데이타 처리 시스템(10)은 양호하게 중앙 처리 유닛(12)과 사용자 입력 디바이스(14)를 포함한다. 사용자 입력 디바이스(14)는 양호하게 키보드와 마우스, 라이트 펜 또는 이와 유사한 디바이스 등의 그래픽 사용자 입력 디바이스를 포함한다. 사용자 입력 디바이스(14)는 양호하게 공지된 방식으로 케이블을 사용하여 중앙 처리 유닛(12)에 결합된다.
또한 중앙 처리 유닛(12)은 디스플레이(16)에 결합된다. 디스플레이(16)은 본 발명의 양호한 실시예에 따라, 컴퓨터 그래픽, 텍스트 및 비디오를 디스플레이할 수 있는 컬러 모니터를 사용하여 양호하게 제공된다. 또한, 중앙 처리유닛(12)은 메모리(18), 및 참조 번호(20)으로 도시된 1개 이상의 직접 억세스 저장 디바이스(DASD)들에 결합된다. 직접 억세스 저장 디바이스(20)는 공지된 방식으로 응용 프로그램을 저장하기 위해 사용될 수 있다.
오디오 출력 디바이스(22)는 또한 중앙 처리 유닛(12)에 결합된다. 오디오 출력 디바이스(22)는 양호하게 증폭기를 포함하고, 스피커(26 및 28)을 사용하여 스테레오 오디오 출력을 제공할 수 있다. 오디오 출력 디바이스(22)는 Creative Labs사에서 제조된 사운드블래스터(SoundBlaster) 오디오 카드와 같은 시판중인 디바이스들을 이용하여 구현될 수 잇다. 비디오 출력 디바이스(24)는 또한, 중앙 처리 유닛(12)에 결합되고, 중앙 처리 유닛(12)으로부터의 비디오 데이타를 비디오 출력 디바이스(24)에 결합시킴에 따라, 본 발명의 도시된 실시예에서 디스플레이(16)에 결합되는 비디오 출력 프리젠테이션을 만들 수 있다.
본 분야의 숙련자들은 비디오 출력 디바이스(24)가 Creative Labs사에서 제조된 사운드블래스터 카드와 같은, 중앙 처리 유닛(12) 내의 비디오 오댑터 카드를 포함할 수 있다는 것을 알 수 있다. 이러한 카드들은 메모리로부터의 비디오 데이타를 이용하여 비디오 출력을 생성하지만, 비디오 카셋트 레코더, 레이저 디스크 플레이어 또는 다른 적절한 비디오 출력 디바이스와 같은 비디오 데이타의 외부 소스들을 채택할 수도 있다.
제2도를 참조하면, 본 발명의 방법 및 시스템에 따른 객체 지향 사용자 인터페이스 내에 제공된 복수의 폴리모픽 객체들의 데이타 처리 시스템 디스플레이의 화보(pictorial) 리프리젠테이션을 도시한다. 도시한 바와 같이, 디스플레이(16)는 복수의 폴리모픽 객체(34, 36, 38 및 40)들을 포함하는 뷰포트(viewport) 또는 윈도우(32)를 제공하기 위해 이용된다. 본 분야의 숙련자들이 알 수 있는 바와 같이, 객체 지향 사용자 인터페이스는 인터페이스 내의 서로 다른 형태의 갤체들이 서로 다른 방식으로 동일한 메시지에 응답할 때 폴리모픽으로 불린다. 따라서, 객체는 마우스 포인터와 같은 사용자 입력 디바이스(14)를 이용하여 선택될 수 있고, 객체 지향 사용자 인터페이스와 양립하는 방법에 따라 조작될 수 있다.
본 발명의 도시된 실시예에서 윈도우(32)는 크리스마스 캐롤(Christmas Carol)들을 나타내는 다수의 객체들을 나타낸다. 따라서, 마우스 포인터(42)를 이용하므로써, 사용자는 객체(38)와 같은 특별한 객체를 선택할 수 있다. 객체(38)를 선택하면, 팝-업 메뉴(44)와 같은, 소위 팝-업 메뉴가 도시된다. 팝-업 메뉴(44)에 도시된 바와 같이, 많은 선택 사용들이 선택을 위해서 사용자에게 제공된다. 따라서, 본 발명의 실시예에 따르면, 사용자는 Look at, Listen to, Watch, Setting 및 Help을 포함하는 다양한 코맨드들을 선택할 수 있다.
제2도에 도시된 바와 같이, 사용자는 팝-업 메뉴(44) 내의 선택 사용을 선택할 수 있으므로, 윈도우(32) 내의 객체를 조작할 수 있다. 이러한 인터페이스내에서 종종 허용되듯이, 특별한 선택 사용, 예를 들면 Look at의 선택은 서브-메뉴의 디스플레이로 귀결될 수 있다. 따라서, 사용자가 코맨드 Look at을 선택하면, 서브-메뉴(46)이 제공된다. 서브-메뉴(46)는 선택 사양 Lyrics 및 Score를 포함한다. 이러한 방식에서, 사용자는 선택 사양 Look at을 선택할 수 있고, 그 이후에는 선택된 크리스마스 캐롤의 가사(lyrics) 도는 악보(score)의 프리젠테이션을 선택한다.
제3A도 내지 제3C도를 참조하면, 본 발명의 방법 및 시스템에 따라 제공될 수 있는 폴리모픽 객체의 복수의 데이타 뷰들의 화보 리프리젠테이션들이 디스플레이된다. 도시된 바와 같이, 폴리모픽 객체(38)를 선택한 후에, Look at 코맨드, 및 Lyrics 서브코맨드, 즉 제2윈도우가 오픈되어, 윈도우(32) 위에 나타난다. 설명을 간단히 하기 위해, 최상부 윈도만이 제3A도 내지 제3C도에 도시된다.
도시된 바와 같이, 디스플레이(16)는 선택된 객체와 연관된 크리스마스캐롤의 기사들을 디스플레이하는 윈도우950)을 포함한다. 그래서 사용자 인터페이스 분야에 공통적이듯이, 스크롤 바(52)는 또한 마우스 포인터(42)를 사용하여 제공 및 조작될 수 있기 때문에, 사용자는 선택된 크리스마스 캐롤의 가사를 스크롤시킬 수 있다.
교대로, 사용자가 코맨드 Look at 및 서브코맨드 Score를 선택하면, 프리젠테이션은 제3B도에서와 같이 제공된다. 조사된 바와 같이, 디스플레이(16)는 폴리모픽 객체(38)과 연관되어 선택된 크리스마스 캐롤에 대한 음악 악보를 포함하는 윈도우(54)를 나타낸다. 상기와 같이, 스크롤 바(52)는 수평면으로 제공되어, 마우스 포인터(42)를 사용하여 조작될 수 있기 때문에, 음악 악보의 대체부분들을 억세스할 수 있다.
제3C도를 참조하면, 제공된 컴퓨터 디스플레이는 사용자에 의한 선택 사양Watch의 선택에 대한 데이타 처리 시스템의 응답을 포함한다. 도시된 바와 같이, 폴리모픽 객체(38)과 연관된 크리스마스 캐롤의 실행을 나타내는 비디오 및 오디오 프리젠테이션을 포함하는 윈도우(60)가 제공된다. 코맨드 바(62)가 제공되어, rewind, reverse, play, stop, 및 fast foward와 같은, 전형적으로 비디오 플레이어 디바이스와 연관된 다양한 인터페이스 코맨드들을 구현한다.
본 분야의 숙련자들이 제3A도 내지 제3C도를 통해 알 수 있듯이, 제2도의 윈
도우(32) 내의 단일 폴리모픽 객체(38)는 사용자에 의해 선택될 수 있고, 3가지 서로 다른 데이타 뷰들이 제공될 수 있다. 가사, 악보, 또는 실제로 폴리모픽객체(38)와 연관된 크리스마스 캐롤의 실행을 나타내는 비디오 프리젠테이션이 단일 객체에 대해 제공될 수 있으므로, 사용자 인터페이스 내에 다중 매체 프리젠테이션을 통합시키는 데 있어서 데이타 처리 시스템(10)의 효율성을 크게 향상시킬 수 있다.
물론, 코맨드 Listen to의 선택은 오디오 출력 디바이스922)와 스피커(26 및 28)(제1도)들만을 이용하는 오디오 출력의 프리젠테이션을 제공한다. 이는 폴리모픽 객체(38) 내에 MIDI 데이타를 캡슐화시키거나, 파형 발생을 이용하기 위해 소위, Wave 데이타를 캡슐화시키므로써 쉽게 달성될 수 있다.
본 발명의 객체지향 사용자 인터페이스 내의 객체들의 폴리모칙 특성은 제4도와 연관되어 기술되는데, 이는 본 발명의 방법 및 시스템에 따라 제공되는 제2의 폴리모픽 객체의 확보 리프리젠테이션을 나타낸다. 디스플레이(16) 내에 도시된 바와 같이, 윈도우(60)이 텍스트 메모를 포함한 것이 나타난다. 마우스 포인터(42)를 이용하여 메모를 선택하면, 팝-업 메뉴(44)는 제2도의 객체(38)에 대해 제공된 코맨드들과 동일한 코맨드를 포함하는 것을 나타낸다. 그러나, Listen to 코맨드를 선택하면, 메모가 구두 프리젠테이션으로 제공될 수 있다.
물론, 본 분야의 숙련자들이라면, 메모의 저장된 오디오 프리젠테이션을 이용하거나 텍스트 음성간 프로세스를 이용하므로써 그러한 구두 프리젠테이션이 발생될 수 있다는 것을 알 수 있으며, 이는 데이타 처리 시스템(10) 내에서 구현될 수 있다.
따라서, 코맨드 Listen to는 복수의 폴리모픽 객체들을 포함하는 객체 지향 사용자 인터페이스 내의소정의 객체에 적용될 수 있으며, 코맨드가 적용되는 객체의 형태에 따라 서로 다른 방식으로 그 코맨드에 응답하게 된다. 물론, 코맨드 Watch는 윈도우(60) 내에 도시된 메모에 적용되지 않을 수도 있고; 그러한 선택 사양은 비가용성을 나타내는 그레이 컬러(gray color)로 디스플레이된다.
그러나, 팝-업 메뉴(44) 내의 나머지 선택 사양들은 윈도우(60) 내에 표시된 객체에 의해 해석되어, 적절히 적용된다. 교대로, 윈도우(60) 내에 나타난 저자의 메모에 대하 비디오 프리젠테이션은 또한 Watch 코맨드의 선택에 따라 디스플레이된다.
마지막으로, 제5도를 참조하면, 본 발명의 방법 및 시스템에 따른 폴리모픽객체의 복수의 데이타 뷰들의 프로비전을 도시하는 하이 레벨의 논리 플로우차트가 도시되어 있다. 도시된 바와 같이, 프로세스가 블록(80)에서 시작된 다음, 블록(82)은 사용자가 폴리모픽 객체의 데이타 뷰를 선택했는지의 여부에 대한 판단을 도시한다. 선택하지 않았다면, 프로세스는 단지 데이타 뷰가 사용자에 의해 선택되는 시간까지 반복한다.
블록(82)에서 결정되대로, 일단 사용자가 데이타 뷰를 선택하면, 프로세스는 블록(84)로 진행된다. 블록(84)는 사용자에 의해 선택된 데이타 뷰가 Listen to인지의 여부에 대한 판단을 도시한다. 만약 그렇다면, 프로세스는 블록(86)으로 진행된다. 블록(85)은 오디오 데이타가 해당 폴리모픽 객체에 사용가능한지의 여부에 대한 판단을 도시하고, 만약 그렇다면 프로세스는 오디오의 작동을 도시하는 블록(90)으로 진행한다. 그 다으, 프로세스는 블록(92)로 진행되어 복귀된다.
블록(86)을 다시 참조하면, 오디오 데이타가, 이러한 데이타 뷰를 사용자가 선택한 폴리모픽 객체에 사용 불가능한 경우에는, 프로세스는 블록(88)로 진행한다. 블록(88)은 텍스트 음성간 변환 프로세스 또는 다른 유사 기술의 응용에 대해 도시하고, 프로세스는 그 객체에 대한 오디오 데이타 뷰의 작동을 도시하는 블록(90)으로 진행된다. 다시 한번, 프로세스는 블록(92)로 진행되어 복귀된다.
블록(84)를 다시 참조하면, 선택된 데이타 뷰가 Listen to가 아닌 경우에는, 프로세스는 블록(94)로 진행된다. 블록(94)는 선택된 데이타 뷰가 Look at인지 여부에 대한 판단을 도시하고, 만약 그렇다면 프로세스는 블록(96)으로 진행한다. 블록(96)은 객체의 텍스트 내용의 디스플레이를 도시한 다음에, 프로세스는 블록(92)로 진행되어 복귀된다. 물론, 제2도와 제3A도 내지 제3C도에 도시된 바와 같이, Look at 데이타 뷰의 선택 사양은 사용자가 서브코맨드 Lyrics 또는 Score를 선택했는지를 또 판단할 수 있게 하고, 적절한 데이타뷰를 디스플레이한다.
블록(94)응 다시 참조하면, 사용자가 Look at 데이타 뷰를 선택하지 않은 경우에는, 프로세스는 블록(98)로 진행된다. 블록(98)은 선택된 데이타 뷰가 Watch 데이타 뷰인지 여부에 대한 판단을 도시하고, 만약 그렇다면 프로세스는 블록(100)으로 진행한다. 블록(100)은 비디오 출력 디바이스에 비디오의 결합을 도시하고, 프로세스는 블록(92)로 진행되어 복귀한다. 선택된 데이타 뷰가 Watch 코맨드가 아닌 경우에는, 프로세스는 블록(98)로부터 블록(92)로 진행되어 복귀된다.
불론, 본 분야의 숙련자들은 이들 선택된 데이타 뷰들이 특정 객체와 연관될 수 있는, 단지 예시적이고 서로 다른 형태의 데이타 뷰들이라는 것을 알 수 있다.
상기를 참조하면, 본 분야의 숙련자들이라면, 출원인이 오디오 또는 비디오 프리젠테이션에 대한 분리 객체의 명시된 프로비젼(express provision) 및 명백한 플레이어 디바이스의 조작을 요하지 않고도, 선택된 다중 매체 프리젠테이션을 데이타 처리 시스템 내의 단일 폴리모픽 객체의 다양한 데이타 뷰들로서 제공하므로써, 다중 매체 프리젠테이션들이 데이타 처리 시스템 내에서 객체 지향 사용자 인터페이스 내에 통합될 수 있는 시스템을 만들었다는 것을 알 수 있다. 객체의 독특한 데이타 뷰로서 다중 매체 프리젠테이션을 객체 지향 사용자 인터페이스 내에 통합시키므로써, 본 발명의 방법 및 시스템은 이러한 시스템 내에서 다중 매체 프리젠테이션들을 선택 및 조작하기 위한 새롭고 효율적인 기술을 제공한다.
본 발명이 양호한 실시예를 참조로 하여 도시되고 기술되었지만, 본 분야에 숙련된 기술자들이라면, 상기에 제한되지 않은 본 발명의 개념 및 범위를 벗어나지 않는 한도에서 다양한 변형이 가능하다는 것을 알 수 있다.

Claims (12)

  1. 다중 매체(multimedia)를 객체 지향 사용자 인터페이스(object oriented user interface) 내에 통합시키기 위한 방법에 있어서, 각각이 특정 캡슐화 데이타 및 가능성(specified encapsulated data and functionality)을 갖는 다수의 폴리모픽 객체(polymorphic object)들을 데이타 처리 시스템 내에 제공하고; 적어도 하나가 다중 매체 데이타 뷰를 포함하고 있으며 상기 다수의 폴리모픽 객체들 각각과 연관되어 있는 다수의 사용자 선택가능 데이타 뷰(user selectable data view)들을 한정하며; 그리고 연상(associated) 다중 매체 데이타 뷰의 사용자 선택에 따라 상기 폴리모픽 객체들 중 하나의 상기 데이타 처리 시스템 내에 다중 매체 프리젠테이션(multimedia presentation)을 자동 제공하는 데이타 처리 시스템 실행 단계들을 포함하는 것을 특징으로 객체 지향 사용자 인터페이스 내에 다중 매체를 통합하는 방법.
  2. 제1항에 있어서, 상기 다수의 폴리모픽 객체들 중 적어도 하나가 특정 비디오 데이타를 포함하고; 연상 다중 매체 데이타 뷰의 사용자 선택에 따라 상기 폴리모픽 객체들 중 하나의 상기 데이타 처리 시스템 내에 다중 매체 프리젠테이션을 자동 제공하는 상기 단계가 상기 특정 비디오 데이타의 비디오 프리젠테이션을 자동 제공하는 단계를 포함하는 것을 특징으로 하는 객체 지향 사용자 인터페이스 내에 다중 매체를 통합하는 방법.
  3. 제1항에 있어서, 상기 다수의 폴리모픽 객체들 중 적어도 하나가 특정 그래픽 데이타를 포함하고; 연상 다중매체 데이타 뷰의 사용자 선택에 따라 상기 폴리모픽 객체들 중 하나의 상기 데이타 처리 시스템 내에 다중 매체 프리젠테이션을 자동 제공하는 상기 단계가 상기 특정 그래픽 데이타의 그래픽 프리젠테이션을 자동 제공하는 단계를 포함하는 것을 특징으로 하는 객체 지향 사용자 인터페이스 내에 다중 매체를 통합하는 방법.
  4. 제1항에 있어서, 상기 다수의 폴리모픽 객체들 중 적어도 하나가 특정 MIDI 데이타를 포함하고; 연상 다중 매체 데이타 뷰의 사용자 선택에 따라 상기 폴리모픽 객체들 중 하나의 상기 데이타 처리 시스템 내에 다중 매체 프리젠테이션을 자동 제공하는 상기 단계가 상기 특정 MIDI 데이타의 오디오 프리젠테이션을 자동 제공하는 단계를 포함하는 것을 특징으로 하는 객체 지향 사용자 인터페이스 내에 다중 매체를 통합하는 방법.
  5. 제1항에 있어서, 상기 다수의 폴리모픽 객체들 각각과 연관되어 있는 다수의 사용자 선택가능 데이타 뷰들을 한정하는 상기 단계가 오디오 프리젠테이션 뷰를 한정하는 단계를 포함하는 것을 특징으로 하는 객체 지향 사용자 인터페이스 내에 다중 매체를 통합하는 방법.
  6. 제5항에 있어서, 상기 다수의 폴리모픽 객체들 중 적어도 하나가 특정 텍스트 데이타를 포함하고 상기 데이타 처리 시스템이 텍스트 음성간 변환 프로세스(text-to-speech conversion precess)를 포함하며; 연상 다중 매체 데이타 뷰의 사용자선택에 따라 상기 폴리모픽 객체들 중 하나가 상기 데이타 처리시스템 내에 다중 매체 프리젠테이션을 자동 제공하는 상기 단계가 연상 오디오 프리젠테이션 뷰의 사용자 선택에 따라 상기 특정 텍스트 데이타를 상기 텍스트 음성간 변환 프로세스에 자동 결합시키는 단계를 포함하는 것을 특징으로 하는 객체 지향 사용자 인터페이스 내에 다중 매체를 통합하는 방법.
  7. 객체 지향 사용자 인터페이스 내에 다중 매체가 통합되어 있는 데이타 처리 시스템에 있어서, 특정 캡슐화 데이타 및 기능성을 각자 갖는 다수의 폴리모픽 객체들을 상기 데이타 처리 시스템 내에 제공하기 위한 수단; 적어도 하나가 다중 매체 데이타 뷰를 갖고 있으며 상기 다수의 폴리모픽 객체들 각각과 연관되어 있는 다수의 사용자 선택가능 데이타 뷰들을 한정하기 위한 수단; 및 연상 다중 매체 데이타 뷰의 사용자 선택에 따라 상기 폴리모픽 객체들 중 하나의 상기 데이타 처리 시스템 내에 다중 매체 프리젠테이션을 자동 제공하기 위한 수단을 포함하는 것을 특징으로 하는 객체 지향 사용자 인터페이스 내에 다중 매체가 통합되어 잇는 데이타 처리 시스템.
  8. 재7항에 있어서,상기 다수의 폴리모픽 객체들 중 적어도 하나가 측정 비디오 데이타를 포함하고; 연상 다중 매체 데이타 뷰의 사용자 선택에 따라 상기 폴리모픽 객체들 중 하나의 상기 데이타 처리 시스템 내의 다중 매체 프로젠테이션을 자동 제공하기 위한 상기 수단이 상기 특정 비디오 데이타의 비디오 프리젠테이션을 자동 제공하기 위한 수단을 포함하는 것을 특징으로 하는 객체 지향 사용자 인터페이스 내에 다중 매체가 통합되어 있는 데이타 처리 시스템.
  9. 재7항에 있어서,상기 다수의 폴리모픽 객체들 중 적어도 하나가 특정 그래픽 데이타를 포함하고; 연상 매체 데이타 뷰의 사용자 선택에 따라 상기 폴리모픽 객체들 중 하나의 상기 데이타 처리 시스템 내에 상기 특정 그래픽 데이타의 그래픽 프리젠테이션을 자동 제공하기 위한 상기 수단이 상기 특정 그래픽 데이타의 그래픽 프리젠테이션을 자동으로 제공하기 위한 수단을 포함하는 것을 특징으로 하는 객체 지향 사용자 인터페이스 내에 다중 매체가 통합되어 있는 데이타 처리 시스템.
  10. 제7항에 있어서, 상기 다수의 폴리모픽 객체들 중 적어도 하나가 특정 MIDI 데이타를 포함하고; 연상 다중 매체 데이타 뷰의 사용자 선택에 따라 상기 폴리모픽 객체들 중 하나의 상기 테이타 처리 시스템 내에 다중 매체 프리젠테이션을 자동 제공하기 위한 상기 수단이 상기 특정 MIDI 데이타의 오디오 프리젠테이션을 자동 제공하기 위한 수단을 포함하는 것을 특징으로 하는 객체 지향 사용자 인터페이스 내에 다중 매체가 통합되어 있는 데이타 처리 시스템.
  11. 제7항에 있어서, 상기 다수의 폴리모픽 객체들 각각과 연관되어 있는 다수의 사용자 선택가능 데이타 뷰들을 한정하기 위한 상기 수단이 오디오 프리젠테이션뷰를 한정하기 위한 수단을 포함하는 것을 특징으로 하는 객체 지향 사용자 인터페이스 내에 다중 매체가 통합되어 있는 데이타 처리 시스템.
  12. 재11항에 있어서,상기 다수의 폴리모픽 객체들 중 적어도 하나가 특정 텍스트 데이타를 포함하고 상기 데이타 처리 시스템이 텍스트 음성간 변화 프로세스를 포함하며; 연상 다중 매체 데이타 뷰의 사용자 선택에 따라 상기 폴리모픽 객체들 중 하나의 상기 데이타 처리 시스템 내에 다중 매체 프리젠테이션을 자동 제공하기 위한 상기 수단이 상기 오디오 프리젠테이션 뷰의 사용자 선택에 따하 상기 특정 텍스트 데이타를 상기 텍스트 음성간 변환 프로세스에 자동 결합시키기 위한 수단을 포함하는 것을 특징으로 하는 객체 지향 사용자 인터페이스 내에 다중 매체가 통합되어 있는 데이타 처리 시스템.
KR1019940034083A 1993-12-16 1994-12-14 객체 지향 사용자 인터페이스 내에 다중 매체 프리젠테이션을 통합시키기 위한 방법 및 시스템 KR0138002B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US16872193A 1993-12-16 1993-12-16
US8/168,721 1993-12-16

Publications (1)

Publication Number Publication Date
KR0138002B1 true KR0138002B1 (ko) 1998-06-15

Family

ID=22612671

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019940034083A KR0138002B1 (ko) 1993-12-16 1994-12-14 객체 지향 사용자 인터페이스 내에 다중 매체 프리젠테이션을 통합시키기 위한 방법 및 시스템

Country Status (4)

Country Link
US (1) US5692205A (ko)
EP (1) EP0658855A1 (ko)
JP (1) JP2713330B2 (ko)
KR (1) KR0138002B1 (ko)

Families Citing this family (120)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09116791A (ja) * 1995-10-23 1997-05-02 Nikon Corp 情報処理機器
US6300880B1 (en) * 1996-01-16 2001-10-09 Philips Electronics North America Corp. Multichannel audio distribution system having portable receivers
US5838316A (en) * 1996-01-26 1998-11-17 International Business Machines Corporation Method and system for presenting a plurality of animated display objects to a user for selection on a graphical user interface in a data processing system
GB2311151B (en) * 1996-02-29 2000-11-15 Jba Holdings Plc An object browser and manipulation system
US5898423A (en) * 1996-06-25 1999-04-27 Sun Microsystems, Inc. Method and apparatus for eyetrack-driven captioning
US7284187B1 (en) * 1997-05-30 2007-10-16 Aol Llc, A Delaware Limited Liability Company Encapsulated document and format system
JPH1115723A (ja) 1997-06-25 1999-01-22 Nec Corp マルチメディアデータ供給方法及びマルチメディアデータサーバ
US5929857A (en) * 1997-09-10 1999-07-27 Oak Technology, Inc. Method and apparatus for dynamically constructing a graphic user interface from a DVD data stream
US6191790B1 (en) 1998-04-01 2001-02-20 Microsoft Corporation Inheritable property shading system for three-dimensional rendering of user interface controls
US6249284B1 (en) 1998-04-01 2001-06-19 Microsoft Corporation Directional navigation system in layout managers
US6169546B1 (en) * 1998-04-01 2001-01-02 Microsoft Corporation Global viewer scrolling system
US6314192B1 (en) 1998-05-21 2001-11-06 Massachusetts Institute Of Technology System, method, and product for information embedding using an ensemble of non-intersecting embedding generators
US6233347B1 (en) 1998-05-21 2001-05-15 Massachusetts Institute Of Technology System method, and product for information embedding using an ensemble of non-intersecting embedding generators
US6400826B1 (en) 1998-05-21 2002-06-04 Massachusetts Institute Of Technology System, method, and product for distortion-compensated information embedding using an ensemble of non-intersecting embedding generators
GB2338371A (en) 1998-06-09 1999-12-15 Ibm Voice processing system
CA2279504A1 (fr) * 1998-08-13 2000-02-13 Guy Fouquet Document multimedia dynamique
US6486897B1 (en) * 1998-09-29 2002-11-26 Apple Computer, Inc. Multi-repository display system using separate presentation, adaptation and access layers
US6350199B1 (en) * 1999-03-16 2002-02-26 International Game Technology Interactive gaming machine and method with customized game screen presentation
US6636238B1 (en) 1999-04-20 2003-10-21 International Business Machines Corporation System and method for linking an audio stream with accompanying text material
US6346934B1 (en) 1999-05-17 2002-02-12 Gateway, Inc. Programmable remote device control apparatus and method
US6556219B1 (en) 1999-05-18 2003-04-29 Gateway, Inc. Method and system for peripheral device user interface construction
US20010030660A1 (en) * 1999-12-10 2001-10-18 Roustem Zainoulline Interactive graphical user interface and method for previewing media products
US7209980B2 (en) 1999-12-17 2007-04-24 Gateway Inc. Method and system for interpreting device control commands
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US7277765B1 (en) 2000-10-12 2007-10-02 Bose Corporation Interactive sound reproducing
GB0103664D0 (en) * 2001-02-15 2001-03-28 Hutchinson Neil Web-based on-line audio-visual presentations
TWI238008B (en) * 2003-12-15 2005-08-11 Inst Information Industry Method and system for processing interactive multimedia data
US8239749B2 (en) * 2004-06-25 2012-08-07 Apple Inc. Procedurally expressing graphic objects for web pages
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
CN101548327A (zh) * 2006-09-20 2009-09-30 约翰·W·汉内有限公司 用于创作、分发及呈现多态媒体的方法及设备
US20090297120A1 (en) * 2006-09-20 2009-12-03 Claudio Ingrosso Methods an apparatus for creation and presentation of polymorphic media
US20090297121A1 (en) * 2006-09-20 2009-12-03 Claudio Ingrosso Methods and apparatus for creation, distribution and presentation of polymorphic media
JP4310345B2 (ja) 2007-01-09 2009-08-05 石川ガスケット株式会社 金属積層形シリンダヘッドガスケット
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
WO2011089450A2 (en) 2010-01-25 2011-07-28 Andrew Peter Nelson Jerram Apparatuses, methods and systems for a digital conversation management platform
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
DE112014002747T5 (de) 2013-06-09 2016-03-03 Apple Inc. Vorrichtung, Verfahren und grafische Benutzerschnittstelle zum Ermöglichen einer Konversationspersistenz über zwei oder mehr Instanzen eines digitalen Assistenten
AU2015266863B2 (en) 2014-05-30 2018-03-15 Apple Inc. Multi-command single utterance input method
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
USD781917S1 (en) 2015-10-15 2017-03-21 Threewire, Inc. Display screen with icon
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179309B1 (en) 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4914586A (en) * 1987-11-06 1990-04-03 Xerox Corporation Garbage collector for hypermedia systems
US5060135A (en) * 1988-09-16 1991-10-22 Wang Laboratories, Inc. Apparatus for manipulating documents in a data processing system utilizing reduced images of sheets of information which are movable
JPH0217508A (ja) * 1988-07-06 1990-01-22 Fanuc Ltd 穴形状の多面図表示方法
US4931950A (en) * 1988-07-25 1990-06-05 Electric Power Research Institute Multimedia interface and method for computer system
US5065345A (en) * 1988-11-04 1991-11-12 Dyned International, Inc. Interactive audiovisual control mechanism
US5136712A (en) * 1989-06-29 1992-08-04 Digital Equipment Corporation Temporary object handling system and method in an object based computer operating system
EP0436560B1 (en) * 1989-08-03 1996-03-27 International Business Machines Corporation Method of displaying or recording changes in the relationship between objects in a data processing system
US5140677A (en) * 1990-05-11 1992-08-18 International Business Machines Corporation Computer user interface with window title bar mini-icons
JPH0454630A (ja) * 1990-06-22 1992-02-21 Hitachi Ltd 項目入力制御方法および装置
US5412774A (en) * 1990-08-29 1995-05-02 At&T Corp. Apparatus for and method of displaying a data item of a database using the display function of a selected data item
US5204947A (en) * 1990-10-31 1993-04-20 International Business Machines Corporation Application independent (open) hypermedia enablement services
US5539869A (en) * 1992-09-28 1996-07-23 Ford Motor Company Method and system for processing and presenting on-line, multimedia information in a tree structure
US5345550A (en) * 1992-12-23 1994-09-06 International Business Machines Corporation User-modifiable popup menus for object oriented behavior

Also Published As

Publication number Publication date
JP2713330B2 (ja) 1998-02-16
US5692205A (en) 1997-11-25
EP0658855A1 (en) 1995-06-21
JPH07200230A (ja) 1995-08-04

Similar Documents

Publication Publication Date Title
KR0138002B1 (ko) 객체 지향 사용자 인터페이스 내에 다중 매체 프리젠테이션을 통합시키기 위한 방법 및 시스템
EP0596823B1 (en) Method and system for accessing associated data sets in a multimedia environment in a data processing system
US5148154A (en) Multi-dimensional user interface
US5461399A (en) Method and system for enabling visually impaired computer users to graphically select displayed objects
Gaver The SonicFinder: An interface that uses auditory icons
CA2068476C (en) Audio user interface with stereo and filtered sound effects
Stifelman et al. Voicenotes: A speech interface for a hand-held voice notetaker
US7565608B2 (en) Animation on object user interface
US5799280A (en) Recording method and apparatus and audio data user interface
US5586235A (en) Interactive multimedia system and method
US5826064A (en) User-configurable earcon event engine
JPH0654469B2 (ja) 対話式多重媒体提示プログラム作成補助方法
JP2009519552A (ja) 相互対話的な電子的にシミュレートされた環境の音声および映像制御
EP0886830A1 (en) A method and device for user-presentation of a compilation system
Harmon et al. The virtual annotation system
TW302453B (ko)
US20080091643A1 (en) Audio Tagging, Browsing and Searching Stored Content Files
EP0613145A2 (en) Card file graphical user interface with visual representation of video data
JP2001075989A (ja) 情報提示装置および方法、ならびに情報提示プログラムを記録したコンピュータで読取可能な記録媒体
US6179487B1 (en) Data processing system and method for associating specific graphics with data processing applications
US20060218505A1 (en) System, method and program product for displaying always visible audio content based visualization
Goose et al. The development of a sound viewer for an open hypermedia system
EP0607727A1 (en) Method and system for nonvisual status determination of multistate graphic objects in a data processing system
JP2000338952A (ja) 文字アニメーション編集装置および文字アニメーション再生表示装置
JP2565583B2 (ja) データ処理方法

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20031217

Year of fee payment: 7

LAPS Lapse due to unpaid annual fee