KR100742860B1 - 음악과 화상 트랙을 동기화하는 멀티미디어 시스템 - Google Patents

음악과 화상 트랙을 동기화하는 멀티미디어 시스템 Download PDF

Info

Publication number
KR100742860B1
KR100742860B1 KR1020010030837A KR20010030837A KR100742860B1 KR 100742860 B1 KR100742860 B1 KR 100742860B1 KR 1020010030837 A KR1020010030837 A KR 1020010030837A KR 20010030837 A KR20010030837 A KR 20010030837A KR 100742860 B1 KR100742860 B1 KR 100742860B1
Authority
KR
South Korea
Prior art keywords
sequence
information
display
track
sequence track
Prior art date
Application number
KR1020010030837A
Other languages
English (en)
Other versions
KR20010110178A (ko
Inventor
소네다쿠로우
Original Assignee
야마하 가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 야마하 가부시키가이샤 filed Critical 야마하 가부시키가이샤
Publication of KR20010110178A publication Critical patent/KR20010110178A/ko
Application granted granted Critical
Publication of KR100742860B1 publication Critical patent/KR100742860B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234318—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/52—Program synchronisation; Mutual exclusion, e.g. by means of semaphores
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K15/00—Acoustics not otherwise provided for
    • G10K15/04—Sound-producing devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Software Systems (AREA)
  • Mathematical Physics (AREA)
  • Acoustics & Sound (AREA)
  • Electrophonic Musical Instruments (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

본 발명의 멀티미디어 시스템은 파일 기억장치, 시퀀서, 프로그램 기억장치 및 실행부를 갖는다. 상기 파일 기억장치는 연주 시퀀스 정보를 기록하는 연주 시퀀스 트랙과 드로잉 시퀀스 정보를 기록하는 드로잉 시퀀스 트랙을 포함하는 시퀀스 트랙과 상기 시퀀스 트랙을 서로 동기화하는데 효과적인 동기화 정보를 기록하는 동기화 수단으로 구성된다. 상기 시퀀서는 상기 동기화 정보에 따라 상기 시퀀스를 서로 동시에 병렬 실행하기 위해 상기 멀티미디어 파일을 처리한다. 상기 프로그램 기억장치는 멀티미디어 파일을 다루고 제어하는 애플리케이션 프로그램을 저장한다. 상기 실행부는 상기 애플리케이션 프로그램이 상기 시퀀스 트랙의 병렬 실행의 시작 제어 및 정지 제어를 포함하는 상기 시퀀스 트랙의 병렬 실행의 제어를 위해 시퀀서와 통신하도록 상기 애플리케이션 프로그램을 실행한다.

Description

음악과 화상 트랙을 동기화하는 멀티미디어 시스템{MULTIMEDIA SYSTEM WITH SYNCHRONIZATION OF MUSIC AND IMAGE TRACKS}
도 1은 본 발명의 실시형태에 따른 멀티미디어 실행 시스템 하드웨어의 개략적 구조 도면이다.
도 2는 상기 멀티미디어 실행 시스템의 소프트웨어 구조 도면이다.
도 3은 상기 시스템의 실행 동작을 도시하는 도면이다.
도 4는 시퀀서와 애플리케이션 프로그램의 동작을 도시하는 개략적 플로우차트이다.
도 5는 마스터 트랙의 기능의 설명도이다.
도 6은 디스플레이 이벤트(event)의 좌표 표현 형식을 도시하는 도면이다.
도 7은 상기 디스플레이 이벤트의 통상 기술 컨텐츠를 도시하는 도면이다.
<도면의 주요부분에 대한 부호의 설명>
1 …실행 제어기 2 …시퀀서 기억부
3 …애플리케이션 기억부 4 …기억부
5, 27 …사운드 소스 장치 6, 28 …디스플레이 장치
7, 29 …오디오 장치 8 …음악 톤/보이스 출력부
9 … 모니터 10 …입력부
11 …통신부 20 …SMAF 파일
21 …컨텐츠 정보 기억부 22 …연주 시퀀스 트랙
23 …드로잉 시퀀스 트랙 24 …오디오 시퀀스 트랙
25 …마스터 트랙 26 …시퀀서
30 …애플리케이션 프로그램 31 …사용자 인터페이스
32 …통신 인터페이스
본 발명은 사운드, 화상 및 텍스트 등의 다양한 형태의 멀티미디어 정보를 다르는 멀티미디어 실행 시스템에 관한 것이다.
예컨대, 인터넷 상 컨텐츠의 브라우저 소프트웨어(이하, 브라우저)가 사용자로부터 보이는 총체적 멀티미디어 정보를 다루는 것이다. 사용자가 단일 스크린 위에서 사운드, 화상, 텍스트 등의 멀티미디어 정보를 다루기 위하여 개인 컴퓨터 스크린에서 이 브라우저를 작동할 수 있다. 각각 정보는 통상 서버에서 다른 통로로 한정된 위치에 저장되고, 브라우저는 개별적으로 각 정보의 단편을 추출하고, 동일한 스크린에 상기 정보를 재생한다. 인터넷 상의 모든 정보를 하이퍼텍스트 마크업 언어(HTML)로 다루는 것이 가능하고, 상기 브라우저는 상기 HTML을 해석하여 상기 정보를 출력 또는 재생한다.
또한, 사운드 및 화상(특히, 동적 화상)을 동기화 및 재생하는 HTML과는 다 른 언어로 기술된 소프트웨어가 또한, 인터넷 상에서 실용화 된다. 상기 소프트웨어로 다루어진 파일 구조에서, 사운드 정보는 화상 정보와 통합되고, 상기 구조는 하나의 파일로서 다루어질 수 있다.
그러나, HTML에서 기술될 수 있는 멀티미디어 정보에 대하여, 특정 위치에 저장된 정보는 단지 정적으로 판독되고 재생된다. 각 정보는 동기화되거나 동적으로 재생되지 않는다. 그러므로, 컨텐츠를 정교하게 제어하고, 특히 시간에 따른 화상 또는 사운드을 완전히 동기화하고 재생하는 것이 불가능하다.
또한, 사운드 정보와 화상 정보가 하나의 파일 형태로 다루어지는 종래 기술에서, 각 정보는 완전히 독립적으로 처음부터 재생된다. 그러므로, 상기 정보가 중간에 생략될 수 없거나 또는 상기 정보가 서로 정교하게 동기화 될 수 없는 단점이 있다.
본 발명의 목적은 멀티미디어 정보의 처리가 현저하게 용이하고, 각 정보 사이의 정교한 동기화 제어를 실현하는 멀티미디어 실행 시스템을 제공하는 것이다.
상술된 문제를 해결하기 위해, 본 발명은 하기와 같이 구성된다.
(1) 본 발명의 구성은 연주 시퀀스 정보를 저장하는 연주 시퀀스 트랙, 드로잉 시퀀스 정보를 저장하는 드로잉 시퀀스 트랙 및 각 시퀀스 트랙의 동기화 정보를 저장하는 동기화 정보 기억장치 수단이 동일한 파일에 통합된 멀티미디어 파일의 기억부, 상기 멀티미디어 파일의 실행 동작을 실행하는 시퀀서, 실행 시작, 실행 종료 및 멀티미디어 파일의 실행을 제어하기 위해 시퀀서와 통신하는 애플리케이션 프로그램의 기억부 및 상기 애플리케이션 프로그램을 실행하는 프로그램 실행부를 포함한다.
본 발명의 시스템에서 사용하는 멀티미디어 파일에서, 여기에 기록된 복수 형태의 정보를 갖는 복수의 시퀀스 트랙이 각 시퀀스 트랙의 동기화 정보와 함께 기록된 동기화 정보 기록 수단이 동일한 파일에 통합된다. 동기화 정보 기록 수단은 바람직하게는 상술된 시퀀스 트랙의 것과 동일한 형태의 시퀀스 트랙을 갖도록 구조된다. 복수 형태의 정보는 연주 시퀀스 정보와 드로잉 시퀀스 정보를 포함하고, 또한, 오디오 시퀀스 정보를 포함할 수 있다. 상기 연주 시퀀스 정보는 통상 MIDI 또는 MIDI와 동일한 시퀀스 정보이고, 상기 드로잉 시퀀스 정보는 텍스트, 비트맵 및 화상 데이터를 포함할 수 있다. 상기 오디오 시퀀스 정보는 적응 차분 펄스 부호 변조(Adaptive Differential Pulse Code Modulation: ADPCM) 데이터로 구성될 수 있다. 또한, 상기 정보는 또한, TwinVQ(상표)와 MP3 등의 압축 오디오 데이터로 구성될 수 있다.
본 발명의 멀티미디어 실행 시스템은 멀티미디어 파일을 저장하는 기억부, 멀티미디어 파일의 실행 동작을 실행하는 시퀀서, 실행 시작, 실행 정지 및 멀티미디어 파일의 실행을 제어하기 위해 시퀀서와 통신하는 애플리케이션 프로그램의 기억부 및 상기 애플리케이션 프로그램을 실행하는 프로그램 실행부로 제공된다. 이에 의해, 실행 동작시, 각 시퀀스 트랙 정보는 동기화 정보에 따라 동기화된다. 그러므로, 각 시퀀스 트랙 사이에서 상기 정보의 동기화는 동기화 정보를 기술하는 방법으로 정교하게 설정될 수 있다. 또한, 상기 시퀀서와 애플리케이션 프로그램이 서로 통신하고, 실행 동작이 동기화 정보에 따라 제어될 때, 상기 정보를 상기 애플리케이션 프로그램으로 알 수 있다. 이에 의해, 다양한 제어가 상기 애플리케이션 프로그램에 의한 동기화 정보에 대해 실시될 수 있다.
(2) 상기 멀티미디어 파일은 동기화 정보 기억장치 수단으로서 각 시퀀스 트랙의 것과 동일한 실행 동작을 실시하는 마스터 트랙을 갖고, 동기화 정보로서, 각 시퀀스 트랙의 실행 동작을 정지, 분기 및 반복을 위해 시간 축 방향의 제어 정보를 저장한다.
각 시퀀스 트랙의 것과 동일한 실행 동작을 실시하는 마스터 트랙이 상기 동기화 정보를 저장하는 상기 동기화 정보 기억장치 수단으로 배치되기 때문에, 상기 동기화 정보의 기술이 용이하게 된다. 또한, 각 시퀀스 트랙의 실행 동작을 정지, 분기 또는 반복하기 위한 시간축 방향의 제어 정보가 동기화 정보로 저장되기 때문에, 실행 동작 중에, 소정의 제어가 애플리케이션 프로그램과 통신하는 동안 가능해진다. 예컨대, 실행 동작을 정지하는 제어 정보가 동기화 정보로 저장될 때, 사용하는 상기 데이터를 입력할 수 있거나 또는 특정 데이터가 상응하는 타이밍에서 애플리케이션 프로그램을 갖는 서버에 대해 전송될 수 있거나 요구될 수 있다. 이에 의해, 상기 실행 동작은 사용자의 입력 또는 실행 동작시 서버로부터의 정보를 기초로 하여 제어될 수 있다. 예컨대, 실행 동작을 정지하기 위한 정보가 동기화 정보로서 저장될 때, 분기 수신지가 상응하는 타이밍에서 사용자의 입력에 따라 설정될 수 있다. 또한, 커머셜 정보가 드로잉 시퀀스 트랙에 기록되고, 정지 정보 실행 동작이 커머셜 종료 타이밍에서 동기화 정보로서 기록될 때, 상기 서버는 커머셜 종료로 통지될 수 있다.
(3) 상기 드로잉 시퀀스 트랙은 디스플레이 대상을 설정하는 디스플레이 이벤트과 상기 디스플레이 이벤트 사이의 시간 간격을 설정하는 지속기간으로 구성되고, 상기 디스플레이 이벤트는 상기 디스플레이 대상의 복수의 좌표 표현 형식이 지정될 수 있게 한다.
본 발명의 멀티미디어 파일에 대하여, 드로잉 시퀀스 트랙에서, 상기 디스플레이 이벤트에서 한정된 상기 디스플레이 대상의 좌표 표현 형식이 복수의 좌표 표현 형식으로부터 설정될 수 있다. 그러므로, 해당 시간에서 사용하는 디스플레이 장치에 대해 최적의 디스플레이 위치를 지정하는 것이 가능하다. 스크린 크기 및 디스플레이 대상 크기를 기초로 한 비율로 디스플레이 위치를 지정하기 위해 적어도 레이아웃 정보 지정 형태가 디스플레이 형태로서 포함될 때, 축소된 크기의 디스플레이 대상은 스크린 크기에 따라 자동적으로 결정된다.
디스플레이 이벤트에 대하여, 상기 디스플레이 대상의 복수의 좌표 표현 형식이 이러한 방식으로 지정될 수 있다. 그러므로, 최적 디스플레이 위치는 해당 시간에서 사용하는 디스플레이 장치에 대하여 지정될 수 있다. 이는 멀티미디어 파일(컨텐츠)의 순환의 범위를 확장한다.
(4) 상기 디스플레이 이벤트는 한 타입의 디스플레이 대상을 포함하는 디스플레이 대상 한정 정보가 디스플레이된 제1 블록과 동적 디스플레이 수정을 제1 블록에 의해 표현된 컨텐츠에 추가하는 디스플레이 수정 시퀀스 정보가 기술된 제2 블록을 포함하고, 상기 디스플레이 수정 시퀀스 정보는 서로의 동작에 영향을 미치지 않는 복수의 디스플레이 수정 시퀀스 정보 단편으로부터 임의로 선택된 하나 이상의 디스플레이 수정 시퀀스 정보 단편으로 구성된다.
본 발명에서, 상기 디스플레이 대상의 기본 정보를 규정하는 제1 블록과 상기 제1 블록에 의해 표현된 컨텐츠에 동적 디스플레이 수정을 추가하는 상기 디스플레이 수정 시퀀스 정보를 포함하는 제2 블록이 디스플레이 이벤트에서 기술될 수 있다. 이 경우에, 상기 디스플레이 수정 시퀀스 정보의 동작이 다른 동기화 수정 시퀀스 정보의 동작에 영향을 미치지 않기 때문이다. 그러므로, 상기 디스플레이 대상의 움직임에 따라 최적의 디스플레이 수정 시퀀스 정보를 용이하게 조합하는 것이 가능하다. 각 디스플레이 수정 시퀀스 정보가 단순한 기능 표현 정보로서 설정될 때, 디스플레이 컨텐츠의 복잡한 움직임은 단순한 기능 표현의 조합으로 용이하게 표현될 수 있다. 또한, 이는 컨텐츠의 준비를 용이하게 한다.
도 1은 본 발명의 실시형태에 따른 멀티미디어 실행 시스템의 하드웨어 구조 도이다. 본 발명의 멀티미디어 실행 시스템은 도 1에 도시된 하드웨어 구조를 갖는 모든 컴퓨터 단말 장치, 휴대용 단말 장치 및 휴대용 전화 등의 다양한 형태에서 실시될 수 있다.
실행 제어기(1)는 CPU, ROM, RAM 등을 포함하고, 시퀀서(프로그램) 및 애플리케이션 프로그램의 실행, 입력/출력의 제어 등을 실시한다. 상기 실행 제어기(1)는 시퀀서(프로그램) 기억부(2), 애플리케이션(프로그램) 기억부(3) 및 멀티미디어 파일이 저장된 기억부(4)에 연결된다. 멀티미디어 파일에 대해, 후에 기술된 바와 같이, 연주 시퀀스 트랙, 드로잉 시퀀스 트랙, 오디오 시퀀스 트랙, 마스터 트랙 및 컨텐츠 정보 기억부이 동일한 파일에 통합된다. 본 실시형태에서, 이 파일은 합성 음악 모바일 애플리케이션 포맷(Synthetic Music Mobile Application Format; SMAF) 파일로 언급될 것이다. 첫 번째에서 n번째 SMAF 파일이 기억부(4)에 저장되고, 애플리케이션 기억부(3) 또는 사용자의 입력 정보에 따라 어떠한 SMAF 파일도 선택된다.
상기 실행 제어기(1)는 사운드 소스 장치(5), 디스플레이 장치(6) 및 오디오 장치(7)에 연결된다.
SMAF 파일에서 연주 시퀀스 정보는 상기 사운드 소스 장치(5)에 입력되고, 상기 장치에서 음악 연주 신호로 전환된다. 연주 시퀀스 정보는 본 실시형태에서, MIDI 시퀀스 정보이고, MIDI 사운드 소스 장치가 상기 사운드 소스 장치(5)에서 사용된다.
SMAF 파일에서 드로잉 시퀀스 정보는 상기 디스플레이 장치(6)에 입력된다. 상기 드로잉 시퀀스 정보는 텍스트, 2진 화상 및 후에 기술되는 소정의 화상으로부터 선택된 가시 정보이다. 상기 디스플레이 장치(6)는 상기 정보를 화상 신호로 전환한다.
상기 오디오 장치(7)는 SMAF 파일에서 오디오 시퀀스 정보를 수용하고, 상기 정보를 오디오 신호로 전환한다. 본 실시형태에서, 상기 오디오 시퀀스 정보는 ADPCM 정보이고, 상기 오디오 장치(7)는 상기 ADPCM 정보를 아날로그 오디오 신호로 전환한다.
음악 톤/보이스 출력부(8)은 상기 사운드 소스 장치(5)와 오디오 장치(7)의 합성된 출력을 스피커(8a)를 통하여 출력한다. 모니터(9)는 디스플레이 스크린 위에 상기 디스플레이 장치(6)로부터 화상 출력을 디스플레이 한다.
상기 실행 제어기(1)는 또한, 입력부(10)과 통신부(11)에 연결된다. 상기 입력부(10)은 키보드, 마우스 등을 포함하는 작동부(12)에 연결되고, 상기 통신부(11)은 통신 회로를 통하여 외부 서버에 연결되고, 이는 인터넷 또는 공중 통신망 등의 무선 또는 유선 컴퓨터망일 수 있다.
도 2는 멀티미디어 실행 시스템의 소프트웨어 구조 도면이다.
부호 20은 SMAF 파일을 나타낸다. SMAF 파일(20)은 컨텐츠 정보 기억부(21), 연주 시퀀스 트랙(22), 드로잉 시퀀스 트랙(23), 오디오 시퀀스 트랙(24) 및 마스터 트랙(25)로 구성되고, 이들 트랙은 하나의 파일로 완전히 통합된다.
상기 컨텐츠 정보 기억부(21)은 전체 SMAF 파일(20)의 컨텐츠에 관한 정보를 저장한다. 상기 연주 시퀀스 트랙(22)은 연주 시퀀스 정보를 저장하고, 상기 드로잉 시퀀스 트랙(23)은 드로잉 시퀀스 정보를 저장하고, 상기 오디오 시퀀스 트랙(24)은 오디오 시퀀스 정보를 각각 저장하다. 상기 마스터 트랙(25)은 각 시퀀스 트랙(22-24)의 동기화 정보를 저장한다. 상기 마스터 트랙(25)은 상기 각 시퀀스 트랙(22-24)의 동기화 정보를 저장하고, 상기 트랙(25) 자체는 시퀀스 트랙 중 하나이다.
시퀀서(26)는 이들 연주 시퀀스 트랙(22), 드로잉 시퀀스 트랙(23), 오디오 시퀀스 트랙(24) 및 마스터 트랙(25)의 실행 동작을 제어한다. 상기 각 시퀀스 트랙은 이벤트와 지속기간을 조합하여 구성되고, 상기 지속기간은 상기 연속하는 이벤트 사이의 시간 간격을 나타낸다. 그러므로, 이벤트 실행 시작 시간을 상기 시퀀스 트랙의 상부로부터 지속기간을 합하여 알 수 있다. 또한, 상기 이벤트 자체의 처리 시간이 오래 걸릴 때 조차도, 상기 시퀀스 데이터에 대한 시간의 경과는 영향이 없다. 시간의 경과는 상기 이벤트 처리와 상관없이, 상기 지속기간으로 표현될 수 있다. 하기 상세히 기술된 바와 같이, 상기 마스터 트랙(25)은 동기화 정보로서 일시정지(정지) 이벤트, 분기 이벤트 및 반복 이벤트와 같이 시간축을 따라 제어 정보를 저장한다. 이들 이벤트가 발생할 때, 상기 마스터 트랙(25)은 상기 시퀀서(26)가 일시정지, 분기, 반복 또는 다른 시퀀스 제어를 실시하도록 지시한다. 예컨대, 상기 일시정지 이벤트가 발생될 때, 각 시퀀스 트랙(22-25)의 실행 동작이 일시적으로 정지한다. 또한, 상기 분기 이벤트가 발생될 때, 각 시퀀스 트랙의 실행 동작점이 특정 위치로 동시에 분기된다.
상기 연주 시퀀스 트랙(22)의 연속 출력은 사운드 소스 장치(27)에 입력되고, 사운드으로 출력된다. 상기 드로잉 시퀀스 트랙(23)의 출력은 디스플레이 장치(28)로 출력되고, 상기 디스플레이 모니터에 드로잉된다. 상기 오디오 시퀀스 트랙(24)의 출력은 상기 오디오 장치(29)에 출력되고, 사운드으로 출력된다.
상기 시퀀스(26)는 애플리케이션 프로그램(30)에 의해 제어된다. 상기 애플리케이션 프로그램(30)은 상기 시퀀서(26)가 제어될 수 있는 한 어떠한 형태의 프로그램일 수 있다. 상기 애플리케이션 프로그램(30)은 상기 시퀀서(26)에 시작/정지 신호 또는 상태 판독 신호를 출력한다. 또한, 상기 시퀀서(26)는 상기 애플리케이션 프로그램(30)에 상태를 통지한다. 예컨대, 상기 일시정지 이벤트가 상기 마스터 트랙(25)의 이벤트로 발생될 때, 상기 시퀀서(26)는 실행 동작을 일시정지 상태(일시적 정지 상태)가 되게 하고, 현재 상태를 상기 애플리케이션 프로그램(30)에 통지하고, 상기 애플리케이션 프로그램(30)은 상기 상태 컨텐츠를 판독한다. 이 경우에, 상기 상태 컨텐츠는 일시정지(일시적 정지)이다. 상기 애플리케이션 프로그램(30)은 사용자에게 미리 결정된 디스플레이를 사용자 인터페이스(31)를 통하여 실시하거나, 또는 상기 상태 컨텐츠에 따른 사용자로부터의 입력 동작을 기다린다. 또한, 상기 애플리케이션 프로그램은 통신 인터페이스(32)를 통하여 상기 서버와 데이터를 교환한다. 이벤트가 상기 일시정지 상태 후 발생될 때(이 이벤트는 사용자 입력이 있을 때, 상기 애플리케이션 프로그램(30)에 의해 결정된다.), 상기 애플리케이션 프로그램(30)은 상기 시퀀서(26)가 재시작할 것을 지시한다.
데이터 통신이 상기 시퀀서와 상기 애플리케이션 프로그램 사이에서, 이러한 방식으로 실시된다.
도 3은 상기 시퀀스 트랙의 데이터 구조를 도시한다.
상기 기술된 바와 같이, 상기 시퀀스 데이터는 이벤트(E)와 지속기간(D)을 조합하고, 기술하는 것으로 표현된다. 데이터 스트링(string)은 이벤트(E)로 시작하고, 시퀀스 종료 데이터(EOS)는 데이터 말단에 배치된다. 수명은 이벤트 유효 길이를 지시한다. 예컨대, 연주 시퀀스 정보로 사운드 발생 시간이 지시된다. 상기 지속기간(D)은 연속하는 이벤트 사이의 시간 간격을 나타낸다. 그러므로, 특정 이벤트의 상기 시작 시간은 데이터의 상부로부터의 지속기간 값을 합하여 결정될 수 있다. 예컨대, 이벤트(3)의 시작 시간은 지속기간(1), (2) 시간의 축적된 값을 시간 0에 합하여 얻어진다. 또한, 이벤트(3)의 시작 시간으로부터 이벤트(1)에 분기하기 위하여, 지속기간(1)과 (2)의 총 값을 이벤트(3)의 시작 시간으로부터 뺀다. 각 시퀀스 트랙의 실행 동작은 이 방법으로 임의로 제어될 수 있다. 상기 제어 컨텐츠, 즉, 각 시퀀스 트랙의 동기화 정보는 상기 마스터 트랙(25)에서 기술된다. 추가로, 본 실시형태에서, 상기 이벤트(E)와 지속기간(D)은 상기 시퀀스 트랙에서 선택적으로 기록되나, 그들이 선택적으로 기록되는 것이 필수적이지는 않다.
도 4는 상기 시퀀서(26)와 애플리케이션 프로그램(30)의 동작을 개략적으로 도시한다.
처리 시작하고, 상기 시퀀서(26)가 초기 설정을 실시한 후(단계 100), 상기 시퀀서는 실행 동작 시작을 기다린다. 시퀀스 시작 명령이 상기 애플리케이션 프로그램(30)으로부터 수용될 때(단계 200)(단계 101), 상기 시퀀서(26)에서 상기 실행 동작은 시작하고(단계 102), 상기 마스터 트랙(25)의 이벤트 발생이 감지된다(단계 103). 상기 마스터 트랙(25)의 이벤트는 체크 포인트 이벤트 또는 제어 이벤트로서 언급될 것이다. 상기 체크 포인트 이벤트가 발생될 때, 상기 시퀀서(26)는 상기 애플리케이션 프로그램(30)에 상태 통지를 실시하고, 상기 체크 포인트 이벤트의 상기 컨텐츠를 전송한다(단계 104).
단계 201에서, 상기 애플리케이션 프로그램은 상기 상태를 수용하고, 상기 컨텐츠에 따라 처리를 실시한다(단계 202). 예컨대, 상기 체크 포인트 이벤트가 일시정지 이벤트일 때, 상기 애플리케이션 프로그램은 일시정지 이벤트에 따라 사용자로부터의 입력을 기다리는 처리를 실시한다. 또한, 상기 애플리케이션 프로그램은 상기 서버로부터 특정 데이터를 다운로드하거나, 또는 상기 일시정지 이벤트에 따라 상기 통신 인터페이스(32)를 통하여 특정 데이터를 업로드한다. 상기 애플리케이션 프로그램(30)은 또한, 단계 202의 처리에 따라 상기 시퀀서(26)에 소정의 지시를 전송한다. 즉, 상기 애플리케이션 프로그램은 사용자로부터의 입력 컨텐츠 또는 서버로부터의 데이터에 따라 각 시퀀스 트랙을 제어한다. 단계 105에서, 상기 시퀀서(26)는 상기 애플리케이션 프로그램(30)으로부터 상기 지시에 상응하는 처리를 실시한다. 상술된 처리가 실시되고, 상기 시퀀스가 종료하지 않을 때, 상기 시퀀서(26)는 상기 단계 103 및 계속되는 단계들의 동작을 실시한다. 상기 프로그램이 종료하지 않을 때, 상기 애플리케이션 프로그램(30)은 상기 단계 201에 다시 되돌린다.
도 5는 시간 축에 따른 동작 예를 도시한다. 상기 실행 동작이 시작할 때, 연주 시퀀스 트랙(22), 드로잉 시퀀스 트랙(23), 오디오 시퀀스 트랙(24) 및 마스터 트랙(25)의 실행 동작이 동시에 상부로부터 시작하고, 재생이 각 시퀀스 컨텐츠에 따라 실시된다. 컨텐츠는 음악 데이터, 화상 데이터 및 오디오 데이터로 구성되는 것으로 가정된다. 그리고, 상기 마스터 트랙(25)의 일시정지 이벤트 PEV1이 발생될 때, 상기 시퀀서(26)에서 실행 동작이 정지하고, 상기 애플리케이션 프로그램(30)은 사용자 인터페이스로부터 사용자 입력을 기다린다. 여기서, 특정 키 입력이 있을 때, 상기 애플리케이션 프로그램(30)은 시작 명령을 하고, 이어서, 제2 음악 데이터, 화상2 및 오디오 데이터2의 재생을 시작한다.
도 1 및 도 2에서, 상기 SMAF 파일(20)은 상기 시퀀서(26)와 애플리케이션 프로그램(30)에 독립적이기 때문에, 상기 SMAF 파일(20)은 소정의 기억장치 매체와 전송 매체를 통하여 분산될 수 있다. 또한, 상기 애플리케이션 프로그램(30)이 상기 시퀀서(26)와 독립적인 프로그램이기 때문에, 소정의 기능이 상기 프로그램에 부여될 수 있다. 그러므로, 컨텐츠 분산력이 높고, 확장 특성 및 전체 시스템의 자유도가 놀라울 정도로 크다.
또한, 상기 마스터 트랙(25)의 상기 체크 포인트 이벤트의 예들은 상술된 일시정지 이벤트 뿐만 아니라 상기 분기 이벤트와 반복 이벤트도 포함한다. 상기 분기 이벤트는 시간축에 따라 소정의 위치에 분기하는 지시를 갖고, 상기 반복 이벤트는 일정한 시퀀스 간격을 반복하는 지시를 갖는다.
또한, 상기 체크 포인트 이벤트의 형태에서 상기 시간축을 따라 다양한 제어 정보를 저장하는 것이 가능하다.
상기 드로잉 시퀀스 트랙(23)의 이벤트 기술 시스템은 다음에 기술될 것이다.
상기 기술된 바와 같이, 상기 드로잉 시퀀스 트랙(23)의 형식은 또한, 상기 이벤트(디스플레이 이벤트)와 상기 디스플레이 이벤트 사이의 시간 간격을 설정하는 지속기간으로 구성된다.
상기 디스플레이 이벤트는 디스플레이 대상의 디스플레이 위치를 설정하는 것이 필요하다. 본 실시형태에서, 상기 디스플레이 이벤트에 대하여, 상기 디스플레이 대상의 좌표 표현 형식은 복수의 형식으로부터 선택될 수 있다.
도 6은 선택적 좌표 표현 형식을 도시한다. 도 6a는 표준 좌표 지정의 표현 형식을 도시하고, 6b는 대칭 좌표 지정의 그것을 도시하고, 6c는 레이아웃 정보 좌표 지정의 그것을 도시한다.
표준 좌표 지정에서, 좌표 오리진은 상기 디스플레이 스크린의 좌측 상단점으로 설정되고, X축의 우측 방향은 정 방향으로 설정되고, Y축의 아래쪽 방향은 정 방향으로 설정된다. 또한, 디스플레이 대상(G)의 좌측 상단 좌표가 설정된다.
대칭 좌표 지정에서, 상기 좌표 오리진은 상기 디스플레이 스크린의 우측 하단점으로 설정되고, X축의 좌측 방향을 정 방향으로 설정되고, Y축의 위쪽 방향은 정 방향으로 설정된다. 또한, 상기 디스플레이 대상(G)의 우측 하단 좌표가 설정된다.
상기 레이아웃 정보 좌표 지정에서, 위치는 X와 Y 방향의 비율로 설정된다. X 방향에서, 0은 좌측 위치, 50은 중심 위치, 100은 우측 위치를 지시한다. 또한, Y 방향에서, 0은 상단 위치, 50은 중심 위치 및 100은 하단 위치를 지시한다. 도 6c에 도시된 예에서, 디스플레이 대상(G1)은 X 방향의 좌측 위치, (G2)는 X 방향에서 중심에 (G3)는 X 방향에서 우측에 위치한다.
또한, 어떠한 좌표 표현 형식도 X 및 Y 좌표에서 독립적으로 설정될 수 있다.
상기 좌표 표현 형식이 이러한 방식으로 복수의 형식으로부터 선택될 수 있기 때문에, 복수 형태의 디스플레이 모니터에 적합한 형태가 선택될 수 있다. 예컨대, 상기 레이아웃 정보 좌표 지정의 좌표 표현 형식이 선택될 때 그리고, SMAF 파일이 상기 디스플레이 스크린의 다른 영역을 갖는 시스템에 적용될 때조차도, 동일한 디스플레이 상태를 얻을 수 있다. 또한, 하나의 대상이 상기 표준 좌표 지정 또는 대칭 좌표 지정에 적용될 수 있도록 지정될 때, 상기 지정이 더욱 용이하게 실시될 수 있는 그러한 방식으로 상기 디스플레이 대상의 위치에 따라 선택될 수 있다. 이는 상기 시퀀스 데이터의 준비를 용이하게 하는 이점이 있다.
또한, 상기 지정된 좌표 표현 형식은 새로운 좌표 표현 형식이 다음에 지정될 때까지 디폴트 표현 형식으로 보유된다. 그러므로, 단지 상기 좌표 표현 형식이 변화할 때, 새로운 좌표 표현 형식이 지정될 수 있고, 상기 시퀀스 데이터의 우수한 판독률과 메모리 소비의 절약이 이루어질 수 있다.
게다가, 본 시스템에서, 복잡한 움직임이 상기 디스플레이 이벤트를 기술하는 방법을 고안하여 표현될 수 있다. 상기 방법은 하기 상세히 기술될 것이다.
상기 디스플레이 이벤트는 상기 디스플레이 대상의 타입, 크기 및 컨텐츠를 포함하는 디스플레이 대상 한정 정보가 기술된 제1 블록과, 제1 블록에 의해 표현된 디스플레이 대상에 동적 수정을 추가하기 위한 디스플레이 수정 시퀀스가 기술된 제2 블록을 포함한다.
제1 블록은 기본 정보를 포함하고, 따라서 이는 상기 디스플레이 이벤트에 대해 필수적인 정보이다. 제2 블록은 적절히 선택될 수 있는 블록이다.
또한, 상기 제2 블록의 상기 디스플레이 수정 시퀀스 정보는 동작시 서로 영향을 미치거나 방해하지 않는 복수의 디스플레이 수정 시퀀스 정보의 단편으로부터 자유롭게 선택된 하나 이상의 디스플레이 수정 시퀀스 정보 단편으로 구성된다.
상기 디스플레이 대상의 타입, 크기 및 컨텐츠가 제1 블록에서 기록된 상기 디스플레이 대상 한정 정보에서 기술된다. 상기 디스플레이 대상의 예들은 텍스트, 비트 맵 및 다른 화상 데이터를 포함한다.
상기 디스플레이 수정 시퀀스 정보의 예들은 하기를 포함한다.
(1) 화상 전환 시퀀스(디스플레이 컨텐츠의 변화)
(a) 컬러 변화 시퀀스
예컨대, 가라오케 또는 싱-얼롱 기계의 화상 컬러가 변화된다. 디스플레이된 텍스트 등이 시간에 따라 변한다. 네온사인 등의 화상의 플래싱이 또한 표현될 수 있다.
(b) 화상 변형 시퀀스
화상이 시간에 따라 변화된다.
(2) 배너 시퀀스(디스플레이 스크린 위에 투사하는 방법의 고안)
(a) 캐릭터 스트링은 디스플레이 프레임으로 배열 및 디스플레이된다.
(b) 디스플레이 프레임의 일부가 투사되고, 투사된 위치가 시간에 따라 변화되고, 디스플레이된다.
(3) 움직임 시퀀스(디스플레이 위치의 변화)
상기 디스플레이 프레임이 디스플레이된 상기 스크린 위의 위치가 시간에 따라 변화된다.
(4) 디스플레이 창 변화 시퀀스
(a) 상기 디스플레이 프레임의 크기가 시간에 따라 변화된다.
(5) 디스플레이 전환 시퀀스
(a) 복수의 제1 블록이 고안될 때, 이들 블록이 변화된다.
(b) 두 개의 디스플레이 대상 화상(상기 스크린 위에 나타나는 화상)이 시간에 따라 변화되고, 디스플레이된다.
예컨대, 와이프 트랜지션(wipe transition)(상기 화상이 좌측에서 우측으로 와이프되고, 변화된다.), 디졸브 트랜지션(dissolve transition)(와이핑 작용이 다수의 분리된 스크린 세그먼트에서 실시된다.), 페이딩 트랜지션(fading transition)(상기 스크린이 제1 스크린이 사라지는 방식으로 변화된다.) 등이 있다.
상술된 디스플레이 수정 시퀀스 정보는 동작에서 서로에 영향을 주지 않는다. 그러므로, 두 개 이상의 디스플레이 수정 시퀀스 정보 단편이 조합될 때 조차도, 상기 각 시퀀스 정보에 의해 실현된 작용이 간단히 추가된다. 그러므로, 하기 디스플레이 수정이 복수의 디스플레이 수정 시퀀스 정보 단편을 조합하여 실시될 수 있다.
(1) 컬러 변화 + 배너
(a) 텔로프가 상기 디스플레이 프레임에서 실행하는 동안, 텔로프 컬러가 중간에 변화한다.
(2) 컬러 변화 + 배너 + 움직임
(a) 상기 텔로프가 상기 디스플레이 프레임에서 실행하는 동안, 상기 텔로프 컬러는 중간에 변화하고, 또한, 상기 디스플레이 프레임 위치는 시간에 따라 움직인다.
(3) 컬러 변화 + 배너 + 움직임 + 디스플레이 창 변화
(a) 상기 텔로프가 상기 디스플레이 프레임에서 진행하는 동안, 상기 텔 로프 컬러는 중간에 변화하고, 또한, 상기 디스플레이 프레임 위치가 시간에 따라 움직이고, 추가로, 상기 디스플레이 프레임이 시간에 따라 크기가 감소하여 사라지거나 다시 나타난다.
상기 기술된 바와 같이, 각 디스플레이 수정 시퀀스 정보는 상호 방해 기능을 갖지 않고, 소정의 정보가 복수의 디스플레이 수정 시퀀스 정보 단편으로부터 선택될 수 있다.
도 7은 상기 디스플레이 이벤트의 일반적인 기술 형태를 도시한다. 이벤트 형태, 이벤트 크기, 수명, 좌표 설정, 제1 블록 및 소정의 수의 제2 블록들이 상부에서 하부로 기술된다. 상기 제2 블록은 선택적이고, 적어도 상기 제1 블록이 기술될 수 있다. 그러나, 상기 제2 블록이 기술될 때, 다양한 표현 방식이 상기 명시된 바와 같이 용이하게 실현될 수 있다.
추가로, 상술된 실시형태에서, 상기 마스터 트랙이 동기화 정보 기록 수단에서 사용되나, 상기 동기화 정보는 각 시퀀스 트랙에서 기입될 수 있다.
본 발명에 따라, 각 시퀀스 트랙 동기화 정보가 그안에 기록된 복수 형태의 정보를 갖는 복수의 시퀀스 트랙과 함께 기록되는 동기화 정보 기록 수단이 멀티미디어 파일을 구성하도록 동일한 파일에 통합된다. 따라서, 동기화는 실행 동작시 동기화 정보에 따라 각 시퀀스 트랙 중에 발생된다. 따라서, 각 시퀀스 트랙 중에서 상기 정보의 동기화는 동기화 정보를 기술하는 것에 의해 정교하게 제어될 수 있다.
또한, 시퀀서가 애플리케이션 프로그램과 통신하고, 상기 실행 동작이 상기 동기화 정보에 따라 제어될 때, 상기 애플리케이션 프로그램은 상기 정보를 인지할 수 있다. 이에 의해, 상기 애플리케이션 프로그램은 상기 동기화 정보에 대한 다양한 제어를 실시할 수 있다.
게다가, 각 시퀀스 트랙의 것과 동일한 구조를 갖는 마스터 트랙이 상기 동기화 정보를 저장하기 위해 동기화 정보 기억장치 수단으로 배치되기 때문에, 상기 동기화 정보의 기술이 용이해진다.
추가로, 디스플레이 이벤트는 복수의 디스플레이 좌표 표현 형식을 지정할 수 있기 때문에, 해당 시간에 사용하는 디스플레이 장치에 대해 최적으로 디스플레이 위치를 지정하는 것이 가능하다. 이는 컨텐츠 분산 범위를 확장 할 수 있다.
또한, 상기 디스플레이 이벤트는 상기 디스플레이 대상의 기본 정보를 한정하는 제1 블록과 제1 블록으로 표현된 상기 디스플레이 대상에 동적 디스플레이 수정을 부여하는 디스플레이 수정 시퀀스 정보를 포함하는 제2 블록으로 기술될 수 있다. 또한, 상기 디스플레이 수정 시퀀스 정보는 어떠한 상호 동작 영향이 없는 정보이다. 그러므로, 상기 디스플레이 대상의 움직임에 따라 최적의 디스플레이 수정 시퀀스 정보를 용이하게 조합하는 것이 가능하다. 각 디스플레이 수정 시퀀스 정보가 단순한 작용 방식 표현이기 때문에, 디스플레이된 컨텐츠의 복잡한 움직임이 단순한 작용 방식 표현의 조합으로 용이하게 표현될 수 있다. 또한, 이는 컨텐츠 준비를 용이하게 하는 효과를 발휘한다.

Claims (15)

  1. 연주 시퀀스 정보를 기록하는 연주 시퀀스 트랙과 드로잉 시퀀스 정보를 기록하는 드로잉 시퀀스 트랙을 포함하는 시퀀스 트랙 및 시퀀스 트랙을 서로 동기화하는데 효과적인 동기화 정보를 기록하는 동기화 수단으로 구성된 멀티미디어 파일을 저장하는 파일 기억장치;
    상기 동기화 정보에 따라 상기 시퀀스 트랙들을 서로 동기하여 병렬 실행을 위해 상기 멀티미디어 파일을 처리하는 시퀀서;
    상기 멀티미디어 파일을 다루고 제어하는 애플리케이션 프로그램을 저장하는 프로그램 기억장치; 및,
    상기 시퀀스 트랙의 병렬 실행의 시작 제어 및 정지 제어를 포함하는 상기 시퀀스 트랙의 병렬 실행의 제어를 위해 상기 애플리케이션 프로그램이 상기 시퀀서와 통신할 수 있도록 상기 애플리케이션 프로그램을 실행하는 실행부를 포함하는 것을 특징으로 하는 멀티미디어 시스템.
  2. 제1항에 있어서, 상기 파일 기억장치는 오디오 시퀀스 정보를 기록하는 오디오 시퀀스 트랙을 더 포함하는 시퀀스 트랙으로 구성된 상기 멀티미디어 파일을 저장하는 것을 특징으로 하는 멀티미디어 시스템.
  3. 제1항에 있어서, 상기 파일 기억장치는 상기 동기화 수단을 구성하기 위해 상기 동기화 정보를 기록하는 마스터 시퀀스 트랙을 더 포함하는 시퀀스 트랙으로 구성된 상기 멀티미디어 파일을 저장하는 것을 특징으로 하는 멀티미디어 시스템.
  4. 제3항에 있어서, 상기 마스터 시퀀스 트랙은 시간 축을 따른 각 시퀀스 트랙의 진행을 제어하는데 효과적인 제어 정보를 포함하는 상기 동기화 정보를 기록하는 것을 특징으로 하는 멀티미디어 시스템.
  5. 제1항에 있어서, 상기 드로잉 시퀀스 트랙은 디스플레이 이벤트(event)와 지속기간의 시퀀스로 구성된 상기 드로잉 시퀀스 정보를 기록하고,
    상기 디스플레이 이벤트는 드로잉 시퀀스 트랙의 실행 중에 드로잉되는 디스플레이 대상(object)을 나타내며,
    상기 지속기간은 한 쌍의 연속하는 디스플레이 이벤트 사이의 시간 간격을 나타내는 것을 특징으로 하는 멀티미디어 시스템.
  6. 제5항에 있어서, 상기 디스플레이 이벤트는 디스플레이 스크린의 크기 및 디스플레이 대상의 크기에 따라 복수의 좌표 형식으로 디스플레이 스크린에 대한 상기 디스플레이 대상의 위치를 지정하는데 효과적인 레이아웃 정보를 포함하는 것을 특징으로 하는 멀티미디어 시스템.
  7. 제5항에 있어서, 상기 디스플레이 이벤트는 상기 디스플레이 대상을 한정하는데 효과적인 한정 정보를 포함하는 제1 블록과 상기 디스플레이 대상에 움직임을 부여하는데 효과적인 수정 정보를 포함하는 제2 블록을 포함하고, 상기 수정 정보는, 서로 독립적이고 서로 방해하지 않는 하나 이상의 다른 움직임을 부여하도록 선택되는 것을 특징으로 하는 멀티미디어 시스템.
  8. 연주 시퀀스 정보를 기록하는 연주 시퀀스 트랙과 드로잉 시퀀스 정보를 기록하는 드로잉 시퀀스 트랙을 포함하는 시퀀스 트랙; 및
    상기 시퀀스 트랙을 서로 동기화하는데 효과적인 동기화 정보를 기록하는 동기화 수단을 포함하는 멀티미디어 파일을 저장하는 기록매체로서,
    상기 멀티미디어 파일은 상기 동기화 정보에 따라 상기 시퀀스 트랙들을 서로 동기하여 병렬 실행을 위해 시퀀서에 의해 처리되고,
    상기 멀티미디어 파일은 상기 시퀀스 트랙의 병렬 실행의 시작 제어 및 정지 제어를 포함하는 시퀀스 트랙의 병렬 실행의 제어를 위해 시퀀서와 통신하도록 실행되는 애플리케이션 프로그램에 의해 사용되는 것을 특징으로 하는 멀티미디어 파일을 저장하는 기록매체.
  9. 연주 시퀀스 정보를 기록하는 연주 시퀀스 트랙과 드로잉 시퀀스 정보를 기록하는 드로잉 시퀀스 트랙을 포함하는 시퀀스 트랙 및 시퀀스 트랙을 서로 동기화하는데 효과적인 동기화 정보를 기록하는 동기화 수단으로 구성된 멀티미디어 파일을, 시퀀서 및 애플리케이션 프로그램을 사용함으로써 재생하는 방법으로서,
    상기 동기화 정보에 따라 상기 시퀀스 트랙들을 서로 동기하여 병렬 실행을 위해 상기 시퀀서에 의해 상기 멀티미디어 파일을 처리하는 단계와,
    상기 시퀀스 트랙의 병렬 실행의 시작 제어 및 정지 제어 등의 상기 시퀀스 트랙의 병렬 실행의 제어를 위해 시퀀서와 통신하도록 애플리케이션 프로그램을 실행하는 단계를 포함하는 것을 특징으로 하는 멀티미디어 파일 재생 방법.
  10. 제9항에 있어서, 상기 멀티미디어 파일은 오디오 시퀀스 정보를 기록하는 오디오 시퀀스 트랙을 더 포함하는 것을 특징으로 하는 멀티미디어 파일 재생 방법.
  11. 제9항에 있어서, 상기 멀티미디어 파일은 상기 동기화 수단을 구성하기 위해 상기 동기화 정보를 기록하는 마스터 시퀀스 트랙을 포함하는 것을 특징으로 하는 멀티미디어 파일 재생 방법.
  12. 제11항에 있어서, 상기 마스터 시퀀스 트랙은 시간 축을 따른 각 시퀀스 트랙의 진행을 제어하는데 효과적인 제어 정보를 포함하는 상기 동기화 정보를 기록하는 것을 특징으로 하는 멀티미디어 파일 재생 방법.
  13. 제9항에 있어서, 상기 드로잉 시퀀스 트랙은 디스플레이 이벤트와 지속기간의 시퀀스로 구성되는 상기 드로잉 시퀀스 정보를 기록하고, 상기 디스플레이 이벤트는 드로잉 시퀀스 트랙의 실행 중에 드로잉되는 디스플레이 대상을 나타내며, 상기 지속기간은 한 쌍의 연속하는 디스플레이 이벤트 사이의 시간 간격을 나타내는 것을 특징으로 하는 멀티미디어 파일 재생 방법.
  14. 제13항에 있어서, 상기 디스플레이 이벤트는 디스플레이 스크린의 크기와 디스플레이 대상의 크기에 따라 복수의 좌표 형식으로 디스플레이 스크린에 대한 상기 디스플레이 대상의 위치를 지정하는데 효과적인 레이아웃 정보를 포함하는 것을 특징으로 하는 멀티미디어 파일 재생 방법.
  15. 제13항에 있어서, 상기 디스플레이 이벤트는 상기 디스플레이 대상을 한정하는데 효과적인 한정 정보를 포함하는 제1 블록과 상기 디스플레이 대상에 움직임을 부여하는데 효과적인 수정 정보를 포함하는 제2 블록을 포함하고, 상기 수정 정보는, 서로 독립적이고 서로 방해하지 않는 하나 이상의 다른 움직임을 부여하도록 선택되는 것을 특징으로 하는 멀티미디어 파일 재생 방법.
KR1020010030837A 2000-06-02 2001-06-01 음악과 화상 트랙을 동기화하는 멀티미디어 시스템 KR100742860B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2000-166719 2000-06-02
JP2000166719 2000-06-02

Publications (2)

Publication Number Publication Date
KR20010110178A KR20010110178A (ko) 2001-12-12
KR100742860B1 true KR100742860B1 (ko) 2007-07-26

Family

ID=18669997

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020010030837A KR100742860B1 (ko) 2000-06-02 2001-06-01 음악과 화상 트랙을 동기화하는 멀티미디어 시스템

Country Status (4)

Country Link
US (1) US20010052943A1 (ko)
KR (1) KR100742860B1 (ko)
GB (1) GB2368685B (ko)
TW (1) TWI236599B (ko)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2388242A (en) * 2002-04-30 2003-11-05 Hewlett Packard Co Associating audio data and image data
KR100781507B1 (ko) * 2003-06-07 2007-12-03 삼성전자주식회사 멀티미디어 데이터 전시 장치 및 전시 방법과 상기 방법을 기록한 기록매체
RU2312390C2 (ru) * 2003-06-07 2007-12-10 Самсунг Электроникс Ко., Лтд. Устройство и способ организации и интерпретации мультимедийных данных на записываемом носителе информации
DE102005016866A1 (de) * 2005-04-12 2006-10-19 Siemens Ag Verfahren sowie Vorrichtung zum Synchronisieren von inhaltsbezogenen ersten Datensegmenten einer ersten Datendatei und inhaltsbezogenen zweiten Datensegmenten einer zweiten Datendatei
KR100703704B1 (ko) 2005-11-02 2007-04-06 삼성전자주식회사 동적 영상물 자동 생성 장치 및 방법
KR100728033B1 (ko) * 2005-11-07 2007-06-14 삼성전자주식회사 홈 네크워크 디바이스를 이용하여 ｐｖｒ을 구현하는 방법및 이를 위한 장치
KR100728022B1 (ko) 2005-12-28 2007-06-14 삼성전자주식회사 이미지와 배경음악을 동기화하는 방법 및 그 장치
US20070162839A1 (en) * 2006-01-09 2007-07-12 John Danty Syndicated audio authoring
DE102017117926A1 (de) * 2017-08-07 2019-02-07 Huf Hülsbeck & Fürst Gmbh & Co. Kg Türgriffmodul
CN110349366A (zh) * 2019-06-03 2019-10-18 上海市保安服务(集团)有限公司 办案区监管系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0934477A (ja) * 1995-07-18 1997-02-07 Matsushita Electric Ind Co Ltd カラオケ装置
KR0157525B1 (ko) * 1995-08-07 1998-12-15 김광호 가라오케용 레이져 디스크 플레이어의 화면 데이터 탐색방법
JP2000035785A (ja) 1998-07-17 2000-02-02 Yamaha Corp カラオケ装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5428730A (en) * 1992-12-15 1995-06-27 International Business Machines Corporation Multimedia system having software mechanism providing standardized interfaces and controls for the operation of multimedia devices
CA2153968A1 (en) * 1993-09-13 1995-03-23 Steven H. Milne Multimedia data routing system
US5570296A (en) * 1994-03-30 1996-10-29 Apple Computer, Inc. System and method for synchronized presentation of video and audio signals
US5615401A (en) * 1994-03-30 1997-03-25 Sigma Designs, Inc. Video and audio data presentation interface
US5983236A (en) * 1994-07-20 1999-11-09 Nams International, Inc. Method and system for providing a multimedia presentation
US5646866A (en) * 1995-02-15 1997-07-08 Intel Corporation Preloading files for subsequent processing
US6314569B1 (en) * 1998-11-25 2001-11-06 International Business Machines Corporation System for video, audio, and graphic presentation in tandem with video/audio play
US6795092B1 (en) * 1999-02-15 2004-09-21 Canon Kabushiki Kaisha Data processing apparatus and method, and storage medium
WO2001026378A1 (en) * 1999-10-06 2001-04-12 Streaming21, Inc. Method and apparatus for managing streaming data
US6621502B1 (en) * 2001-05-02 2003-09-16 Awa, Inc. Method and system for decoupled audio and video presentation

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0934477A (ja) * 1995-07-18 1997-02-07 Matsushita Electric Ind Co Ltd カラオケ装置
KR0157525B1 (ko) * 1995-08-07 1998-12-15 김광호 가라오케용 레이져 디스크 플레이어의 화면 데이터 탐색방법
JP2000035785A (ja) 1998-07-17 2000-02-02 Yamaha Corp カラオケ装置

Also Published As

Publication number Publication date
US20010052943A1 (en) 2001-12-20
GB2368685B (en) 2002-11-13
TWI236599B (en) 2005-07-21
GB0113242D0 (en) 2001-07-25
KR20010110178A (ko) 2001-12-12
GB2368685A (en) 2002-05-08

Similar Documents

Publication Publication Date Title
JP3668547B2 (ja) カラオケ装置
KR100694028B1 (ko) 멀티미디어 파일 작성용 저작장치 및 방법
KR101054135B1 (ko) 복합 미디어 콘텐츠의 변환 장치 및 변환 방법과 기록 매체
KR100742860B1 (ko) 음악과 화상 트랙을 동기화하는 멀티미디어 시스템
JP3540344B2 (ja) カラオケ装置におけるバックコーラス再生装置
CN100427164C (zh) 游戏装置
JP4919395B2 (ja) ゲームプログラムおよびゲーム装置
JPH08263030A (ja) マルチメディアシステム動的連動方式
KR20030030866A (ko) 음향 신호 출력 방법, 음향 신호 생성 장치 및 프로그램
US20070022379A1 (en) Terminal for displaying distributed picture content
CN1822091B (zh) 显示字符的电子音乐设备
JP3558052B2 (ja) マルチメディア実行システム、マルチメディアファイルの実行方法およびシーケンサにより読み出し可能なマルチメディアファイル構造体
WO2004097800A1 (ja) 音声再生プログラム、音声再生方法及び音声再生装置
JP4368817B2 (ja) 歌詞表示器付き携帯音楽プレーヤ
JP4077525B2 (ja) マルチメディア情報再生装置およびマルチメディア情報記録装置
JPH02242294A (ja) カラオケ用ディスプレイの歌詞表示装置
JP2000148107A (ja) 画像処理装置および記録媒体
JP4161714B2 (ja) カラオケ装置
JP3902398B2 (ja) 画像表示装置、画像表示方法およびその方法を実現するプログラムを記録した機械読取可能な記録媒体
JPH04208782A (ja) イメージ情報処理システムの同期装置
JP2866895B2 (ja) カラオケ用ディスプレイの歌詞表示装置
JP2004364341A (ja) 携帯電話および画像表示装置
JP3067538B2 (ja) 文字列表示色変更信号生成装置並びに文字列表示装置
JP3077626B2 (ja) カラオケシステムおよびカラオケ装置
JP2005134754A (ja) 汎用入出力ポート制御情報作成装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120620

Year of fee payment: 6

LAPS Lapse due to unpaid annual fee