KR20130128381A - 링크 기반 멀티미디어를 생성하고 네비게이션하는 방법 - Google Patents

링크 기반 멀티미디어를 생성하고 네비게이션하는 방법 Download PDF

Info

Publication number
KR20130128381A
KR20130128381A KR1020137009046A KR20137009046A KR20130128381A KR 20130128381 A KR20130128381 A KR 20130128381A KR 1020137009046 A KR1020137009046 A KR 1020137009046A KR 20137009046 A KR20137009046 A KR 20137009046A KR 20130128381 A KR20130128381 A KR 20130128381A
Authority
KR
South Korea
Prior art keywords
media
jump
media jump
link
jump link
Prior art date
Application number
KR1020137009046A
Other languages
English (en)
Inventor
제프리 찬
Original Assignee
제프리 찬
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 제프리 찬 filed Critical 제프리 찬
Publication of KR20130128381A publication Critical patent/KR20130128381A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04804—Transparency, e.g. transparent or translucent windows

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

본 발명은, 조합하여 또는 컴퓨터에서, 모션 그래픽스 또는 비디오에 수퍼임포즈되는 경우 기능적으로 투명하게 만들어진 선택의 스크롤링 리스트로부터 관심 지점을 선택함으로써 오디오, 비디오 및 다른 멀티미디어 재생 내 미리 정해진 지점을 적시에 규정하고, 편집하고 그 지점으로 점프하는 방법이다. 부가적으로, 본 발명은 시스템을 각종 기기 또는 휴먼 입력을 갖는 대화면 스크린 기기에서도 가시 영역을 극대화해주면서 소형 스크린상에서도 용이하게 사용되게 한다.

Description

링크 기반 멀티미디어를 생성하고 네비게이션하는 방법{ METHOD FOR CREATING AND NAVIGATING LINK BASED MULTIMEDIA}
본 발명은 2010년 8월 23일 출원한 가출원 제61/375,897호의 정규 출원이며 가출원의 우선권을 주장한다.
본 발명은 컴퓨터 기기에서 오디오, 비디오 및 다른 멀티미디어 재생 시 모션 그래픽스 또는 비디오에 중첩(superimposed)되는 경우 기능적으로 투명하게 만들어진 선택의 스크롤링 리스트로부터 관심 지점을 선택함으로써 제 시간에 맞추어 규정하고, 편집하고 미리 정해진 지점으로 점프하는 방법이다. 부가적으로, 본 발명은 시스템을 소형 스크린상에서 용이하게 사용되게 하면서 각종 기기 및 휴먼 입력을 갖춘 대화면 스크린 기기에서도 가시 영역을 극대화하여 준다.
본 발명은 일반적으로 컴퓨터 기기에서 이벤트의 순서를 상세히 설명하는 멀티미디어 기반 엔터테인먼트, 교육/수업 비디오, 및 역학적으로 생성된 애니메이션을 향상시키는 것에 관한 것으로, 특히 가변 투명 층(variable transparency layer) 내 다수의 텍스트 및 그래픽 요소들을 일차 가시적 콘텐트(primary visual content) 위에 디스플레이하고 옵션으로 오버레이(overlay)하는 시스템을 제공함으로써, 유익하게 즉석에서 정보를 회상(recall) 또는 미리 보기(preview)할 수 있게 해주는 것에 관한 것이다.
본 발명은 현재 이용가능한 방법들에서 알려진 정확도에 더하여, 컴퓨터 기기에서 오디오, 비디오 및 애니메이션을 신속하게 생성하여, 사용자에게 미디어 내 특정 지점으로 빠르고 정확하게 찾아갈 수 있게(navigating) 해주는 방법을 제공한다.
전통적으로, 오디오를 듣거나 비디오 프로그램을 보는 시청자는 직선형의 멀티미디어 제품을 체험했다. 그러나, CD, DVD, 및 디지털 비디오 파일이 발명됨에 따라, 사용자들은 콘텐트 제작자가 규정한 특정 챕터 마크(chapter mark)로 점프할 수 있었다. CD 레코딩(CD recording)은 음악마다 하나의 트랙을 가질 수 있으며, DVD는 영화 내 장면마다 챕터를 가질 수 있다. 그러나, 노래 또는 구어(spoken dialogue)의 특정 문장 또는 구문 앞뒤로 점프하는 기능은 아직까지 가능하지 않다. 디지털화된 오디오 레코딩을 듣거나 영화를 보는 사용자는 챕터를 "리와인드" 또는 반복시킬 수 있지만, 이렇게 하면 종종 너무 멀리 뒤로 가기도 하며, 사용자가 관심을 두지 않은 미디어 부분을 시청 및/또는 경청하는데 시간을 낭비하게 한다. 더욱이, 구어를 이해하는 것이 가장 중요한 것이라면, 단순히 특정 문장이나 두 문장에 접근할 수 있는 언어 학습자에게는 아주 큰 문제이다. 최근의 디지털 미디어에 있어서, 우리들은 "30초 뒤로 점프(jump back 30 second)" 기능에서 이러한 문제를 해결하려는 약간의 입장 또는 노력을 보아왔다. 그러나 여전히 점프가 너무 많으며, 종종 사용자가 거의 관심이 없는 지점으로 가기도 한다. 간단히 말해서, 이러한 방식의 점프는 임의적인 것이며 어학적이고 내용적인 상황을 전반적으로 무시하는 것이다.
서브타이틀을 보여주는 비디오 플레이어들은 종종 하나의 언어로 된 텍스트를 디스플레이할 뿐이며, 흔히 서브타이틀은 스크린에서 너무 빠르게 사라져서 전체적인 이해를 하지 못할 것이다. 이것은 모국 음성을 듣는 것 그리고 외국어 서브타이틀을 매우 빠르게 읽을 수 없는 것의 둘 사이를 선택하여야 하는, 또는 외국 음성를 듣는 것 그리고 비외국어 서브타이틀 없이 비외국어의 듣기 이해를 검증하는 것의 둘 사이를 선택하여야 하는 제2 언어 학습자에게는 특히 문제이다. 더욱이, 가라오케 머신과 같은 엔터테인먼트 기기는 한번에 하나의 구문 또는 한 단위로 디스플레이되고 클리어되는 다중 구문을 디스플레이한다. 이것은 사용자가 급히 가사를 볼 수 없기 때문에 노래 연습을 어렵게 한다. 여기에다 오직 한 구문을 리와인드할 수 없음이 더해지며, 그래서 엔터테인먼트는 실망스러운 체험이 된다.
언어 학습의 부문에서, 오디오에 가시적 표현을 부여하거나 또는 비디오에 오디어 사운드트랙을 부여하는 것은 흔히 이해력을 증진시키는 방식이다. 그러나 오디오의 가사는 음악 비디오 또는 가라오케 재생에서만 볼 수 있을 뿐이다. 이러한 제품들은 전통적인 CD 및 DVD 기술에 기반하기 때문에, 이들 제품은 전형적인 CD 또는 DVD 플레이어가 할 수 있는 것보다 찾아가기를 더 잘 할 수 없다. 컴퓨터-기반 오디오 및 비디오 플레이어는 종종 타임 슬라이더(time slider)를 드래그함으로써 오디오 또는 비디오를 "스크러브(scrub)"하게 해준다. 그러나, 타임 슬라이더의 약간의 움직임이 소수 픽셀만큼 적을지라도, 종종 적어도 6 내지 10초의 시간 점프를 초래한다. 설상가상으로, 미디어 재생 시간이 길수록, 조정이 조잡해지는데, 이것은 늘어난 시간 범위에 동일한 해상도 스크러버(resolution scrubber)가 할당될 것이기 때문이다. 예를 들어, 2분 영화의 경우, 120 픽셀 폭의 스크러버는 픽셀 당 1초의 해상도를 갖게 될 것이다. 한편, 2시간 영화의 경우, 스크러버의 매 픽셀 움직임 마다 1분 점프가 일어난다. 이러한 적시의 큰 점프는 낮은 스크러빙 해상도라고 지칭될 수 있다. 이상적으로, 사용자는 높은 스크러빙 해상도라고 할, 1초 이하의 정확도로 스크러브할 수 있어야 한다.
최근 언어 교육 캠페인은 (본질적으로 하나는 구두 트랜스크립트(spoken transcript)용이고, 하나는 비디오용인 두 개의 가상 모니터를 제공하는) 비디오 프로그램의 옆에다 별도의 윈도우를 디스플레이하는 가정용 컴퓨터 또는 랩탑과 같은 표준형 컴퓨터에서 구동하는 공개 프로그램(releasing profram)을 시작하였다. 구두 트랜스크립트 윈도우에서, 더 많은 정보를 위해 클릭가능한 어떤 단어들은 하이라이트 표시된다. 그러나, 대부분의 사용자는 흔히 트랜스크립트에서 제한 없이 앞뒤로 임의적으로 스크롤하는 어떤 기능도 갖고 있지 않다. 그래서 사용자는 콘텐트를 일차원적으로 체험한다.
차량 또는 보행 경로탐색 동안 사용된 위성위치 확인 시스템(GPS)의 네비게이션 시스템의 분야에서, 마찬가지로 네비게이션 명령도 사용자가 지정된 경로에 따라 찾아가는 것처럼 진행하는 선형적 방식으로 되어 있다. 이러한 네비게이션 시스템에서, 전형적인 중간 지점 일람표(waypoint listing)는 전용 스크린을 필요로 한다. 예를 들어, 맵 상에서 차량의 디스플레이를 보면서, 사용자가 목적지로의 운행에 필요한 모든 단계를 미리보고자 하면, 맵은 전형적으로 각각의 운행 명령(전형적인 명령은, 예를 들면, "5번가에서 왼쪽으로 돌아라"이다)을 열거하는 풀 스크린 디스플레이로 인해 방해받을 것이다. 이러한 네비게이션 명령은 CD에서의 트랙 마크 또는 DVD에서의 챕터 마크와 유사하다.
최근의 GPS 네비게이션 프로그램에서는 맵 디스플레이의 오른쪽 세 번째에다 반투명 명령어 일람표의 오버레이를 더 상세하게 제공하려는 시도가 있었다. 사용자는 이러한 일람표를 위아래로 스크롤할 수도 있으며, 반투명 일람표를 두 가지 방식으로 턴온 및 턴오프할 수도 있다. 그러나, 반투명 일람표는 자동으로 사라지거나 투명하게 변하도록 만들어지지 않아서, 이 일람표가 가용 스크린 공간 또는 스크린 자원(screen real estate)의 대략 삼분의 일을 항상 방해하는 결과를 가져온다. 이것은 일람표를 비활성화하려면 GPS 기기와의 물리적인 상호작용을 필요로 하기 때문에 운전자의 주의를 흐트러뜨리는 위험에 빠진다. GPS 기기와의 물리적인 상호작용은 운전하면서 문자메시지 주고받기만큼 위험하며, 이러한 형태의 악의없는 기능은 자동차 충돌의 위험을 일으킬 수 있다. 또한 전통적인 GPS 네비게이션 기기들은 네비게이션 명령을 오디오 가사 표시만큼 길다란 하나의 수직 데이터 리스트처럼 구현하는 결함을 범했다. 비록 일람표가 가사처럼 위아래로 스크롤될 수 있을지라도, 사용자는 반투명 오버레이 리스트로부터 특정 명령을 클릭 또는 선택할 수 없었다. 더욱이, 만일 사용자가 이전의 네비게이션 명령을 재검토하고자 했다면, "구(old)" 네비게이션 명령은 접근할 수 없었다. 하찮은 명령을 걸러내서 "오직 고속도로"에 집중하려는 또는 이와 반대로 오직 고속도로에 집중하고자 하찮은 명령을 걸러내려는 사용자는 그렇게 할 수 없었으며, 항시 "과잉" 정보로 인해 주의가 흐트러짐을 감수하였다. 간략히 말해서, 전통적인 GPS 기기 상의 네비게이션 명령 일람표는 사용자와 상호작용할 지라도 부가적인 데이터를 올리고 디스플레이하지도 못하거니와, 기본 그래픽 애니메이션의 콘텐트도 변경하지도 못하는 일람표에 불과하다.
부가적으로, 서브타이틀을 미디어와 동기화하는 것은 전통적으로 사소한 프로세스였다. 전형적으로 비디오 미디어의 재생을 가능하게 해주는 인터페이스가 제공된다. 사용자는 특정 서브타이틀에 관련한 시작과 종료 시간을 타이핑하여 서브타이틀 텍스트를 입력한다. 대안으로, 사용자는 서브타이틀 작업의 시작과 종료 시간을 타임 슬라이더로부터 선택할 수도 있다. 문제는 시간을 양식 필드(form field)에 타이핑하는 것이 지루하고 시간 낭비라는 것이다. 타임 슬라이더를 클릭하고 드래그하는 대안은 스크러빙 해상도가 그만큼 낮기 때문에 부정확하다. 이로 인해 작업 비능률이 커지고, 멀티미디어 제품을 생산하는 비용을 증가시킨다. 혁신적인 해법이 있다면, 생산 비용이 상당히 줄어들 수도 있다.
2000년 6월 13일, Glickman 등에게 허여된 미국 특허 제 6,076,059 호는 텍스트 파일의 텍스트 세그먼트들을 오디오 파일의 오디오 세그먼트들로 정렬하는 컴퓨터화된 방법이다. 2002년 8월 27일, Van Thong 등에게 허여된 미국 특허 제 6,422,518 호는 폐쇄 자막(closed caption)에다 시간 정돈(time alignments)을 다듬기 위한 방법이다. 2010년 8월 31일 Kim 등에게 허여된 미국 특허 제 7,787,753 호는 텍스트 서브타이틀 스트림 및 관련 데이터를 저장한다. 그러나, 본 발명과 달리, Glickman 등, Van Thong 등, 그리고 Kim 등의 특허는 사용자로 하여금 개개의 텍스트 세그먼트를 개별적으로 제어하지 못하게 되어 있다.
그러므로, 이러한 영역에서 혁신에도 불구하고, 컴퓨터 기기에서 구어 또는 문장 레벨까지 빠르고 정확한 찾아가기를 가능하게 한 엔터테인먼트 및 교육적 미디어를 빠르게 생성하고는 방법이 필요하다.
.
본 발명은, 컴퓨터 기기에서 현재 이용가능한 방법에서 찾은 정확도보다 높고 이를 넘어서는, 사용자에게 미디어 내 특정 지점으로 신속하고 정확하게 찾아가는 기능을 제공하는 오디오, 비디오 및 애니메이션을 빠르게 생성하는 방법을 제공한다. 본 발명이 사용 중일 때, 다수의 서브타이틀 또는 네비게이션 요소들이 스크롤가능 층 내에서 동시에 보이게 된다. 각각의 서브타이틀은 오디오, 비디오 또는 네이게이션 경로에서 어떤 지점과 적시에 연계됨으로써, 사용자들이 점프 및 미리보기 또는 재검토하려는 문장, 구, 또는 네비게이션 요소를 선택하게 해준다. 또한, 사용자는 서브타이틀을 스크롤하여 현재 온스크린에서 보이지 않을 수 있는 구문, 문장 또는 네비게이션 가이드를 찾을 수 있다. 스크롤링이 불능인 경우, 검색 기능이 제공된다. 콘텐트를 강화하는 콘텐트 작성자 및 공표자는 A) 타이밍이 없는, 또는 B) 타이밍이 부정확한 텍스트 및 그래픽스를 이입하고, 그런 다음 스크린 자원을 희생하지 않으면서 현재 상연되고 있는 서브타이틀을 터치 또는 선택함으로써 서브타이틀의 신속한 타이밍을 가능하게 해주기 때문에 본 발명이 유용하다는 것을 부가적으로 알게 될 것이다. 본 발명은 더 큰 디스플레이 표면을 필요로 하지 않고도 네비게이션 생성, 재생 및 스크러빙 기능을 추가한다.
노래의 가사를 디스플레이하는 오디오 플레이어는 디스플레이된 가사를 오디오 재생 위치와 동기화하는 기능을 거의 가지고 있지 않다. 그러나, 부가적인 데이터를 활용하여 가사의 디스플레이를 오디오 재생과 동기화시킴으로써 체험을 향상시키는 특별한 기술이 이용가능하다. 진보된 기술이 낮다면, 가사를 스크롤할 수는 있지만, 자동으로 오디오 재생과 동기화되지는 못할 것이다. 더욱 진보된 구성에서, 가사 디스플레이는 동기화되지만, "타임-슬라이더"를 드래그하여 재생 시간에 기반한 재생 위치를 변경하는 것 이외에는 수작업으로 스크롤될 수 없다. 디스플레이된 가사는 "읽기 전용"이며 모든 가사는 가사를 모두 포함하는 "하나의 요소"로서 되었을 것이기 때문에 구문과의 사용자 상호작용은 불가능하다. 그렇다 하더라도, 어떤 사례에서는 활성적인 가사가 어떤 방식으로 가시적으로 강조되었을 것이지만, 여전히 "읽기 전용"에 중점을 둔다. 그래서, 구문과 상호작용하는 방법이 없었다. 그러나, 본 발명은 각 가사 요소마다 개별적으로 설명한다. 비유하자면, 본 발명은 가사 요소를 "치즈 한덩어리"라기 보다는 "개별적으로 포장된 조각"으로서 제시한다. 본 발명에 따르면, 사용자는 관심 콘텐트를 검색할 수 있고, 스크롤하여 사용자가 점프하고자 하는 콘텐트를 검증하고, 가사 및 주제 등에 기반한 원하는 지점으로 바로 점프할 수 있다.
오디오의 풀 스크롤링 트랜스크립트가 비디오와 별개로 제2 윈도우에서 디스플레이되는 사용자 인터페이스 레이아웃은 다량의 스크린 자원을 소비한다. 이것은 작은 휴대 기기를 비실용적으로 만들어 버리며, 그래서 그 용도를 스크린이 큰 기기로 제한한다. 전통적인 해법은 텍스트를 반투명으로 만드는 방법인 알파 브렌딩(alpha blending) 기능을 이용하여 서브타이틀을 비디오 위에 수퍼임포즈하는 것이다. 이렇게 하면 자체적인 문제가 발생하는데, 그 이유는 정의에 따르면 비디오 이미지를 가리지 못하도록 하기 위해 그러한 서브타이틀 작업이 스크린의 아래 부분에서만 이루어 지기 때문이다. 그러나, 종종 음성은 각각의 구어가 시간에 맞추어 빨리 통과하는 것처럼 빠르기 때문에, 가시적인 서브타이틀은 너무 빨리 사라진다. 서브타이틀의 전형적인 디스플레이 지속기간은 학생이 외국 음성 단어를 이해하기 또는 외국 서브타이틀을 읽기에는 너무 짧다. 이것은 영어 서브타이틀이 빨리 나타나고 사라지는 중국어 액션 영화를 시청하는 영어가 모국어인 화자에게도 문제이기도 하다. 다시 말해서, 다시 어떤 지점으로, 예를 들어, 뒤로 두 문장을 스킵하는 것은 사실상 실행가능하지 않다.
부가적으로, 서브타이틀을 미디어와 동기화하는 것은 전통적으로 사소한 프로세스이었다. 전형적으로 비디오 미디어를 재생할 수 있게 한 인터페이스가 제공된다. 사용자는 특정 서브타이틀에 관련한 시작과 종료 시간을 타이프하여 서브타이틀 텍스트를 입력한다. 대안으로, 사용자는 서브타이틀 작업의 시작과 종래 시간을 타임 슬라이더로부터 선택할 수도 있다. 문제는 시간을 양식 필드에 타이핑하는 것이 지루하고 시간 낭비라는 것이다. 타임 슬라이더를 클릭하고 드래그하는 대안은 스크러빙 해상도가 그만큼 낮기 때문에 부정확하다. 이로 인해 작업 비능률이 커지고, 멀티미디어 제품의 생산 비용을 증가시킨다. 혁신적인 해법이 있다면, 생산 비용을 상당히 줄일 수도 있다.
.
도 1a는 미디어 오버레이 부분 스크린 모드에서 본 발명의 레이아웃의 전형적인 실시예를 도시한다.
도 1b는 미디어 오버레이 풀 스크린 모드에서 본 발명의 레이아웃의 전형적인 실시예를 도시한다.
도 2a는 인물중심 촬영 모드(portrait mode)에서 본 발명의 레이아웃의 전형적인 실시예를 도시한다.
도 2b는 풀 스크린 미디어 점프 오버레이를 갖는 인물중심 촬영 모드에서 본 발명의 레이아웃의 전형적인 실시예를 도시한다.
도 2c는 대화면 스크린 모드에서 본 발명의 레이아웃의 전형적인 실시예를 도시한다.
도 3a는 미디어 점프 오버레이가 어떻게 미디어 재생과 미디어 재생 및 스크러빙 중에도 동기화되는지를 도시한다.
도 3b는 미디어 점프 오버레이가 어떻게 여러 위치와 동기화되는지를 도시한다.
도 3c는 미디어 점프 오버레이가 어떻게 네비게이션 동안 동기화되는지를 도시한다.
도 4는 미디어 점프 오버레이 알파가 어떻게 미디어 점프 오버레이와의 사용자 상호작용의 양과 형태에 따라 조절되는지를 도시한다.
도 5는 미디어 점프 오버레이가 사용자 상호작용에 의거 어떻게 스크롤할 수 있는지를 도시한다.
도 6은 미디어 점프 오버레이가 미디어 점프 링크 데이터에 기반한 미디어 점프 링크를 어떻게 렌더링하는지를 도시한다.
도 7은 미디어 점프 링크 요소를 탭하거나 또는 클릭하면 미디어 재생 위치를 어떻게 변경될 수 있는지를 도시한다.
도 8a는 미디어 점프 오버레이가 어떻게 미디어 점프 링크 데이터에 기반한 미디어 점프 링크를 어떻게 렌더링하는지를 도시한다.
도 8b는 사용자의 역할에 따라 미디어 점프 오버레이가 특정 미디어 점프 링크와의 유지(hold) 상호작용에 어떻게 대응하는지를 도시한다.
도 8c는 사용자의 역할에 따라 미디어 점프 오버레이가 특정 미디어 점프 링크와의 스와이프(swipe) 상호작용에 어떻게 대응하는지를 도시한다.
도 9는 본 발명이 데이터를 로컬 스토리지 또는 네트워크로부터 검색하고 그 네트워크를 통해 관리 메타데이터 전송을 다시 송신하는 방법을 도시한다.
도 10은 미디어 점프 링크를 미디어와 연계된 시간으로 점프할 수 있게 데이터를 포맷할 수 있는 방법의 일예를 도시한다.
도 11은 로컬 스토리지 또는 네트워크를 통해 검색되고 스크린 상에 렌더링되는 정보를 도시한다.
도 12a는 검색 기능이 관심의 미디어 점프 링크로 빠른 네비게이션을 해줄 수 있는지를 도시한다.
도 12b는 검색 기능이 어떻게 미디어 점프 링크와의 여러 상호작용에 대응하는지를 도시한다.
본 발명은 컴퓨터 기기와 조합하여, 관심 지점을 선택의 스크롤링 리스트로부터 선택함으로써 오디오, 비디오 및 다른 멀티미디어 재생 시 제시간에 맞추어 규정하고, 편집하고 미리 규정된 지점으로 점프하기 위한 방법이다. 이러한 선택은 사용자에게 미디어 점프 링크(100) 및 미디어 점프 오버레이(102)의 형태로 제공된다. 미디어 점프 오버레이(102)는 하나 이상의 미디어 점프 링크(100)를 포함하는, 전형적으로 가사 또는 서브타이틀을 나타내는 텍스트 요소, 및 옵션으로 그래픽 요소를 포함하는 스크롤링 층 또는 윈도우이다. 미디어 점프 링크(100)는 텍스트, 그래픽스 및 애니메이션과 같이, 가시적 오디오 가사, 비이오 미디어의 가시적 오디오 트랜스크립트, 가시적 텍스트, 및 가시적 그래픽스를 포함하는 하나 이상의 가시적 요소를 포함하는 저장소이다. 미디어 점프 링크(100)는 실제로 하나 이상의 폰트 내 텍스트, 하나 이상의 언어 내 텍스트, 그래픽스, 애니메이션―기본적으로는 가시적인 모든 것―내 텍스트를 포함할 수 있다. 이를 위하여, 미디어 점프 링크(100)는 또한 타이밍 정보, 언어 지명, 방언 지명, 감정, 음성 톤, 주제, 임의 캐릭터 스트링 태그, 활동적 화자, 활동적 청취자, 요소 활성화 시작 시간, 요소 활성화 종료 시간, 웹 페이지 및 데이터 소스와 같은 네트워크 미디어 링크, 경도, 및 위도 등을 포함하는, 사용자에게 보이지 않는, 요소들을 포함한다.
미디어 점프 오버레이(102)는 텍스트 요소들을 포함하는 다수의 엔트리 또는 미디어 점프 링크(100)를 포함하며, 이러한 텍스트 요소들은 전형적으로 문장으로 분할(segment)되며 옵션으로는 더 긴 문장의 구문으로 분할된다. GPS 시스템과 같은 네비게이션 기기에서, 각각의 주요한 네비게이션 명령은 분할된다. 각각의 문장, 구문 또는 세그먼트는 미디어 점프 링크(100)라 지칭된다. 멀티미디어 미디어 점프 링크(100)는 미디어 점프 오버레이(102) 상에 디스플레이된다. 미디어 점프 링크(100)는 동시에 하나 보다 많은 언어로 디스플레이되도록 구성될 수 있다. 미디어 점프 링크(100)는 또한 화자, 강조, 주제, 또는 음성 톤에 따라 다르게 렌더링될 수도 있다.
본 발명은 표준형 컴퓨터 모니터, 통상의 텔레비젼 스크린, 아이폰(상표)과 같은 휴대 기기, 또는 오디오, 비디오 및 다른 멀티미디어 재생을 제공하는 다른 기기들을 통해 시청될 수 있다. 본 발명은 조망 모드(landscape mode) 또는 인물중심 촬영 모드(portrait mode)에서 시청될 수도 있다. 재생되는 미디어는 네비게이션, 애니메이션, 및 노래 부를 때 단어로 된 문자에 색을 입히는 가라오케 유형의 컴팩트 디스크 플러스 그래픽스(CD+G) 텍스트와 같은 미디어를 포함할 수 있다. 그 외에, 충분한 스크린 자원이 이용가능할 경우, 미디어 점프 오버레이(102)는 미디어 재생의 렌더링되는 그래픽 디스플레이를 제외한 전용 영역에 디스플레이될 수도 있다. 어떤 경우, 사용자는 미디어 점프 오버레이(102)를 미디어 플레이어 제어부(media player controls)를 보여주지 않고 풀 스크린 모드에서 시청하기를 바랄 수도 있다. 이러한 경우는 미디어 플레이어 제어부가 제안된 기능과 관련하여 스크린 자원을 아주 많이 차지하고 있기 때문에 종종 일어나는 사례이다.
도 1a는 조망 모드 및 미디어 오버레이 부분 스크린 모드에서 본 발명의 레이아웃의 전형적인 실시예를 도시한다. 세 개의 미디어 점프 링크(100)가 미디어 점프 오버레이(102) 내에서 도시된다. 미디어 점프 오버레이(102) 내에 있는 미디어 점프 링크(100)는 외관상 동일한 공간을 차지하고 있거나 또는 통상의 전자 기기의 스크린(150) 상에 디스플레이된 풀 모션 미디어(103)를 "오버레이"하고 있다. 미디어 플레이어 제어부는 스크린(150)의 상단과 하단에서 볼 수 있다. 스크린(150)의 상단에는 사용자가 본 발명의 사용을 중단(즉, 닫기)시킬 수 있는 미디어 취소 버튼(dismiss media button)(110), 미디어 시간 경과 표시자(media time elapsed indicator)(115), 미디어 타임 슬라이더(meia time slider)(101), 및 미디어 시간 잔량 표시자(media time remaining indicator)(125)를 갖는 미디어 시간 진행률 표시바(media time progress bar)(120), 및 옵션 버튼(option buttor)(130)이 존재한다. 스크린의 베이스 부분에는 리와인드(135), 재생(140), 및 패스트 포워드(145)와 같은 표준형 미디어 제어부가 있다. 또한 미디어 선택, 재생 모드, 및 가시적 선호도 등과 같은 프로그램 옵션을 구성할 수 있는 메뉴를 제시하도록 구성된 액션 버튼(action button)(105)이 도시된다.
도 1b는 풀 스크린 모드에서 미디어 오버레이를 갖는 조망 모드에서의 본 발명의 레이아웃의 전형적인 실시예를 도시한다. 여덟 개의 미디어 점프 링크(100)가 미디어 점프 오버레이(102) 내부에 도시된다. 미디어 점프 오버레이(102) 내부에 있는 미디어 점프 링크(100)는 외관상 동일한 공간을 차지하고 있거나 또는 통상의 전자 기기의 스크린(150) 상에 디스플레이된 풀 모션 미디어(103)를 "오버레이"하고 있다. 도 1b에는 스크린(150)의 하단에서 액션 버튼(105)을 제외하고 아무 미디어 플레이어 제어부도 도시되어 있지 않다. 액션 버튼(105)은 부분 및 풀 스크린 모드, 미디어 선택, 재생 모드, 및 비주얼 선호도 등 사이에서 미디어 점프 오버레이(102)를 토글하는 것과 같은 프로그램 옵션을 구성할 수 있는 메뉴를 제시한다.
도 2a는 인물중심 촬영 모드 및 미디어 점프 오버레이(102)의 부분 스크린 모드에서 본 발명의 레이아웃의 전형적인 실시예를 도시한다. 여덟 개의 미디어 점프 링크(100)가 미디어 점프 오버레이(102) 내부에서 도시된다. 미디어 점프 오버레이(102) 내부에 있는 미디어 점프 링크(100)는 외관상 동일한 공간을 차지하고 있거나 또는 통상의 전자 기기의 스크린(150) 상에 디스플레이된 풀 모션 미디어(103)를 "오버레이"하고 있다. 이 경우, 우리는 말하고 있는 사람(예를 들면, :제1 화자", "제2 화자" 등)을 보여주는 캐릭터 정황 특집(character context feature)(201) 및 사용자에게 상이한 언어로 작성된 텍스트를 단독으로 또는 동시에 볼 수 있게 해주는 다중언어 특징(multilingual feature)(202)을 보여주도록 구성된 미디어 점프 링크(100)를 볼 수 있다. 미디어 플레이어 제어부는 스크린(150)의 상단과 하단 양쪽에서 볼 수 있다. 스크린(150)의 상단에는 사용자가 본 발명의 사용을 중단(즉, 닫기)시킬 수 있는 미디어 취소 버튼(110)과, 미디어 시간 경과 표시자(115), 미디어 타임 슬라이더(101), 및 미디어 시간 잔량 표시자(125)를 갖는 미디어 시간 진행률 표시바(120), 및 옵션 버튼(130)이 존재한다. 스크린의 베이스 부분에는 리와인드(135), 재생(140), 및 패스트 포워드(145)와 같은 표준형 미디어 제어부가 있다. 또한 미디어 선택, 재생 모드, 및 비주얼 선호도 등과 같은 프로그램 옵션을 구성할 수 있는 메뉴를 제시하도록 구성된 액션 버튼(105)이 도시된다.
도 2b는 풀 스크린 미디어 점프 오버레이(102)를 갖는 인물중심 촬영 모드에서 본 발명의 레이아웃의 전형적인 실시예를 도시한다. 열두 개의 미디어 점프 링크(100)가 미디어 점프 오버레이(102) 내부에 도시된다. 미디어 점프 오버레이(102) 내부에 있는 미디어 점프 링크(100)는 외관상 동일한 공간을 차지하고 있거나 또는 통상의 전자 기기의 스크린(150) 상에 디스플레이된 풀 모션 미디어(103)를 "오버레이"하고 있다. 도 2b에 도시된 본 발명의 다른 특징은 사용자에게 상이한 언어로 작성된 텍스트를 볼 수 있게 해주는 다중언어 특징(202) 및, 말하고 있는 사람(예를 들면, "제1 화자", "제2 화자" 등)을 보여주는 캐릭터 정황 특집(201)을 포함한다. 도 2b에는 스크린(150)의 하단에서 액션 버튼(105)을 제외하고 아무 미디어 플레이어 제어부도 도시되어 있지 않다. 액션 버튼(105)은 미디어 선택, 재생 모드, 및 비주얼 선호도 등과 같은 프로그램 옵션을 구성할 수 있는 메뉴를 제시한다.
도 2c는 대화면 스크린 모드에서 본 발명의 레이아웃의 전형적인 실시예를 도시한다. 여덟 개의 미디어 점프 링크(100)가 미디어 점프 오버레이(102) 내부에서 도시된다. 미디어 점프 오버레이(102) 내부에 있는 미디어 점프 링크(100)는 외관상 통상의 전자 기기의 스크린(150) 상에 디스플레이된 풀 모션 미디어(103)와 동일한 공간을 차지하지 않고 있다. 미디어 점프 링크(100)의 하부에는 말하고 있는 사람(예를 들면, "제1 화자", "제2 화자" 등)을 보여주는 캐릭터 정황 특집(201) 및 사용자에게 상이한 언어로 작성된 텍스트를 볼 수 있게 해주는 다중언어 특징(202)이 존재한다. 미디어 플레이어 제어부는 스크린(150)의 상단과 하단 양쪽에서 볼 수 있다. 스크린(150)의 상단에는 사용자가 본 발명의 사용을 중단(즉, 닫기)시킬 수 있는 미디어 취소 버튼(110)과, 미디어 시간 경과 표시자(115), 미디어 타임 슬라이더(101), 및 미디어 시간 잔량 표시자(125)를 갖는 미디어 시간 진행률 표시바(120), 및 옵션 버튼(130)이 존재한다. 스크린의 베이스 부분에는 리와인드(135), 재생(140), 및 패스트 포워드(145)와 같은 표준형 미디어 제어부가 있다. 본 발명을 사용하는 중에, 사용자는 실제 물리적 스크린(150)의 부분이 더 작게 차지하도록 윈도우를 크기 조정할 수도 있다. 이 경우, 미디어 점프 오버레이(102)는 외견상 더 이상 풀 모션 미디어(103)의 옆에 붙어있을 수 없으며, 이 경우 우리는 미디어 점프 오버레이(102)를 풀 모션 미디어(103)의 상부에 "오버레이" 상태로 되돌려 놓는다. 이것은 사실상 우리를 도 1a, 도 1b, 도 2a, 또는 도 2b에서 기술된 바와 같은 본 발명의 동작으로 되돌려 놓는 것일 것이다.
도 3a는 스크러빙 동안에도, 미디어 점프 오버레이(102)가 어떻게 미디어 재생과 동기화되는지를 도시한다. 미디어 재생이 진행함에 따라, 미디어 점프 오버레이(102) 상에서 텍스트 캡션(text caption)이 미디어 음성에 동기화된다. 만일 미디어 타임 슬라이더(101)가 드래그 되면, 미디어 점프 오버레이(102)는 스크롤하여 미디어 음성과 동기화된다. 미디어 재생 또는 네비게이션이 진행함에 따라, 가사, 서브타이틀, 또는 네비게이션 요소는 스크롤을 지속한다. 도 3a는 본 발명을 세 가지 위치, 즉, "초기 미디어 시작(Initial Media Start)", "사용중 위치(In-Use Position)" 및 "최종 미디어 위치(Final Media Position)"에서 도시한다. 도 3a의 "초기 미디어 시작"의 도면에서, 미디어 점프 링크(100)는 통상의 스크린(150) 상에서 풀 모션 미디어(103) 위에 수퍼임포즈된 것으로 도시된다. "Text ＃9"(301)로 명명된 미디어 점프 링크는 스크린(150)의 하단부에 도시된다. 도 3a의 "사용중 위치"의 도면은 미디어 타임 슬라이더(101)가 드래그되어 미디어를 시간 0:55부터 재생시킬 때, 스크린(150)의 상단 가까이 이동하는 "Text ＃9"(301)로 도시된 바와 같이, 풀 모션 미디어(103)를 앞으로 이동할 뿐만 아니라 미디어 점프 오버레이(102)도 위로 스크롤하며, 그리고 나서 시간 0:55 현재의 미디어 점프 링크인 "Text ＃16"(302)의 미디어 점프 링크를 스크린(150)의 하단에 오게 한다. 도 3a의 "최종 미디어 위치"의 도면은 풀 모션 미디어(103)가 끝에 도달하였을 때 미디어 점프 오버레이(102) 내 마지막 미디어 점프 링크(100)가 스크린(150) 상에 디스플레이되는 것을 도시한다.
도 3b는 미디어 점프 오버레이(102)가 스크린(150) 상의 어느 위치에도 놓이도록 동기화될 수 있는지를 도시한다. 미디어 재생 또는 네비게이션이 진행함에 따라, 가사, 서브타이틀, 또는 네비게이션 요소는 지속하여 스크롤하며, 풀 모션 미디어(103) 및 미디어 점프 오버레이(102)는 스크린(150) 상의 어느 위치에라도 놓이게 동기화될 수 있다. 이것은 전통적으로 수행되는 것처럼 활동적으로 말을 한 또는 노래부른 오디오 미디어 점프 링크(100)가 스크린(150)의 하단에 디스플레이되게 하거나, 또는 스크린(150) 상에서 더 높이 디스플레이하여 다음에 나올 요소의 가시적 미리 보기를 허용한다. (GPS 기기와 같은 네비게이션 제품의 경우, 도 3c에 도시된 바와 같이, 미디어 점프 오버레이(102)는 현재의 네비게이션 활동과 동기화한다.) 예시를 위해, 도 3b에서는 "미디어 점프 링크 데이터(Media Jump Link Data) ＃9"(340)에서 도시된 바와 같이 시간 코드 0:55를 할당받은 특정 미디어 점프 링크 데이터 요소 "Text ＃9"(341)을 사용한다. 도 3b의 스크린 동기(310) 도면의 하단에는 미디어 점프 오버레이(102)의 하단에서 보여주기 위해 "Text ＃9"" (341) 및 과거의 구문들 (또는 미디어 점프 링크의 정렬 순서가 반대인 경우라면 어쩌면 미래의 구문들)을 배치한, 스크린 동기(310)의 하단에 놓인 "Text ＃9"(341)가 도시된다. 또는, 도 3b의 스크린 동기(320)의 도면의 중간 부분에 도시된 바와 같이, 시간 코드 0:55에서 "Text ＃9"(341)는 미디어 점프 오버레이(102)의 중간 부분에서 놓일 수 있으며, 이것은 미디어 점프 오버레이(102)의 중간에서 보여주기 위해 "Text ＃9"(341)를 배치하고, "Text ＃9"(341) 아래에 미래의 문구를 배치하며, "Text ＃9"(341) 위에 과거의 문구를 배치한 것이다. 스크린 동기(320)의 중간 부분은 사용자가 수행된 행위를 보기를 원하며 또한 다음에 다가올 구성요소가 필요로 하는 것이 무엇인지 알기 원할 수도 있는 쿠킹 쑈(cooking show)에서와 같이, 랜덤한 비주얼 접근이 음성의 정확한 타이밍보다 더욱 중요한 교육용 비디오에서는 중요한 부분이다. 마지막으로, 도 3b에서 스크린 동기(330)의 도면의 상단에 도시된 바와 같이, 타임 코드 0:55에서 "Text ＃9"(341)는 스크린 동기(330)의 상부에 놓일 수 있으며, 이것은 "Text ＃9"(341)를 미디어 점프 오버레이(102)의 상단에서 보여주기 위해 배치하고 "Text ＃9" (341) 아래에 미래의 문구를 배치한 것이다. 만일 사용자가 오디오 또는 비디오에서 새로운 챕터로 네비게이션함으로써 비디오 재생을 수작업으로 스크러브하면, 또는 비디오 타임 슬라이더(101)를 나란히 드래그하면, 미디어 점프 오버레이(102)는 스크린 동기(310)의 하단, 스크린 동기(320)의 중간, 스크린 동기(330)의 상단에서 인코드된 활성 미디어 점프 링크 데이터 요소를 현재 시간과 계속 동기화할 것이며, 또는 사용자는 동기의 가시적 지점을 미디어 점프 오버레이(102) 상의 다른 지점으로 설정할 수 있다.
도 3c는 미디어 점프 오버레이(102)가 GPS 시스템 또는 그의 등가물에서 네비게이션 동안 어떻게 동기화되는지를 도시한다. 도 3c에 도시된 네비게이션 행위를 예시하기 위하여, 경도, 위도, 주행 명령 등과 같은 방향 정보를 포함하는 (도 3c에서 도시된 바와 같이 "미디어 점프 링크 데이터(Media Jump Link Data) ＃2" 처럼 인코드된) 특정 미디어 점프 링크 데이터 요소 "Right＠B"(350)가 사용된다.
도 3c에 도시된 첫 번째 네비게이션 기능은 현 위치 표시 기능(351)이다. 우리가 시작 지점(A)으로부터 지점(B 및 C)을 거쳐 목적 지점(D)까지 찾아간다고 가정하면, 전형적인 네비게이션 프로그램은 스크린(150) 상에 사용자의 현 위치뿐 아니라 경로 진행율 마커(362)를 디스플레이하는 현 위치 아이콘(361)을 보여줄 것이다. "Right＠B"(350)을 포함하는 미디어 점프 오버레이(102)는 시작 지점(A)으로부터 목적지 지점(D)까지 텍스트 형태의 방향 정보를 시작 지점(A)으로부터 목적지 지점(D)까지 그림 형태의 방향 정보와 병행하여 보여준다.
도 3c에 도시된 두 번째 네비게이션 기능은 네비게이션 미리보기 기능(352)이다. 이 기능은 사용자가 미디어 점프 오버레이(102) 내에 있는 "Right＠B"(350)와 상호작용하게 한다. 사용자가 "Right＠B"(350)를 터치하면, "Right＠B"(350)로 인코드된 방향 정보에 따라 네비게이션 미리보기 기능(352) 내에서 미리보기 위치 아이콘(364)이 나타난다. 비록 네비게이션 미리보기 기능(352)의 일예는 사용자가 여전히 원점에 있는 동안 발생할지라도, "Right＠B"(350)는 지점(B)에서 네비게이션 행위를 참조하므로, 미리보기 위치 아이콘(364)은 지점(B)에서 보여진다. 미리보기 위치 아이콘(364)은 현 위치 아이콘(361)과 다른 상이한 형상이나 색상을 가져서 미리보기 위치 아이콘(364)이 현재의 물리적 위치에 있지 않음을 분명히 해줄 수 있다. 통상의 미디어 타임 슬라이더처럼 이동될 수 있는 경로 진행률 마커(362)는 사용자가 네비게이션 미리보기 기능(352)을 활용할 수 있는 또 다른 방식이다. 기설정된 기간 이후, 네비게이션 미리보기 기능(352)은 현 위치 표시 기능(351)으로 다시 되돌아간다. 네비게이션 미리보기 기능(352) 내에서, 현 위치 아이콘(361)은 그 외형이 상이한 형상 또는 색상으로 변하여 이것이 디스플레이되고 있는 실제 현 위치가 아님을 분명히 해줄 수 있다.
도 3c에 도시된 세 번째 네비게이션 기능은 당면 행위(immediate action) 표시 기능(353)이다. 사용자의 경로 네비게이션이 진행함에 따라, 현 위치 아이콘(361)은 스크린(150) 상에 사용자의 위치를 보여준다. 또한, 당면 행위 표시 기능(353)은 이미 수행된 네비게이션 명령을 미디어 점프 오버레이(102)에 디스플레이하지 않음으로써 수행을 위해 남아있는 당면 네비게이션 기능들을 하이라이트 표시한다. 사용자에 의해 수행을 위해 존재하는 이러한 네비게이션 기능들은 미디어 점프 오버레이(102)에서 디스플레이된다.
도 4는 미디어 점프 링크(100)의 알파 및/또는 미디어 점프 오버레이(102)의 알파가 미디어 점프 오버레이(102)와의 사용자 상호작용의 양과 형태에 따라 어떻게 조절되는지를 도시한다. (알파는 온스크린 상에서 텍스트가 갖는 투명한 정도를 지칭한다.) 재생 동안, 사용자는 (손가락, 마우스, 키보드 또는 다른 입력 장치이든 아니든) 입력 장치(501)를 사용하여 스크롤링 미디어 점프 오버레이(102)와 상호작용하며, 결과적으로 본 발명이 어느 특정한 미디어 점프 링크(100) 또는 전체 미디어 점프 오버레이(102)의 알파를 변경하는지를 결정하여, 더 불투명한 디스플레이(401) 또는 더 투명한 디스플레이(402)가 되게 한다.
도 4에 도시된 디스플레이(401)가 더욱 또는 완전히 불투명해지면, 미디어 점프 링크(100) 또는 미디어 점프 오버레이(102)가 더욱 불투명해지기 때문에, 사용자가 미디어 점프 오버레이(102) 내 콘텐트를 쉽게 읽으며 풀 모션 미디어(103)는 강조되지 않는다. 그 결과는 궁극적으로 미디어 점프 링크(100)의 향상된 가독성이다. 도 4에 도시된 디스플레이(402)가 더욱 투명해지면, 미디어 점프 링크(100) 및/또는 미디어 점프 오버레이(102)의 콘텐트가 더욱 투명해지고, 그래서 투명한 콘텐트를 통해 풀 모션 미디어(103)가 더욱 잘 보이게 된다. 게다가, 미디어 점프 링크(100) 및/또는 미디어 점프 오버레이(102)의 콘텐트는 시간 경과에 따라 투명하게 바뀌어 사용자가 풀 모션 미디어(103)를 볼 수 있게 해주고, 만일 최소한의 사용자 상호작용이 있다면 빨리 투명하게 바뀌며, 사용자 상호작용이 현저하다면 (예를 들어, 만일 소정 량의 부가 데이터가 온스크린에 놓이면) 천천히 투명하게 바뀐다. 미디어 점프 오버레이(102)와의 상호작용이 설정가능한 양의 시간 동안 멈춘 후, 미디어 점프 오버레이(102)는 즉시 또는 점차적으로 설정가능한 양에 맞게 더욱 투명하게 바뀔 것이다. 이것은 미디어 점프 오버레이(102)는 언제나 어느 정도까지는 가시적일 수 있다는 것을 의미하며, 또는 원한다면, 요청받을 때까지 간단히 시야로부터 사라질 수도 있다. 부가적으로, 미디어 점프 오버레이(102)는 사용자가 희망하는 대로 활성화, 비활성화, 위치 재설정 또는 크기 조정될 수도 있다. 이렇게 함으로써 사용자는, 미디어 점프 오버레이(102)에 관심을 줄 때까지, 서브타이틀 또는 네비게이션의 산만함 없이 미디어를 볼 수 있다. 이것은 추가적인 스크린 자원을 소모하지 않는 부가적인 이득을 가져오며, 풀 스크린 비디오 또는 애니메이션에 적용의 여지가 있다.
도 5는 사용자 상호작용에 의해 미디어 점프 오버레이(102)가 어떻게 스크롤하는지를 도시한다. 그러나, 드래그하는 상호작용만이 있을 때는 풀 모션 미디어(103) 또는 미디어 시간 진행율 표시바(120)의 재생 시간을 즉시 업데이트하지 않는다. 도 5에서 보는 바와 같이, 첫 번째 드래그 상태도(504)는 입력 장치(501)를 이용하여 미디어 점프 오버레이(102)를 상방 또는 하방으로 스와이핑하는 정상적인 미디어 재생을 도시한다. 입력 장치(501)를 이용한 미디어 점프 오버레이(102)의 상호작용 동안, 미디어 점프 오버레이(102)의 풀 모션 미디어(103)의 재생과의 자동적인 동기화가 디스에이블될 수 있다. 이렇게, 컴퓨터는 사용자가 과거의 서브타이틀을 재검토하려거나 앞으로 나올 서브타이틀을 미리 보기 하려는 동안에는 미디어 점프 오버레이(102)를 자동으로 스크롤하지 않거나 또는 풀 모션 미디어(103)와의 동기화를 진행하지 않는다. 도 5에 도시된 바와 같이, 첫 번째 드래그 상태도(504)에서, 디스플레이의 하단에 위치한 요소(505)는 두 번째 드래그 상태도(510)에서 도시된 바와 같이 디스플레이의 상단을 향하여 상방으로 드래그된다. 첫 번째 드래그 상태도(504)의 하단 그리고 두 번째 드래그 상태도(510)의 상단 부근에서 디스플레이된 요소는 같은 요소이며, 단지 디스플레이에서는 상이한 위치로 드래그되어 있을 뿐이다. 그러나, 첫 번째 드래그 상태도(504)에서 미디어 시간 경과율 표시바(120) 상에 도시된 미디어 재생 시간은 두 번째 드래그 상태도(510)의 미디어 시간 경과율 표시바(120)에서 도시된 것과 동일한 미디어 재생 시간이다. 다시 말해서, 드래그 동작은 풀 모션 미디어(103)의 재생 위치에 꼭 영향을 미치지 않고도, 이전의 미디어 점프 링크(100)의 재검토 또는 앞으로 나올 미디어 점프 링크(100)의 미리 보기를 가능하게 해준다.
도 6은 미디어 점프 오버레이(102)가 미디어 점프 링크 데이터에 기반한 미디어 점프 링크(100)를 어떻게 렌더링하는지를 도시한다. 또한 도 6은 사용자의 역할에 따라 특정 미디어 점프 링크(100)와의 짧은 탭(tap) 또는 클릭(click) 상호작용이 무슨 동작을 할 것인지를 도시한다. 사용자는 특정 가시적 미디어 점프 링크(100)를 선택할 수 있으며, 그 지점에서 미디어는 적시에 그와 연계된 지점으로 점프할 것이다. 예를 들어, 이전의 문장을 선택하면 풀 모션 미디어(103)에서 노래 불렀던 또는 말했던 구문이 다시 노래 불리거나 구술된다. 이것은 도 6에서, "미디어 점프 링크 데이터(Media Jump Link Data) ＃12"(600)로 데이터가 인코드된 형태로 표시되며, 이것은 온스크린에서 "텍스트 ＃12"(601)라고 명명된 미디어 점프 링크로서 렌더링된다. "미디어 점프 링크 데이터 ＃1"(600)의 인코드된 데이터에서 명시된 "적시에 어느 지점으로 점프(jump to a point in time)"라는 동작을 시작시키는 탭은 입력 장치(501)로부터 "텍스트 ＃12"(601)를 통해 수신된다. 관리자 용도로, 사용자의 구성 및 액세스 권한에 기반한 요소 타이밍을 위한 현재 재생 시간을 동기화는 것을 용이하게 하기 위하여 옵션의 관리 타이밍 버튼(610)이 제공될 수도 있다. 추가로 주목할 것은 본 발명은 사용자-설정가능 시간을 사용자가 선택한 시간 보다 이르게 또는 늦추어 동기화시킴으로써 본 발명의 동작에서 인간의 반응 시간을 감안할 것이라는 것이다.
도 7은 미디어 점프 링크 요소를 탭하는 것 또는 클릭하는 것이 미디어의 재생 위치를 어떻게 변경시킬 것인지를 도시한다. 이것은 도 7에서 "미디어 점프 링크 데이터 ＃16"(700)로 데이터가 인코드된 형태로 표시되며, 이것은 온스크린에서 "텍스트 ＃16"(701)으로 명명된 미디어 점프 링크로서 렌더링된다. 입력 장치(501)는 "텍스트 ＃16"을 스크린(150) 상의 가장 높은 또는 가장 낮은 지점으로 드래그할 수 있다. 그런 다음 입력 장치(501)가 "텍스트 ＃16"(701)를 탭하면, 미디어 시간 경과 표시자(115) 및 그와 연관된 미디어 재생은 "미디어 점프 링크 데이터 ＃16"(700) 내에 인코드된 데이터로 규정된 바와 같이 0:30에서 0:55로 점프한다. 그러면 "텍스트 ＃16"(701)은, 그의 위치가 (도 3b에서 도시되었던 바와 같이) 온스크린 상에서 사용자가 선택하는 어느 위치에서도 동기화될 수 있을지라도, 스크린(150)의 하단에 도시된다.
도 8a는 미디어 점프 오버레이(102)가 미디어 점프 링크 데이터에 기반한 미디어 점프 링크(100)를 어떻게 렌더링하는지를 도시한다. 또한, 도 8은 사용자의 역할에 따라 특정 미디어 점프 링크(100)와의 홀드(hold) 상호작용이 무슨 행위를 할 것인지를 도시한다. 예를 들면, 우리가 "텍스트 ＃9" (811)로 명명된 미디어 점프 링크로서 렌더링되는, 인코드된 데이터를 갖는 "미디어 점프 링크 데이터 ＃9"(800)를 렌더링하면, 입력 장치(501)가 터치 또는 클릭하고, 그런 다음 홀드 다운하고 "텍스트 ＃9" (811)를 바로 해제하지 않을 때, 사용자의 설정 및 액세스 레벨에 기반한 일련의 행위는 풀 모션 미디어(103)에서 실행될 수 있다.
(도 8b 및 도 8c로 진행하기에 앞서, 타이밍 모드(822) 및 편집 모드(823)를 간략히 설명하는 것이 도움될 것이다. 타이밍 모드(822)는 미디어 점프 링크(100)의 특정 타이밍 변수들, 특히, 그의 "시작 시간" 및 "종료 시간"을 업데이트하는 기능을 지칭한다. 타이밍 모드(822)에 있을 때, 홀드 다운을 위해 미디어 점프 링크(100) 상에서 클릭, 탭핑, 또는 시작을 하면 재생되고 있는 풀 모션 미디어(103)의 현재 재생 시간을 간단히 취하고 미디어 점프 링크(100)의 시작 시간을 그 미디어 시간을 참조하여 업데이트한다. 미디어 점프 링크(100)에서 홀드 또는 클릭을 해제할 때, 우리는 실행중인 풀 모션 미디어(103)의 현재 재생 시간을 취하고 미디어 점프 링크(100)의 종료 시간을 그 미디어 시간을 참조하여 업데이트한다. 편집 모드(823)는 미디어 점프 링크(100)의 시작 및 종료 시간 보다 더 많이 편집하는 기능을 제공한다. 이 기능은 시작 및 종료 시간을 편집할 수 있을 뿐 아니라 미디어 점프 링크 내부에서 데이터에 관련하는 한 제한 없이 텍스트, 그래픽스, 화자, 언어, 방언, 무드, 및 태그 등을 편집할 수 있다.)
도 8b는 미디어 점프 오버레이(102)가 사용자의 특정 미디어 점프 링크(100)와의 상호작용에 어떻게 대응하는지를 도시한다. 사용자에 의한 풀 모션 미디어(103)의 재생 동안, 입력 장치(501)가 "텍스트 ＃9"(811)와 같은 특정 미디어 점프 링크를 선택할 때, 이 선택은 북마크를 만드는 옵션이 붙은 재생 옵션 윈도우(playback options window)(821)를 열고, 추가 정보 또는 사용자 선택중의 선택된 디폴트 행위를 액세스한다. (재생 옵션 윈도우(821)에서 도시된 옵션은 예시적인 목적을 위한 것이며, 사용자에 의해 다르게 구성될 수 있다.) 타이밍 모드(822)에 있는 동안, 입력 장치(501)가 "텍스트 ＃9"(811)와 같은 특정 미디어 점프 링크를 선택할 때, 이 선택은 "텍스트 ＃9"(811)의 시작 시간을 풀 모션 미디어(103) 상에서 "텍스트 ＃9"(811)가 선택한 순간에 연계시킬 것이다. "텍스트 ＃9"(811)의 종료 시간은 풀 옵션 미디어(103) 상에서 "텍스트 ＃9"(811)가 선택 해제된 그 순간과 연계될 것이다.
도 8c는 미디어 점프 오버레이(102)가 스와이프 상호작용에 대해, 즉, 사용자가 미디어 점프 링크(100)를 왼쪽 또는 오른쪽으로 스와이프할 때 어떻게 반응하는지를 예시한다. 풀 모션 미디어(103)의 사용자 재생 동안, 입력 장치(501)가 특정 미디어 점프 링크, 예컨대, "텍스트 ＃9"(811)를 스와이프할 때, 이 선택은 북마크를 만드는 옵션이 붙은 재생 옵션 윈도우(playback options window)(821)를 열고, 추가 정보 또는 사용자 선택중의 디폴트 행위를 액세스한다. (재생 옵션 윈도우(821)에서 도시된 옵션은 예시적인 목적을 위한 것이며, 사용자에 의해 다르게 구성될 수 있다.) 관리 목적상 재생 중에, 편집 모드(822)에 있는 동안, 입력 장치(501)가 특정 미디어 점프 링크, 예를 들면, "텍스트 ＃9"(811)를 스와이프할 때, 이 선택은 "미디어 점프 링크 에디터(media jump link editor)"(825)(도시되지 않음)를 나타나게 할 것이다. 미디어 점프 링크 에디터(825)는 사용자의 편집물을 국부적으로 저장하며/하거나 네트워크 연결 및 대역폭이 이용가능하고, CPU 사이클 또한 이용가능할 때 (도 9에 도시된) 네트워크 서버(904)에 전송할 것이고, 그럼으로써 멀티미디어의 "실시간" 재생 요건을 유지하게 된다.
도 9는 본 발명이 어떻게 로컬 스토리지(901) 또는 데이터 네트워크(902)로부터 사용자/관리용 데이터 전달/검색(user/admin data transfer/retrieval)(903)을 수행하고, 관리 메타데이터 전달(administrative metadata transfers)(905)을 다시 반대로 데이터 네트워크(902)에 송신하는지를 도시하는 도면이다. 본 발명은 로컬 스토리지(901), 데이터 네트워크(902)로부터 데이터를 검색할 수 있고, 또는 심지어 그러한 데이터를 사용자 입력에 기반하여 (일련의 이벤트가 동적으로 계산되는 GPS 네비게이션 시스템에서와 같이, 심지어는 수차례까지) 계산할 수 있으며, 관리 메타데이터 전달(905)을 반대로 다시 데이터 네트워크(902)에 송신할 수 있다. 본 발명에 의해 생성된, 관리 메타데이터라고 명명되는, 타이밍 및 편집 결과는 콘텐트 작성자의 기기의 로컬 스토리지(901)에서 캐시되고 저장될 수도 있고, 또는 데이터 네트워크(902)를 거쳐 관리적 메타데이터 전달(905)을 매개로 네트워크 서버(904)에 업로드될 수도 있다.
도 10은 데이터가 어떻게 미디어 점프 링크를 미디어 파일(1001)과 연계된 시간으로 점프할 수 있게 포맷될 수 있는지를 도시한다. 오디오, 비디오, 및 이와 연관된 미디어 점프 링크를 잘 보여주고 전달을 용이하게 하기 위하여, 사용자는 로컬 스토리지로부터 또는 데이터 네트워크를 거쳐 네트워크 서버(도 9 참조)로부터, 또는 HTTP Download, FTP 또는 어떤 다른 고객 프로토콜과 같은 데이터 검색 메커니즘을 매개로 하여 미디어 파일(1001) 및 미디어 점프 링크 데이터 패키지(media jump link data package)(1002)를 로드할 수도 있다. 미디어 파일(1001) 및 미디어 점프 링크 데이터 패키지(1002)와 같은 데이터에는 언어, 사투리, 주제, 주석, 시간 코드, 임의의 스트링 태그, 경도, 위도, 장소 이름, 네비게이션 텍스트, 네비게이션 그래픽스, 및 명령 아이콘 등과 같은 부가적인 세부사항이 담겨 있을 수 있다. 미디어 점프 링크 데이터 패키지(1002)는 콘텐트 분배를 위해 미디어 파일(1001) 내에 내장될 수도 있다.
도 11은 정보가 어떻게 로컬 스토리지를 통해 또는 네트워크를 통해 검색되고 어떻게 온스크린에 렌더링되는지를 도시한다. 이 경우, 미디어 파일(1001)은 온스크린 비디오(1110)로서 렌더링될 것이며, 하나 이상의 미디어 점프 링크 데이터 엔트리들을 포함하는 미디어 점프 링크 데이터 패키지(1002)는 풀 모션 미디어(103)를 통해 미디어 점프 오버레이(102) 상에서 렌더링된다. 미디어 점프 링크(100)의 다른 실시예들이 또한 도 11에 도시된다. 전형적인 멀티미디어 오디오 및 비디오 재생 상황에서 사용하기 위한 멀티미디어 오디오 및 비디오 재생 미디어 점프 링크(multimedia audio and video playback media jump link)(1120)가 도시된다. 또한, 네비게이션 프로그램에서 사용하기 위한 텍스트 및 비주얼 네비게이션 도움 미디어점프 링크(text and visual navigation aid media jump link)(1121)가 도시되며, 이 링크는 스크린의 방해를 줄이기 위해 좁은 폭으로 도시된다. 쿡킹 쇼와 같은 교육용 비디오에서 사용하기 위한 텍스트 및 그래픽스 미디어 점프 링크(text and graphics media jump link)(1122)가 도시된다. 자연스럽게 온라인에서 브라우징하거나 또는 데스크탑 PC를 사용하는 사용자는 네트워크 서버(도 9 참조)로부터 데이터를 "스트림(stream)" 받기를 선호할 수도 있으며, 그럼으로써 이 제품의 "온-디맨드(on-demand)" 시청이 가능해진다. 그러나, 모바일 사용자는 기기가 네트워크상에 있지 않을 때에도 확실하게 액세스 가능하도록 모든 정보가 기기 자체에 국부적으로 설치되는 것을 선호할 수도 있다.
도 12a는 검색 기능이 관심의 미디어 점프 링크로의 빠른 네비게이션을 어떻게 가능하게 해주는지를 도시한다. 사용자가 찾으려는 미디어 점프 링크를 빨리 찾지 못할 때, 사용자는 검색 기능을 불러와서 원하는 요소를 찾을 수 있다. 이것은 미디어 점프 오버레이(102)의 상단에서 검색 용어 양식(search term form)(1220) 및 추가 검색 용어 양식(additional search term form)(1221)을 나타나게 함으로써 이루어진다. 추가 검색 용어 양식(1221)은 방언과 같은 공용 필터, 또는 심지어는 화자, 감정, 및 주제 등을 선택하는 디스플레이 체크박스, 라디오 버튼 또는 선택 메뉴를 포함할 수도 있다. 디스플레이의 상단을 터치함으로써 실행될 스크롤링 층의 상단으로 빠르게 점프하는 것은 일반적이다. 사용자가 희망하는 검색 용어를 타이핑할 때, 본 발명은 각 미디어 점프 링크 데이터 요소별로 구성가능한 데이터 집합을 통해 검색할 것이다. 검색을 불러오는 버튼은 필요하지 않다. 도 12a의 예를 들면, 미디어 점프 링크 데이터 패키지(1002) 내에는 다섯 가지의 미디어 점프 링크 데이터 요소들이 도시된다. 두 번째 미디어 점프 링크 데이터 요소(1211) 및 다섯 번째 미디어 점프 링크 데이터 요소(1212)는 둘 다 검색 문자열(string) "log"와 일치할 것이다. 그러나, 다섯 번째 미디어 점프 링크 데이터 요소(1212)만이 "joyful"이라는 적절한 태그와 "cantonese"이라는 방언을 가지고 있다. 그래서 다섯 번째 미디어 점프 링크 데이터 요소(1212)만이 미디어 점프 링크 결과 양식(media jump link result form)(1222)에서 온스크린에 렌더링된다. 또한, 도 12a는 사용자가 입력 장치(501)를 사용하여 미디어 점프 링크 결과 양식(1222)을 선택하고, 그러면 다섯째 기본 미디어 점프 링크 데이터 요소(1212) 및 이와 연계된 시간(1232)(본 예에서는 "1:23")을 사용자에게 보여주는 것을 도시한다.
도 12b는 또한 검색 기능이 어떻게 미디어 점프 링크와의 각종 상호작용에 대응하는지를 도시한다. 이 예에서, 입력 장치(501)는 탭에 의한 기능 호출 검색 결과(function called search result tapped)(1233)를 수행하는 미디어 점프 링크 결과 양식(1222) (도 12a 참조)을 선택한다. 탭에 의한 검색 결과(search result tapped)(1233)는 미디어를 미디어 점프 링크 결과 양식(1222)에 연계된 시간으로 점프하게 하며, 디스플레이는 동기화된 정상 미디어 점프 오버레이로 리턴한다. 입력 장치(501)가 미디어 점프 링크 결과 양식(1222)에 머물고 있을 때는 호출 검색 결과 유보(called search result held)(1234)라는 기능이 수행되고, 이 기능은 실제로 재생을 그 위치로 점프시키지 않고 미디어 점프 링크 결과 양식(1222)에 연계된 시작 시간부터 미디어를 임시 재생시킨다. 입력 장치(501)의 미디어 점프 링크 결과 양식(1222)에서 해제 시에는 재생이 중단된다.
전술한 모든 것은 신규하고 비자명한 것이며, 전술한 본 발명을 가능하게 하는 각종 플랫폼에 관한 통상의 프로그래밍 지식이 사용되었음을 이해하여야 한다.

Claims (20)

  1. 멀티미디어와의 링크를 생성하고 네비게이션하기 위한 방법에 있어서,
    컴퓨터 기기가 미디어를 상연하는 단계와,
    상기 컴퓨터가 미디어 점프 층(media jump layer)을 디스플레이하는 단계, 및
    상기 컴퓨터가 미디어 점프 링크를 상기 미디어 점프 층에 배치하는 단계를 포함하는 방법.
  2. 제 1 항에 있어서,
    상기 미디어 점프 층은 상기 상연 중인 미디어의 상부에 있는 미디어 점프 오버레이(media jump overlay)인 방법.
  3. 제 1 항에 있어서,
    상기 미디어 점프 층을 가시적으로 변형하는 단계를 더 포함하는 방법.
  4. 제 1 항에 있어서,
    상기 미디어 점프 링크를 가시적으로 변형하는 단계를 더 포함하는 방법.
  5. 제 1 항에 있어서,
    상기 미디어 점프 링크는 가시적 요소를 포함하는 방법.
  6. 제 1 항에 있어서,
    상기 미디어점프 링크는 상기 미디어 내 한 지점에 대응하는 방법.
  7. 제 1 항에 있어서,
    상기 미디어 내 시간을 상기 미디어 점프 링크에 할당하는 단계를 더 포함하는 방법.
  8. 제 1 항에 있어서,
    상기 미디어 점프 링크는 텍스트 캡션(text caption)인 방법.
  9. 제 6 항에 있어서,
    상기 미디어 점프 링크는 상기 미디어 내 음성과 동기되는 방법.
  10. 제 3 항에 있어서,
    상기 미디어 점프 층을 가시적으로 변형하는 단계는,
    상기 미디어 점프 층의 불투명도를 변경하는 단계;
    상기 미디어 점프 층을 위치 재설정하는 단계;
    상기 미디어 점프 층을 크기 재조정하는 단계;
    상기 미디어 점프 층을 가시적으로 만드는 단계; 및
    상기 미디어 점프 층을 비가시적으로 만드는 단계로 이루어진 그룹 중에서 선택되는 방법.
  11. 제 4 항에 있어서,
    상기 미디어 점프 링크를 가시적으로 변형하는 단계는,
    상기 미디어 점프 링크의 불투명도를 변경하는 단계;
    상기 미디어 점프 링크를 위치 재설정하는 단계;
    상기 미디어 점프 링크를 크기 재조정하는 단계;
    상기 미디어 점프 링크를 가시적으로 만드는 단계;
    상기 미디어 점프 링크를 비가시적으로 만드는 단계로 이루어진 그룹 중에서 선택되는 방법.
  12. 제 1 항에 있어서,
    상기 미디어 점프 링크와 상호작용하여 상기 미디어의 재생 시간을 변경하는 단계를 더 포함하는 방법.
  13. 제 1 항에 있어서,
    상기 미디어 점프 링크와 상호작용하여 정보를 디스플레이하는 단계를 더 포함하는 방법.
  14. 제 2 항에 있어서,
    상기 미디어 점프 층을 가시적으로 변형하는 단계를 더 포함하는 방법.
  15. 제 2 항에 있어서,
    상기 미디어 점프 링크를 가시적으로 변형하는 단계를 더 포함하는 방법.
  16. 제 3 항에 있어서,
    상기 미디어 점프 링크를 가시적으로 변형하는 단계를 더 포함하는 방법.
  17. 제 2 항에 있어서,
    상기 미디어 점프 링크는 가시적 요소를 갖는 방법.
  18. 제 3 항에 있어서,
    상기 미디어 점프 링크는 가시적 요소를 갖는 방법.
  19. 제 4 항에 있어서,
    상기 미디어 점프 링크는 가시적 요소를 갖는 방법.
  20. 멀티미디어와의 링크를 생성하고 네비게이션하기 위한 방법에 있어서,
    컴퓨터 기기가 미디어를 상연하는 단계와,
    상기 컴퓨터가 미디어 점프 층을 디스플레이하는 단계, 및
    상기 컴퓨터가 미디어 점프 링크를 상기 미디어 점프 층에 배치하는 단계를 포함하고,
    상기 미디어 점프 층은 상기 상연 중인 미디어의 상부에 있는 미디어 점프 오버레이이며,
    상기 방법은,
    상기 미디어 점프 층을 가시적으로 변형하는 단계를 더 포함하고,
    상기 미디어 점프 링크를 가시적으로 변형하는 단계를 더 포함하고,
    상기 미디어 점프 링크는 가시적 요소를 가지고,
    상기 미디어 점프 링크는 상기 미디어 내 한 지점에 대응하며,
    상기 방법은,
    상기 미디어 내 시간을 상기 미디어 점프 링크에 할당하는 단계를 더 포함하고,
    상기 미디어 점프 링크는 텍스트 캡션이고,
    상기 미디어 점프 링크는 상기 미디어 내 음성과 동기되고,
    상기 미디어 점프 층을 가시적으로 변형하는 단계는,
    상기 미디어 점프 층의 불투명도를 변경하는 단계;
    상기 미디어 점프 층을 위치 재설정하는 단계;
    상기 미디어 점프 층을 크기 재조정하는 단계;
    상기 미디어 점프 층을 가시적으로 만드는 단계;
    상기 미디어 점프 층을 비가시적으로 만드는 단계로 이루어진 그룹 중에서 선택되며,
    상기 방법은,
    상기 미디어 점프 링크와 상호작용하여 상기 미디어의 재생 시간을 변경하는 단계를 더 포함하고,
    상기 미디어 점프 링크와 상호작용하여 정보를 디스플레이하는 단계를 더 포함하고,
    상기 미디어 점프 링크는 가시적 요소를 갖는 방법.
KR1020137009046A 2010-08-23 2011-08-22 링크 기반 멀티미디어를 생성하고 네비게이션하는 방법 KR20130128381A (ko)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US37589710P 2010-08-23 2010-08-23
US61/375,897 2010-08-23
US12/906,072 US20120047437A1 (en) 2010-08-23 2010-10-15 Method for Creating and Navigating Link Based Multimedia
US12/906,072 2010-10-15
PCT/US2011/048615 WO2012027270A1 (en) 2010-08-23 2011-08-22 Method for creating and navigating link based multimedia

Publications (1)

Publication Number Publication Date
KR20130128381A true KR20130128381A (ko) 2013-11-26

Family

ID=45595037

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020137009046A KR20130128381A (ko) 2010-08-23 2011-08-22 링크 기반 멀티미디어를 생성하고 네비게이션하는 방법

Country Status (4)

Country Link
US (1) US20120047437A1 (ko)
JP (1) JP2013536528A (ko)
KR (1) KR20130128381A (ko)
WO (1) WO2012027270A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022030824A1 (ko) * 2020-08-04 2022-02-10 삼성전자 주식회사 오디오 재생 및 화면 표시 방법 및 그 장치

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8572488B2 (en) * 2010-03-29 2013-10-29 Avid Technology, Inc. Spot dialog editor
US20130334300A1 (en) * 2011-01-03 2013-12-19 Curt Evans Text-synchronized media utilization and manipulation based on an embedded barcode
US20130177891A1 (en) * 2011-07-02 2013-07-11 Joachim Hammerschmidt Audio-visual learning system
CN103021439B (zh) * 2011-09-27 2016-06-15 腾讯科技（深圳）有限公司 一种精确定位文件播放进度的方法和装置
US8856675B1 (en) * 2011-11-16 2014-10-07 Google Inc. User interface with hierarchical window display
KR101901910B1 (ko) * 2011-12-23 2018-09-27 삼성전자주식회사 선택 영역을 변화시키는 결과 영상을 생성 또는 저장하는 장치 및 방법
JP6044553B2 (ja) * 2012-02-10 2016-12-14 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
KR101462253B1 (ko) * 2012-03-08 2014-11-17 주식회사 케이티 동적으로 메뉴를 생성하는 메뉴 데이터 생성 서버 및 방법, 그리고 메뉴 데이터를 표시하는 단말
US9733794B1 (en) * 2012-03-20 2017-08-15 Google Inc. System and method for sharing digital media item with specified start time
US9953034B1 (en) 2012-04-17 2018-04-24 Google Llc System and method for sharing trimmed versions of digital media items
US10389779B2 (en) 2012-04-27 2019-08-20 Arris Enterprises Llc Information processing
US9386357B2 (en) * 2012-04-27 2016-07-05 Arris Enterprises, Inc. Display of presentation elements
CN104756484B (zh) * 2012-11-01 2018-02-23 索尼公司 信息处理设备、重放状态控制方法及计算机可读记录介质
US20140195961A1 (en) * 2013-01-07 2014-07-10 Apple Inc. Dynamic Index
US9380324B2 (en) 2013-01-23 2016-06-28 Steven Schoenwald Video content distribution package
US9767854B2 (en) 2013-01-23 2017-09-19 Steven Schoenwald Video content distribution package
US9471334B2 (en) * 2013-03-08 2016-10-18 Intel Corporation Content presentation with enhanced closed caption and/or skip back
US9317486B1 (en) 2013-06-07 2016-04-19 Audible, Inc. Synchronizing playback of digital content with captured physical content
KR102108893B1 (ko) * 2013-07-11 2020-05-11 엘지전자 주식회사 이동 단말기
KR102243653B1 (ko) 2014-02-17 2021-04-23 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법
US10162506B2 (en) 2014-07-18 2018-12-25 Apple Inc. Systems and methods for selecting portions of media for a preview
WO2016034218A1 (en) * 2014-09-03 2016-03-10 Arcelik Anonim Sirketi Image display device with subtitle processing function
US20160189712A1 (en) * 2014-10-16 2016-06-30 Veritone, Inc. Engine, system and method of providing audio transcriptions for use in content resources
CN104967910B (zh) * 2014-10-29 2018-11-23 广州酷狗计算机科技有限公司 多媒体播放进度控制方法及装置
US9961275B2 (en) * 2015-09-12 2018-05-01 The Aleph Group Pte, Ltd Method, system, and apparatus for operating a kinetic typography service
CN105611371A (zh) * 2015-12-22 2016-05-25 深圳市金立通信设备有限公司 一种多媒体播放方法及终端
CN107105087B (zh) * 2017-03-27 2019-12-03 Oppo广东移动通信有限公司 消息播放方法、装置及计算机设备
US10127825B1 (en) * 2017-06-13 2018-11-13 Fuvi Cognitive Network Corp. Apparatus, method, and system of insight-based cognitive assistant for enhancing user's expertise in learning, review, rehearsal, and memorization
US10999638B2 (en) * 2019-01-17 2021-05-04 Adobe Inc. Content-based navigation for recordings
US11126344B2 (en) * 2019-01-22 2021-09-21 Facebook, Inc. Systems and methods for sharing content
US11675563B2 (en) * 2019-06-01 2023-06-13 Apple Inc. User interfaces for content applications
JP7387334B2 (ja) * 2019-08-23 2023-11-28 キヤノン株式会社 撮像制御装置および撮像制御装置の制御方法
CN117597682A (zh) 2021-01-29 2024-02-23 苹果公司 用于共享内容项部分的用户界面和相关联系统及方法

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6076059A (en) * 1997-08-29 2000-06-13 Digital Equipment Corporation Method for aligning text with audio signals
EP1099218B1 (en) * 1998-07-20 2002-09-04 Thomson Licensing S.A. Digital video apparatus user interface
KR100326400B1 (ko) * 1999-05-19 2002-03-12 김광수 자막지향 탐색정보 생성 및 탐색방법과, 이를 사용하는 재생장치
US6442518B1 (en) * 1999-07-14 2002-08-27 Compaq Information Technologies Group, L.P. Method for refining time alignments of closed captions
JP2003018491A (ja) * 2001-07-04 2003-01-17 Sony Corp 字幕表示装置および方法
US6981227B1 (en) * 2002-02-04 2005-12-27 Mircrosoft Corporation Systems and methods for a dimmable user interface
US20040177317A1 (en) * 2003-03-07 2004-09-09 John Bradstreet Closed caption navigation
US7787753B2 (en) * 2003-04-09 2010-08-31 Lg Electronics Inc. Recording medium having a data structure for managing reproduction of text subtitle data and methods and apparatuses of recording and reproducing
JP2005303742A (ja) * 2004-04-13 2005-10-27 Daikin Ind Ltd 情報処理装置および情報処理方法、プログラム、並びに、情報処理システム
US8065604B2 (en) * 2004-12-30 2011-11-22 Massachusetts Institute Of Technology Techniques for relating arbitrary metadata to media files
US20070074116A1 (en) * 2005-09-29 2007-03-29 Teleios, Inc. Multi-pane navigation/synchronization in a multimedia presentation system
US9697230B2 (en) * 2005-11-09 2017-07-04 Cxense Asa Methods and apparatus for dynamic presentation of advertising, factual, and informational content using enhanced metadata in search-driven media applications
US9395905B2 (en) * 2006-04-05 2016-07-19 Synaptics Incorporated Graphical scroll wheel
US20090024922A1 (en) * 2006-07-31 2009-01-22 David Markowitz Method and system for synchronizing media files
JP2008180786A (ja) * 2007-01-23 2008-08-07 Sanyo Electric Co Ltd ナビゲーションシステムおよびナビゲーション装置
US9602757B2 (en) * 2007-09-04 2017-03-21 Apple Inc. Display of video subtitles
JP4839488B2 (ja) * 2007-12-07 2011-12-21 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 字幕付映像再生装置及びその方法、プログラム
US8875023B2 (en) * 2007-12-27 2014-10-28 Microsoft Corporation Thumbnail navigation bar for video
US20090177966A1 (en) * 2008-01-06 2009-07-09 Apple Inc. Content Sheet for Media Player
US20100077292A1 (en) * 2008-09-25 2010-03-25 Harris Scott C Automated feature-based to do list
US8375316B2 (en) * 2009-12-31 2013-02-12 Verizon Patent And Licensing Inc. Navigational transparent overlay
DE112011101422T5 (de) * 2010-04-21 2013-02-07 Research In Motion Limited Verfahren zum Interagieren mit einem scrollbaren Bereich auf einer tragbaren elektronischen Vorrichtung

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022030824A1 (ko) * 2020-08-04 2022-02-10 삼성전자 주식회사 오디오 재생 및 화면 표시 방법 및 그 장치

Also Published As

Publication number Publication date
WO2012027270A1 (en) 2012-03-01
JP2013536528A (ja) 2013-09-19
US20120047437A1 (en) 2012-02-23

Similar Documents

Publication Publication Date Title
KR20130128381A (ko) 링크 기반 멀티미디어를 생성하고 네비게이션하는 방법
CN1830018B (zh) 绑定交互式的多信道数字文档系统
CA2251340C (en) Time-segmented multimedia game playing and authoring system
US5697789A (en) Method and system for aiding foreign language instruction
US20080007570A1 (en) Digital Content Playback
US10642463B2 (en) Interactive management system for performing arts productions
US20050071736A1 (en) Comprehensive and intuitive media collection and management tool
US8739019B1 (en) Computer-implemented methods and computer program products for integrating and synchronizing multimedia content, including content displayed via interactive televisions, smartphones, electronic book readers, holographic imagery projectors, and other computerized devices
US20060277588A1 (en) Method for making a Web-DVD
US20050069225A1 (en) Binding interactive multichannel digital document system and authoring tool
US20020193895A1 (en) Enhanced encoder for synchronizing multimedia files into an audio bit stream
WO2005055085A1 (en) Visualization and control techniques for multimedia digital content
KR20050121664A (ko) 비디오 기반 언어 학습 시스템
US9087508B1 (en) Presenting representative content portions during content navigation
US9122656B2 (en) Interactive blocking for performing arts scripts
US20130205213A1 (en) Caption-based navigation for a video player
US9870134B2 (en) Interactive blocking and management for performing arts productions
CN101072312B (zh) 包含交互式图形流的信息存储介质的再现设备和方法
Seidel Making web video accessible: interaction design patterns for assistive video learning environments
KR101663098B1 (ko) 어학 학습용 콘텐츠 재생 시스템 및 그 방법
JP2004325905A (ja) 外国語学習装置および外国語学習プログラム
Harnett Learning Articulate Storyline
WO2020023070A1 (en) Text-to-speech interface featuring visual content supplemental to audio playback of text documents
WO2013096701A1 (en) Systems and methods involving features of creation/viewing/utilization of information modules
USRE47059E1 (en) Computer-implemented methods and computer program products for integrating and synchronizing multimedia content, including content displayed via interactive televisions, smartphones, electronic book readers, holographic imagery projectors, and other computerized devices

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid