KR100801396B1 - 영상 음성 기록 재생 장치, 영상 음성 기록 방법 및 영상음성 재생 방법 - Google Patents

영상 음성 기록 재생 장치, 영상 음성 기록 방법 및 영상음성 재생 방법 Download PDF

Info

Publication number
KR100801396B1
KR100801396B1 KR1020067007101A KR20067007101A KR100801396B1 KR 100801396 B1 KR100801396 B1 KR 100801396B1 KR 1020067007101 A KR1020067007101 A KR 1020067007101A KR 20067007101 A KR20067007101 A KR 20067007101A KR 100801396 B1 KR100801396 B1 KR 100801396B1
Authority
KR
South Korea
Prior art keywords
audio
recording
information
additional information
video
Prior art date
Application number
KR1020067007101A
Other languages
English (en)
Other versions
KR20060096026A (ko
Inventor
다이스케 하야시
히데아키 미타
도루 야마시타
Original Assignee
마츠시타 덴끼 산교 가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 마츠시타 덴끼 산교 가부시키가이샤 filed Critical 마츠시타 덴끼 산교 가부시키가이샤
Publication of KR20060096026A publication Critical patent/KR20060096026A/ko
Application granted granted Critical
Publication of KR100801396B1 publication Critical patent/KR100801396B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/322—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is digitally coded
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)

Abstract

영상 음성 기록 재생 장치는, 영상, 음성의 메인 정보를 입력하는 영상·음성 입력부(100)와, 메인 정보에 부가되는 음성 부가 정보(보이스 메모)를 입력하는 음성 부가 정보 입력부(110)와, 영상, 음성 데이터의 기록, 재생을 실행하는 기록 재생부(140)와, 영상, 음성 데이터를 기록하는 기록매체(150)와, 각부(各部)의 동작을 제어하는 제어부(120)를 구비한다. 제어부(120)는, 음성 부가 정보를, 메인 정보에서의 특정 프레임 위치에 연관시켜 기록매체(150)에 기록한다. 특정 프레임 위치는, 타임 코드나 오프셋(메인 정보의 선두로부터의 프레임 수) 등에 의해 지정된다.
영상 음성, 부가 정보, 프레임 위치, 연관

Description

영상 음성 기록 재생 장치, 영상 음성 기록 방법 및 영상 음성 재생 방법{VIDEO/AUDIO RECORDER/REPRODUCER, VIDEO/AUDIO RECORDING METHOD AND REPRODUCING METHOD}
본 발명은, 메모리 기록 카메라-리코더(memory recordable camera-recorder) 등의 영상 음성의 기록 재생 장치 및 방법에 관한 것으로, 특히, 영상 및 음성의 메인 정보에 음성 부가(附加) 정보를 연관시켜(relating) 기록하고, 재생하는 장치 및 방법에 관한 것이다.
카메라 일체형 VTR로 촬영 녹화한 취재 완료된 테이프를 바탕으로, 프로그램을 제작할 경우에는, 촬영 녹화된 많은 컷(cut)(신(scene))으로부터 필요한 장면만을 편집해서 1개의 프로그램을 제작하는 작업이 일반적으로 실행되고 있다.
이와 같은 편집 작업을 실행하는 종래의 비선형(非線形) 편집 장치는, 소재가 되는 취재 완료된 테이프에 기록된 영상 및 음성 등의 정보를, 하드 디스크와 같은 랜덤 액세스가 가능한 기록매체에 취입하고, 이 하드 디스크에 취입한 영상 및 음성을 랜덤하게 액세스하면서 편집을 실행한다.
이 편집 작업을 효율적으로 실행하기 위해서, 편집자는 각각의 컷의 촬영 내용이 어떤 것인가를 확인할 필요가 있다. 이를 위해, 종래에는 각각의 컷의 선두 (先頭)에, 그 컷의 내용을 설명하는 문자 타이틀 등의 정지 화상을, 소위 크레디트(credit)(편집을 보조하기 위한 부가 정보)로서 촬영하여 삽입하고, 하드 디스크에 기록하고 있었다. 그 후의 편집 시에, 이 기록한 정지 화상의 크레디트를 재생해서 모니터에 표시함으로써, 각각의 컷에 어떤 내용이 촬영되어 있는가를 용이하게 파악할 수 있다.
(발명이 해결하려고 하는 과제)
상기한 바와 같이, 각각의 컷의 선두에, 그 내용을 설명하는 문자 타이틀 등의 크레디트를 촬영해 삽입하는 작업은 번거로워서, 더욱 간단히 각각의 컷의 내용을 파악할 수 있는 방법이 요망되고 있었다.
이것에 대하여 일본국 특허공개 2001-136482호 공보에서는, 각각의 컷의 촬영 내용을 알기 위한 수단으로서, 영상 및 음성의 메인 정보와는 별도로, 음성에 의한 부가 정보(보이스 메모(voice memo))를 상기 메인 정보에 연관시켜 기록 재생하는 방법이 제안되어 있다.
그러나, 상기 특허 문헌에서는, 부가 정보(보이스 메모)를 각각의 컷의 소재와 연관시키는 개념에 대해서는 설명되어 있지만, 메모리 기록 카메라 리코더 등에 적용할 때의 구체적인 방법에 대해서는 언급되어 있지 않다. 또한, 메인 정보의 재생 중 외에는 보이스 메모를 기록할 수 없다고 하는 문제점이 있었다.
(그 해결 방법)
본 발명은 상기 과제를 해결하기 위해서 이루어진 것으로서, 영상 음성 기록 재생 장치에 있어서 각각의 컷에 대하여 부가 정보를 부가할 때의 구체적인 방법을 제안한다.
본 발명의 제1특징에 있어서, 영상 음성 기록 재생 장치는, 영상 및 음성의 메인 정보를 입력하는 영상 음성 입력부와, 메인 정보에 부가되는 음성 부가 정보를 입력하는 음성 부가 정보 입력부와, 메인 정보 및 음성 부가 정보를 출력하는 영상 음성 출력부와, 메인 정보 및 음성 부가 정보를 기록하는 기록매체와, 메인 정보 및 음성 부가 정보를, 기록매체에 기록 또는 기록매체로부터 재생하는 기록 재생부와, 영상 음성 입력부, 음성 부가 정보 입력부, 영상 음성 출력부, 기록 재생부의 동작을 제어하는 제어부를 구비한다. 제어부는 음성 부가 정보를 메인 정보에 있어서의 특정 프레임 위치에 연관시켜 기록매체에 기록하도록 제어한다.
본 발명의 제2특징에 있어서, 영상 음성 기록 방법은, 영상 및 음성의 메인 정보를 입력하고, 메인 정보에 부가되는 음성 부가 정보를 입력하고, 음성 부가 정보를 메인 정보에 있어서의 특정 프레임 위치에 연관시켜서 기록매체에 기록한다.
본 발명의 제3특징에 있어서, 상기 영상 음성 기록 방법에 의해 메인 정보와 음성 부가 정보가 기록된 기록매체의 재생 방법은, 메인 정보의 섬네일 화상(thumbnail image)을 표시하고, 동일한 메인 정보에 1개 이상의 음성 부가 정보가 연관되어 있어, 1개 이상의 음성 부가 정보 중 어느 1개가 선택되었을 때에, 선택된 음성 부가 정보가 연관된 프레임 위치에 있는 메인 정보의 섬네일 화상(thumbnail image)을 표시한다.
본 발명의 제4특징에 있어서, 상기의 영상 음성 기록 방법에 의해 메인 정보와 음성 부가 정보가 기록된 기록매체의 재생 방법은, 음성 부가 정보를 메인 정보의 시간 축과 동기(同期)를 맞추지 않고 재생한다.
(종래 기술보다 유리한 효과)
본 발명에 의하면, 영상 및 음성의 메인 정보의 내용 등을 설명하기 위한 음성 부가 정보(보이스 메모)를, 메인 정보의 특정 프레임 위치에 연관시켜 기록할 수 있으며, 메인 정보 내의 시간 축 상의 한 점에서 복수의 보이스 메모를 기록할 수 있다.
또한, 메인 정보에 있어서의 특정 프레임 위치를 메인 정보의 선두로부터의 프레임 수(數)로 지정해도 좋으며, 이것에 의해, 소재 데이터의 타임 코드(time code)가 불연속인 경우라도 음성 부가 데이터를 소재 데이터의 일의(一意)의 위치에 연관시킬 수 있다.
또한, 연속으로 기록된 소재 데이터(클립(clip))마다 음성 부가 정보를 연관시켜도 좋으며, 이것에 의해, 음성 부가 정보를 신(scene) 각각의 메모로서 이용할 수 있다.
또한, 기록매체 전체에 연관시킨 음성 부가 데이터를 기록해도 좋으며, 그 기록매체에 어떤 숏(shot)이 기록되어 있는지를 음성 부가 데이터로서 연관시킴으로써, 다른 기록매체와의 구별이 용이하게 된다.
또한, 복수의 기록매체에 걸쳐서 기록된 메인 정보(숏)에 있어서, 기록매체마다 음성 부가 데이터를 연관시켜도 좋으며, 이것에 의해, 일부의 기록매체가 제외되어도 나머지의 기록매체에 기록되어 있는 메인 정보에 연관된 음성 부가 데이터를 기록, 재생할 수 있다.
또한, 메인 정보의 기록을 종료했을 때에 음성 부가 정보의 기록을 종료시켜도 좋으며, 이것에 의해, 사용자에 의한 소재 데이터의 기록 종료 시에 음성 부가 데이터의 기록을 종료하는 수고가 생략된다.
또한, 음성 부가 정보를 메인 정보의 음성 데이터와는 다른 샘플링 레이트(sampling rate) 또는 비트 레이트(bit rate)로 기록해도 좋으며, 예를 들면, 음성 부가 정보를 더욱 낮은 레이트로 기록함으로써, 음성 부가 데이터의 기록 가능 시간을 증가시킬 수 있다.
또한, 음성 부가 정보를 메인 정보의 음성 데이터와는 다른 파일 포맷(file format)으로 기록해도 좋으며, 예를 들면, 메인 정보를 편집기 전용의 포맷으로, 음성 부가 정보를 범용 PC용의 포맷으로 기록함으로써, PC 상에서도 음성 부가 데이터를 재생할 수가 있다.
또한, 기록매체에 음성 부가 정보를 기록하기 위한 영역을 미리 확보해 두어도 좋으며, 메인 정보의 빈 용량(vacant capacity)이 없어져도 음성 부가 데이터의 기록을 확보할 수 있다.
또한, 메인 정보의 기록 중, 기록 일시 정지 중, 기록 정지 중, 재생 중, 재생 일시 정지 중, 재생 정지 중의 어느 쪽의 상태로부터도, 음성 부가 정보를 기록할 수 있도록 해도 좋으며, 이것에 의해, 편집 작업이 용이하게 된다.
또한, 음성 부가 정보가 연관되어 있는 메인 정보를 삭제한 경우, 삭제된 메인 정보에 연관된 음성 부가 정보도 동시에 삭제하도록 해도 좋으며, 불필요한 음성 부가 데이터의 삭제 실패를 막을 수 있다.
또한, 동일한 메인 정보에 1개 이상의 음성 부가 정보가 연관되어 있을 경우에, 1개 이상의 음성 부가 정보 중 하나가 선택되었을 때에, 그 선택된 음성 부가 정보가 연관된 프레임 위치에 있는 메인 정보의 섬네일 화상을 표시하도록 해도 좋으며, 이것에 의해, 필요한 음성 부가 정보를 탐색하는 것이 용이하게 된다.
또한, 음성 부가 정보의 재생 시에, 음성 부가 정보에 연관된 메인 정보의 섬네일 또는 메인 정보 중의 영상 정보를 표시해도 좋으며, 음성 부가 정보의 재생 중에 메인 정보를 확인할 수가 있다.
또한, 1개의 음성 부가 정보가 선택되었을 때에, 선택된 음성 부가 정보와 연관되어 있는 메인 정보의 프레임 위치로부터 메인 정보를 재생할 수 있도록 해도 좋으며, 음성 부가 정보를 키(key)로 하여 검색한 후에, 연관된 메인 정보를 즉시 확인할 수 있으므로 편집의 작업 효율이 상승한다.
또한, 음성 부가 정보를 재생 중에, 재생 중의 음성 부가 정보와 연관되어 있는 메인 정보의 프레임 위치로부터 메인 정보를 재생할 수 있도록 해도 좋으며, 음성 부가 정보를 키로 하여 검색한 후에, 연관된 메인 정보를 즉시 확인할 수 있으므로 편집의 작업 효율이 상승한다.
또한, 음성 부가 정보의 기록 시작 시의 상태를 나타내는 정보를 포함한, 음성 부가 정보에 관한 관리 정보를 가져도 좋으며, 이 관리 정보를 참조해서 여러 가지 방법으로 음성 부가 정보를 재생할 수가 있다.
또한, 음성 부가 정보를 메인 정보의 시간 축과 비동기로 메인 정보와 연관시켜서 기록해도 좋으며, 이것에 의해, 음성 부가 정보의 재생 제어가 용이하게 된다.
도 1은 본 발명의 제1실시형태에 있어서의 영상 음성 기록 재생 장치의 구성을 나타낸 도면.
도 2는 보이스 메모의, 클립 내의 특정 위치에 대한 연관을 설명하기 위한 도면.
도 3은, 보이스 메모 파일과 클립의 관계를 나타내는 관리 정보의 예(보이스 메모 관리 테이블)를 나타낸 도면.
도 4는 클립과 그 클립을 구성하는 소재 파일(영상, 음성 파일)의 관계를 나타내는 관리 정보의 예(클립 관리 테이블)를 나타낸 도면.
도 5는 보이스 메모 재생 중에, 보이스 메모 데이터에 연관된 메인 콘텐츠 데이터의 데이터(클립)를 재생할 때의 처리 흐름도.
도 6은 클립 재생 중에, 클립에 연관되어 있는 보이스 메모를 재생할 때의 처리 흐름도.
도 7은 본 발명의 제2실시형태에 있어서의, 복수의 기록매체를 갖는 영상 음성 기록 재생 장치의 구성을 나타낸 도면.
도 8은 복수의 기록매체에 걸쳐서 기록된 숏 내의 특정 위치에 대한, 보이스 메모의 연관을 설명하는 도면.
도 9는 기록 재생 장치에 있어서의 조작부의 예를 나타낸 도면.
도 10은 보이스 메모의 기록 동작의 흐름도.
도 11은 클립 리스트 화면의 표시 예를 나타내는 도면.
도 12는 보이스 메모 클립 리스트 화면의 표시 예를 나타내는 도면.
도 13은 보이스 메모의 재생 동작의 흐름도.
도 14는 보이스 메모 재생 중인 화면의 표시 예를 나타내는 도면.
도 15는 기록매체 내의 콘텐츠 디렉토리 구성을 나타낸 도면.
도 16은 클립 정보를 관리하는 태그(tag)를 설명한 도면.
도 17은 클립 파일의 XML 기술(記述)의 예를 나타낸 도면.
이하에, 첨부 도면을 이용해서 본 발명에 따른 영상 음성 기록 재생 장치의 바람직한 실시형태에 대해서 상세히 설명한다.
(제1실시형태)
도 1은, 본 발명에 따른 메모리 기록 카메라 리코더의 개략 구성을 나타내는 블록도이다.
영상·음성 입력부(100)는 음성 정보 및 영상 정보를 메인 정보로서 입력한다. 영상 정보는 촬상(撮像) 소자나 재생 장치 등을 통하고, 또한, 음성 정보는 마이크나 재생 장치 등을 통해서 입력할 수 있지만, 영상, 음성 정보를 입력할 수 있다면 그 수단은 문제 삼지 않는다. 여기서, "메인 정보(main informaiton)"라는 것은, 음성 부가 정보가 부가될 수 있는 대상이 되는 영상·음성 정보를 말하고, "메인 콘텐츠 데이터[main content data, 본편(本編)]"이라고도 부른다.
압축 확장 회로(101)는, 영상·음성 입력부(100)에서 입력한 영상, 음성의 메인 정보를 데이터 압축해서 영상, 음성 데이터의 메인 데이터로서 기록 재생부(140)에 출력하든가, 혹은, 기록 재생부(140)로부터 재생된 영상, 음성의 메인 데이터 및 음성 부가 데이터를 데이터 확장해서 영상, 음성의 메인 정보 및 음성 부가 정보로서 영상·음성 출력부(102)에 출력한다.
영상·음성 출력부(102)는, 압축 확장 회로(101)로부터의 영상, 음성의 메인 정보 및 음성 부가 정보를 외부에 출력한다.
보이스 메모 마이크(voice memo microphone)(110)는 음성 부가 정보 입력 수단이며, 보이스 메모를 음성 부가 정보로서 입력한다. 또한, 음성 부가 정보 입력 수단으로서는, 카메라 리코더에 마이크를 설치하는 대신에 간단히 음성 입력 단자를 설치해 두고, 거기에 마이크 등의 입력 수단을 접속해서 사용하도록 해도 좋다. 보이스 메모 처리 회로(111)는, 보이스 메모 마이크(110)에서 입력한 음성 부가 정보를 데이터 변환, 데이터 압축해서 음성 부가 데이터로서 기록 재생부(140)에 출력한다.
제어부(120)는, 기록 재생부(140) 및 표시부(121) 등의 각부(各部)의 동작을 제어한다. 표시부(121)는, 제어부(120)에 의해 지정된 보이스 메모 번호 및 섬네일(대표 화상) 등을 표시한다. 조작부(130)는, 기록 버튼, 재생 버튼, 보이스 메모 재생 버튼 등을 갖추고, 이것들로부터 사용자의 조작을 외부로부터 받는다. 기록 재생부(140)는, 압축 확장 회로(101)로부터의 영상과, 음성의 메인 데이터와, 보이스 메모 처리 회로(111)로부터의 음성 부가 데이터를 기록매체(150)에 기록하고, 또한, 기록매체(150)로부터 재생되는 영상, 음성의 메인 데이터 및 음성 부가 데이터를 압축 확장 회로(101)에 출력한다.
기록매체(150)는, 기록 재생부(140)로부터의 영상, 음성의 메인 데이터나 음성 부가 데이터 등을 기록하는 랜덤 액세스 가능한 기록매체이다. 기록매체(150)는 랜덤 액세스 가능한 기록매체라면 그 종류를 막론하고, 내장형, 외장형형, 착탈(着脫) 가능형 등의 제한도 없고, 복수로 존재해도 좋다. 예를 들면, 하드 디스크, 광 디스크, 광 자기 디스크, 반도체 메모리 등을 고려할 수 있다. 본 실시예에서는, 단지 하나의 기록매체만 존재하는 경우를 상정하기로 한다.
소재 데이터(material data)를 구성하는 영상 및 음성 각각의 메인 데이터가 단일 기록매체(150)에서 연속해서 기록되어 있는 경우에 있어서, 그 기록된 일련의 데이터 단위를 "클립(clip)"이라고 부른다(또한, 1개의 소재 데이터가 복수의 기록매체에 걸쳐서 기록되는 경우에 대해서는 후술함).
영상의 메인 데이터 및 음성의 메인 데이터가 동일 파일로서 기록매체(150)에 기록되어 있는 경우, 클립은 1개의 소재 파일로서 구성되지만, 영상의 메인 데이터 및 음성의 메인 데이터가 상이한 별도의 파일로서 기록매체(150)에 기록되어 있는 경우는, 클립은 복수의 소재 파일로서 구성되는 일도 있다. 본 실시형태에서는, 영상의 메인 데이터와 음성의 메인 데이터가 별도의 파일로서 기록매체(150)에 기록되어 있으며, 하나의 클립에 있어서, 영상의 메인 데이터는 1개의 영상 파일로 구성되고, 음성의 메인 데이터는 복수 채널의 음성 파일로서 구성되어 있는 것으로 한다. 이하에, 영상의 메인 데이터를 간단히 "영상 데이터", 음성의 메인 데이터를 간단히 "음성 데이터"라고 부른다.
보이스 메모 마이크(110)로부터 입력한 음성 정보는 보이스 메모 처리 회로(111)에 의해 음성 부가 데이터로 변환되어서 출력된다. 이 음성 부가 데이터를 "보이스 메모 데이터"라고 부른다.
기록 재생부(140)가 기록매체(150)에 데이터를 기록할 때, 이 보이스 메모 데이터는 클립 중의 타임 코드와 연관되어 기록된다. 연관되는 타임 코드는, 클립 내의 최초의 프레임에 관한 타임 코드라도 좋고, 임의의 중간 프레임에 관한 타임 코드라도 좋다.
보이스 메모 데이터를 클립의 타임 코드와 연관시켜 기록함으로써, 하나의 클립에 대하여 복수의 보이스 메모를 기록할 수 있게 된다. 또한, 소재 데이터의 프레임 단위에서의 상세한 위치에 연관시키는 것이 가능하게 된다. 편집 시에는, 보이스 메모를 청취함으로써, 원하는 소재 데이터의 위치를 용이하게 찾을 수 있다고 하는 효과를 얻을 수 있다.
또한, 보이스 메모 데이터를 클립의 타임 코드가 아니라, 클립의 프레임 오프셋(frame offset)(선두로부터의 프레임 수)에 연관시켜도 좋다.
도 2를 참조하고, 보이스 메모 데이터와, 클립의 프레임 오프셋과의 연관에 대해서 구체적으로 설명한다.
클립(400) 내의 하나의 프레임(프레임 오프셋=4)에 연관시켜서 보이스 메모 #1(411)이 기록되어 있다. 또한, 보이스 메모 #1(411)이 연관된 프레임보다 뒤의 프레임(프레임 오프셋=8)에 보이스 메모 #2(412)가 연관되어 기록되어 있다. 보이 스 메모 #1(411)의 종료 시각보다도 보이스 메모 #2(412)의 연관된 프레임 오프셋의 위치 시각이 빨라도 좋다. 또한, 보이스 메모 #2(412)를 연관시킨 프레임(프레임 오프셋=8)과 완전히 동일한 프레임에 연관시켜 다른 보이스 메모 #3(413)을 기록해도 좋다.
이와 같이, 보이스 메모의 기록 시간은, 메인 콘텐츠 데이터를 구성하는 소재 클립의 기록 시간에는 직접 영향을 주지 않는다. 즉, 보이스 메모는 연관된 클립의 프레임 오프셋 상의 한 점에 기록되어 있다고 볼 수 있다. 따라서, 소재 클립보다도 긴 시간의 보이스 메모를 기록하는 것도 가능하다. 단, 보이스 메모의 기록 시간의 상한(上限)은, 후술하는 바와 같이, 그 설정 시간 이내이어야 한다.
여기서, 보이스 메모 데이터를 클립의 특정한 프레임 오프셋 값, 예를 들면, 클립의 선두 프레임에 연관시켜도 좋으며, 이때는, 그 보이스 메모는 클립 전체에 연관된 것으로 정의해도 좋다. 이렇게 클립 전체와 연관시킴으로써, 보이스 메모를 키(key)로 한 클립 단위에서의 검색이 용이하게 된다고 하는 효과를 얻을 수 있다.
또한, 보이스 메모 데이터를 클립의 프레임 오프셋과 연관시켜 기록함으로써, 클립 내의 타임 코드가 불연속적인 경우라도 한결같이 연관시킬 수 있다고 하는 효과를 얻을 수 있다.
클립의 프레임 오프셋과 보이스 메모 데이터를 연관시키는 방법으로서는, 예를 들면, 도 3에 나타내는 바와 같은 클립과 보이스 메모 파일의 관계를 나타내는 관리 테이블(이하, "보이스 메모 관리 테이블"이라고 함)과, 도 4에 나타내는 바와 같은 클립과 그 소재 파일(영상·음성 데이터 파일)의 관계를 나타내는 관리 테이 블(이하, "클립 관리 테이블"이라고 함)을 이용하는 것을 고려할 수 있다. 또한, 도 3 및 도 4는, 보이스 메모 데이터를 클립의 프레임 오프셋과 연관시킨 경우의 관리 테이블을 나타내고 있다.
도 3에 나타내는 보이스 메모 관리 테이블(20)에 있어서, 클립명(200)은 클립의 ID를 나타낸다. 또한, 동일한 기록매체 내에서 전체 클립은 유일한 ID를 갖고 있다. 프레임 오프셋(201)은, 클립의 선두로부터의 프레임 수이다. 메모 ID(202)는, 동일한 클립에 연관된 복수의 보이스 메모에 대하여 부가된 유일한 ID이다. 보이스 메모 파일명(203)은 보이스 메모 파일의 파일 이름이며, 동일한 클립 내에서 전체 보이스 메모 파일명은 유일한 파일 이름을 갖고 있다.
도 4에 나타내는 클립 관리 테이블(30)에 있어서, AV 타입(301)은, 메인 콘텐츠 데이터를 구성하는 클립(소재 파일)의 타입이 영상 데이터인지 음성 데이터인지를 나타내는 정보이다. 채널 번호(302)는, 음성 데이터라면 그 채널 번호를 지정하고, 영상 데이터라면 특별히 지정하지 않아도 좋다. 소재 파일명(303)은, 클립을 구성하는 소재 파일로서의 영상 데이터 또는 음성 데이터의 유일한 파일명이다.
이하에, 도 5의 흐름도를 이용하여, 보이스 메모의 재생 중에, 그 보이스 메모 데이터에 연관된 메인 데이터(클립)를 재생할 때의 처리를 설명한다. 또한, 클립과 보이스 메모는 도 2 및 도 3의 관리 정보를 통해서 연관되어 있다.
재생 중인 보이스 메모의 보이스 메모 파일명은 동일한 클립 내에서 유일하다. 따라서, 보이스 메모 관리 테이블(20)을 참조하고, 보이스 메모 파일명을 키로 하여, 거기에 연관된 클립명, 프레임 오프셋을 구한다(S11). 이어서, 클립 관리 테 이블(30)을 참조하고, 구해진 클립명의 클립을 구성하는 모든 소재 파일의 파일명(소재 파일명(303))을 취득한다(S12). 즉, 소재 파일명을, 클립을 구성하고 있는 파일의 수만큼 취득한다. 여기서 얻은 각각의 소재 파일명을 갖는 데이터 파일의 각각에 대해서, 먼저 구한 프레임 오프셋이 나타내는 위치에서부터 재생을 시작한다(S13). 이와 같이 관리 정보(20, 30)를 참조함으로써, 보이스 메모와 메인 콘텐츠 데이터(클립) 사이의 대응을 인식할 수 있어, 보이스 메모의 재생 중에 그 보이스 메모에 연관되는 클립을 재생할 수 있다.
이어서, 도 6의 흐름도를 이용하여, 클립을 재생 중에, 그 클립에 연관되어있는 보이스 메모를 재생할 때의 처리에 대해 설명한다.
클립 관리 테이블(30)을 참조하고, 현재 재생 중인 클립의 클립명을 취득한다(S21). 그리고, 보이스 메모 관리 테이블(20)을 참조하고, 그 취득한 클립명에 연관되어 있는 메모 ID, 그 메모 ID에 대응하는 보이스 메모 파일명을 취득한다(S22). 취득한 보이스 메모 파일명으로 나타나는 보이스 메모 데이터를 재생한다(S23). 재생하는 보이스 메모의 구체적인 지정 방법 등에 대해서는 후술한다.
상술한 방법에 의해, 관리 정보(20, 30)를 이용해서 클립과 보이스 메모 데이터를 연관시킬 수 있다. 또한, 보이스 메모를 클립 내의 타임 코드나 프레임 오프셋과 연관시키므로, 하나의 클립에 대하여 복수의 보이스 메모 데이터를 연관시킬 수 있다. 또한, 특정한 클립의 동일한 프레임 오프셋 상에 복수의 보이스 메모를 연관시키는 것도 가능하다.
또한, 본 실시형태에서는, 압축 확장 회로(101)에 의해, 영상, 음성 정보를 압축하고, 영상, 음성 데이터를 확장하고 있지만, 압축, 확장을 실행하지 않고 비압축 데이터인 영상, 음성 정보를 그대로 다루어도 좋다.
또한, 본 실시형태에서는, 클립 내의 프레임 오프셋과 보이스 메모 데이터를 연관시키는 수단으로서, 도 3 및 도 4에 나타내는 관리 테이블을 이용했지만, 그것들의 연관이 실현된다면 다른 수단이라도 좋다.
또한, 본 실시형태에서는, 보이스 메모를 클립의 프레임 오프셋이나 타임 코드에 연관시켰지만, 보이스 메모를 클립 내에서의 특정한 시간 축 상의 위치에 연관시킬 수 있다면, 즉, 클립 내의 프레임 위치를 특정할 수 있는 정보라면, 보이스 메모가 연관되는 곳은 클립의 프레임 오프셋이나 타임 코드가 아니어도 좋다.
여기서, 본 발명의 보이스 메모와 종래의 편집 장치에 의한 애프터 리코딩(after recording) 기능에 의해 기록되는 음성 정보와의 차이에 대해서 설명한다.
종래의 편집기 등에서는, 미리 촬영한 영상, 음성의 데이터에 대하여, 애프터 리코딩에 의해 음성 데이터를 추가 기록하고, 그것을 영상 데이터에 대한 음성 데이터로 간주해서 재생하는 경우가 있다. 이 경우, 애프터 리코딩에 의해 추가 기록한 음성 데이터는, 최초의 촬영 시에 기록한 영상 데이터와 동기를 맞추어서 재생하는 것을 전제로 해서 기록된다. 따라서, 애프터 리코딩에 의해 음성 데이터를 추가 기록할 때는, 영상 데이터를 재생해 동기를 맞추어서 음성 데이터를 추가 기록하는 것이 일반적이다.
이에 반해, 본 발명에서의 보이스 메모는, 클립(소재 데이터)이 무엇인지를 나타내기 위한 메모 정보이며, 영상, 음성의 메인 데이터와의 동기 재생이 필수적인 것은 아니다. 따라서, 보이스 메모 기록 시의 메인 데이터의 상태에 제한이 없고, 메인 데이터가, 정지 중, 재생 중, 특수 재생 중 등(고배속 탐색 재생, 역재생 등), 여러 가지 상태에서도 보이스 메모를 기록할 수 있다.
즉, 보이스 메모는, 메인 데이터의 시간 축의 특정한 한 점에 연관되는 것이며, 메인 데이터와 동기를 맞추지 않고 기록할 수 있다.
또한, 음성 데이터를 애프터 리코딩에 의해 추가 기록할 경우, 추가 개수는, 기기의 음성 출력 채널의 수로 제한된다. 예를 들면, 음성을 4채널까지만 출력할 수 있는 기기에 대해서는, 음성은 최대 4채널밖에 기록할 수 없다. 이에 반해, 본 발명의 보이스 메모는, 음성의 출력 채널 수와는 무관하게, 메인 데이터의 동일한 시간 축의 위치에 복수의 보이스 메모를 연관시켜 기록할 수 있다.
(제2실시형태)
제1실시형태에서는, 메모리 기록 카메라 리코더가 단지 1개의 기록매체(150)만을 구비하고 있는 경우를 상정했지만, 본 실시형태에서는, 기록매체(150)가, 도 7에 나타낸 바와 같이, 착탈 가능한 복수의 기록매체(기록매체 #1(501), 기록매체 #2(502), 기록매체 #3(503))로 구성되는 경우를 설명한다.
본 실시형태에 있어서, 복수의 기록매체에 걸쳐서 영상, 음성의 메인 데이터가 연속해서 기록되어 있는 경우에, 그 기록 데이터 단위를 "숏(shot)"이라고 부른다. 예를 들면, 1개의 숏의 소재를 1개의 기록매체에 기록한 경우에는, 그 숏은 1개의 클립으로 된다. 한편, 1개 숏의 소재를 복수의 기록매체에 걸쳐서 기록하면, 각각의 기록매체마다 별도의 클립이 작성되는 것으로 된다. 이 경우, 보이스 메모 데이터는 분할된 클립마다 연관된다.
도 8을 이용하여, 복수의 기록매체에 걸쳐서 기록되는 1개의 숏(600)에 대한 보이스 메모의 부가에 대해서 상세히 설명한다.
숏(600)은, 기록매체 #1(501)로부터 기록이 개시되어, 기록매체 #2(502)를 걸쳐서 기록매체 #3(503)에서 기록이 종료되었다고 한다. 이 때, 숏(600)은, 기록매체 #1(501) 내의 클립 #1(611), 기록매체 #2(502) 내의 클립 #2(612), 기록매체 #3(503) 내의 클립 #3(613)으로 분할되어서 기록되어 있다.
본 실시형태에서는, 숏(600) 내의 어느 특정한 위치에 연관시켜 보이스 메모 데이터를 기록할 경우, 보이스 메모 데이터는, 그것이 부가되는 실체 데이터가 기록되어 있는 기록매체와 동일한 기록매체에 기록된다. 예를 들면, 보이스 메모를 연관시키고 싶은 위치가 클립 #1(611) 내의 데이터일 경우, 그 보이스 메모 데이터(보이스 메모 #1(621))는 기록매체 #1(501) 상에 기록된다. 마찬가지로, 보이스 메모를 연관시키고 싶은 위치가 클립 #2(612) 내의 데이터일 경우, 그 보이스 메모 데이터는 기록매체 #2(502) 상에 기록된다(보이스 메모 #2(622)). 이 때, 보이스 메모 #2(622)의 종료 시각은 클립 #2(612)의 종료 시각 이후라도 좋다. 그러나, 이 경우, 보이스 메모 #2(622)는 기록매체 #2(502)로부터 기록매체 #3(503)에 걸치지 않고, 연관된 위치의 메인 콘텐츠 데이터가 기록되어 있는 기록매체(즉, 여기서는 기록매체 #2(502))와 동일한 기록매체 상에 기록되게 된다. 또한, 마찬가지로, 보이스 메모를 연관시키고 싶은 위치가 클립 #3(613) 내의 데이터일 경우, 그 보이스 메모 데이터(보이스 메모 #3(623))는 기록매체 #3(503) 상에 기록된다. 그 때, 보이스 메모 #3(623)의 종료 시각은 숏(600)의 종료 시각 이후라도 좋다.
이와 같이 보이스 메모 데이터는, 그것이 연관되는, 클립의 프레임 오프셋의 메인 콘텐츠 데이터가 기록되어 있는 기록매체 상에 기록한다. 또한, 보이스 메모 데이터의 기록 시간은 제1실시형태와 마찬가지로, 보이스 메모의 기록 시간의 상한 이내이어야 한다.
상기의 방법을 이용해서 보이스 메모 데이터와 클립 내의 데이터의 연관을 실행함으로써, 각각의 기록매체에서 메인 콘텐츠 데이터와 보이스 메모를 연관시킨 상태에서 재생할 수 있다. 예를 들면, 기록매체 #3(503)이 제거된 경우라도, 클립 #1(611) 내의 데이터에 연관되어 있는 보이스 메모 #1(621)과, 클립 #2(612) 내의 데이터에 연관되어 있는 보이스 메모 #2(622)는 재생할 수 있는 효과를 얻을 수 있다.
또한, 제1실시형태에서는, 보이스 메모 데이터를 영상 또는 음성 데이터를 포함하는 클립에 연관시켰지만, 무효인 영상 및 음성 데이터로서 구성되는 클립(이하에 "더미 클립(dummy clip)"이라고 함)을 작성하고, 이 더미 클립에 보이스 메모 데이터를 연관시켜도 좋다. 그리고, 더미 클립에 연관된 보이스 메모 데이터는, 기록매체 전체에 연관된 것으로 해도 좋다.
예를 들면, 어떤 영상, 음성 데이터가 기록된 기록매체 전체에, 그 기록매체에 어떤 데이터가 기록되어 있는지를 나타내는 보이스 메모 데이터를 연관시킴으로써, 그 기록매체를 다른 기록매체와 구별하는 것이 용이하게 되는 효과를 얻을 수 있다.
더미 클립에는, 본래, 영상, 음성 데이터는 필요 없지만, 더미 클립의 무효인 영상 데이터로서 블루 백(blue back) 영상 데이터를 이용하면, 기존의 클립과 마찬가지로 관리할 수 있게 된다. 클립이 더미 클립인지 아닌지의 판단을 하기 위해서는, 예를 들면, 클립이 더미 클립인지 아닌지의 여부를 나타내는 플래그를 도 3의 관리 테이블에 부가해 두면 좋다. 그리고, 더미 클립 작성 시에는 이 플래그를 셋업(set up)시킨다.
(제3실시형태)
본 실시형태에서는, 보이스 메모의 기록 처리에 대해서 간단히 설명한다.
도 9에, 보이스 메모를 기록, 재생할 때에 사용자가 조작하는 조작부(130)의 예를 나타낸다. 조작부(130) 상에는 보이스 메모 기록 버튼(1101), 선택 버튼(1102), 결정 버튼(1103)이 설치되어 있다.
보이스 메모 기록 버튼(1101)은 보이스 메모의 기록을 시작할 때와, 보이스 메모의 기록을 종료할 때에 이용된다. 보이스 메모가 기록되어 있지 않은 상태에서 보이스 메모 기록 버튼(1101)이 눌려지면, 보이스 메모의 기록 동작이 시작된다. 또한, 보이스 메모가 기록되어 있는 상태에서 보이스 메모 기록 버튼(1101)이 눌려지면, 보이스 메모의 기록 동작이 종료된다. 또한 보이스 메모 기록 버튼(1101)은, 기록 개시용의 버튼 및 기록 종료용의 버튼으로 각각 나누어서 구성해도 좋다.
선택 버튼(1102)은, 예를 들면, 클립의 섬네일(대표 화상) 리스트(list)에서의 커서의 이동 및 각종 옵션 항목에서의 커서 이동 등을 실행하기 위한 버튼이다.
결정 버튼(1103)은 선택을 결정하기 위한 버튼이다. 예를 들면, 어떤 보이스 메모가 선택되어 있는 상태에서 결정 버튼(1103)을 누르면, 그 보이스 메모의 재생이 개시된다. 또한, 조작부(130)에는 도시하지 않은 각종의 버튼이 존재해도 좋다.
도 10을 이용하여, 보이스 메모를 기록해서 클립에 연관시킬 때까지의 처리의 흐름을 설명한다.
사용자에 의해 보이스 메모 비기록 상태에서 보이스 메모 기록 버튼(1101)이 눌려지면, 보이스 메모의 기록 동작이 시작된다. 이 때, 우선, 기록해야 할 보이스 메모를 연관시키는 클립의 클립명 및 프레임 오프셋을 취득하고, 그것들의 정보를 기억해 둔다(S31). 또한, 보이스 메모를 연관시키는 클립이나 프레임 오프셋의 구체적인 결정 방법은 후술한다(제5실시형태 참조). 또한, 이 때, 관리 테이블(20, 30)을 참조하고, 동일한 클립에서 중복되지 않도록 메모 ID 및 파일명을 결정하고, 기억해 둔다(S32). 또한, 파일명의 결정 방법 등은 후술한다(제7실시형태 참조). 그리고, 보이스 메모의 기록이 개시된다(S33).
그 후, 보이스 메모 기록 동작 중에, 사용자의 보이스 메모 기록 버튼(1101)의 누름에 의한 기록 정지 조작의 유무를 판단한다(S34). 기록 정지 조작이 있으면, 보이스 메모의 기록을 종료한다(S35). 이 때, 보이스 메모 기록 시작 시에 기억해 둔 보이스 메모 연관 목적지(destination)의 클립명, 프레임 오프셋, 메모 ID, 파일명 등의 연관된 정보를, 도 3에 나타내는 바와 같은 관리 테이블에 기록한다(S36).
(제4실시형태)
본 실시형태에서는, 보이스 메모의 구체적인 기록 방법에 대해서 설명한다.
보이스 메모는 소재 데이터가 무엇인지를 나타내기 위한 메모 정보이며, 기록 후에 편집이 실행되는 것은 거의 없다. 또한, 보이스 메모는 소재의 음성 데이터와 다르고, 고음질은 요구되지 않는 것으로 고려한다. 따라서, 보이스 메모의 샘플링 레이트(sampling rate) 및 비트 레이트(bit rate)를 소재의 음성 데이터에 비해서 낮은 레이트로 기록한다. 이것에 의해 보이스 메모의 파일 크기가 작아지게 되어, 효율적으로 된다.
예를 들면, 소재의 음성 데이터의 샘플링 레이트를 48kHz, 보이스 메모의 샘플링 레이트를 8kHz로 해서 기록한다. 또한, 소재의 음성 데이터의 비트 레이트를 16bps(Bits Per Sample), 보이스 메모의 비트 레이트를 8bps로 해서 기록한다. 이것에 의해, 보이스 메모는 소재의 음성 데이터의 1/12의 크기로 기록할 수 있으므로, 한정된 용량의 기록매체 등에서는, 소재의 영상, 음성 데이터를 더욱 많게 기록할 수 있게 된다.
또한, 보이스 메모의 파일 포맷은, 소재의 음성 데이터의 파일 포맷과 상이한 것을 이용할 수 있다.
예를 들면, 메인 콘텐츠 데이터의 음성 데이터의 포맷으로서는 소재 교환용 포맷인 MXF(Material Exchange Format), 보이스 메모의 포맷으로서는 범용 PC에서 이용되고 있는 WAVE를 이용한다.
메인 콘텐츠 데이터의 음성 데이터는, 편집을 실행하는 것을 전제로 하므로, MXF와 같은 소재 교환용 포맷을 이용하면, 편집기 등에서의 편집이 용이하게 되어, 편집 효율이 상승한다. 또한, 보이스 메모에 WAVE와 같은 범용 PC에서 취급되는 포맷을 이용하면, 후술하는 섬네일(대표 화상) 등을 이용함으로써, 실제의 소재 데이터를 보지 않더라도 PC 상에서 타이틀 삽입 등의 간이 편집이 가능하게 되는 효과를 얻을 수 있다.
이하에, 소재 데이터 및 보이스 메모를 기록매체에 기록할 경우에 대해서 구체적으로 설명한다. 또한, 보이스 메모의 음질을 약간 높게 설정하는 것을 상정하고, 각각의 데이터의 파라미터는 아래와 같이 한다.
프레임 레이트: 30fps(Frames Per Second),
메인 콘텐츠 데이터의 영상 데이터의 프레임 크기: 120kB,
메인 콘텐츠 데이터의 음성 데이터의 샘플링 레이트: 48kHz,
보이스 메모의 샘플링 레이트: 12kHz,
메인 콘텐츠 데이터의 음성 데이터의 비트 레이트: 16bps,
보이스 메모의 비트 레이트: 16bps,
여기서, 클립은 영상 데이터 1채널(1ch), 음성 데이터 2채널(2ch)로 구성되어 있는 것으로 한다. 이 때, 클립의 1초당 데이터 크기는,
(120kB×30fps)+ ((48kHz)×16bps/8bit)×2ch=3.792MB （식 1)
이 된다.
또한, 보이스 메모 1초당 데이터 크기는,
12kHz ×16bps/8bit=24kB （식 2)
가 된다.
또한, 여기서는 설명의 간략화를 위해, 소재 데이터 파일 및 보이스 메모 파일의 데이터부 이외의 부분[헤더(header)나 후터(footer)부 등]의 기록은 고려하지 않기로 한다.
또한, 기록매체에, 미리 보이스 메모 기록 전용의 영역을 확보해 두도록 해도 좋다.
예를 들면, 기록매체에 5분간(300초) 분량의 보이스 메모 기록용 영역을 확보한다. 보이스 메모를 5분간(300초) 기록하는 데에 필요한 기록 용량은, (식 2)로부터,
24kB ×300초=7.2MB （식 3)
가 된다. 즉, 보이스 메모를 5분간(300초) 기록하는 데에 필요한 기록 용량(7.2MB)은, 클립을 약 1.9초(약 57프레임) 기록하는 기록 용량에 상당한다.
여기서, 기록 용량이 1GB인 기록매체에 클립만을 기록할 경우, 즉, 보이스 메모 기록 영역을 확보하지 않을 경우의 기록 가능 시간을 계산하면, (식 1)로부터,
1GB/3.792MB ＝ 약 264초 (식 4)
가 된다. 기록 용량이 1GB인 기록매체에서 미리 5분간(300초) 분량의 보이스 메모의 기록 영역을 확보했을 경우는, 클립의 기록 가능 시간은 약 262초가 된다. 즉, 5분간(300초) 분량의 보이스 메모의 기록 영역을 확보해도, 기록 가능 시간은 확보하지 않은 경우에서 거의 변하지 않는다.
따라서, 기록매체에 미리 보이스 메모의 기억 영역을 확보해 두어도, 소재 데이터의 기록 가능 시간에 거의 영향을 주지 않는다고 말할 수 있다. 또한, 미리 확보해 둔 기억 영역에, 만일 보이스 메모를 기록하지 않아도, 기록매체의 사용 효율도 거의 낭비가 없다.
또한, 도 8에 나타낸 바와 같이, 클립 #2(612) 및 보이스 메모 #2(622)를 기록매체 #2(502) 상에 기록하고 있을 때, 기록매체 #2(502) 상의 메인 콘텐츠 데이터용의 빈 영역이 없게 되고, 메인 콘텐츠 데이터의 나머지를 기록매체 #3(503) 상에 클립 #3(613)으로서 기록을 속행한 경우라도, 기록매체 #2(502)에 미리 확보하고 있었던 보이스 메모 전용의 기록 영역이 남아 있으면, 보이스 메모 #2(622)를 기록매체 #2(502) 상에 기록할 수 있는 효과를 얻을 수 있다.
또한, 상기의 예에서는, 보이스 메모의 최대 기록 가능 시간을 5분으로 설명했지만, 그 값은 5분이 아니어도 좋으며, 사용자가 임의로 설정할 수 있도록 해도 좋다. 또한, 보이스 메모 기록 전용 영역의 용량을 보이스 메모 기록 시간으로 설정했지만, 기록매체의 전체 용량에 대한 보이스 메모 기록 영역의 비율을 설정해도 좋다. 또한, 확보하는 용량을 바이트(Byte) 단위 등으로 직접 설정해도 좋다.
(제5실시형태)
본 실시형태에서는, 보이스 메모의 기록 처리에 대한 여러 가지의 변화에 대해서 설명한다.
보이스 메모는, 영상·음성인 메인 정보의 기록 중, 기록 일시 정지 중, 기록 정지 중, 재생 중, 재생 일시 정지 중, 재생 정지 중의 어느 쪽의 상태에 있어서도 기록을 시작할 수 있다. 복수의 상태로부터 보이스 메모를 기록할 수 있으므 로, 보이스 메모 기록의 편리성이 상승한다고 하는 효과를 얻을 수 있다. 이하에, 각각의 상태에 있어서의 보이스 메모의 기록 방법에 대해서 설명한다.
최초에, 메인 정보의 기록(촬영) 중에 보이스 메모를 기록하는 방법에 대해서 설명한다.
메인 정보를 기록(촬영) 중에, 사용자에 의해 조작부(130)에 설치된 보이스 메모 버튼이 눌려지면, 보이스 메모 마이크(110)로부터 입력된 음성 신호가 보이스 메모 처리 회로(111)에 의해 데이터 변환되어, 보이스 메모로서 기록매체(150)에 기록된다. 그 때, 이 보이스 메모는 보이스 메모 버튼을 누른 시점에 기록된 클립의 프레임 오프셋에 연관되게 된다. 이 연관은 관리 정보의 등록, 갱신에 의해 실행된다. 이 방법에 의해, 메인 정보의 촬영과 보이스 메모의 기록을 동시에 기록할 수 있고, 메인 정보 촬영 후에 다시 새롭게 보이스 메모를 기록할 필요가 없게 된다.
또한, 보이스 메모 기록 중에 클립이 바뀌었을 때, 즉, 현재 기록하고 있는 기록매체의 메인 정보 기록용의 빈 용량이 0이 되어, 별도의 기록매체에 메인 정보의 나머지를 기록할 때는, 제2실시형태에 나타낸 바와 같이, 보이스 메모는, 그 보이스 메모의 기록 시작 시의 기록매체 상에 그대로 계속해서 기록된다. 이것에 의해, 보이스 메모가 연관된 클립이 기록되어 있는 기록매체 이외의 기록매체가 제거되어도, 그 보이스 메모를 재생할 수가 있다.
이어서 메인 정보의 기록 일시 정지 중에 보이스 메모를 기록하는 방법에 대해서 설명한다.
메인 정보의 기록 일시 정지 중에 보이스 메모 버튼이 눌려지면, 보이스 메모 마이크(110)로부터 입력된 음성 신호를 데이터 변환하고, 보이스 메모로서 기록매체에 기록한다. 이와 함께, 이 보이스 메모는, 클립 내의 기록 일시 정지 중인 위치의 클립의 프레임 오프셋에 연관된다. 이 방법에 의해, 전술한 기록 중에 보이스 메모 버튼이 눌렸을 경우와 마찬가지로, 메인 콘텐츠 데이터 촬영 후에 보이스 메모를 기록할 필요가 없어진다는 효과가 있다.
이어서 메인 정보의 기록 정지 중에 보이스 메모를 기록하는 방법에 대해서 설명한다.
메인 정보의 기록 동작 중에 기록 동작을 정지하고, 보이스 메모 버튼이 눌려지면, 보이스 메모 마이크(110)로부터 입력된 음성 신호가 데이터 변환되어, 보이스 메모로서 기록된다. 이 때, 이 보이스 메모는, 최후에 기록된 숏 전체에 연관된다. 숏이 복수의 클립으로 나누어져 기록된 경우, 보이스 메모는, 최후에 기록된 클립 전체에 연관된다. 이것에 의해, 메인 정보 기록(영상 촬영) 후에 보이스 메모를 기록할 수 있으므로, 기록 중에는 메인 정보의 기록(영상 촬영)에 집중할 수 있다.
또한, 메인 정보의 기록 정지 중에 보이스 메모 버튼이 눌렸을 경우, 다음에 촬영되는 숏에 보이스 메모를 연관시켜 기록하도록 해도 좋다. 이 때, 더미 클립을 일시적으로 작성하고, 그 더미 클립 전체에 보이스 메모를 연관시킨다. 그 후, 촬영이 재개되면, 기록한 보이스 메모를 촬영 중인 클립에 연관되게 고치고, 더미 클립을 삭제한다. 만약 다음의 촬영이 개시되지 않으면, 기록한 보이스 메모를 삭제 한다. 이 방법에 의해, 메인 정보의 기록 전에 보이스 메모를 기록할 수 있으므로, 기록 중에는 영상의 촬영에 집중할 수 있다.
메인 정보 기록 후에 보이스 메모를 기록할지, 메인 정보 기록 전에 보이스 메모를 기록할지는, 사용자의 용도에 맞춰서 설정을 변경할 수 있도록 해도 좋다.
이어서 메인 정보의 재생 중에 보이스 메모를 기록하는 방법에 대해서 설명한다.
메인 정보의 재생 중에 보이스 메모 버튼이 눌려지면, 보이스 메모 마이크(110)로부터 입력된 음성이 데이터 변환되어, 보이스 메모로서 기록매체에 기록된다. 이 때, 이 보이스 메모는, 보이스 메모 버튼을 누른 시점에 재생 중인 클립의 프레임 오프셋에 연관된다. 이 방법에 의해, 메인 정보 기록 후에, 메인 정보의 영상을 확인하면서 보이스 메모를 연관시킬 수 있으므로, 소정의 신(scene)의 더욱 정확한 위치에 연관시킬 수 있다.
이어서 메인 정보의 재생 일시 정지 중에 보이스 메모를 기록하는 방법에 대해서 설명한다.
메인 정보의 재생 일시 정지 중에 보이스 메모 버튼이 눌려지면, 보이스 메모 마이크(110)로부터 입력된 음성은 데이터 변환되어, 보이스 메모로서 기록된다. 이 때, 이 보이스 메모는, 클립 내의 재생 일시 정지 중에서의 위치인 클립의 프레임 오프셋에 연관된다. 이 방법에 의해, 재생 중에 보이스 메모 버튼이 눌려졌을 때와 마찬가지로, 기록 후에 메인 정보를 확인하면서 보이스 메모를 연관시킬 수 있으므로, 소정의 신의 더욱 정확한 위치에 연관시킬 수 있는 효과를 얻을 수 있 다.
이어서 메인 정보의 정지 중에 보이스 메모를 기록하는 방법에 대해서 설명한다.
메인 정보의 재생 후의 정지 중에 보이스 메모 버튼이 눌려졌을 경우, 정지 위치가 숏의 도중이었을 경우는, 보이스 메모 마이크(110)로부터 입력된 음성 신호가 데이터 변환되어 보이스 메모로서 기록된다. 이 때, 이 보이스 메모는 그 숏 전체에 연관된다. 또한, 숏이 복수의 클립으로 나누어져 기록되어 있을 경우에는, 정지 위치를 포함하는 클립 전체에 연관된다. 이 방법에 의해, 편집 중에 숏 또는 클립 전체에 연관시켜 보이스 메모를 기록할 수 있고, 보이스 메모를 키(key)로 한 클립 단위의 검색이 용이하게 되는 효과를 얻을 수 있다.
또한, 1개 이상의 보이스 메모가 연관되어 있는 클립을 삭제했을 경우, 클립에 연관되어 있는 보이스 메모도 동시에 삭제하도록 한다. 이 조작에 의해, 보이스 메모를 지우는 수고를 생략할 수 있는 동시에, 불필요하게 된 보이스 메모의 삭제를 잊어버리는 것을 방지할 수 있는 효과를 얻을 수 있다.
또한, 메인 정보와 보이스 메모를 동시에 기록하고 있을 때, 메인 정보의 기록을 종료하면, 보이스 메모의 기록도 종료된다. 이 방법에 의해, 보이스 메모 기록을 종료하는 수고를 생략할 수 있는 동시에, 부주의 등에 의한 보이스 메모 기록의 종료 처리를 잊어버리지 않게 되는 효과를 얻을 수 있다.
또한, 본 실시형태에서는, 메인 정보의 음성 데이터 및 보이스 메모의 샘플링 레이트를, 각각 48kHz 및 12kHz로 했지만, 각각의 값은 서로 다른 값이라도 좋 다. 또한, 메인 정보의 음성 데이터 및 보이스 메모의 비트 레이트를, 동시에 16bps라고 했지만, 각각의 값은 서로 다른 값이라도 좋다. 또한, 기록매체의 용량에 여유가 있을 경우, 보이스 메모의 고음질이 요구될 경우, 제어의 간단화 등의 이유에 의해, 메인 정보의 음성 데이터와 보이스 메모로서 공통 샘플링 레이트 또는 공통 비트 레이트를 이용해도 좋으며, 그 대소(大小) 관계는 묻지 않는다.
또한, 메인 정보의 음성 데이터 및 보이스 메모의 포맷으로서, 각각 MXF 및 WAVE를 이용했지만, 다른 포맷을 이용해도 좋다. 또한, 제어를 간단하게 하는 등의 이유에 의해, 메인 정보의 음성 데이터와 보이스 메모로서 공통 포맷을 이용해도 좋다.
또한, 본 실시형태에서는, 클립이, 영상 데이터 1채널, 음성 데이터 2채널로 구성되어 있는 것으로 했지만, 그 채널 수는 임의로 해도 좋으며, 예를 들면, 음성 데이터 1채널만의 클립이어도 좋다.
(제6실시형태)
본 실시형태에서는, 보이스 메모의 재생 방법을 구체적으로 설명한다.
먼저, 보이스 메모의 재생 지시를 위해 표시부(121) 상에 표시되는 화면에 대해서 설명한다.
도 11에 표시부(121)에 표시되는 클립 리스트 화면의 예를 나타낸다. 클립 리스트 화면은, 기록매체(150) 내에 기록되어 있는 클립의 리스트를 표시한다. 모든 클립이 화면에 들어가지 않을 경우는, 선택 커서(1102)를 이용하여 화면을 스크롤(scroll)시켜서 표시한다.
클립 리스트 화면에서, 기록되어 있는 각각의 클립의 섬네일(클립의 대표 화상)(1402)이 정렬해서 표시된다. 섬네일(1402)은, 클립의 선두 프레임의 영상 데이터라도 좋고, 클립 내의 그 밖의 프레임의 영상 데이터라도 좋다. 클립에 영상 데이터가 존재하지 않을 경우, 즉, 음성 데이터만으로 구성되는 클립의 경우에는, 섬네일(1402)에 블루 백(blue back) 등의 화상을 채워 넣는다. 또한, 섬네일(1402)에는, 클립 내의 영상 데이터가 아닌 별도의 화상을 사용자가 설정해도 좋다.
섬네일(1402)과 함께, 그 클립의 클립 번호(1403)도 표시된다. 클립 번호(1403)는 클립명과는 무관하게 결정할 수 있고, 기록매체 내에서 유일하다면, 자유롭게 설정해도 좋다.
또한, 보이스 메모가 연관되어 있는 클립에 대해서는, 보이스 메모 마크(1404)가 표시된다. 도 11의 예에서는 클립 번호가 "02", "03" 및 "05"의 클립에 보이스 메모가 연관되어 있다.
선택 버튼(1102)의 조작에 의해 선택된 섬네일에 대해서는, 선택되어 있는 것을 나타내는 표시(1405)가 외곽선에 부가된다.
도 12는, 보이스 메모 클립 리스트 화면의 예를 나타낸 도면이다. 보이스 메모 클립 리스트 화면은 클립 리스트 화면으로부터 얻어진다.
보이스 메모 클립 리스트 화면은, 기록매체에 기록되어 있는 클립 중에서 보이스 메모가 연관되어 있는 클립만을 리스트 표시한다. 보이스 메모 클립 리스트 화면으로의 이행은, 조작부(130) 상의 옵션 버튼 등을 이용해서 실행하면 좋고, 그 수단은 묻지 않는다. 보이스 메모 클립 리스트 화면에는, 보이스 메모 표시 영 역(1502) 및 클립 표시 영역(1504)이 설치되어 있다.
클립 표시 영역(1504)은, 보이스 메모가 연관되어 있는 클립의 섬네일(이하, "클립·섬네일"이라고 함)(1402)을 표시하는 영역이다.
보이스 메모 표시 영역(1502)에는, 현재 선택되어 있는 클립에 연관되어 있는 보이스 메모에 관한 섬네일(이하, "보이스 메모·섬네일"이라고 부름)(1501)의 리스트가 표시된다. 보이스 메모·섬네일(1501)은, 보이스 메모가 연관된 클립 중에서 위치의 정지 화상의 축소 화상이다. 연관되어 있는 클립에 영상 데이터가 존재하지 않을 경우, 즉, 음성 데이터만으로 구성되는 클립의 경우는, 보이스 메모·섬네일(1501)에는 블루 백 등의 화상을 채워 넣는다.
보이스 메모·섬네일(1501)에는 보이스 메모 번호(1503)가 표시된다. 보이스 메모 번호(1503)는, 후술하는 Memo ID(985)와 무관하게 결정할 수 있고, 클립 내에서 유일하다면, 보이스 메모 번호(1503)는 자유롭게 설정해도 좋다.
보이스 메모 표시 영역(1502)에는, 현재 선택되어 있는 보이스 메모의 정보를 표시하는 보이스 메모 정보(1505)가 표시된다. 예를 들면, 현재 선택되어 있는 보이스 메모의 연관 목적지의 클립 번호(1403), 현재 선택되어 있는 보이스 메모의 보이스 메모 번호(1503)가 표시된다. 도 12의 예에서는, 보이스 메모 정보(1505)에 의해, 클립 번호 "02", 보이스 메모 번호 "02"의 보이스 메모가 선택되어 있는 것이 나타나 있다. 이 예에서, 클립 번호 "02"의 클립에는 보이스 메모가 합계 3개가 연관되어 있는 것이 나타나 있다.
또한, 보이스 메모 정보(1505)에 표시하는 정보는, 필요가 없으면 표시하지 않아도 좋으며, 또한, 필요하다면 다른 정보를 표시해도 좋다.
도 13을 이용해서 보이스 메모의 재생 동작을 설명한다.
사용자는, 보이스 메모를 재생하기 위해서, 보이스 메모 클립 리스트 화면으로 이행하고, 재생하고 싶은 보이스 메모가 연관되어 있는 클립을 선택·결정한다. 재생하고 싶은 클립의 선택은 조작부(130) 상의 선택 버튼(1102)으로 실행하고, 결정 버튼(1103)에 의해 그 선택이 결정된다.
보이스 메모 클립 리스트의 화면 위에서 사용자의 조작에 의해 클립이 선택·결정된 것인지 아닌지의 여부를 판단한다(S41). 클립이 선택·결정되면, 커서를 보이스 메모 표시 영역(1502)으로 이동하고, 보이스 메모 표시 영역(1502)에서 사용자에 의해 재생하고 싶은 보이스 메모·섬네일이 선택된 것인지 아닌지의 여부를 판단한다(S42). 재생하고 싶은 보이스 메모가 선택되어 있는 상태에서, 결정 버튼(1103)이 눌려지면, 그 선택이 확정되고, 선택된 보이스 메모가 재생된다(S43). 이 때, 보이스 메모의 재생 개시와 동시에, 재생하는 보이스 메모가 연관된 위치에 있는 메인 콘텐츠 데이터의 영상 데이터의 정지 화상이 표시된다(S44). 그 후, 보이스 메모 데이터가 그 종단(終端)까지 재생되면, 보이스 메모의 재생은 종료되고, 그와 동시에, 메인 콘텐츠 데이터의 영상 데이터의 정지 화상의 표시도 정지한다.
도 14는 보이스 메모 재생 중인 화면을 나타낸 도면이다.
메인 콘텐츠 데이터의 영상 데이터의 정지 화상과 함께, 보이스 메모가 재생 중인 것을 나타내는 표시(1601)가 나타나 있다. 표시(1601)는 점멸 표시(flickering)라도 좋다.
또한, 보이스 메모의 재생 개시와 동시에, 재생하는 보이스 메모가 연관된 위치로부터 메인 콘텐츠 데이터의 영상 데이터의 동화상에 대한 재생을 시작해도 좋다. 이 때, 보이스 메모의 재생이 종료하기 전에 메인 콘텐츠 데이터의 영상 데이터의 동화상의 재생이 종료된 경우에는, 메인 콘텐츠 데이터의 영상 데이터의 최종 프레임의 정지 화상, 또는 블루 백 화상 등을 계속해서 출력하면 좋다.
보이스 메모의 재생이 종료되면, 자동적으로 보이스 메모 클립 리스트 화면으로 복귀한다. 보이스 메모의 재생 도중에 종료할 수 있도록 하기 위해서, 소정의 버튼[예를 들면, 결정 버튼(1103), 정지 버튼(도시하지 않음)]이 눌려졌을 때에 보이스 메모의 재생 동작을 중단하도록 해도 좋다. 또한, 보이스 메모 재생 중에, 메인 콘텐츠 데이터의 재생 버튼(도시하지 않음) 또는 선택 결정 버튼(1103)이 눌려지면, 보이스 메모의 재생을 중단하고, 재생하고 있던 보이스 메모가 연관되어 있는 위치로부터, 메인 콘텐츠 데이터의 영상, 음성 데이터의 재생을 시작하도록 해도 좋다.
(제7실시형태)
제1실시형태에서는, 클립의 프레임 오프셋과 보이스 메모 데이터를 연관시키는 수단으로서 도 2 및 도 3에 나타내는 바와 같은 관리 테이블을 이용했지만, 본 실시형태에서는, XML(eXtensible Markup Language: W3C 권고) 파일에 보이스 메모의 연관에 관한 정보를 기술한다. 또한, 클립과 보이스 메모의 연관 정보 이외에도, 클립을 구성하는 영상 데이터 및 음성 데이터에 관한 정보 등, 클립에 관한 여러 가지의 정보를 XML 파일로 기술(記述)한다.
(기록매체의 디렉토리 구성)
도 15에, 기록매체(150)에 기록하는 각각의 콘텐츠의 디렉토리 구성의 예를 나타낸다.
Contents 디렉토리(directory)(800)는, 기록매체(150)의 root 디렉토리의 아래에 배치된다. 클립을 구성하는 모든 파일은, Contents 디렉토리(800)의 아래에 배치된다.
Clip 디렉토리(810)는, Contents 디렉토리(800)의 아래에 배치된다. 클립 정보가 기술된 XML 파일은 Clip 디렉토리(810)의 아래에 저장된다.
Video 디렉토리(820)는, Contents 디렉토리(800)의 아래에 배치된다. 영상 데이터 파일은 Video 디렉토리(820)의 아래에 저장된다.
Audio 디렉토리(830)는, Contents 디렉토리(800)의 아래에 배치된다. 음성 데이터 파일은 Audio 디렉토리(830)의 아래에 저장된다.
Voice 디렉토리(850)는, Contents 디렉토리(800)의 아래에 배치된다. 보이스 메모 데이터 파일은 Voice 디렉토리(850)의 아래에 저장된다.
클립 파일(811 및 812)은, 각각, 보이스 메모의 부가 정보 등의 모든 클립 정보가 기술된 XML 파일이다. 1개의 클립에 대하여 1개의 클립 파일이 작성된다.
영상 파일(821 및 822)은, 각각, 클립을 구성하는 영상 데이터 파일이다.
음성 파일(831∼834)은, 각각, 클립을 구성하는 음성 데이터 파일이다.
보이스 메모 파일(851∼853)은, 각각, 클립에 연관되는 보이스 메모 데이터 파일이다.
또한, 상기 예에서는, 본 실시형태를 설명하기 위해서 필요한 구성 요소만을 이용했다. 필요에 따라서, 예를 들면, 도시하지 않은 Icon 디렉토리나, 도시하지 않은 Icon 파일 등을 이 구성에 편입해도 좋다. 또한, 기록매체(150) 내의 디렉토리 구성은 다른 구성이라도 좋다.
(XML에 의한 클립 파일의 정의)
이하에, XML을 이용한 클립 파일의 구체적인 기술(記述) 방법에 대해서 설명한다.
도 16에, XML 기술(記述) 내에 구체적으로 기술하는 항목을 나타낸다. 도 16에 기재되어 있는 항목은, 본 실시형태를 설명하기 위해서 열거한 일례이며, 도 16에 기술하지 않고 있는 항목이 존재해도 좋으며, 또한, 도 16에 나타내고 있는 항목 중 몇 개가 존재하지 않아도 좋다. 또한, 각각의 항목에서는 그 속성이 존재해도 좋다.
ClipContent 태그(900)는, 이하에 나타내는 클립에 관한 정보를 요소(element)로서 갖는다.
ClipName 태그(901)는, 클립의 이름을 요소로서 갖는다.
Duration 태그(902)는, 클립의 프레임 수를 요소로서 갖는다.
EssenceList 태그(910)는, 영상, 음성 데이터 등의 에센스의 리스트를 요소로서 갖는다.
Video 태그(920)는, 이하에 나타내는 영상 데이터의 정보를 요소로서 갖는다. 또한, Video 태그(920)의 속성으로서, 예를 들면, 도시하지 않은 ValidAudioFlag라고 하는 속성을 부가함으로써, 영상 데이터 중에 음성 데이터가 다중화되어 있는지 아닌지의 여부를 판단해도 좋다.
VideoFormat 태그(921)는, 영상 데이터의 파일 포맷을 요소로서 갖는다. 예를 들면, MXF 파일 포맷 등을 고려할 수 있지만, 그 밖의 포맷이라도 좋다.
Audio 태그(940)는, 이하에 나타내는 음성 데이터의 정보를 요소로서 갖는다.
AudioFormat 태그(941)는, 음성 데이터의 파일 포맷을 요소로서 갖는다. 예를 들면, MXF 파일 포맷 등을 고려할 수 있지만, 그 밖의 포맷이라도 좋다.
SamplingRate 태그(942)는, 음성 데이터의 샘플링 레이트를 요소로서 갖는다. 예를 들면, 48000Hz 등을 고려할 수 있지만, 샘플링 레이트의 값은 무엇이라도 좋다.
BitsPerSample 태그(943)는, 음성 데이터의 비트 레이트를 요소로서 갖는다. 예를 들면, 16bps, 24bps 등을 고려할 수 있지만, 비트 레이트의 값은 무엇이라도 좋다.
ClipMetadata 태그(960)는, 보이스 메모 등, 클립에 연관되는 소재 데이터 이외의 메타데이터(metadata)의 정보를 요소로서 갖는다.
MemoList 태그(970)는, 클립에 연관시키는 메모의 리스트를 요소로서 갖는다. 또한, 메모가 존재하지 않으면, MemoList 태그(970)는 없어도 좋다.
Memo 태그(980)는, 이하에 나타내는 메모의 각각의 정보를 요소로서 갖는다. 또한, Memo 태그(980)에는 속성으로서 Memo ID(985)를 부가한다. Memo ID(985)는 클립마다 독립한 2자리 수의 값이며, 각각의 클립에 최대 100개까지 메모를 연관시킬 수 있다. 또한, Memo ID(985)는 2자리 수의 값이 아니어도 좋으며, 클립마다 연관되는 메모의 최대 수는 100이 아니어도 좋다.
Offset 태그(981)는, 메모를 연관시키는 클립의 프레임 오프셋을 요소로서 갖는다. Offset 태그(981)는 필요가 없을 경우 없어도 좋다. Offset 태그(981)가 없으면, 그 메모는 클립 전체에 연관된 것으로 하면 좋다.
Person 태그(982)는, 메모를 작성한 사람의 이름 등을 요소로서 갖는다. 예를 들면, 보이스 메모 기록 시에, 누가 기록했는지를 Person 태그(982) 내에 기술한다. 이것에 의해, 보이스 메모의 기록자가 명확하게 되어, 보이스 메모를 기록한 때의 상황 등을 알고 싶으면, 그 기록자에게 문의하면 좋다. 또한, 특별히 필요가 없을 경우는 Person 태그(982)를 부가하지 않아도 좋다.
Voice 태그(990)는, 이하에 나타내는 보이스 메모의 각각의 정보를 요소로서 갖는다. 만약 보이스 메모가 연관되어 있지 않으면 Voice 태그(990)는 없어도 좋다.
VoiceFormat 태그(991)는, 보이스 메모 데이터의 파일 포맷을 요소로서 갖는다. 예를 들면, WAVE 파일 포맷 등을 고려할 수 있지만, 그 밖의 포맷이라도 좋다.
VoiceSamplingRate 태그(992)는, 보이스 메모 데이터의 샘플링 레이트를 요소로서 갖는다. 예를 들면, 12000Hz 등을 고려할 수 있지만, 샘플링 레이트의 값은 무엇이라도 좋다.
VoiceBitsPerSample 태그(993)는, 보이스 메모 데이터의 비트 레이트를 요소 로서 갖는다. 예를 들면, 16bps 등을 고려할 수 있지만, 비트 레이트의 값은 무엇이라도 좋다.
RecContidion 태그(994)는, 보이스 메모를 기록한 때의 상태를 요소로서 갖는다. 예를 들면, PLAY 상태, STILL 상태 등을 고려할 수 있지만, 그 이외의 상태가 있어도 좋으며, 또한, 그것들의 상태를 세분화해도 좋다. 또한, RecCondition 태그(994)는 필요가 없으면 설치하지 않아도 좋다.
또한, 클립 파일에 기술하는 항목으로서 상기와 같은 예를 들었지만, 클립과 보이스 메모를 연관시킬 수 있으면, 그 구조, 항목, 요소, 속성은 묻지 않는다.
(보이스 메모 기록 시의 상태 관리)
보이스 메모 기록 시의 상태를 관리하는 방법에 대해서 설명한다.
예를 들면, 메인 콘텐츠 데이터의 기록 중 또는 메인 콘텐츠 데이터의 재생 중에 보이스 메모를 기록할 경우에는, RecCondition 태그(994)를 “PLAY”로 한다. 또한, 메인 콘텐츠 데이터의 기록 일시 정지 중, 기록 정지 중, 재생 정지 중 및 재생 일시 정지 중에 보이스 메모를 기록할 경우, 즉, 메인 콘텐츠 데이터와 동기를 맞추지 않고 보이스 메모를 기록할 경우에, RecCondition 태그(994)를 “STILL”로 한다.
보이스 메모를 재생할 경우는, RecCondition 태그(994)를 참조하고, “PLAY”이라면, 그 보이스 메모에 연관된 위치로부터 메인 콘텐츠 데이터의 영상 데이터를 동시에 재생한다. 한편, RecCondition 태그(994)가 “STILL”이라면, 그 보이스 메모에 연관된 위치의 메인 콘텐츠 데이터의 영상 데이터의 정지 화상을 계속해서 출력하면서 보이스 메모를 재생한다. 여기서는, RecCondition 태그(994)의 값을 “PLAY” 및 “STILL”로 했지만, 그 이외의 상태를 별도로 정의해도 좋으며, 예를 들면, 탐색 재생 중에 보이스 메모를 기록한 경우는, 그 때의 탐색 재생 속도를 나타내는 값을 RecCondition 태그(994)에 기술해도 좋다. 그 경우는, RecCondition 태그(994)를 참조해서 탐색 재생 속도를 취득하고, 메인 콘텐츠 데이터를, 그 취득한 속도로 탐색 재생하면서 보이스 메모를 재생하는 것도 가능하게 된다.
또한, RecCondition 태그(994)의 값에 관계없이, 항상 메인 콘텐츠 데이터의 영상 데이터의 정지를 계속해서 출력하면서 보이스 메모를 재생해도 좋다. 또한, RecCondition 태그(994)와 보이스 메모의 재생 방법과의 관계는 사용자가 자유롭게 결정해도 좋다. 또한, RecCondition 태그(994)는 기록하지 않아도 좋으며, 그 경우에는 보이스 메모의 재생 방법을 통일화하면 좋다. 또한, RecCondition 태그(994)의 값에는 관계없이, 사용자가 설정한 재생 방법으로 보이스 메모를 재생해도 좋다.
이렇게, 보이스 메모를 기록했을 때의 상태를 관리함으로써, 보이스 메모의 재생 수단을 증가시킬 수 있다.
또한, 보이스 메모를 재생할 경우, 연관된 위치로부터 메인 콘텐츠 데이터의 영상 데이터만을 동시에 재생하는 예를 열거했지만, 동시에 메인 콘텐츠 데이터의 음성 데이터를 재생해도 좋다.
(보이스 메모 데이터의 비동기 기록, 비동기 재생)
일반적으로, 소재의 영상, 음성 데이터를 재생할 때는, 영상과 음성은 동기 를 맞출 필요가 있다. 이 때, 영상과 음성은 1프레임의 에러도 허용되지 않는 것이 일반적이다. 영상 데이터와 음성 데이터가 다중화되어 있지 않고, 영상 데이터 파일, 음성 데이터 파일(복수 채널의 경우도 포함)이 각각 별도의 파일일 경우, 이들 전체 파일의 동기를 맞추면서 재생하는 제어는 복잡하게 된다. 또한, 샘플링 레이트가 서로 다른 2개 이상의 음성 데이터 파일을 재생할 경우, 이들의 동기를 맞추면서 재생하는 제어는 더욱 복잡하게 된다.
한편, 영상과 음성에서 동기를 맞추면서 재생할 필요가 없을 경우, 즉, 몇 프레임의 에러는 허용되는 경우, 영상 데이터 파일, 음성 데이터 파일이 별도의 파일이어도, 각각 독립해서 재생하는 것이 좋으며, 그 제어는 더욱 간단하게 된다.
전술한 바와 같이, 보이스 메모 데이터는 소재 데이터가 무엇인지를 나타내기 위한 메모 데이터이므로, 소재 데이터와 엄밀하게 동기를 맞추어서 재생할 필요는 없는 것으로 볼 수 있다. 따라서, 보이스 메모를 메인 콘텐츠 데이터와 동기를 맞추지 않고 재생하면, 제어가 더욱 간단하게 된다.
또한, 보이스 메모는 메인 콘텐츠 데이터의 시간 축의 특정한 한 점에 연관되는 것이며, 보이스 메모를 메인 콘텐츠 데이터와 동기를 맞추지 않고 기록함으로써, 연관시키는 클립의 Duration보다도 장시간 보이스 메모를 기록할 수 있다. 예를 들면, 몇 초의 클립에 대하여, 몇십 초의 보이스 메모를 기록할 수도 있다. 또한, 메인 콘텐츠 데이터의, 정지 중, 재생 중, 특수 재생 중 등(고배속 탐색 재생, 역재생 등), 여러 가지 상태로 보이스 메모를 기록할 수 있다.
예를 들면, 메인 콘텐츠 데이터의 정지 중, 일시 정지 중 등에 보이스 메모 를 기록하는 경우는, 보이스 메모의 관리 정보로서, RecCondition 태그(994)의 값을 “STILL”로 하면 좋다(이 때의 보이스 메모의 재생 방법에 대해서는 후술함). 이 때, 소재의 기록 전에 미리 보이스 메모를 기록해 둘 수도 있다. 예를 들면, 지금부터 촬영하는 신에 대하여, 그 신의 설명 등을 보이스 메모로서 미리 기록해 두고, 그 후에 대상이 되는 신을 촬영하고, 그 클립에 미리 기록해 둔 보이스 메모를 연관시킬 수도 있다.
또한, 메인 콘텐츠 데이터의 기록 중 및 재생 중에 보이스 메모를 기록할 경우는, RecCondition 태그(994)의 값을 “PLAY”로 해 두면 좋다. (이 때의 보이스 메모의 재생 방법에 대해서는 후술한다.) 이 때, 기록하는 보이스 메모는 메인 콘텐츠 데이터와 반드시 동기를 맞출 필요는 없다. 따라서, 제2실시형태에서 나타낸 바와 같이, 메인 콘텐츠 데이터가 복수의 기록매체에 걸쳐서 기록되는, 또는, 기록되어 있을 경우에도, 보이스 메모는 복수의 기록매체에 걸치지 않고 기록할 수 있다. 또한, 특히 메인 콘텐츠 데이터의 재생 중에 보이스 메모를 기록할 경우에는, 보이스 메모 기록 중에, 메인 콘텐츠 데이터의 종단(end)을 지나치게 되어도 보이스 메모의 기록을 계속할 수 있다.
또한, 메인 콘텐츠 데이터의 특수 재생 중 등(고배속 탐색 재생, 역재생 등)에 보이스 메모를 기록할 경우는, RecCondition 태그(994)의 값을, 각각의 상태를 나타내는 것과 같은 값으로 해 두면 좋다.
상기한 바와 같이 기록된 보이스 메모를 재생할 때는, 보이스 메모 기록 시에 부가해 둔 RecCondition 태그(994)를 참조함으로써, 그 재생 방법을 선택하도록 하면 좋다.
RecCondition 태그(994)의 값이 “STILL”인 때, 즉, 보이스 메모를 기록했을 때의 메인 콘텐츠 데이터의 상태가 정지 또는 일시 정지였을 때는, 보이스 메모가 연관된 위치의 메인 콘텐츠 데이터의 영상 데이터의 정지 화상을 계속해서 출력하면서 보이스 메모를 재생한다.
또한, RecCondition 태그(994)의 값이 “PLAY”인 때, 즉, 보이스 메모를 기록했을 때의 메인 콘텐츠 데이터의 상태가 기록 중 또는 재생 중이었을 때는, 보이스 메모가 연관된 위치의 메인 콘텐츠 데이터의 영상 데이터를 동시에 재생한다. 이 때, 전술한 바와 같이, 메인 콘텐츠 데이터와 보이스 메모에서는 반드시 동기를 맞출 필요는 없기 때문에, 더욱 간단한 제어로 재생할 수 있다. 여기서, 장시간에 걸친 보이스 메모 등에서, 조속히 보이스 메모를 듣고 싶을 경우에는, 메인 콘텐츠 데이터를 정상 속도로 재생하는 중에, 보이스 메모만을 1.5 내지 2배속으로 재생할 수도 있다. 반대로, 보이스 메모에서 남겨진 음성 메시지가 너무 빨라서 알아들을 수 없는 경우 등은, 메인 콘텐츠 데이터를 정상 속도로 재생하는 중에, 보이스 메모만을 0.5배속으로 재생해도 좋다.
또한, RecCondition 태그(994)가, 탐색 재생 등을 나타내는 값일 경우, 예를 들면, 탐색 재생 4배속을 나타내는 값인 경우에는, 보이스 메모가 연관된 위치로부터 메인 콘텐츠 데이터를 4배속으로 탐색 재생하면서 보이스 메모를 재생할 수 있다. 또한, RecCondition 태그(994)가 역재생을 나타내는 값인 경우에는, 보이스 메모가 연관된 위치로부터 메인 콘텐츠 데이터를 역재생하면서 보이스 메모를 재생할 수도 있다.
(XML 기술의 구체 예)
도 17은, 도 15에서의 디렉토리 구조의 일부에 대한 XML 기술(記述)의 예를 나타낸 도면이다. 즉, 도 15에 나타내는 예에는, 클립명이 “0001AB”인 클립 파일 #1(811)과, 클립명이 “0001CD”인 클립 파일 #2(812)가 포함되어 있지만, 도 17은, 그 중의 클립 파일 #1(811)에 관한 XML 기술을 나타내고 있다. 단, 도 17은 클립 파일 #1(811)에 기술되어 있는 내용의 일부를 나타내고, 기재되어 있는 항목은, 본 실시형태를 설명하기 위해서 필요한 항목뿐이다. 도 17에 기술하지 않고 있는 항목이 존재해도 좋으며, 또한, 도 17에 나타낸 항목 중 몇 개는 존재하지 않아도 좋다. 또한, 각각의 항목에서는 그 속성이 존재해도 좋다.
도 17의 XML 기술에는 이하의 내용이 정의되어 있다.
클립 파일 #1(811)의 클립명(ClipName)은 “0001AB”이다.
클립 파일 #1(811)의 길이(Duration)는 1000 프레임이다. 메인 콘텐츠 데이터의 영상 데이터와 메인 콘텐츠 데이터의 음성 데이터의 파일 포맷(VideoFormat, AudioFormat)으로서 MXF를 이용하고, 보이스 메모의 파일 포맷(VoiceFormat)으로서 WAVE를 이용하고 있다. 또한, 메인 콘텐츠 데이터의 음성 데이터의 샘플링 레이트(SamplingRate)는 48kHz로 하고, 보이스 메모 데이터의 샘플링 레이트(VoiceSamplingRate)는 12kHz이다. 또한, 음성 데이터 및 보이스 메모의 비트 레이트(BitsPerSample, VoiceBitsPerSample)는 모두 16bps이다.
클립 파일 #1(811)은, 영상 파일 #1(821), 음성 파일 #1(831), 음성 파일 #2(832), 보이스 메모 파일 #1(851), 및, 보이스 메모 파일 #2(852)로서 구성되어 있다.
보이스 메모 파일 #1(851)은 “UserName1”을 사용자명(Person)으로 갖는 사용자에 의해 작성되어 있다. 그 보이스 메모는, 소재의 기록 일시 정지 중, 기록 정지 중, 재생 일시 정지 중, 재생 정지 중에서, 어느 쪽의 상태(RecCondition)에서 기록되며, 이 클립의 0번째 프레임(0ffset)에 연관되어 있다.
또한, 보이스 메모 파일 #2(852)은 “UserName2”를 사용자명(Person)으로 갖는 사용자에 의해 작성되고, 그 보이스 메모는, 소재의 기록 중 또는 재생 중(RecCondition)에 기록되며, 이 클립의 100번째 프레임(Offset)에 연관되어 있다.
각각의 데이터 파일을 아래와 같이 명명할 수 있다.
클립 파일 #1(811)의 파일명은, 클립명 “0001AB”에 확장자(擴張子) “.xml”을 부가한 것이며, “0001AB.xml”이 된다.
또한, 영상 파일 #1(821)의 파일명은, 클립명 “0001AB”에, 확장자 “.mxf”를 부가한 것이며, “0001AB.mxf”가 된다.
음성 파일 #1(831) 및 음성 파일 #2(832)의 파일명은, 클립명 “0001AB”에 2자리 수의 채널 번호 “00” 및 “01”을 부가한 것에, 추가로 확장자 “.mxf”를 부가한 것이며, 각각 “0001ABOO.mxf” 및 “0001ABO1.mXf”가 된다. 또한, 음성 데이터의 채널 번호는, EssenceList 태그(910)에 등록되어 있는 Audio 태그(940)의 요소 리스트 순서로 0채널, 1채널, 2채널, …과 같이 할당된다. 음성 데이터의 채 널 번호는, 도 9에서 나타내는 Audio 태그(940)의 속성으로서 채널 번호를 부가하고, 그 값으로부터 결정해도 좋고, 또한, 다른 태그로부터 채널 정보를 취득해도 좋으며, 그 수단은 묻지 않는다.
보이스 메모 파일 #1(851) 및 보이스 메모 파일 #2(852)의 파일명은, 클립명 “0001AB”에 각각의 Memo ID(985)의 2자리 수의 값 “00” 및 “01”을 부가한 것에, 추가로 확장자 “.wav”를 부가한 것이며, 각각, “0001ABOO.wav” 및 “0001ABO1.wav”가 된다.
상술한 각각의 파일을 도 16과 같은 디렉토리 구성에 근거해서 저장해 둔다. 이 구성에 의해, 클립 파일 #1(811)을 참조하는 것만으로, 클립을 구성하는 소재 데이터나 보이스 메모 데이터 등의 연관 정보를 알 수 있다.
또한, 각각의 파일의 파일명의 결정 방법은, 상기의 예 이외의 방법으로도 좋다.
본 실시형태에서는, 클립과 영상, 음성 데이터 및 보이스 메모 데이터를 연관시키는 방법이나 그 효과를 설명하기 위해서 필요한 항목에 대해서만 설명했지만, 각각의 소재 데이터의 상세 정보, 클립의 대표 화상인 섬네일 파일에 관한 정보, 촬영한 장소의 정보, 촬영자의 사용자 정보, 촬영 기기의 정보 등, 여러 가지 정보를 클립 파일에 기술해 두어도 좋다. 그렇게 함으로써, 클립 파일을 참조하는 것만으로 클립의 모든 정보를 알 수 있다.
본 실시형태에서는, 클립 파일의 기술 언어로서 XML을 이용하였다. XML은 W3C(World Wide Web Consortium)에 의해 규격화(권고)되어 있는 언어이므로, 예를 들면, XML을 취급할 수 있는 변환 소프트웨어 등을 이용하면 관리 정보를 다른 데이터 베이스로 이행시키는 등의 조작도 가능하게 되고, 더욱 범용성이 증가할 것이다. 또한, 신규 태그를 정의함으로써 관리 정보도 용이하게 추가할 수도 있기 때문에, 확장성이 높을 것이다. 또한, XML은 텍스트 파일이기 때문에, 범용의 정보기기를 이용해서 사용자는 클립 파일을 직접 또한 용이하게 참조할 수 있고, 클립 정보를 대체로 파악할 수 있다. 또한, 사용자는 범용의 정보기기를 이용하여, 직접 클립 파일을 편집할 수 있어서, 간이 편집도 가능하게 된다.
본 발명은, 특정한 실시형태에 대해서 설명하였지만, 당업자에게는 기타의 많은 변형 예, 수정, 기타의 이용이 명백할 것이다. 따라서, 본 발명은 여기서 특정한 기재에 한정되지 않고, 첨부한 청구의 범위에 의해서만 한정될 수 있다. 또한 본 출원은 일본국 특허 출원, 특원2003-356079호(2003년 10월 16일 제출)에 관련되고, 그 내용은 참조되어 본문 중에 편입된다.
본 발명은, 메모리 기록 카메라 리코더 등으로 촬영 녹화한 취재 완료된 미디어를 바탕으로 비선형 편집 등의 편집 작업을 효율적으로 실행하기 위한 영상 음성 기록 재생 장치에 유용하다.

Claims (60)

  1. 영상 및 음성에 대한 메인 정보를 입력하는 영상 음성 입력부와,
    상기 메인 정보에 부가되는 음성 부가 정보를 입력하는 음성 부가 정보 입력부와,
    상기 메인 정보 및 상기 음성 부가 정보를 출력하는 영상 음성 출력부와,
    상기 메인 정보 및 상기 음성 부가 정보를 기록하는 기록매체와,
    상기 메인 정보 및 상기 음성 부가 정보를, 상기 기록매체에 기록하거나 또는 상기 기록매체로부터 재생하는 기록 재생부와,
    상기 영상 음성 입력부, 상기 음성 부가 정보 입력부, 상기 영상 음성 출력부, 상기 기록 재생부의 동작을 제어하는 제어부를 포함하며,
    상기 제어부는, 상기 음성 부가 정보를 상기 메인 정보에서의 특정 프레임 위치에 연관시켜서 상기 기록매체에 기록하도록 제어하고,
    상기 메인 정보에서의 특정 프레임 위치를 상기 메인 정보의 타임 코드(time code)로 지정하고, 상기 음성 부가 정보를 상기 메인 정보의 타임 코드와 연관시켜서 상기 기록매체에 기록하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  2. 삭제
  3. 제1항에 있어서, 상기 메인 정보에서의 특정 프레임 위치를 상기 메인 정보의 선두(先頭)로부터의 프레임 수(數)로 지정하고, 상기 음성 부가 정보를 상기 메인 정보의 선두로부터의 프레임 수와 연관시켜서 상기 기록매체에 기록하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  4. 제1항에 있어서, 상기 기록매체가 단일 매체로 구성되는 경우, 상기 단일 기록매체에 연속적으로 기록된 메인 정보인 클립(clip) 내의 특정 프레임 위치에 연관된 상기 음성 부가 정보는 상기 클립 전체에 관한 정보를 포함하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  5. 제4항에 있어서, 상기 특정 프레임은 클립 내의 선두 프레임인 것을 특징으로 하는 영상 음성 기록 재생 장치.
  6. 제1항에 있어서, 상기 기록매체 전체에 대하여 음성 부가 정보를 부가하기 위해서, 더미(dummy) 메인 정보를 작성하고, 상기 작성한 더미 메인 정보에 상기 음성 부가 정보를 연관시켜, 상기 더미 메인 정보와 상기 음성 부가 정보를 상기 기록매체에 기록하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  7. 제1항에 있어서, 상기 기록매체가 복수의 매체로 구성되고, 일련의 동작으로 촬영된 상기 메인 정보가 복수 매체에 걸쳐 분할되어서 기록되어 있을 경우, 분할 된 상기 메인 정보마다 상기 음성 부가 정보를 연관시키고, 상기 메인 정보와, 상기 메인 정보와 연관된 상기 음성 부가 정보를 동일한 매체에 기록하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  8. 제1항에 있어서, 상기 메인 정보 및 상기 음성 부가 정보의 기록 동작에 있어서, 상기 메인 정보의 기록을 종료했을 때에 상기 음성 부가 정보의 기록을 종료하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  9. 제1항에 있어서, 상기 음성 부가 정보를, 상기 메인 정보의 음성 데이터와는 상이한 샘플링 레이트(sampling rate) 또는 비트 레이트(bit rate)로 기록하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  10. 제1항에 있어서, 상기 음성 부가 정보를, 상기 메인 정보의 음성 데이터와는 상이한 파일 포맷(file format)으로 기록하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  11. 제1항에 있어서, 상기 기록매체에는, 상기 음성 부가 정보를 기록하기 위한 영역을 미리 확보해 두는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  12. 제1항에 있어서, 상기 메인 정보의 기록 중, 기록 일시 정지 중, 기록 정지 중, 재생 중, 재생 일시 정지 중, 재생 정지 중에서, 어느 쪽의 상태로부터도 상기 음성 부가 정보를 기록할 수 있는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  13. 제12항에 있어서, 상기 메인 정보의 기록 중에 상기 음성 부가 정보의 기록을 시작할 경우, 상기 음성 부가 정보의 기록 개시 시점에서 기록 중인 메인 정보의 프레임 위치에 상기 음성 부가 정보를 연관시켜 기록하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  14. 제12항에 있어서, 상기 메인 정보의 기록 일시 정지 중에 상기 음성 부가 정보의 기록을 시작할 경우, 기록 일시 정지 중인 상기 메인 정보의 프레임 위치에 상기 음성 부가 정보를 연관시켜서 기록하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  15. 제12항에 있어서, 상기 메인 정보의 기록 정지 중에 상기 음성 부가 정보의 기록을 시작할 경우, 최후에 기록한 메인 정보에 상기 음성 부가 정보를 연관시켜 기록하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  16. 제12항에 있어서, 상기 메인 정보의 기록 정지 중에 상기 음성 부가 정보의 기록을 시작할 경우, 다음에 기록하는 상기 메인 정보에 상기 음성 부가 정보를 연관시켜 기록하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  17. 제12항에 있어서, 상기 메인 정보의 재생 중에 상기 음성 부가 정보의 기록을 시작할 경우, 상기 음성 부가 정보의 기록 개시 시점에서 재생 중인 상기 메인 정보의 프레임 위치에 상기 음성 부가 정보를 연관시켜 기록하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  18. 제12항에 있어서, 상기 메인 정보의 재생 일시 정지 중에 상기 음성 부가 정보의 기록을 시작할 경우, 재생 일시 정지 중인 상기 메인 정보의 프레임 위치에 상기 음성 부가 정보를 연관시켜 기록하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  19. 제12항에 있어서, 상기 메인 정보의 재생 정지 중에 상기 음성 부가 정보의 기록을 시작할 경우, 정지 중인 상기 메인 정보에 연관시켜 기록하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  20. 제1항에 있어서, 상기 음성 부가 정보가 연관되어 있는 상기 메인 정보를 삭제한 경우, 삭제된 메인 정보에 연관된 음성 부가 정보도 동시에 삭제하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  21. 제1항에 있어서, 상기 메인 정보의 섬네일 화상(thumbnail image)을 표시하 는 표시부를 더 포함하고,
    동일한 메인 정보에 1개 이상의 음성 부가 정보가 연관되어 있을 경우, 1개 이상의 음성 부가 정보 중 어느 1개가 선택되면, 상기 표시부는, 그 선택된 음성 부가 정보가 연관된 프레임 위치에 있는 메인 정보의 섬네일 화상을 표시하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  22. 제21항에 있어서, 상기 음성 부가 정보를 재생할 때, 상기 음성 부가 정보에 연관된 메인 정보의 정지 화상을 계속해서 표시하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  23. 제21항에 있어서, 상기 음성 부가 정보를 재생할 때, 상기 음성 부가 정보에 연관된 상기 메인 정보 중의 영상 정보를 동시에 재생하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  24. 제21항에 있어서, 상기 1개의 음성 부가 정보가 선택되었을 때에, 그 선택된 음성 부가 정보와 연관되어 있는 상기 메인 정보의 프레임 위치로부터 상기 메인 정보를 재생할 수 있도록 하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  25. 제21항에 있어서, 상기 음성 부가 정보를 재생 중에, 재생 중인 음성 부가 정보와 연관되어 있는 상기 메인 정보의 특정 프레임 위치로부터 상기 메인 정보를 재생할 수 있도록 하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  26. 제1항에 있어서, 상기 음성 부가 정보에 관한 관리 정보를 더 포함하고, 상기 관리 정보는 상기 음성 부가 정보의 기록 시작 시의, 상기 메인 정보의 상태를 나타내는 정보를 포함하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  27. 제1항에 있어서, 상기 음성 부가 정보를 상기 메인 정보의 시간 축과 비동기적으로 상기 메인 정보와 연관시켜 기록하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  28. 제1항에 있어서, 상기 음성 부가 정보를 상기 메인 정보의 시간 축과 동기를 맞추지 않고 재생하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  29. 제1항에 있어서, 상기 음성 정보를 부가한 사용자를 특정하는 정보를 관리 파일 내에 기록하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  30. 제1항에 있어서, 상기 음성 부가 정보의 관리 정보를 XML 파일로서 기록하는 것을 특징으로 하는 영상 음성 기록 재생 장치.
  31. 영상 및 음성의 메인 정보를 입력하고,
    상기 메인 정보에 부가되는 음성 부가 정보를 입력하고,
    상기 음성 부가 정보를 상기 메인 정보에서의 특정 프레임 위치에 연관시켜 기록매체에 기록하고,
    상기 메인 정보에서의 특정 프레임 위치를 상기 메인 정보의 타임 코드로 지정하고, 상기 음성 부가 정보를 상기 메인 정보의 타임 코드와 연관시켜 상기 기록매체에 기록하는 것을 특징으로 하는 영상 음성 기록 방법.
  32. 삭제
  33. 제31항에 있어서, 상기 메인 정보에서의 특정 프레임 위치를 상기 메인 정보의 선두로부터의 프레임 수로 지정하고, 상기 음성 부가 정보를 상기 메인 정보의 선두로부터의 프레임 수와 연관시켜 상기 기록매체에 기록하는 것을 특징으로 하는 영상 음성 기록 방법.
  34. 제31항에 있어서, 상기 기록매체가 단일 매체로서 구성될 경우에, 상기 단일 기록매체에 연속으로 기록된 메인 정보인 클립 내의 특정 프레임 위치에 연관된 상기 음성 부가 정보는, 상기 클립 전체에 관한 정보를 포함하는 것을 특징으로 하는 영상 음성 기록 방법.
  35. 제34항에 있어서, 상기 특정 프레임은 클립 내의 선두 프레임인 것을 특징으로 하는 영상 음성 기록 방법.
  36. 제31항에 있어서, 상기 기록매체 전체에 대하여 음성 부가 정보를 부가하기 위해서, 더미 메인 정보를 작성하고, 작성된 더미 메인 정보에 상기 음성 부가 정보를 연관시키고, 상기 더미 메인 정보와 상기 음성 부가 정보를 상기 기록매체에 기록하는 것을 특징으로 하는 영상 음성 기록 방법.
  37. 제31항에 있어서, 상기 기록매체가 복수의 매체로서 구성되고, 일련의 동작으로 촬영된 상기 메인 정보가 복수 매체에 걸쳐 분할되어서 기록되어 있을 경우, 분할된 상기 메인 정보마다 상기 음성 부가 정보를 연관시키고, 상기 메인 정보와, 상기 메인 정보와 연관된 상기 음성 부가 정보를 동일한 매체에 기록하는 것을 특징으로 하는 영상 음성 기록 방법.
  38. 제31항에 있어서, 상기 메인 정보 및 상기 음성 부가 정보의 기록 동작에서, 상기 메인 정보의 기록을 종료했을 때에 상기 음성 부가 정보의 기록을 종료하는 것을 특징으로 하는 영상 음성 기록 방법.
  39. 제31항에 있어서, 상기 음성 부가 정보를, 상기 메인 정보의 음성 데이터와는 상이한 샘플링 레이트 또는 비트 레이트로 기록하는 것을 특징으로 하는 영상 음성 기록 방법.
  40. 제31항에 있어서, 상기 음성 부가 정보를, 상기 메인 정보의 음성 데이터와는 상이한 파일 포맷으로 기록하는 것을 특징으로 하는 영상 음성 기록 방법.
  41. 제31항에 있어서, 상기 기록매체에는, 상기 음성 부가 정보를 기록하기 위한 영역을 미리 확보해 두는 것을 특징으로 하는 영상 음성 기록 방법.
  42. 제31항에 있어서, 상기 메인 정보의 기록 중, 기록 일시 정지 중, 기록 정지 중, 재생 중, 재생 일시 정지 중, 재생 정지 중에서, 어느 쪽의 상태로부터도 상기 음성 부가 정보를 기록할 수 있는 것을 특징으로 하는 영상 음성 기록 방법.
  43. 제42항에 있어서, 상기 메인 정보의 기록 중에 상기 음성 부가 정보의 기록을 시작할 경우, 상기 음성 부가 정보의 기록 개시 시점에서 기록 중인 메인 정보의 프레임 위치에 상기 음성 부가 정보를 연관시켜 기록하는 것을 특징으로 하는 영상 음성 기록 방법.
  44. 제42항에 있어서, 상기 메인 정보의 기록 일시 정지 중에 상기 음성 부가 정보의 기록을 시작할 경우, 기록 일시 정지 중인 상기 메인 정보의 프레임 위치에 상기 음성 부가 정보를 연관시켜서 기록하는 것을 특징으로 하는 영상 음성 기록 방법.
  45. 제42항에 있어서, 상기 메인 정보의 기록 정지 중에 상기 음성 부가 정보의 기록을 시작할 경우, 최후에 기록한 메인 정보에 상기 음성 부가 정보를 연관시켜서 기록하는 것을 특징으로 하는 영상 음성 기록 방법.
  46. 제42항에 있어서, 상기 메인 정보의 기록 정지 중에 상기 음성 부가 정보의 기록을 시작할 경우, 다음에 기록하는 상기 메인 정보에 상기 음성 부가 정보를 연관시켜서 기록하는 것을 특징으로 하는 영상 음성 기록 방법.
  47. 제42항에 있어서, 상기 메인 정보의 재생 중에 상기 음성 부가 정보의 기록을 시작할 경우, 상기 음성 부가 정보의 기록 개시 시점에서 재생 중인 상기 메인 정보의 프레임 위치에 상기 음성 부가 정보를 연관시켜서 기록하는 것을 특징으로 하는 영상 음성 기록 방법.
  48. 제42항에 있어서, 상기 메인 정보의 재생 일시 정지 중에 상기 음성 부가 정보의 기록을 시작할 경우, 재생 일시 정지 중인 상기 메인 정보의 프레임 위치에 상기 음성 부가 정보를 연관시켜서 기록하는 것을 특징으로 하는 영상 음성 기록 방법.
  49. 제42항에 있어서, 상기 메인 정보의 재생 정지 중에 상기 음성 부가 정보의 기록을 시작할 경우, 정지 중인 상기 메인 정보에 연관시켜서 기록하는 것을 특징 으로 하는 영상 음성 기록 방법.
  50. 제31항에 있어서, 상기 음성 부가 정보가 연관되어 있는 상기 메인 정보를 삭제한 경우, 삭제된 메인 정보에 연관된 음성 부가 정보도 동시에 삭제하는 것을 특징으로 하는 영상 음성 기록 방법.
  51. 제31항에 있어서, 상기 음성 부가 정보의 기록 시작 시의, 상기 메인 정보의 상태를 나타내는 정보를 기록하는 것을 특징으로 하는 영상 음성 기록 방법.
  52. 제31항에 있어서, 상기 음성 부가 정보를 상기 메인 정보의 시간 축과 비동기적으로 상기 메인 정보와 연관시켜 기록하는 것을 특징으로 하는 영상 음성 기록 방법.
  53. 제31항에 있어서, 상기 음성 정보를 부가한 사용자를 특정하는 정보를 관리 파일 내에 기록하는 것을 특징으로 하는 영상 음성 기록 방법.
  54. 제31항에 있어서, 상기 음성 부가 정보의 관리 정보를 XML 파일로서 기록하는 것을 특징으로 하는 영상 음성 기록 방법.
  55. 제31항에 기재한 영상 음성 기록 방법에 의해 메인 정보와 음성 부가 정보가 기록된 기록매체의 재생 방법으로서,
    상기 메인 정보의 섬네일 화상을 표시하고,
    동일한 메인 정보에 1개 이상의 음성 부가 정보가 연관되어 있고, 1개 이상의 음성 부가 정보 중 어느 1개가 선택되었을 때에, 그 선택된 음성 부가 정보가 연관된 프레임 위치에 있는 메인 정보의 섬네일 화상을 표시하는 것을 특징으로 하는 영상 음성 재생 방법.
  56. 제55항에 있어서, 상기 음성 부가 정보를 재생할 때, 상기 음성 부가 정보에 연관된 메인 정보의 정지 화상을 계속해서 표시하는 것을 특징으로 하는 영상 음성 재생 방법.
  57. 제55항에 있어서, 상기 음성 부가 정보를 재생할 때, 상기 음성 부가 정보에 연관된 상기 메인 정보 중의 영상 정보를 동시에 재생하는 것을 특징으로 하는 영상 음성 재생 방법.
  58. 제55항에 있어서, 상기 1개의 음성 부가 정보가 선택되었을 때에, 상기 선택된 음성 부가 정보와 연관되어 있는 상기 메인 정보의 프레임 위치로부터 상기 메인 정보를 재생할 수 있도록 하는 것을 특징으로 하는 영상 음성 재생 방법.
  59. 제55항에 있어서, 상기 음성 부가 정보를 재생 중에, 재생 중인 음성 부가 정보와 연관되어 있는 상기 메인 정보의 특정 프레임 위치로부터 상기 메인 정보를 재생할 수 있도록 하는 것을 특징으로 하는 영상 음성 재생 방법.
  60. 제31항에 기재한 영상 음성 기록 방법에 의해 메인 정보와 음성 부가 정보가 기록된 기록매체의 재생 방법으로서,
    상기 음성 부가 정보를 상기 메인 정보의 시간 축과 동기를 맞추지 않고 재생하는 것을 특징으로 하는 영상 음성 재생 방법.
KR1020067007101A 2003-10-16 2004-06-29 영상 음성 기록 재생 장치, 영상 음성 기록 방법 및 영상음성 재생 방법 KR100801396B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2003356079 2003-10-16
JPJP-P-2003-00356079 2003-10-16

Publications (2)

Publication Number Publication Date
KR20060096026A KR20060096026A (ko) 2006-09-05
KR100801396B1 true KR100801396B1 (ko) 2008-02-05

Family

ID=34463188

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020067007101A KR100801396B1 (ko) 2003-10-16 2004-06-29 영상 음성 기록 재생 장치, 영상 음성 기록 방법 및 영상음성 재생 방법

Country Status (7)

Country Link
US (1) US20070127888A1 (ko)
EP (1) EP1677531A4 (ko)
JP (1) JP4271195B2 (ko)
KR (1) KR100801396B1 (ko)
CN (1) CN100484222C (ko)
CA (1) CA2542390A1 (ko)
WO (1) WO2005039175A1 (ko)

Families Citing this family (138)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
CN100409681C (zh) * 2005-08-19 2008-08-06 上海晨兴电子科技有限公司 影音同步录制及播放方法
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US8301995B2 (en) * 2006-06-22 2012-10-30 Csr Technology Inc. Labeling and sorting items of digital data by use of attached annotations
KR100856407B1 (ko) 2006-07-06 2008-09-04 삼성전자주식회사 메타 데이터를 생성하는 데이터 기록 및 재생 장치 및 방법
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
KR101309284B1 (ko) 2006-12-05 2013-09-16 삼성전자주식회사 오디오 사용자 인터페이스 처리 방법 및 장치 및 그를적용한 오디오 기기
CN101202873B (zh) * 2006-12-13 2012-07-25 株式会社日立制作所 信息记录再现装置和信息记录再现方法
US20080167009A1 (en) * 2007-01-07 2008-07-10 Gregory Novick Voicemail Systems and Methods
US8553856B2 (en) * 2007-01-07 2013-10-08 Apple Inc. Voicemail systems and methods
JP5009650B2 (ja) * 2007-03-02 2012-08-22 株式会社エクシング 合成装置、合成システム、合成方法及びプログラム
KR101125286B1 (ko) * 2007-03-27 2012-03-21 삼성전자주식회사 부가 데이터 업데이트 방법 및 재생 장치
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US20090062944A1 (en) * 2007-09-04 2009-03-05 Apple Inc. Modifying media files
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US8682848B2 (en) * 2008-07-08 2014-03-25 Broadcom Corporation Method and system for automatic detection of multimedia settings
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
WO2010067118A1 (en) 2008-12-11 2010-06-17 Novauris Technologies Limited Speech recognition involving a mobile device
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US20120309363A1 (en) 2011-06-03 2012-12-06 Apple Inc. Triggering notifications associated with tasks items that represent tasks to perform
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
JP5540244B2 (ja) * 2009-10-24 2014-07-02 株式会社コルグ 多重録音装置
KR101641240B1 (ko) * 2009-12-17 2016-07-21 엘지전자 주식회사 영상 표시 방법 및 그 장치
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
CN102013179A (zh) * 2010-12-02 2011-04-13 无敌科技(西安)有限公司 同时同步录播方式的电子学习系统及方法
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
JP2013055569A (ja) * 2011-09-06 2013-03-21 Sony Corp 撮像装置、情報処理装置、それらの制御方法、および、プログラム
KR101356006B1 (ko) * 2012-02-06 2014-02-12 한국과학기술원 구간설정이 가능한 음성기반 멀티미디어 컨텐츠 태깅 방법 및 장치
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
KR102042265B1 (ko) * 2012-03-30 2019-11-08 엘지전자 주식회사 이동 단말기
CN102682820B (zh) * 2012-05-03 2015-01-28 福建星网视易信息系统有限公司 嵌入式linux平台媒体播放方法和系统
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
KR101943320B1 (ko) * 2012-09-21 2019-04-17 엘지전자 주식회사 이동단말기 및 그 제어방법
EP3809407A1 (en) 2013-02-07 2021-04-21 Apple Inc. Voice trigger for a digital assistant
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
AU2014233517B2 (en) 2013-03-15 2017-05-25 Apple Inc. Training an at least partial voice command system
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
KR101922663B1 (ko) 2013-06-09 2018-11-28 애플 인크. 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
JP2016521948A (ja) 2013-06-13 2016-07-25 アップル インコーポレイテッド 音声コマンドによって開始される緊急電話のためのシステム及び方法
AU2014306221B2 (en) 2013-08-06 2017-04-06 Apple Inc. Auto-activating smart responses based on activities from remote devices
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9966065B2 (en) 2014-05-30 2018-05-08 Apple Inc. Multi-command single utterance input method
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
JP2016181767A (ja) * 2015-03-23 2016-10-13 パナソニックＩｐマネジメント株式会社 ウェアラブルカメラ及びウェアラブルカメラシステム
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179309B1 (en) 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
DK201770429A1 (en) 2017-05-12 2018-12-14 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK179549B1 (en) 2017-05-16 2019-02-12 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
CN110740275B (zh) * 2019-10-30 2022-07-19 中央电视台 一种非线性编辑系统
CA3188009A1 (en) * 2020-06-30 2022-01-06 Seff Technology Corporation System and method for digital information management

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003158697A (ja) * 2001-11-21 2003-05-30 Fuji Photo Film Co Ltd 撮像装置及びプログラム

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3528214B2 (ja) * 1993-10-21 2004-05-17 株式会社日立製作所 画像表示方法及び装置
US5600775A (en) * 1994-08-26 1997-02-04 Emotion, Inc. Method and apparatus for annotating full motion video and other indexed data structures
US6006241A (en) * 1997-03-14 1999-12-21 Microsoft Corporation Production of a video stream with synchronized annotations over a computer network
US6529920B1 (en) * 1999-03-05 2003-03-04 Audiovelocity, Inc. Multimedia linking device and method
US6378132B1 (en) * 1999-05-20 2002-04-23 Avid Sports, Llc Signal capture and distribution system
JP2001136482A (ja) * 1999-11-09 2001-05-18 Matsushita Electric Ind Co Ltd 映像音声記録再生装置
JP3942792B2 (ja) * 2000-03-28 2007-07-11 パイオニア株式会社 映像編集方法及び装置、並びにそのための記憶媒体
GB2366926A (en) * 2000-09-06 2002-03-20 Sony Uk Ltd Combining material and data
US20020089519A1 (en) * 2001-01-05 2002-07-11 Vm Labs, Inc. Systems and methods for creating an annotated media presentation
US20040216173A1 (en) * 2003-04-11 2004-10-28 Peter Horoszowski Video archiving and processing method and apparatus

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003158697A (ja) * 2001-11-21 2003-05-30 Fuji Photo Film Co Ltd 撮像装置及びプログラム

Also Published As

Publication number Publication date
CA2542390A1 (en) 2005-04-28
WO2005039175A1 (ja) 2005-04-28
US20070127888A1 (en) 2007-06-07
JP4271195B2 (ja) 2009-06-03
CN100484222C (zh) 2009-04-29
JPWO2005039175A1 (ja) 2007-02-08
EP1677531A4 (en) 2009-03-04
KR20060096026A (ko) 2006-09-05
CN1868209A (zh) 2006-11-22
EP1677531A1 (en) 2006-07-05

Similar Documents

Publication Publication Date Title
KR100801396B1 (ko) 영상 음성 기록 재생 장치, 영상 음성 기록 방법 및 영상음성 재생 방법
JP3569191B2 (ja) オーディオ情報の記録、編集、再生方法及び情報記憶媒体
JP3067801B2 (ja) ビデオ情報のデジタル記憶及び表示を提供するデジタル・オーディオ・ワークステーション
KR100387387B1 (ko) 콘텐츠를 액세싱하기 위한 방법 및 장치
US8184948B2 (en) Recording apparatus optical disk and computer-readable recording medium
JP3570286B2 (ja) 論理構造化された記録領域を有する情報記録媒体、並びにこの情報記録媒体を作成するための情報の作成方法及び装置及びその作成プログラムが記録された情報記録媒体、並びにこの情報記録媒体の作成方法及び装置及びその作成プログラムが記録された情報記録媒体、並びにこの情報記録媒体を使用した画像情報又は音情報の記録された情報記録媒体の作成方法及び装置及びその作成プログラムが記録された情報記録媒体。
US20040008970A1 (en) Enhanced bookmarks for digital video playback
KR100656207B1 (ko) ―ｖｒ포맷에서 북마크를 이용해 자동으로 재생목록을 생성하는 것이 가능한 영상 기록/재생 장치 및 그 재생목록 생성방법
JPH0944394A (ja) マルチメディアデータファイリングシステム
US20120308199A1 (en) Method And System For Displaying A Menu Which Has An Icon And Additional Information Corresponding To Stored Image Data, Wherein The Icon Can Display The Image Data With The Additional Information
JP4218029B2 (ja) 映像記録装置
JP2000236496A (ja) ディスク記憶媒体およびその録画編集再生方法およびその録画編集再生装置
US20020197058A1 (en) Recording apparatus
JP4807250B2 (ja) 記録方法
CN100562938C (zh) 信息处理设备和方法
JP4375052B2 (ja) 映像編集支援方法
JP4181846B2 (ja) 記録再生装置及びその再生方法
JP3540785B2 (ja) オーディオ情報の記録、編集、再生方法及び情報記憶媒体
JP4946426B2 (ja) 記録方法
JP4464012B2 (ja) 記録装置及びその方法
JP2002008353A (ja) 再生装置、記録再生装置及び記録装置
JP2002245754A (ja) ディスク記憶媒体およびその録画編集再生方法およびその録画編集再生装置
JP2003186885A (ja) Ｄｖｄ作成システム
JP3569244B2 (ja) オーディオ情報の記録、編集、再生方法及び情報記憶媒体
JP3569245B2 (ja) オーディオ情報の記録、編集、再生方法及び情報記憶媒体

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
G170 Publication of correction
FPAY Annual fee payment

Payment date: 20130104

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20140103

Year of fee payment: 7

LAPS Lapse due to unpaid annual fee