JP3675465B2 - 符号化制御装置および符号化システム - Google Patents

符号化制御装置および符号化システム Download PDF

Info

Publication number
JP3675465B2
JP3675465B2 JP2003369389A JP2003369389A JP3675465B2 JP 3675465 B2 JP3675465 B2 JP 3675465B2 JP 2003369389 A JP2003369389 A JP 2003369389A JP 2003369389 A JP2003369389 A JP 2003369389A JP 3675465 B2 JP3675465 B2 JP 3675465B2
Authority
JP
Japan
Prior art keywords
offset
encoding
audio signal
chapter
recording
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003369389A
Other languages
English (en)
Other versions
JP2005136634A (ja
Inventor
憲一郎 有留
裕信 宮崎
幸雄 磯部
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to JP2003369389A priority Critical patent/JP3675465B2/ja
Application filed by Sony Corp filed Critical Sony Corp
Priority to TW93133061A priority patent/TWI280750B/zh
Priority to KR1020057007199A priority patent/KR101082221B1/ko
Priority to US10/531,950 priority patent/US7835621B2/en
Priority to CNB2004800014032A priority patent/CN100438627C/zh
Priority to EP04793399A priority patent/EP1583366A4/en
Priority to PCT/JP2004/016479 priority patent/WO2005041583A1/ja
Publication of JP2005136634A publication Critical patent/JP2005136634A/ja
Application granted granted Critical
Publication of JP3675465B2 publication Critical patent/JP3675465B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/30—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
    • G11B27/3027—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording used signal is digitally coded
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10—Digital recording or reproducing
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/327—Table of contents
    • G11B27/329—Table of contents on a disc [VTOC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/806—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal
    • H04N9/8063—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal using time division multiplex of the PCM audio and PCM video signals
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/20—Disc-shaped record carriers
    • G11B2220/21—Disc-shaped record carriers characterised in that the disc is of read-only, rewritable, or recordable type
    • G11B2220/215—Recordable discs
    • G11B2220/216—Rewritable discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/20—Disc-shaped record carriers
    • G11B2220/21—Disc-shaped record carriers characterised in that the disc is of read-only, rewritable, or recordable type
    • G11B2220/215—Recordable discs
    • G11B2220/218—Write-once discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/20—Disc-shaped record carriers
    • G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537—Optical discs
    • G11B2220/2562—DVDs [digital versatile discs]; Digital video discs; MMCDs; HDCDs

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

本発明は、符号化制御装置および符号化システムに関し、特に動画像信号と音声信号とを同期させて符号化の制御を行う符号化制御装置、符号化システム、および、これらにおける処理方法ならびに当該方法をコンピュータに実行させるプログラムに関する。
近年、動画像（ビデオ）データや音声（オーディオ）データを記録できる記録媒体として光ディスクが注目されている。この光ディスクは、映画などのコンテンツ商品のメディアとしてだけでなく、ユーザ側で記録を行うための書き込み型メディアとしても用いられるようになっている。書き込み型メディアとしては、例えば、同一領域について一度だけの記録を可能としたＤＶＤ−Ｒ規格や、繰り返し書き換え可能なＤＶＤ−ＲＷ規格などが知られている。これら光メディアのファイルフォーマットとしては、再生専用ディスクのためのＤＶＤ−Ｖｉｄｅｏ規格が知られているが、書き込み型メディアに対してもこのＤＶＤ−Ｖｉｄｅｏ規格に準拠した書き込みを行うことができるようになっている。
ＤＶＤ−Ｖｉｄｅｏ規格では、一つのディスク当たり最大９９のタイトルを記録できるようになっており、さらに各タイトルは最大９９のチャプタ（ＰＴＴ：Part of TiTle）を含むことができるようになっている。上述のＤＶＤ−ＲやＤＶＤ−ＲＷに対してカムコーダ（camcorder：camera and recorder）により記録を行う場合、記録開始から記録終了までの１回の記録単位がチャプタとして記録され、所定の条件を満たすまで同一のタイトルとして記録される。タイトルを閉じる所定の条件とは、例えば、ディスクがイジェクト（排出）された場合、タイトル内で９９チャプタに達した場合、タイトル内で９９セルに達した場合、動画記録から静止画記録に移行した場合などである。
このようにチャプタ単位で記録されたデータを再生すると、チャプタ間に微妙な隙間が生じてしまい、一瞬途切れたような表示が行われしまう。カムコーダにおける記録単位は十数秒から数十秒程度が標準的であり、その度に再生が途切れてしまうのは望ましくない。
そのため、従来より、ビデオストリーム間を見た目として途切れないように接続するシームレス接続の技術が提案されている（例えば、特許文献１参照。）。
特開２００１−３５２５２１号公報（図２）
上述の従来技術では、ビデオデータとオーディオデータとの間のずれを吸収するために、オーディオデータをビデオデータに相当する時間分含めて多重化するよう制御している。例えば、ＮＴＳＣ（National Television System Committee）方式ではビデオデータのフレーム周波数は約２９．９７Ｈｚであり、１ＶＯＢＵ＝１ＧＯＰ＝１５フレームとすると、６４ＶＯＢＵで１／２９．９７×１５×６４＝３２．０３２０３２・・・［秒］に相当する。ＡＣ−３（Audio Code number 3; Dolby Digital）方式のオーディオデータは３２［ミリ秒］を処理単位（ＡＡＵ）としているため、上述の従来技術では、６４ＶＯＢＵに対して１ＡＡＵを増やし、さらに６４０００ＶＯＢＵに対して１ＡＡＵを増やすことによりビデオデータとオーディオデータとの間のずれを吸収するようにしている。
しかしながら、このような上述の従来技術ではビデオデータとオーディオデータとの間のずれを完全には吸収することができず、ずれが集積していくことになる。また、この上述の従来技術では、ビデオデータおよびオーディオデータの相当する時間が平均的に等しくなるようにしているに過ぎず、シームレス接続の接続点においてずれが生じるおそれは依然として存在する。
そこで、本発明は、ビデオデータとオーディオデータとの間のずれを生じることなくチャプタ間のシームレス接続を行う動画像符号化装置を提供することを目的とする。
上記課題を解決するために本発明の請求項１記載の符号化制御装置は、先行チャプタに続く後続チャプタを記録する際に動画像信号よりも音声信号の符号化を早く開始すべき時間に相当するオフセットを保持するオフセット保持手段と、少なくとも前記後続チャプタがタイトルの先頭チャプタか否かを判別することによって上記先行チャプタと上記後続チャプタとの間でシームレス接続が可能か否を判別し、上記シームレス接続が可能であれば上記後続チャプタの直前の上記オフセットを上記オフセットの初期値とし、上記シームレス接続が不可能であればゼロを上記オフセットの初期値として設定する記録モード判別手段と、上記動画像信号および上記音声信号の符号化の進行状況に応じて所定の処理単位毎に上記オフセットを更新するオフセット更新手段と、上記オフセットに従って上記動画像信号および上記音声信号の符号化の開始または停止を指示する記録制御手段とを具備する。これにより、動画像信号と音声信号との間のオフセットに従って符号化を制御して、動画像信号と音声信号との間のずれを生じることなくチャプタ間のシームレス接続を行うという作用をもたらす。
また、本発明の請求項２記載の符号化制御装置は、請求項１記載の符号化制御装置において、上記記録制御手段が、記録開始の際には上記オフセットに相当する時間だけ上記動画像信号よりも早く上記音声信号の符号化を開始し、記録停止の際には上記動画像信号および上記音声信号の各記録単位の符号化がそれぞれ終了した後に符号化を停止するものである。これにより、シームレス接続を行う後続チャプタの符号化開始の際に動画像信号と音声信号との間のずれをオフセットにより吸収するという作用をもたらす。
また、本発明の請求項３記載の符号化制御装置は、請求項１記載の符号化制御装置において、上記オフセット更新手段が、上記オフセットに対して上記動画像信号の処理単位毎の通知に基づいた値を加えるとともに上記音声信号の処理単位毎の通知に基づいた値を減じることにより上記オフセットを更新する。これにより、オフセットの更新を符号化の進行状況に応じて動画像信号の処理単位毎または音声信号の処理単位毎に行わせるという作用をもたらす。
また、本発明の請求項４記載の符号化制御装置は、請求項１記載の符号化制御装置において、上記音声信号の記録開始または記録停止の指示に従って上記音声信号の音量に関する制御を行うフェード制御手段をさらに具備する。これにより、シームレス接続の接続点における音量を制御させるという作用をもたらす。また、本発明の請求項５記載の符号化制御装置は、請求項４記載の符号化制御装置において、上記フェード制御手段が、記録開始時には消音状態からフェードインするよう上記音声信号の音量を制御し、記録停止時にはフェードアウトするよう上記音声信号の音量を制御するものである。これにより、シームレス接続の接続点における雑音の発生を回避させるという作用をもたらす。
また、本発明の請求項６記載の符号化制御装置は、請求項１記載の符号化制御装置において、上記後続チャプタの直前の上記オフセットが不揮発性メモリに保持されるものである。
また、本発明の請求項６記載の符号化システムは、動画像信号を符号化する動画像符号化手段と、音声信号を符号化する音声符号化手段と、先行チャプタに続く後続チャプタを記録する際に上記動画像信号よりも上記音声信号の符号化を早く開始すべき時間に相当するオフセットを保持するオフセット保持手段と、少なくとも上記後続チャプタがタイトルの先頭チャプタか否かを判別することによって上記先行チャプタと上記後続チャプタとの間でシームレス接続が可能か否を判別し、上記シームレス接続が可能であれば上記後続チャプタの直前の上記オフセットを上記オフセットの初期値とし、上記シームレス接続が不可能であればゼロを上記オフセットの初期値として設定する記録モード判別手段と、上記動画像符号化手段および音声符号化手段における上記動画像信号および上記音声信号の符号化の進行状況に応じて所定の処理単位毎に上記オフセットを更新するオフセット更新手段と、上記オフセットに従って上記動画像信号および上記音声信号の符号化の開始または停止を指示する記録制御手段と、上記動画像符号化手段および音声符号化手段による上記動画像信号および上記音声信号の符号化出力を多重化する多重化手段とを具備する。これにより、動画像信号と音声信号との間のオフセットに従って符号化を制御して、動画像信号と音声信号との間のずれを生じることなくチャプタ間のシームレス接続を行って符号化するという作用をもたらす。
また、本発明の請求項７記載の符号化制御方法は、先行チャプタに続く後続チャプタを記録する際に動画像信号よりも音声信号の符号化を早く開始すべき時間に相当するオフセットを保持するオフセット保持手段を備える符号化制御装置において、少なくとも上記後続チャプタがタイトルの先頭チャプタか否かを判別することによって前記先行チャプタと上記後続チャプタとの間でシームレス接続が可能か否を判別する手順と、上記シームレス接続が可能であれば上記先行チャプタにおいて更新された上記オフセットを上記オフセットの初期値とし、上記シームレス接続が不可能であればゼロを上記オフセットの初期値とする手順と、上記音声信号の符号化を開始する手順と、上記音声信号の符号化が開始されてから上記オフセットに相当する時間経過時に上記動画像信号の符号化を開始する手順と、上記動画像信号および上記音声信号の符号化の進行状況に応じて所定の処理単位毎に上記オフセットを更新する手順と、記録停止が指示されると上記音声信号および上記動画像信号の各記録単位の符号化がそれぞれ終了した後に符号化を停止する手順とを具備する。これにより、動画像信号と音声信号との間のオフセットに従って符号化を制御して、動画像信号と音声信号との間のずれを生じることなくチャプタ間のシームレス接続を行うという作用をもたらす。
また、本発明の請求項８記載の符号化制御方法は、先行チャプタに続く後続チャプタを記録する際に動画像信号よりも音声信号の符号化を早く開始すべき時間に相当するオフセットを保持するオフセット保持手段を備える符号化制御装置において、少なくとも上記後続チャプタがタイトルの先頭チャプタか否かを判別することによって上記先行チャプタと上記後続チャプタとの間でシームレス接続が可能か否を判別する手順と、上記シームレス接続が可能であれば上記先行チャプタにおいて更新された上記オフセットを上記オフセットの初期値とし、上記シームレス接続が不可能であればゼロを上記オフセットの初期値とする手順と、上記音声信号の符号化を開始する手順と、上記音声信号の符号化が開始されてから上記オフセットに相当する時間経過時に上記動画像信号の符号化を開始する手順と、上記符号化開始された上記音声信号の最初の記録単位について消音状態からフェードインするよう上記音声信号の音量を制御する手順と、上記動画像信号および上記音声信号の符号化の進行状況に応じて所定の処理単位毎に上記オフセットを更新する手順と、記録停止が指示されると上記音声信号および上記動画像信号の各記録単位の符号化がそれぞれ終了した後に符号化を停止する手順と、上記符号化停止された上記音声信号の最後の記録単位についてフェードアウトするよう上記音声信号の音量を制御する手順とを具備する。これにより、動画像信号と音声信号との間のオフセットに従って符号化を制御して、チャプタ間のシームレス接続の接続点における雑音の発生を回避させるという作用をもたらす。
また、本発明の請求項９記載のプログラムは、先行チャプタに続く後続チャプタを記録する際に動画像信号よりも音声信号の符号化を早く開始すべき時間に相当するオフセットを保持するオフセット保持手段を備える符号化制御装置において、少なくとも上記後続チャプタがタイトルの先頭チャプタか否かを判別することによって上記先行チャプタと上記後続チャプタとの間でシームレス接続が可能か否を判別する手順と、上記シームレス接続が可能であれば上記先行チャプタにおいて更新された上記オフセットを上記オフセットの初期値とし、上記シームレス接続が不可能であればゼロを上記オフセットの初期値とする手順と、上記音声信号の符号化を開始する手順と、上記音声信号の符号化が開始されてから上記オフセットに相当する時間経過時に上記動画像信号の符号化を開始する手順と、上記動画像信号および上記音声信号の符号化の進行状況に応じて所定の処理単位毎に上記オフセットを更新する手順と、記録停止が指示されると上記音声信号および上記動画像信号の各記録単位の符号化がそれぞれ終了した後に符号化を停止する手順とをコンピュータに実行させるものである。これにより、動画像信号と音声信号との間のオフセットに従って符号化を制御して、動画像信号と音声信号との間のずれを生じることなくチャプタ間のシームレス接続を行うという作用をもたらす。
また、本発明の請求項１０記載のプログラムは、先行チャプタに続く後続チャプタを記録する際に動画像信号よりも音声信号の符号化を早く開始すべき時間に相当するオフセットを保持するオフセット保持手段を備える符号化制御装置において、少なくとも上記後続チャプタがタイトルの先頭チャプタか否かを判別することによって上記先行チャプタと上記後続チャプタとの間でシームレス接続が可能か否を判別する手順と、上記シームレス接続が可能であれば上記先行チャプタにおいて更新された上記オフセットを上記オフセットの初期値とし、上記シームレス接続が不可能であればゼロを上記オフセットの初期値とする手順と、上記音声信号の符号化を開始する手順と、上記音声信号の符号化が開始されてから上記オフセットに相当する時間経過時に上記動画像信号の符号化を開始する手順と、上記符号化開始された上記音声信号の最初の記録単位について消音状態からフェードインするよう上記音声信号の音量を制御する手順と、上記動画像信号および上記音声信号の符号化の進行状況に応じて所定の処理単位毎に上記オフセットを更新する手順と、記録停止が指示されると上記音声信号および上記動画像信号の各記録単位の符号化がそれぞれ終了した後に符号化を停止する手順と、上記符号化停止された上記音声信号の最後の記録単位についてフェードアウトするよう上記音声信号の音量を制御する手順とをコンピュータに実行させるものである。これにより、動画像信号と音声信号との間のオフセットに従って符号化を制御して、チャプタ間のシームレス接続の接続点における雑音の発生を回避させるという作用をもたらす。
本発明によれば、ビデオデータとオーディオデータとの間のずれを生じることなくチャプタ間のシームレス接続を行う動画像符号化装置を提供するという優れた効果を奏し得る。
次に本発明の実施の形態について図面を参照して詳細に説明する。
図１は、本発明の実施の形態における動画像符号化装置の構成例を示す図である。この動画像符号化装置は、動画像信号を符号化するビデオエンコーダ１００と、音声信号を符号化するオーディオエンコーダ２００と、ビデオエンコーダ１００およびオーディオエンコーダ２００の出力を多重化するマルチプレクサ３００と、マルチプレクサ３００により多重化されたストリームデータを記録媒体４９０に記録する媒体記録部４００と、ビデオエンコーダ１００およびオーディオエンコーダ２００における符号化を制御する符号化制御部５００とを備えている。
符号化制御部５００は、プロセッサ５１０と、ＲＯＭ５２０と、ＲＡＭ５３０と、入出力インターフェース５４０と、これらを相互に接続するバス５５０とを備えている。プロセッサ５１０は、ビデオエンコーダ１００およびオーディオエンコーダ２００における符号化の進行状況を参照しながら、ビデオエンコーダ１００およびオーディオエンコーダ２００における符号化の開始ならびに停止を制御する。ＲＯＭ５２０は、プロセッサ５１０により実行されるプログラムや各種パラメータ等を保持するメモリであり、例えば、フラッシュメモリ等のＥＰＲＯＭにより実現される。ＲＡＭ５３０は、プロセッサ５１０におけるプログラム実行に必要な作業データ等を保持するメモリであり、例えばＳＲＡＭやＤＲＡＭ等により実現される。入出力インターフェース５４０は、外部とのデータのやり取りを行うものであり、例えば、記録媒体４９０への記録の開始ならびに停止の指示やＲＯＭ５２０内のプログラムの更新等のために使用される。
図２は、本発明の実施の形態におけるオーディオエンコーダ２００の構成例を示す図である。このオーディオエンコーダ２００では、サンプリング回路２１０と、フェード回路２２０と、符号化器２３０とがパイプライン接続されており、サンプリング回路２１０とフェード回路２２０との間にはサンプリングバッファ２４０が、フェード回路２２０と符号化器２３０との間には符号化前バッファ２５０がそれぞれタイミングの緩衝のために接続されている。
サンプリング回路２１０は、信号線２０１から入力された音声信号をサンプリング（標本化）してサンプリングバッファ２４０に格納する。このサンプリング回路２１０におけるサンプリング周波数としては、例えば、ＤＶＤ−Ｖｉｄｅｏ規格で用いられるＡＣ−３の場合、４８ｋＨｚが使用される。この場合、サンプリング回路２１０は、図３に示すＡＣ−３方式の同期フレームの処理開始または処理終了の際に、信号線２１９により符号化制御部５００に対してその旨を通知する。
フェード回路２２０は、信号線２４９から供給される音声信号に対して音量の調整を行う。例えば、あるチャプタを記録する際に、チャプタの先頭部分では消音状態からフェードインし、チャプタ最後では再びフェードアウトするよう音量を調整する。この音量調整のタイミングは、信号線２２１を介して符号化制御部５００により指示される。
符号化器２３０は、信号線２５９から供給される音声信号を符号化して信号線２９９に出力する。この符号化処理を行うか否かは、信号線２３１を介して符号化制御部５００により制御される。
図３は、ＡＣ−３方式による音声信号の同期フレームの構造を示す図である。この同期フレームは、ＡＣ−３方式におけるビットストリームの処理単位であり、ＡＡＵ（Audio Access Unit）と呼ばれる。この同期フレームは、同期情報７１０と、ビットストリーム情報７１１と、６つのオーディオブロック７１２乃至７１７と、補助データ７１８と、ＣＲＣ（Cyclic Redundancy Check）７１９とを備える。
同期情報７１０は、同期フレームの第１のヘッダ情報であり、サンプリング周波数等を保持する。ビットストリーム情報７１１は、同期フレームの第２のヘッダ情報であり、時刻情報（タイムスタンプ）等を保持する。
オーディオブロック７１２乃至７１７の各々は、２５６個のオーディオサンプルを保持する。従って、１つのＡＡＵにおける６つのオーディオブロックで、１５３６個のオーディオサンプルを保持することになる。１５３６個のオーディオサンプルは、サンプリング周波数４８ｋＨｚで、１５３６／４８＝３２ｍｓ［ミリ秒］のオーディオデータに相当する。
補助データ７１８は、ビット長の調整のために用いられる。ＣＲＣ７１９は、同期フレームにおけるバースト誤りを検出するための巡回冗長検査符号である。
図４は、ＤＶＤ−Ｖｉｄｅｏ規格によるデータ構造を示す図である。記録媒体４９０の記録エリアは、ディスクの半径方向に見て、最内周側から順に、リードインエリア８０１、ファイル管理エリア８０２、データ記録エリア８０３、リードアウトエリア８０４の順に区分けされる。
ファイル管理エリア８０２は、リードインエリア側から、ＵＤＦ（Universal Disc Format）エリアおよびＶＭＧ（Video ManaGer）エリアを含む。これらＵＤＦエリアおよびＶＭＧエリアは、ＤＶＤに記録された画像データ等のファイルを管理する管理用情報の記録エリアである。ＵＤＦエリアは、ＵＤＦ規格とＩＳＯ９６６０規格をサポートすることにより、コンピュータでＤＶＤを読むことができるようにするためのものである。ＶＭＧエリアは、ＤＶＤ管理用情報の記録エリアである。
データ記録エリア８０３は、動画像信号や音声信号等を記録するエリアであり、ビデオタイトルセット（ＶＴＳ：Video Title Set）８１１と呼ばれるデータ群を単位として、データの記録がなされる。ビデオタイトルセット８２０の各々は、ビデオタイトルセット情報（ＶＴＳＩ：Video Title Set Information）８２１と、ビデオタイトルセットメニュー（ＶＴＳＭ＿ＶＯＢＳ：Video Object Set for the VTSM）８２２と、ビデオタイトルセットタイトル（ＶＴＳＴＴ＿ＶＯＢＳ：Video Object Set for Titles in a VTS）８２３と、バックアップ（ＶＴＳＩ（ＢＵＰ）：Back-UP of VTSI）８２４とからなる。
ビデオタイトルセット情報（ＶＴＳＩ）８２１は、ビデオタイトルセットに対する制御情報である。ビデオタイトルセットメニュー（ＶＴＳＭ＿ＶＯＢＳ）８２２は、ビデオタイトルセット内の各種メニューのためのコンテンツである。ビデオタイトルセットタイトル（ＶＴＳＴＴ＿ＶＯＢＳ）８２３は、タイトルを再生するためのコンテンツである。バックアップ（ＶＴＳＩ（ＢＵＰ））８２４は、ビデオタイトルセット情報８２１のバックアップコピーである。
ビデオタイトルセットタイトル（ＶＴＳＴＴ＿ＶＯＢＳ）８２３には、一または複数個のビデオオブジェクト（ＶＯＢ）８３１と呼ばれるオブジェクト集合が保持される。このＶＯＢ８３１には一または複数個のセル（Ｃｅｌｌ）８４１が含まれ、このセル８４１にはさらに一または複数個のビデオオブジェクト単位（ＶＯＢＵ）８５１が含まれる。このＶＯＢＵ８５１には、１ＧＯＰ（Group Of Picture）に相当する動画像信号やそれに対応する音声信号等が含まれる。動画像信号の符号化には、ＭＥＰＧ−２方式またはＭＰＥＧ−１方式が用いられる。音声信号の符号化には、ＡＣ−３方式、リニアＰＣＭ方式、ＭＰＥＧ Ａｕｄｉｏ方式等が用いられる。
動画オブジェクト単位（ＶＯＢＵ）８５１は、複数個のパック８６１から構成される。パック８６１は、一般に一または複数個のパケットからなるが、この例では、一つのパックは一つのパケットを含むものとしている。すなわち、１パックは、パケットの前にパックヘッダ８７１を付加したものであり、さらにパケットはパケットヘッダ８７２とデータ本体であるパケットデータ８７３とを備える。なお、ＤＶＤ−Ｖｉｄｅｏ規格では、１パックは２０４８バイト（１セクタに対応）と定められている。符号化された動画像信号や音声信号等は、各パックに分割されて保持される。
パックヘッダ８７１は、パックの開始を示すパック開始コード８８１のほか、システム時刻基準参照値（ＳＣＲ）８８２を含む。なお、ＭＰＥＧ−２ ＰＳでは２７ＭＨｚで時刻を示すため、このシステム時刻基準参照値（ＳＣＲ）８８２は、パックヘッダ８５１においては４２ビットで表現される。
パケットヘッダ８７２は、プライベート１・パケットに沿ったものであり、パケット開始コード８９１と、フラグ８９３と、ＰＴＳ８９５と、ＤＴＳ８９６と、その他のフィールド８９７を備える。パケット開始コード８９１はパケットの開始を示すものであり、ストリームを識別するストリーム識別子を含む。フラグ８９３は、ＰＴＳ８９５およびＤＴＳ８９６の存在を示すフラグを含む。すなわち、「１０」でＰＴＳ８９５のみ、「１１」でＰＴＳ８９５およびＤＴＳ８９６が存在することを示す。
ＰＴＳ８９５およびＤＴＳ８９６は、それぞれ再生出力のタイミングおよび復号のタイミングを示すタイムスタンプである。デコーダ側では、これらＰＴＳ８９５およびＤＴＳ８９６を参照することにより復号および再生出力を制御する。なお、これらＰＴＳ８９５およびＤＴＳ８９６は、パケットヘッダ８７２においてはそれぞれ３３ビットで表現される。上述のＡＣ−３方式におけるビットストリーム情報７１１におけるタイムスタンプは、ＰＴＳ８９５に反映される。なお、音声信号についてはＰＴＳとＤＴＳとが同じ値になるため、ＰＴＳ８９５のみが存在することになる。
図５は、本発明の実施の形態におけるシームレス接続の概念を示す図である。シームレス接続を行うためには、ビデオデータおよびオーディオデータがそれぞれ連続している必要があるが、両者の長さは必ずしも一致しておらず、接続点においてずれを生じる可能性がある。例えば、ビデオデータについてＮＴＳＣ方式が採用されているとすると、フレーム周波数が１０００／１００１×３０（≒２９．９７）Ｈｚであることから、その周期は約３３．３６７ｍｓとなる。一方、音声信号についてＡＣ−３方式が採用されているとすると、上述のように処理単位としてのＡＡＵはサンプリング周波数４８ｋＨｚで３２ｍｓとなる。従って、最大３２ｍｓ程度のずれが両者の間で生じ得ることになる。
そこで、本発明の実施の形態では、先行チャプタの記録停止時点でのビデオデータおよびオーディオデータのずれをオーディオオフセットとして記憶しておき、シームレス接続を行う後続チャプタの記録開始の際にそのオーディオオフセットに相当する時間だけオーディオデータの記録を早く開始することにより、両者のずれを吸収する。
また、先行チャプタのオーディオデータの最後の部分ではフェードアウトするようフェード回路２２０により音量が調整される。そして、後続チャプタの先頭部分ではオーディオオフセットに相当する間は無音状態を継続し、その後フェードインするようフェード回路２２０により音量が調整される。このフェードインおよびフェードアウトの遷移時間は不自然さを与えない程度に設定されるべきであり、例えば、サンプリング周波数４８ｋＨｚで６４サンプルとして１．３３ｍｓ程度に設定することができる。なお、無音状態の期間を設けずに速やかにフェードインするように制御しても構わない。この場合、再生時に、音声出力の方が動画像出力よりも多少早めに開始されることになる。
図６は、本発明の実施の形態における符号化制御部５００のプロセッサ５１０の機能構成例を示す図である。この機能構成例は、記録モード判別部５１１と、オフセット更新部５１２と、オフセット保持部５１３と、記録制御部５１４と、フェード制御部５１５とを備えている。なお、この例では、ＲＯＭ５２０に保持されたプログラムに従ってプロセッサ５１０が各機能を実現することを想定しているが、これらの機能はハードウェアにより実現してもよい。
オフセット保持部５１３は、オーディオオフセットを保持する。このオーディオオフセットは、ビデオデータとオーディオデータとの間のずれを示すものである。このオフセット保持部５１３は、オフセット更新部５１２によって更新される。まず、オフセット更新部５１２は、記録モード判別部５１１からの指示によりオフセット保持部５１３に初期値を設定する。また、オフセット更新部５１２は、ビデオエンコーダ１００またはオーディオエンコーダ２００から処理単位の処理開始ないし処理終了の通知を受けて、オフセット保持部５１３に保持される値を更新する。
例えば、動画像信号にＮＴＳＣ方式を採用した場合、上述の２９．９７Ｈｚにおける周期３３．３６７ｍｓを上述のＳＣＲ８８２（図４）の周波数である９０ｋＨｚに揃えると、
（１００１／（１０００×３０））×９００００＝１００１×３＝３００３
となる。また、音声信号にＡＣ−３方式を採用した場合、上述の４８ｋＨｚにおける周期３２ｍｓを同様に９０ｋＨｚに揃えると、
０．０３２×９００００＝２８８０
となる。
これらの値を処理単位として、オフセット更新部５１２はビデオエンコーダ１００から信号線１１９によって処理単位毎の通知を受けると値「３００３」をオフセット保持部５１３の値に加え、オーディオエンコーダ２００から信号線２１９によって処理単位毎の通知を受けると値「２８８０」をオフセット保持部５１３の値から差し引く。これにより、オフセット保持部５１３にはビデオデータおよびオーディオデータのずれを示すオーディオオフセットが保持されるようになる。なお、処理単位毎の通知のタイミングは、ビデオエンコーダ１００とオーディオエンコーダ２００との間で整合性が保たれていればよく、各処理単位の処理開始時でもよく、また、処理終了時であってもよい。
記録モード判別部５１１は、信号線５４９からチャプタの記録開始の指示を受けると、チャプタ間のシームレス接続が可能か否かを判別する。シームレス接続の条件としては、シームレス接続をしようとする後続チャプタがその属するタイトルの先頭チャプタでないこと、先行チャプタの最終ＶＯＢの再生時間が１．５秒未満でないこと、メディア上の配置に起因するシーク時間が許容範囲内であること、等がある。記録モード判別部５１１により判別されたシームレス接続の有無は、ＤＶＤのデータ記憶領域におけるＶＴＳＩ（Video Title Set Information）のＰＧＣＩ（ProGram Chain Information）におけるＣ＿ＰＢＩＴ（Cell PlayBack Information Table）内のシームレス・プレイバック・フラグ（seamless playback flag）に反映される。すなわち、シームレス接続を行う場合には後続チャプタのシームレス・プレイバック・フラグがオンに設定され、シームレス接続を行わない場合には後続チャプタのシームレス・プレイバック・フラグがオフに設定される。
また、記録モード判別部５１１は、シームレス接続可能であると判断した場合、ＲＡＭ５３０（またはＲＯＭ５２０）に保持されていた直前のオーディオオフセットをオフセット保持部５１３の初期値として設定する。一方、シームレス接続可能でないと判断した場合には、オフセット保持部５１３の初期値としてゼロを設定する。
記録制御部５１４は、信号線５４９によりチャプタの記録開始の指示を受けると、ビデオエンコーダ１００およびオーディオエンコーダ２００に対してそれぞれ信号線１３１および２３１により符号化の開始を指示する。このとき、記録制御部５１４は、オフセット保持部５１３に保持されたオーディオオフセットを参照し、図５のようにビデオデータよりもオーディオデータの方がオーディオオフセットに相当する時間だけ早く記録されるように符号化開始の指示を行う。また、記録制御部５１４は、信号線５４９により記録停止の指示を受けると、ビデオエンコーダ１００およびオーディオエンコーダ２００に対してそれぞれ信号線１３１および２３１により符号化の停止を指示する。このとき、ビデオエンコーダ１００およびオーディオエンコーダ２００において処理中の処理単位については最後まで処理を完遂させた上で処理を停止させる。また、記録制御部５１４は、これら符号化の開始および停止のタイミングをフェード制御部５１５に知らせる。
フェード制御部５１５は、記録制御部５１４から符号化の開始および停止のタイミングを知らされると、信号線２２１を介してフェード回路２２０による音量の調整を制御する。例えば、あるチャプタを記録する際に、チャプタの先頭部分では消音状態からフェードインし、チャプタ最後では再びフェードアウトするよう音量の調整を制御する。
図７は、本発明の実施の形態における処理タイミングの一例を示す図である。この例では、あるチャプタの記録中において、ビデオデータの第１２０番目のサイクルの途中で記録停止が指示され、その第１２０番目のサイクルの終了後にビデオデータの記録が停止している。
一方、オーディオデータから見ると、第１２５番目のＡＡＵの途中で記録停止が指示され、その第１２５番目のＡＡＵの終了後にビデオデータの記録が停止している。このオーディオデータのＡＡＵの数は、以下のように求めることができる。但し、ビデオデータのサイクル数をＮＶ、オーディオデータのＡＡＵの数をＮＡ、記録開始前のオーディオオフセットをＯＳとする。また、ＩＮＴ（ｘ）はｘの整数部分を表す。
ＮＡ＝ＩＮＴ（（ＮＶ×３００３＋ＯＳ）／２８８０）
オーディオエンコーダ２００は、図２に示したとおりパイプライン構造を想定しており、図７のように信号線２０１からサンプリング回路２１０に音声信号が入力された後に、順次、サンプリングバッファ２４０から信号線２４９を介してフェード回路２２０にサンプリングされたオーディオデータが供給され、次のサイクルに符号化前バッファ２５０から信号線２５９を介して符号化器２３０にオーディオデータが供給される。
次に本発明の実施の形態における動画像符号化装置の動作について図面を参照して説明する。
図８は、本発明の実施の形態における動画像符号化装置の処理手順の一例を示す図である。チャプタの記録開始の指示が信号線５４９からされると、記録モード判別部５１１はチャプタ間のシームレス接続が可能か否かを判別する（ステップＳ９０１）。そして、シームレス接続可能であると判断された場合（ステップＳ９０２）、ＲＡＭ５３０（またはＲＯＭ５２０）に保持されていた直前のオーディオオフセットがオフセット保持部５１３の初期値として設定される（ステップＳ９０３）。一方、シームレス接続可能でないと判断された場合には（ステップＳ９０２）、オフセット保持部５１３の初期値としてゼロが設定される（ステップＳ９０４）。
そして、記録制御部５１４の指示によりオーディオエンコーダ２００における符号化が開始され（ステップＳ９０５）、オフセット保持部５１３に保持されたオーディオオフセットに相当する時間が経過した際に（ステップＳ９０６）、再び記録制御部５１４の指示によりビデオエンコーダ１００における符号化が開始される（ステップＳ９０７）。これにより、ビデオデータよりもオーディオデータの方がオーディオオフセットに相当する時間だけ早く記録されるように符号化が開始する。
ビデオデータおよびオーディオデータの記録が継続している間にチャプタの記録停止の指示が信号線５４９からされると（ステップＳ９０８）、記録制御部５１４の指示によりビデオエンコーダ１００およびオーディオエンコーダ２００における符号化が停止して、記録が停止する（ステップＳ９０９）。この際、各処理単位の処理途中であれば、それぞれ処理単位の最後まで処理が完了した段階で記録が停止する。
図９は、本発明の実施の形態におけるオーディオオフセットの更新処理手順の一例を示す図である。チャプタの記録開始が指示されると、図８のステップＳ９０１乃至Ｓ９０４に示したようにオフセット保持部５１３にオーディオオフセットの初期値が設定される（ステップＳ９１１）。
これに続いて、図８のステップＳ９０５においてオーディオデータの符号化が開始されると、オーディオデータの処理単位であるＡＡＵの処理が開始ないし終了する度に（ステップＳ９１２）、オフセット保持部５１３の値から所定の値（上述の例では「２８８０」）が差し引かれる（ステップＳ９１３）。また、図８のステップＳ９０７においてビデオデータの符号化が開始されると、ビデオデータの処理単位である各サイクルの処理が開始ないし終了する度に（ステップＳ９１４）、オフセット保持部５１３の値に所定の値（上述の例では「３００３」）が加えられる（ステップＳ９１５）。これらの処理は記録が終了するまで繰り返される（ステップＳ９１６）。
そして、図８のステップＳ９０９においてビデオデータおよびオーディオデータの符号化が終了すると、オフセット保持部５１３に保持されていたオーディオオフセットの値はＲＡＭ５３０（またはＲＯＭ５２０）に保持される（ステップＳ９１７）。これにより、後続のチャプタを記録する際に、直前のオーディオオフセットの値を参照することが可能となる。
図１０は、本発明の実施の形態におけるオーディオデータの音量制御の処理手順の一例を示す図である。フェード制御部５１５は、各チャプタの先頭のＡＡＵについては（ステップＳ９２１）、消音（ミュート）状態から始めて（ステップＳ９２２）、フェードイン処理を行う（ステップＳ９２３）。但し、このステップＳ９２２の消音をすることなく速やかにステップＳ９２３のフェードイン処理を行ってもよい。
一方、フェード制御部５１５は、各チャプタの最後のＡＡＵについては（ステップＳ９２４）、そのＡＡＵの最終部分でフェードアウト処理を行う（ステップＳ９２５）。これにより、シームレス接続によって無音状態同士が接続されることになり、無用な雑音を発生することを回避できる。
このように、本発明の実施の形態では、チャプタ間のシームレス接続を行う際に、オフセット保持部５１３に保持されたオーディオオフセットを参照して、ビデオデータよりもオーディオデータの方がオーディオオフセットに相当する時間だけ早く記録されるように記録制御部５１４が符号化開始の指示を行う。これにより、ビデオデータとオーディオデータとの間のずれを生じることなくチャプタ間のシームレス接続を行うことができる。
なお、本発明の実施の形態では、動画像の再生方式としてＮＴＳＣ方式を例に説明したが、フレーム周波数２５ＨｚのＰＡＬ方式についても同様に適用することができる。この場合、その周期は４０ｍｓとなるため、９０ｋＨｚを単位とすれば、４０ｍｓ×９０ｋＨｚ＝３６００となる。従って、上述の「３００３」の代わりに「３６００」を使用することにより、本発明を適用することができる。
また、本発明の実施の形態では、音声の符号化方式としてＡＣ−３を例に説明したが、ＭＰＥＧ Ａｕｄｉｏ方式についても同様に適用することができる。この場合、ビットレートを３８４ｋｂｐｓ、サンプリング周波数を４８ｋＨｚ、圧縮モードをＬａｙｅｒ２とすれば、ＡＡＵの再生時間は２４ｍｓとなるため、９０ｋＨｚを単位とすれば、２４ｍｓ×９０ｋＨｚ＝２１６０となる。従って、上述の「２８８０」の代わりに「２１６０」を使用することにより、本発明を適用することができる。
なお、本発明の実施の形態は本発明を具現化するための一例を示したものであり、以下に示すように特許請求の範囲における発明特定事項とそれぞれ対応関係を有するが、これに限定されるものではなく本発明の要旨を逸脱しない範囲において種々の変形を施すことができる。
すなわち、請求項１において、オフセット保持手段は例えばオフセット保持部５１３に対応する。また、記録モード判別手段は例えば記録モード判別部５１１に対応する。また、オフセット更新手段は例えばオフセット更新部５１２に対応する。また、記録制御手段は例えば記録制御部５１４に対応する。
また、請求項４において、フェード制御手段は例えばフェード制御部５１５に対応する。
また、請求項７において、動画像符号化手段は例えばビデオエンコーダ１００に対応する。また、音声符号化手段は例えばオーディオエンコーダ２００に対応する。また、オフセット保持手段は例えばオフセット保持部５１３に対応する。また、記録モード判別手段は例えば記録モード判別部５１１に対応する。また、オフセット更新手段は例えばオフセット更新部５１２に対応する。また、記録制御手段は例えば記録制御部５１４に対応する。また、多重化手段は例えばマルチプレクサ３００に対応する。
また、請求項８および請求項１０において、オフセット保持手段は例えばオフセット保持部５１３に対応する。また、符号化制御装置は例えば符号化制御部５００に対応する。また、少なくとも後続チャプタがタイトルの先頭チャプタか否かを判別することによって先行チャプタと後続チャプタとの間でシームレス接続が可能か否を判別する手順は例えばステップＳ９０１に対応する。また、シームレス接続が可能であれば先行チャプタにおいて更新されたオフセットをオフセットの初期値とし、シームレス接続が不可能であればゼロをオフセットの初期値とする手順は例えばステップＳ９０２乃至Ｓ９０４に対応する。また、音声信号の符号化を開始する手順は例えばステップＳ９０５に対応する。また、音声信号の符号化が開始されてからオフセットに相当する時間経過時に動画像信号の符号化を開始する手順は例えばステップＳ９０６乃至Ｓ９０７に対応する。また、記録停止が指示されると音声信号および動画像信号の各記録単位の符号化がそれぞれ終了した後に符号化を停止する手順は例えばステップＳ９０８乃至Ｓ９０９に対応する。
また、請求項９および請求項１１において、オフセット保持手段は例えばオフセット保持部５１３に対応する。また、符号化制御装置は例えば符号化制御部５００に対応する。また、少なくとも後続チャプタがタイトルの先頭チャプタか否かを判別することによって先行チャプタと後続チャプタとの間でシームレス接続が可能か否を判別する手順は例えばステップＳ９０１に対応する。また、シームレス接続が可能であれば先行チャプタにおいて更新されたオフセットをオフセットの初期値とし、シームレス接続が不可能であればゼロをオフセットの初期値とする手順は例えばステップＳ９０２乃至Ｓ９０４に対応する。また、音声信号の符号化を開始する手順は例えばステップＳ９０５に対応する。また、符号化開始された音声信号の最初の記録単位について消音状態からフェードインするよう音声信号の音量を制御する手順は例えばステップＳ９２１乃至Ｓ９２３に対応する。また、音声信号の符号化が開始されてからオフセットに相当する時間経過時に動画像信号の符号化を開始する手順は例えばステップＳ９０６乃至Ｓ９０７に対応する。また、記録停止が指示されると音声信号および動画像信号の各記録単位の符号化がそれぞれ終了した後に符号化を停止する手順は例えばステップＳ９０８乃至Ｓ９０９に対応する。また、符号化停止された音声信号の最後の記録単位についてフェードアウトするよう音声信号の音量を制御する手順は例えばステップＳ９２４乃至Ｓ９２５に対応する。
なお、本発明の実施の形態において説明した処理手順は、これら一連の手順を有する方法として捉えてもよく、また、これら一連の手順をコンピュータに実行させるためのプログラム乃至そのプログラムを記憶する記録媒体として捉えてもよい。
本発明の活用例として、例えば動画像信号をＭＰＥＧ−２形式に符号化するとともに音声信号をＡＣ−３形式に符号化してＤＶＤに書込みを行う際に本発明を適用することができる。
本発明の実施の形態における動画像符号化装置の構成例を示す図である。 本発明の実施の形態におけるオーディオエンコーダ２００の構成例を示す図である。 ＡＣ−３方式による音声信号の同期フレームの構造を示す図である。 ＤＶＤ−Ｖｉｄｅｏ規格によるデータ構造を示す図である。 本発明の実施の形態におけるシームレス接続の概念を示す図である。 本発明の実施の形態における符号化制御部５００のプロセッサ５１０の機能構成例を示す図である。 本発明の実施の形態における処理タイミングの一例を示す図である。 本発明の実施の形態における動画像符号化装置の処理手順の一例を示す図である。 本発明の実施の形態におけるオーディオオフセットの更新処理手順の一例を示す図である。 本発明の実施の形態におけるオーディオデータの音量制御の処理手順の一例を示す図である。
符号の説明
１００ ビデオエンコーダ
１０１、１１９、１３１、１９９、２１０、２１９、２２１、２３１、２４９、２５９、２９９、５４９ 信号線
２００ オーディオエンコーダ
２１０ サンプリング回路
２２０ フェード回路
２３０ 符号化器
２４０ サンプリングバッファ
２５０ 符号化前バッファ
３００ マルチプレクサ
４００ 媒体記録部
４９０ 記録媒体
５００ 符号化制御部
５１０ プロセッサ
５１１ 記録モード判別部
５１２ オフセット更新部
５１３ オフセット保持部
５１４ 記録制御部
５１５ フェード制御部
５２０ ＲＯＭ
５３０ ＲＡＭ
５４０ 入出力インターフェース
５５０ バス

Claims (11)

  1. 先行チャプタに続く後続チャプタを記録する際に動画像信号よりも音声信号の符号化を早く開始すべき時間に相当するオフセットを保持するオフセット保持手段と、
    少なくとも前記後続チャプタがタイトルの先頭チャプタか否かを判別することによって前記先行チャプタと前記後続チャプタとの間でシームレス接続が可能か否を判別し、前記シームレス接続が可能であれば前記後続チャプタの直前の前記オフセットを前記オフセットの初期値とし、前記シームレス接続が不可能であればゼロを前記オフセットの初期値として設定する記録モード判別手段と、
    前記動画像信号および前記音声信号の符号化の進行状況に応じて所定の処理単位毎に前記オフセットを更新するオフセット更新手段と、
    前記オフセットに従って前記動画像信号および前記音声信号の符号化の開始または停止を指示する記録制御手段と
    を具備することを特徴とする符号化制御装置。
  2. 前記記録制御手段は、記録開始の際には前記オフセットに相当する時間だけ前記動画像信号よりも早く前記音声信号の符号化を開始し、記録停止の際には前記動画像信号および前記音声信号の各記録単位の符号化がそれぞれ終了した後に符号化を停止する
    ことを特徴とする請求項１記載の符号化制御装置。
  3. 前記オフセット更新手段は、前記オフセットに対して前記動画像信号の処理単位毎の通知に基づいた値を加えるとともに前記音声信号の処理単位毎の通知に基づいた値を減じることにより前記オフセットを更新することを特徴とする請求項１記載の符号化制御装置。
  4. 前記音声信号の記録開始または記録停止の指示に従って前記音声信号の音量に関する制御を行うフェード制御手段
    をさらに具備することを特徴とする請求項１記載の符号化制御装置。
  5. 前記フェード制御手段は、記録開始時には消音状態からフェードインするよう前記音声信号の音量を制御し、記録停止時にはフェードアウトするよう前記音声信号の音量を制御する
    ことを特徴とする請求項４記載の符号化制御装置。
  6. 前記後続チャプタの直前の前記オフセットは、不揮発性メモリに保持されることを特徴とする請求項１記載の符号化制御装置。
  7. 動画像信号を符号化する動画像符号化手段と、
    音声信号を符号化する音声符号化手段と、
    先行チャプタに続く後続チャプタを記録する際に前記動画像信号よりも前記音声信号の符号化を早く開始すべき時間に相当するオフセットを保持するオフセット保持手段と、
    少なくとも前記後続チャプタがタイトルの先頭チャプタか否かを判別することによって前記先行チャプタと前記後続チャプタとの間でシームレス接続が可能か否を判別し、前記シームレス接続が可能であれば前記後続チャプタの直前の前記オフセットを前記オフセットの初期値とし、前記シームレス接続が不可能であればゼロを前記オフセットの初期値として設定する記録モード判別手段と、
    前記動画像符号化手段および音声符号化手段における前記動画像信号および前記音声信号の符号化の進行状況に応じて所定の処理単位毎に前記オフセットを更新するオフセット更新手段と、
    前記オフセットに従って前記動画像信号および前記音声信号の符号化の開始または停止を指示する記録制御手段と、
    前記動画像符号化手段および音声符号化手段による前記動画像信号および前記音声信号の符号化出力を多重化する多重化手段と
    を具備することを特徴とする符号化システム。
  8. 先行チャプタに続く後続チャプタを記録する際に動画像信号よりも音声信号の符号化を早く開始すべき時間に相当するオフセットを保持するオフセット保持手段を備える符号化制御装置において、
    少なくとも前記後続チャプタがタイトルの先頭チャプタか否かを判別することによって前記先行チャプタと前記後続チャプタとの間でシームレス接続が可能か否を判別する手順と、
    前記シームレス接続が可能であれば前記先行チャプタにおいて更新された前記オフセットを前記オフセットの初期値とし、前記シームレス接続が不可能であればゼロを前記オフセットの初期値とする手順と、
    前記音声信号の符号化を開始する手順と、
    前記音声信号の符号化が開始されてから前記オフセットに相当する時間経過時に前記動画像信号の符号化を開始する手順と、
    前記動画像信号および前記音声信号の符号化の進行状況に応じて所定の処理単位毎に前記オフセットを更新する手順と、
    記録停止が指示されると前記音声信号および前記動画像信号の各記録単位の符号化がそれぞれ終了した後に符号化を停止する手順と
    を具備することを特徴とする符号化制御方法。
  9. 先行チャプタに続く後続チャプタを記録する際に動画像信号よりも音声信号の符号化を早く開始すべき時間に相当するオフセットを保持するオフセット保持手段を備える符号化制御装置において、
    少なくとも前記後続チャプタがタイトルの先頭チャプタか否かを判別することによって前記先行チャプタと前記後続チャプタとの間でシームレス接続が可能か否を判別する手順と、
    前記シームレス接続が可能であれば前記先行チャプタにおいて更新された前記オフセットを前記オフセットの初期値とし、前記シームレス接続が不可能であればゼロを前記オフセットの初期値とする手順と、
    前記音声信号の符号化を開始する手順と、
    前記音声信号の符号化が開始されてから前記オフセットに相当する時間経過時に前記動画像信号の符号化を開始する手順と、
    前記符号化開始された前記音声信号の最初の記録単位について消音状態からフェードインするよう前記音声信号の音量を制御する手順と、
    前記動画像信号および前記音声信号の符号化の進行状況に応じて所定の処理単位毎に前記オフセットを更新する手順と、
    記録停止が指示されると前記音声信号および前記動画像信号の各記録単位の符号化がそれぞれ終了した後に符号化を停止する手順と、
    前記符号化停止された前記音声信号の最後の記録単位についてフェードアウトするよう前記音声信号の音量を制御する手順と
    を具備することを特徴とする符号化制御方法。
  10. 先行チャプタに続く後続チャプタを記録する際に動画像信号よりも音声信号の符号化を早く開始すべき時間に相当するオフセットを保持するオフセット保持手段を備える符号化制御装置において、
    少なくとも前記後続チャプタがタイトルの先頭チャプタか否かを判別することによって前記先行チャプタと前記後続チャプタとの間でシームレス接続が可能か否を判別する手順と、
    前記シームレス接続が可能であれば前記先行チャプタにおいて更新された前記オフセットを前記オフセットの初期値とし、前記シームレス接続が不可能であればゼロを前記オフセットの初期値とする手順と、
    前記音声信号の符号化を開始する手順と、
    前記音声信号の符号化が開始されてから前記オフセットに相当する時間経過時に前記動画像信号の符号化を開始する手順と、
    前記動画像信号および前記音声信号の符号化の進行状況に応じて所定の処理単位毎に前記オフセットを更新する手順と、
    記録停止が指示されると前記音声信号および前記動画像信号の各記録単位の符号化がそれぞれ終了した後に符号化を停止する手順と
    をコンピュータに実行させることを特徴とするプログラム。
  11. 先行チャプタに続く後続チャプタを記録する際に動画像信号よりも音声信号の符号化を早く開始すべき時間に相当するオフセットを保持するオフセット保持手段を備える符号化制御装置において、
    少なくとも前記後続チャプタがタイトルの先頭チャプタか否かを判別することによって前記先行チャプタと前記後続チャプタとの間でシームレス接続が可能か否を判別する手順と、
    前記シームレス接続が可能であれば前記先行チャプタにおいて更新された前記オフセットを前記オフセットの初期値とし、前記シームレス接続が不可能であればゼロを前記オフセットの初期値とする手順と、
    前記音声信号の符号化を開始する手順と、
    前記音声信号の符号化が開始されてから前記オフセットに相当する時間経過時に前記動画像信号の符号化を開始する手順と、
    前記符号化開始された前記音声信号の最初の記録単位について消音状態からフェードインするよう前記音声信号の音量を制御する手順と、
    前記動画像信号および前記音声信号の符号化の進行状況に応じて所定の処理単位毎に前記オフセットを更新する手順と、
    記録停止が指示されると前記音声信号および前記動画像信号の各記録単位の符号化がそれぞれ終了した後に符号化を停止する手順と、
    前記符号化停止された前記音声信号の最後の記録単位についてフェードアウトするよう前記音声信号の音量を制御する手順と
    をコンピュータに実行させることを特徴とするプログラム。
JP2003369389A 2003-10-29 2003-10-29 符号化制御装置および符号化システム Expired - Fee Related JP3675465B2 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
JP2003369389A JP3675465B2 (ja) 2003-10-29 2003-10-29 符号化制御装置および符号化システム
KR1020057007199A KR101082221B1 (ko) 2003-10-29 2004-10-29 부호화 제어 장치 및 부호화 시스템
US10/531,950 US7835621B2 (en) 2003-10-29 2004-10-29 Encoding controlling apparatus and encoding system
CNB2004800014032A CN100438627C (zh) 2003-10-29 2004-10-29 编码控制设备和编码系统
TW93133061A TWI280750B (en) 2003-10-29 2004-10-29 Coding controller and coding system
EP04793399A EP1583366A4 (en) 2003-10-29 2004-10-29 CODING CONTROL UNIT AND CODING SYSTEM
PCT/JP2004/016479 WO2005041583A1 (ja) 2003-10-29 2004-10-29 符号化制御装置および符号化システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003369389A JP3675465B2 (ja) 2003-10-29 2003-10-29 符号化制御装置および符号化システム

Publications (2)

Publication Number Publication Date
JP2005136634A JP2005136634A (ja) 2005-05-26
JP3675465B2 true JP3675465B2 (ja) 2005-07-27

Family

ID=34510388

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003369389A Expired - Fee Related JP3675465B2 (ja) 2003-10-29 2003-10-29 符号化制御装置および符号化システム

Country Status (7)

Country Link
US (1) US7835621B2 (ja)
EP (1) EP1583366A4 (ja)
JP (1) JP3675465B2 (ja)
KR (1) KR101082221B1 (ja)
CN (1) CN100438627C (ja)
TW (1) TWI280750B (ja)
WO (1) WO2005041583A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8290340B2 (en) 2006-05-10 2012-10-16 Sony Corporation Information processing apparatus, information processing method, and computer program
US8364016B2 (en) 2006-05-10 2013-01-29 Sony Corporation Information processing apparatus, information processing method, and computer program

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7657887B2 (en) * 2000-05-17 2010-02-02 Interwoven, Inc. System for transactionally deploying content across multiple machines
JP4591405B2 (ja) * 2006-05-10 2010-12-01 ソニー株式会社 情報処理装置及び情報処理方法、並びにコンピュータ・プログラム
JP4788522B2 (ja) * 2006-08-10 2011-10-05 ソニー株式会社 データ処理装置及びデータ処理方法、並びにコンピュータ・プログラム
US7956849B2 (en) * 2006-09-06 2011-06-07 Apple Inc. Video manager for portable multifunction device
JP4900945B2 (ja) 2007-01-18 2012-03-21 キヤノン株式会社 記録装置、及び記録方法
JP4563418B2 (ja) * 2007-03-27 2010-10-13 株式会社コナミデジタルエンタテインメント 音声処理装置、音声処理方法、ならびに、プログラム
CN102256083A (zh) * 2011-07-01 2011-11-23 南京熊猫信息产业有限公司 加快有线电视机顶盒信道解调速度的方法
JP5775006B2 (ja) * 2012-01-23 2015-09-09 ルネサスエレクトロニクス株式会社 情報処理装置、情報処理方法及び半導体装置
KR20130123713A (ko) * 2012-05-03 2013-11-13 현대모비스 주식회사 팝 노이즈 제거 방법
JP6066712B2 (ja) * 2012-12-19 2017-01-25 キヤノン株式会社 記録装置、記録方法およびプログラム
JP6112852B2 (ja) * 2012-12-19 2017-04-12 キヤノン株式会社 記録装置、記録方法およびプログラム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW385431B (en) * 1995-09-29 2000-03-21 Matsushita Electric Ind Co Ltd A method and an apparatus for encoding a bitstream with plural possible searching reproduction paths information useful in multimedia optical disk
JPH11110915A (ja) * 1997-09-30 1999-04-23 Sony Corp 信号記録再生装置及び方法
US6453459B1 (en) * 1998-01-21 2002-09-17 Apple Computer, Inc. Menu authoring system and method for automatically performing low-level DVD configuration functions and thereby ease an author's job
JP4369604B2 (ja) 1999-09-20 2009-11-25 パナソニック株式会社 シームレス再生に適した光ディスク記録装置、再生装置及び記録方法
US6782193B1 (en) * 1999-09-20 2004-08-24 Matsushita Electric Industrial Co., Ltd. Optical disc recording apparatus, optical disc reproduction apparatus, and optical disc recording method that are all suitable for seamless reproduction
GB0007868D0 (en) * 2000-03-31 2000-05-17 Koninkl Philips Electronics Nv Methods and apparatus for editing digital video recordings and recordings made by such methods
JP2001352521A (ja) * 2000-06-08 2001-12-21 Hitachi Ltd 情報記録装置
JP2003046949A (ja) * 2001-07-30 2003-02-14 Hitachi Ltd データ多重化方法、データ記録媒体、データ記録装置及びデータ記録プログラム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8290340B2 (en) 2006-05-10 2012-10-16 Sony Corporation Information processing apparatus, information processing method, and computer program
US8364016B2 (en) 2006-05-10 2013-01-29 Sony Corporation Information processing apparatus, information processing method, and computer program

Also Published As

Publication number Publication date
KR20060121652A (ko) 2006-11-29
EP1583366A1 (en) 2005-10-05
KR101082221B1 (ko) 2011-11-09
CN100438627C (zh) 2008-11-26
US7835621B2 (en) 2010-11-16
WO2005041583A1 (ja) 2005-05-06
JP2005136634A (ja) 2005-05-26
US20060051066A1 (en) 2006-03-09
TWI280750B (en) 2007-05-01
TW200524294A (en) 2005-07-16
EP1583366A4 (en) 2005-12-21
CN1706196A (zh) 2005-12-07

Similar Documents

Publication Publication Date Title
KR100491340B1 (ko) 광디스크 재생장치 및 오디오 스트림을 재생하는 광디스크 재생방법
EP1085513B1 (en) Optical disc recording apparatus, and optical disc recording method that are all suitable for seamless reproduction
JPH11213522A (ja) 情報再生システム及び情報記録再生システム並びにそのシステムに適用可能な記録媒体
WO2005117432A1 (ja) 番組録画装置および番組録画方法
JP3675465B2 (ja) 符号化制御装置および符号化システム
JP4369604B2 (ja) シームレス再生に適した光ディスク記録装置、再生装置及び記録方法
US20050244149A1 (en) Format conversion method and apparatus and format conversion control program
WO2005015907A1 (ja) データ処理装置及びデータ処理方法
JP2004118986A (ja) 情報記録装置および方法
US20030175011A1 (en) Reproduction apparatus
JP3807400B2 (ja) 記録制御装置および記録制御方法
JP4077180B2 (ja) フォーマット変換装置及びフォーマット変換方法
JP4925446B2 (ja) ストリームデータ記録方法及びストリームデータ記録装置
JP2003189226A (ja) 編集装置及び編集方法
JP2007133938A (ja) オーディオミキシング出力の可否を示すフラグを持った情報記録媒体、および、その再生装置、再生方法
WO2004036582A1 (ja) Ａｖデータ記録方法、ａｖデータ記録装置、データ記録媒体、プログラム並びにプログラム記録媒体
US20030223737A1 (en) Video data recording method and video data recording apparatus
JP2006217280A (ja) 符号化制御装置および符号化システム
JP3727913B2 (ja) 情報記録装置及び情報記録方法
EP1850588A1 (en) Encoding device, encoding method, and computer program for encoding
JP2007235185A (ja) ランダムアクセスに適した情報記録媒体、およびその記録／再生装置、記録／再生方法
JP2004127381A (ja) 情報再生装置、情報再生方法及び情報再生用プログラム並びに情報記録媒体
JP2019067481A (ja) 記録媒体
JP2002300527A (ja) 多重化ストリームの記録方法、記録装置、記録媒体、編集方法、編集装置
JP2006059387A (ja) 情報記録再生装置及び情報記録再生方法

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20050412

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20050425

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090513

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100513

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100513

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110513

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120513

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130513

Year of fee payment: 8

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees