JP4196235B2

JP4196235B2 - Audio data processing device

Info

Publication number: JP4196235B2
Application number: JP01007399A
Authority: JP
Inventors: 健司井上; 秀行宮原
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 1999-01-19
Filing date: 1999-01-19
Publication date: 2008-12-17
Anticipated expiration: 2019-01-19
Also published as: JP2000209099A

Description

【０００１】
【発明の属する技術分野】
本発明は、オーディオデータ処理装置に関し、例えば編集装置に適用することができる。本発明は、少なくとも２以上のスロットに時間軸圧縮したオーディオデータをそれぞれ割り当ててスロットの数に対応するＮ倍速によりオーディオデータを入出力する際に、各スロットに割り当てられた実時間以下の時間によりサンプリングレートを変換することにより、編集作業等において作業の効率を向上することできるようにする。
【０００２】
【従来の技術】
従来、編集装置においては、ビデオデータ及びオーディオデータを高速度でシリアル伝送により伝送するフォーマットが提案されている。すなわち図６は、このフォーマットの説明に供する略線図であり、８５８ワード×５２５ワード（ＮＴＳＣ方式の場合）により１つのパケットが形成され、このパケットが１フレーム周期で繰り返されてビデオデータ及びオーディオデータが伝送される。
【０００３】
この１つのパケットにおいては、１２０ワード×５２５ワードがコマンドデータの領域に割り当てられ、このコマンドデータの領域にビデオデータ及びオーディオデータの伝送に供するコマンド、同期データ等が割り当てられる。また残る領域のうちの７２０ワード×５２５ワードの領域に１４０ワード×５２５ワードの５つのスロットＦ０〜Ｆ４が形成され、この各スロットＦ０〜Ｆ４に時間軸圧縮されてなる１フレーム分のビデオデータＤＶと、対応する４チャンネルのオーディオデータＤＡ１〜ＤＡ４とがそれぞれ割り当てられる。
【０００４】
これによりこのフォーマットにおいては、これら５つのスロットＦ０〜Ｆ４の１つを使用していわゆる１倍速である１フレーム／３０秒周期によりビデオデータ及びオーディオデータを伝送できるようになされ、またこれら５つのスロットＦ０〜Ｆ４の全てを使用して最大で５倍速によりビデオデータ及びオーディオデータを伝送できるようになされている。
【０００５】
このようにして伝送されるビデオデータＤＶ及びオーディオデータＤＡ１〜ＤＡ４は、それぞれフォーマット等を示す管理用データが割り当てられて伝送され、さらに各スロットのビデオデータＤＶ及びオーディオデータＤＡ１〜ＤＡ４を単位にして、それぞれインターリーブ処理されて伝送される。
【０００６】
またオーディオデータＤＡ１〜ＤＡ４においては、３２〔ｋＨｚ〕、４４．１〔ｋＨｚ〕又は４８〔ｋＨｚ〕のサンプリングレートが適用され、サンプリングレート３２〔ｋＨｚ〕の場合には、データ圧縮モードが設定可能で、このデータ圧縮モードにおいては、１６ビットによるオーディオデータが１２ビットにデータ圧縮されて伝送されるのに対し、これ以外の場合には１６ビットによるオーディオデータが伝送されるようになされている。
【０００７】
さらにオーディオデータＤＡ１〜ＤＡ４においては、ロックモード（いわゆる５フレームシーケンスによるロックモードである）又はアンロックモードにより伝送され、このロックモードにおいては、ビデオデータの１フレームに対してオーディオフレームが所定の関係に維持されるように、連続するビデオフレームに対してオーディオデータＤＡ１〜ＤＡ４のサンプリング数が設定されるようになされている。すなわちオーディオフレーム及びビデオデータにおいては、ビデオフレームとオーディオフレームとが一致しないことにより、サンプリングレート４８〔ｋＨｚ〕の場合、ロックモードにおいては、ビデオデータの連続する５フレームに対応する８００８サンプルのオーディオデータＤＡ１〜ＤＡ４が、連続する５つのビデオフレームに対してそれぞれ１６００、１６０２、１６０２、１６０２、１６０２サンプルづつ割り当てられて伝送されるようになされている。
【０００８】
このようなフォーマットにより伝送されるビデオデータ及びオーディオデータを処理する編集装置においては、例えばハードディスク装置等に、このパケット構造を単位にしてビデオデータ及びオーディオデータを記録して処理するようになされ、またオーディオデータについては、サンプリングレート４８〔ｋＨｚ〕、ロックモードにより記録して統一的に処理するようになされている。
【０００９】
すなわち図７は、編集装置について１チャンネル分のオーディオ処理系を示すブロック図であり、この編集装置１は、図６のフォーマットで１倍速及び４倍速により伝送されるビデオデータ及びオーディオデータをハードディスク装置（ＨＤＤ）２に記録して処理する。なお１倍速による場合、オーディオデータ及びビデオデータは、第１のスロットＦ０に割り当てられて伝送され、４倍速による場合、ビデオデータ及びオーディオデータは、第１〜第４のスロットＦ０〜Ｆ３に割り当てられて伝送されるようになされている。
【００１０】
すなわちこの編集装置１は、ハードディスク装置２へのビデオデータ及びオーディオデータのアップロード時、図示しないバッファメモリを介して、ディジタル入出力部（ＤＩＯ）３に１チャンネル分のオーディオデータＤＡを選択的に入力する。
【００１１】
ディジタル入出力部（ＤＩＯ）３は、図示しないシリアルパラレル変換回路を介して、このオーディオデータＤＡをパラレルデータに変換してメモリ４に入力し、このメモリ４を介してオーディオデータＤＡを中央処理ユニット（ＣＰＵ）５に入力する。中央処理ユニット５は、ここでこのオーディオデータＤＡに付加された管理用データよりこのオーディオデータＤＡのフォーマットを解析する。ここでオーディオデータＤＡがサンプリングレート３２〔ｋＨｚ〕による圧縮モードの場合、中央処理ユニット５は、このオーディオデータＤＡをアドレスにしてリードオンリメモリによるデコーダ６をアクセスし、これによりこの圧縮モードによる１２ビットのオーディオデータＤＡをデータ伸長して１６ビットによりメモリ４に再格納する。
【００１２】
中央処理ユニット５は、圧縮モードによる場合には、このようにしてメモリ４に格納したオーディオデータＤＡを読み出し、バッファメモリであるメモリ７及び８を介してバスＢＵＳに出力する。また圧縮モード以外のモードにおいては、外部機器より入力されたオーディオデータＤＡをメモリ４より読み出し、同様にしてバスＢＵＳに出力する。
【００１３】
このようにしてメモリ４よりオーディオデータＤＡを読み出す際に、中央処理ユニット５は、所定の規則に従ってオーディオデータＤＡを読み出し、これによりオーディオデータＤＡをデインターリーブして出力する。
【００１４】
これに対してディジタル入出力部３は、ハードディスク装置２に記録されたビデオデータ及びオーディオデータを外部機器にダウンロードする場合、バスＢＵＳに出力されるオーディオデータをメモリ８、７を介して中央処理ユニット５に入力する。このときディジタル入出力部３は、ロックモードによりオーディオデータを出力する場合、メモリ７におけるデータ入出力のタイミング制御により、図６について上述したように、連続する５つのビデオフレームに所定サンプル数のオーディオデータを割り当てる。
【００１５】
中央処理ユニット５は、アップロード時とは逆に、このようにしてメモリ７より入力したオーディオデータをメモリ４を介して、又はデコーダ６、メモリ４を介して外部機器に出力する。またこのときメモリ４のアドレス制御によりオーディオデータＤＡをインターリーブ処理して出力する。
【００１６】
第１の再生部（ＰＢ１）１０は、１倍速によるアップロード、ダウンロード、編集処理時、バスＢＵＳに出力されるオーディオデータをモニタ１１に出力する。このとき第１の再生部（ＰＢ１）１０は、オーディオデータをモニタ１１の処理に適したフォーマットにより出力する。すなわち第１の再生部１０は、メモリ１２を介してオーディオデータをバスＢＵＳより入力し、デコーダ１３に与える。ここでデコーダ１３は、図６について上述したパケット構造に対応して間欠的にバスＢＵＳに出力されるオーディオデータを、このオーディオデータのサンプリングレートに対応する連続するデータ列により出力し、続くレートコンバータ１４は、このオーディオデータのサンプリングレートをモニタ１１の処理に適したサンプリングレートに変換して出力する。これにより編集装置１では、アップロード、ダウンロード、編集処理時、オーディオデータを時間軸伸長した後、サンプリングレートを変換して外部機器に出力し、この外部機器によりモニタできるようになされている。
【００１７】
これに対して第２の再生部（ＰＢ２）１５は、１倍速によるアップロード、ダウンロード、編集処理時、同様にしてバスＢＵＳに出力されるビデオデータ及びオーディオデータを処理してスイッチャー等に出力し、また記録部（ＲＥＣ）２０に出力する。このとき第２の再生部１５は、レートコンバータ１８においてオーディオデータのサンプリングレートを４８〔ｋＨｚ〕に変換して出力する。これにより編集装置１では、オーディオデータを時間軸伸長した後、サンプリングレートを４８〔ｋＨｚ〕に変換して処理し、オーディオデータを統一的に編集処理できるようになされている。
【００１８】
記録部２０は、１倍速によるアップロード、ダウンロード、編集処理時、第２の再生部１５より入力されるサンプリングレート４８〔ｋＨｚ〕によるオーディオデータをレートコンバータ２１により再サンプリングし、これによりオーディオデータのサンプリングのタイミングをロックモードの処理に対応するタイミングに補正する。エンコーダ２２は、このレートコンバータ２１より出力されるオーディオデータをブロック化することにより、図６について上述したパケット構造に対応するブロック構造により出力し、メモリ２３は、このエンコーダ２２の出力データをバスＢＵＳに出力する。
【００１９】
ハードディスク装置２は、図示しないシステムコントローラの制御により、１倍速によるアップロード、編集処理時、バスＢＵＳに出力されるビデオデータ及びオーディオデータを記録するのに対し、ダウンロード、編集処理時、記録したビデオデータ及びオーディオデータをバスＢＵＳに出力する。
【００２０】
これらの処理により図８に示すように、編集装置１は、１倍速によるアップロード時、第２の再生部１５、記録部２０を介してハードディスク装置２にオーディオデータを記録すると共に、このハードディスク装置２に記録するオーディオデータを第１の再生部１０により処理してモニタできるようになされている。
【００２１】
また１倍速によるダウンロード時、編集装置１は、図９に示すように、ハードディスク装置２より出力されるオーディオデータを第２の再生部１５、記録部２０を介して外部機器に出力し、またこの外部機器に出力するオーディオデータを第１の再生部１０を介してモニタできるようになされている。
【００２２】
これに対して４倍速によるアップロード時においては、図１０に示すように、ディジタル入出力部３より入力されるオーディオデータを直接ハードディスク装置２に記録するようになされている。またこのようにして記録したオーディオデータについて、空き時間を利用してハードディスク装置２より１倍速により読み出して第２の再生部１５、記録部２０で処理してハードディスク装置２に再記録することにより（この空き時間によるオーディオデータの流れを図１０において破線により示す）、統一的に処理可能なサンプリングレート４８〔ｋＨｚ〕によりハードディスク装置２に記録し直すようになされ、またこの記録し直す処理を第１の再生部１０を介してモニタできるようになされている。
【００２３】
なお４倍速によるダウンロード時においては、このようにしてハードディスク装置２に記録したオーディオデータを直接バスＢＵＳ、ディジタル入出力部３より外部機器に出力するようになされている。
【００２４】
【発明が解決しようとする課題】
ところで４倍速によるアップロード時においても、直接サンプリングレートを変換してハードディスク装置に記録することができれば、空き時間を利用したレート変換の処理を省略できることにより、その分編集作業に要する時間を短縮でき、編集作業の効率を向上することができると考えられる。
【００２５】
また４倍速によるダウンロード時においても、所望のサンプリングレートによりオーディオデータをダウンロードすることができれば、その分編集作業の効率を向上することができると考えられる。
【００２６】
本発明は以上の点を考慮してなされたもので、この種の作業の効率を向上することできるオーディオデータ処理装置を提案しようとするものである。
【００２７】
【課題を解決するための手段】
かかる課題を解決するため請求項１に係る発明においては、各スロットのオーディオデータを各スロットに割り当てられた実時間以下の時間によりサンプリングレートを変換して入力する。
【００２８】
また請求項４に係る発明においては、複数のスロットを有するパケットを一定の周期で繰り返し、このパケットの複数のスロットの少なくとも２以上のスロットにそれぞれオーディオデータの各ブロックを割り当て、各スロットのオーディオデータを各スロットに割り当てられた実時間以下の時間によりサンプリングレートを変換して出力する。
【００２９】
請求項１に係る構成により、各スロットのオーディオデータを各スロットに割り当てられた実時間以下の時間によりサンプリングレートを変換して入力すれば、倍速により入力する場合でも直接サンプリングレートを変換してオーディオデータを入力することができ、これにより空き時間を利用したレート変換の処理を省略してその分編集作業等に要する時間を短縮でき、作業の効率を向上することができる。
【００３０】
また請求項４に係る構成により、複数のスロットを有するパケットを一定の周期で繰り返し、このパケットの複数のスロットの少なくとも２以上のスロットにそれぞれオーディオデータの各ブロックを割り当て、各スロットのオーディオデータを各スロットに割り当てられた実時間以下の時間によりサンプリングレートを変換して出力すれば、倍速によりオーディオデータを出力する場合でも、所望のサンプリングレートによりオーディオデータを出力することができ、その分ダウンロード等の時間を短縮して作業の効率を向上することができる。
【００３１】
【発明の実施の形態】
以下、適宜図面を参照しながら本発明の実施の形態を詳述する。
【００３２】
（１）第１の実施の形態
（１−１）第１の実施の形態の構成
図１は、本発明の第１の実施の形態に係る編集装置のオーディオデータの入出力系を示すブロック図である。この実施の形態に係る編集装置３０においては、１倍速及び４倍速により図６について上述したフォーマットによるビデオデータ及びオーディオデータを外部機器との間で入出力する。編集装置３０は、この入出力系をオーディオデータのチャンネル数に対応する４チャンネル分有し、このように外部機器との間で入出力するオーディオデータを各入出力系によりそれぞれ１チャンネルづつ処理する。
【００３３】
すなわちこの編集装置３０において、ＦＩＦＯ（First In First Out）３１は、外部機器との間で図６について上述したフォーマットによるビデオデータ及びオーディオデータを入出力する。ディジタル入出力部３２は、このＦＩＦＯ３１との間で、１チャンネル分のオーディオデータを入出力する。
【００３４】
すなわちディジタル入出力部３２において、メモリ３３は、バッファメモリであり、ハードディスク装置２へのビデオデータ及びオーディオデータのアップロード時、ＦＩＦＯ３１より１チャンネル分のオーディオデータを選択的に入力して所定のタイミングにより出力する。またこれとは逆に、メモリ３３は、ビデオデータ及びオーディオデータのアップロード時、メモリ３４より出力されるオーディオデータを所定のタイミングによりＦＩＦＯ３１に出力する。
【００３５】
続くメモリ３４は、バッファメモリであり、ハードディスク装置２へのビデオデータ及びオーディオデータのアップロード時、メモリ３３より出力されるオーディオデータを一時保持して中央処理ユニット（ＣＰＵ）３５に出力する。またこのメモリ３３より出力されるオーディオデータがサンプリングレート３２〔ｋＨｚ〕による圧縮モードの場合、このようにして中央処理ユニット３５にオーディオデータを出力してデコーダ３６より得られるオーディオデータを再格納することにより、デコーダ３６でデータ伸長された１６ビットによるオーディオデータを再格納し、中央処理ユニット３５に出力する。
【００３６】
これらの処理において、メモリ３４は、格納時とは異なる所定の順序によりオーディオデータを出力し、これによりオーディオデータをデインターリーブ処理して出力する。
【００３７】
これに対して外部機器へのビデオデータ及びオーディオデータのダウンロード時、メモリ３４は、中央処理ユニット３５より出力されるオーディオデータ、又はデコーダ３６より出力されるオーディオデータを入力時とは異なる順序により出力し、これによりこれらオーディオデータをインターリーブ処理してメモリ３３に出力する。
【００３８】
中央処理ユニット３５は、ハードディスク装置２へのビデオデータ及びオーディオデータのアップロード時、メモリ３４より出力されるオーディオデータを受け、このオーディオデータに付加された管理用データよりオーディオデータのフォーマットを解析する。中央処理ユニット３５は、この解析結果より、オーディオデータがサンプリングレート３２〔ｋＨｚ〕による圧縮モードの場合、メモリ３４より出力されるオーディオデータをアドレスにしてリードオンリメモリによるデコーダ３６をアクセスし、これによりこの圧縮モードによる１２ビットのオーディオデータをデータ伸長して１６ビットによりメモリ３４に再格納する。
【００３９】
中央処理ユニット３５は、圧縮モードによる場合には、このようにしてメモリ３４に格納したオーディオデータを読み出し、バッファメモリであるメモリ３７に出力する。また圧縮モード以外のモードにおいては、メモリ３３より入力されたオーディオデータをメモリ３４より読み出し、同様にしてメモリ３７に出力する。
【００４０】
これに対して外部機器へのダウンロード時、中央処理ユニット３５は、メモリ３７よりオーディオデータを入力し、管理用データを選定してメモリ３４に出力する。このとき中央処理ユニット３５は、このオーディオデータを圧縮モードにより出力する場合、メモリ３４への直接のオーディオデータの出力に代えて、デコーダ３６を介してオーディオデータをメモリ３４に出力し、これによりメモリ３４にデータ圧縮してなる１２ビットによるオーディオデータを出力する。
【００４１】
かくするにつきデコーダ３６は、リードオンリメモリにより構成されるルックアップテーブル構成のデータ圧縮回路である。
【００４２】
メモリ３７は、ダウンロード時、中央処理ユニット３５より出力されるオーディオデータを続くディジタルシグナルプロッサ（ＤＳＰ）３８の処理に適したタイミングにより順次出力する。これに対してメモリ３７は、アップロード時、ディジタルシグナルプロセッサ３８より出力されるオーディオデータを中央処理ユニット３５に出力する。
【００４３】
ディジタルシグナルプロセッサ３８は、アップロード時、メモリ３７より出力されるオーディオデータのサンプリングレートを４８〔ｋＨｚ〕に設定して出力する。このときディジタルシグナルプロセッサ３８は、オーディオデータの連続する複数サンプルの重み付け加算による補間演算処理によりサンプリングレートを変換し、これによりオーディオデータのデータ転送速度をサンプリングレートに対応するデータ転送速度に戻すことなく、高速度でレート変換する。
【００４４】
かくするにつき１倍速によるオーディオデータを処理する場合には、図６において第１のスロットＦ０にのみオーディオデータ、ビデオデータが割り当てられていることにより、ディジタルシグナルプロセッサ３８は、この第１のスロットＦ０に割り当てられた実時間以下の時間によりこのオーディオデータのサンプリングレートを変換する。これに対して４倍速によるオーディオデータを処理する場合には、図６において４つのスロットＦ０〜Ｆ３にオーディオデータ及びビデオデータが割り当てられていることにより、ディジタルシグナルプロセッサ３８は、これら４つのスロットＦ０〜Ｆ３にそれぞれ割り当てられた実時間以下の時間により、各スロットＦ０〜Ｆ３に割り当てられたオーディオデータを順次補間演算処理してサンプリングレートを変換する。
【００４５】
さらにディジタルシグナルプロセッサ３８は、この複数サンプルの重み付け加算による補間演算処理において、重み付け係数の設定により、各オーディオデータのサンプリングのタイミングをロックモードの処理に対応するタイミングに補正する。
【００４６】
さらにディジタルシグナルプロセッサ３８は、ビデオフレームを基準にしてこのようにして補間演算処理して得られるオーディオデータを順次所定サンプリング数づつ区切ってメモリ３９に出力し、これによりこれらオーディオデータを５フレームシーケンスのロックモードに対応するブロックにより出力する。なおこの場合、オーディオデータにおいては、サンプリングレートが４８〔ｋＨｚ〕に統一されていることにより、ディジタルシグナルプロセッサ３８は、連続するオーディオデータを連続する５つのビデオフレームに順次１６００、１６０２、１６０２、１６０２、１６０２サンプルづつ割り当てるように、これらオーディオデータを区切ってメモリ３９に出力する。
【００４７】
これに対してディジタルシグナルプロセッサ３８は、ダウンロード時、上位のシステムコントローラの制御により、メモリ３９より出力されるオーディオデータを処理してメモリ３７に出力する。ディジタルシグナルプロセッサ３８は、この場合においては、アップロード時とは逆にオーディオデータを処理することにより、サンプリングレート４８〔ｋＨｚ〕によるオーディオデータをシステムコントローラの指示によりサンプリングレート４８〔ｋＨｚ〕又は３２〔ｋＨｚ〕により出力する。またディジタルシグナルプロセッサ３８は、各オーディオデータをビデオフレームに対応して所定のサンプリング数づつ区切ってメモリ３７に出力し、これにより５フレームシーケンスのロックモードによりオーディオデータを出力する。
【００４８】
メモリ３９は、アップロード時、ディジタルシグナルプロセッサ３８より出力されるオーディオデータを所定のタイミングによりバスＢＵＳに出力し、編集装置３０では、このオーディオデータをハードディスク装置２に記録する。またメモリ３７は、ダウンロード時、ハードディスク装置２よりバスＢＵＳに出力されるオーディオデータを取り込んでディジタルシグナルプロセッサ３８に出力する。
【００４９】
編集装置３０においては、このようにして１倍速又は４倍速によりそれぞれサンプリングレート４８〔ｋＨｚ〕によりハードディスク装置２に記録したオーディオデータを図示しない処理回路により処理することによりこれらオーディオデータを編集してハードディスク装置２に記録し、またこのとき必要に応じてサンプリングレートを変換して外部機器であるモニタ装置によりモニタできるようになされている。
【００５０】
図２は、このディジタル入出力部３２における処理の説明に供するフローチャートである。ディジタル入出力部３２は、アップロード時、ステップＳＰ１からステップＳＰ２に移り、中央処理ユニット３５によりオーディオデータのフォーマットを解析し、このオーディオデータがサンプリングレート３２〔ｋＨｚ〕のデータ圧縮モードか否か判定する。ここでオーディオデータがサンプリングレート３２〔ｋＨｚ〕のデータ圧縮モードの場合、ディジタル入出力部３２は、ステップＳＰ３に移り、デコーダ３６により１２ビットにデータ圧縮されてなるオーディオデータを１６ビットにデータ伸長すると共にデインターリーブ処理してメモリ３７に出力する。さらにディジタル入出力部３２は、ステップＳＰ５において、続くディジタルシグナルプロセッサ３８によりサンプリングレートを４８〔ｋＨｚ〕に変換し、ステップＳＰ５において５フレームシーケンスによるロックモードに変換した後、ステップＳＰ６に移ってこの処理手順を終了する。
【００５１】
これに対してディジタル入出力部３２は、オーディオデータがサンプリングレート３２〔ｋＨｚ〕のデータ圧縮モード以外の場合、ステップＳＰ２からステップＳＰ７に移り、メモリ３４からの出力によりデインターリーブ処理する。さらに続くステップＳＰ８において、中央処理ユニット３５によりオーディオデータがサンプリングレート４８〔ｋＨｚ〕か否か判断する。ここでオーディオデータがサンプリングレート４８〔ｋＨｚ〕の場合、ディジタル入出力部３２は、ステップＳＰ５に移り、オーディオデータを５フレームシーケンスによるロックモードに変換した後、ステップＳＰ６に移ってこの処理手順を終了する。
【００５２】
これに対してオーディオデータのサンプリングレートが４８〔ｋＨｚ〕以外の場合、ディジタル入出力部３２は、ステップＳＰ８からステップＳＰ４に移り、ディジタルシグナルプロセッサ３８によりサンプリングレートを４８〔ｋＨｚ〕に変換した後、ステップＳＰ５に移って５フレームシーケンスによるロックモードに変換し、ステップＳＰ６に移ってこの処理手順を終了する。
【００５３】
図３は、このディジタル入出力部３２におけるダウンロード時の処理の説明に供するフローチャートである。ディジタル入出力部３２は、ダウンロード時、ステップＳＰ１０からステップＳＰ１１に移り、ディジタルシグナルプロセッサ３８において、上位のシステムコントローラにより指示されるオーディオデータのフォーマットがサンプリングレート３２〔ｋＨｚ〕のフォーマットか否か判定する。ここでサンプリングレート３２〔ｋＨｚ〕が指示されている場合、ディジタル入出力部３２は、ステップＳＰ１２に移り、ディジタルシグナルプロセッサ３８によりオーディオデータのサンプリングレートを３２〔ｋＨｚ〕に変換した後、ステップＳＰ１３に移る。
【００５４】
ここでディジタル入出力部３２は、ディジタルシグナルプロセッサ３８において、上位のシステムコントローラにより指示されるオーディオデータのフォーマットがデータ圧縮モードか否か判断し、データ圧縮モードの場合には、ステップＳＰ１４に移り、デコーダ３６により１６ビットによるオーディオデータを１２ビットにデータ圧縮する。さらにディジタル入出力部３２は、ステップＳＰ１５において、ディジタルシグナルプロセッサ３８によりオーディオデータを５フレームシーケンスのロックモードに変換し、続くステップＳＰ１６において、メモリ３４の入出力によりオーディオデータをインターリーブ処理した後、ステップＳＰ１７に移ってこの処理手順を終了する。
【００５５】
これに対してオーディオデータをサンプリングレート３２〔ｋＨｚ〕によりデータ圧縮しないで出力する場合、ディジタル入出力部３２は、ステップＳＰ１３からステップＳＰ１５に移る。これによりディジタル入出力部３２は、デコーダ３６におけるデータ圧縮処理を省略してオーディオデータを順次５フレームシーケンスのロックモードに変換し、続くステップＳＰ１６において、メモリ３４の入出力によりオーディオデータをインターリーブ処理した後、ステップＳＰ１７に移ってこの処理手順を終了する。
【００５６】
これに対してオーディオデータをサンプリングレート４８〔ｋＨｚ〕により出力する場合、ディジタル入出力部３２は、ステップＳＰ１１からステップＳＰ１５に移る。これによりディジタル入出力部３２は、ハードディスク装置２より読み出したサンプリングレート４８〔ｋＨｚ〕によるオーディオデータを順次５フレームシーケンスのロックモードに変換し、続くステップＳＰ１６において、メモリ３４の入出力によりオーディオデータをインターリーブ処理した後、ステップＳＰ１７に移ってこの処理手順を終了する。
【００５７】
（１−２）第１の実施の形態の動作
以上の構成において、編集装置３０においては、オーディオデータ及びビデオデータを外部機器よりアップロードする場合、図６に示すパケット構造によるオーディオデータ及びビデオデータが外部機器からＦＩＦＯ３１に順次入力され、このうちビデオデータにおいては、ＦＩＦＯ３１より図示しないビデオデータの処理系を介してハードディスク装置２に記録される。またオーディオデータにおいては、ＦＩＦＯ３１よりディジタル入出力部３２に入力され、このディジタル入出力部３２を介してハードディスク装置２に記録される。
【００５８】
このときオーディオデータは、図６に示すパケット構造に対応するタイミングによりＦＩＦＯ３１より出力されてメモリ３３に入力され、続くメモリ３４を介して中央処理ユニット３５に入力される。ここでオーディオデータは、付加された管理用データによりフォーマットが検出され、このフォーマットに従った処理によりサンプリングレート４８〔ｋＨｚ〕、ロックモードによりハードディスク装置２に記録される。
【００５９】
すなわちオーディオデータがサンプリングレート４８〔ｋＨｚ〕、ロックモードによる場合、メモリ３４、中央処理ユニット３５、メモリ３７、ディジタルシグナルプロセッサ３８、メモリ３９を介して順次バスＢＵＳに出力され、ハードディスク装置２に記録される。このときオーディオデータは、メモリ３４の入出力におけるアドレス制御によりデインターリーブ処理される。またディジタルシグナルプロセッサ３８においてビデオフレームとの間で同期が図られ、これにより５フレームシーケンスのロックモードによりハードディスク装置２に記録される。
【００６０】
これに対してオーディオデータがサンプリングレート４８〔ｋＨｚ〕で、かつロックモードでない場合、オーディオデータは、サンプリングレート４８〔ｋＨｚ〕、ロックモードによる場合と同様に処理されてハードディスク装置２に記録される。
【００６１】
またオーディオデータがサンプリングレート４４．１〔ｋＨｚ〕又は３２〔ｋＨｚ〕の場合、同様に、メモリ３４、中央処理ユニット３５、メモリ３７、ディジタルシグナルプロセッサ３８、メモリ３９を介して順次バスＢＵＳに出力され、ハードディスク装置２に記録される。このときオーディオデータは、ディジタルシグナルプロセッサ３８における演算処理により、サンプリングレートが４８〔ｋＨｚ〕に変換された後、ビデオフレームとの間で同期が図られ、これによりサンプリングレート４８〔ｋＨｚ〕により入力された場合と同様に、サンプリングレート４８〔ｋＨｚ〕、５フレームシーケンスのロックモードによりハードディスク装置２に記録される。
【００６２】
またこのサンプリングレートの変換処理において、対応するスロットにそれぞれ割り当てられた実時間以下の時間により、サンプリングレートが高速度で変換され、これにより１倍速による場合に限らず、４倍速による場合でも、サンプリングレートを変換してハードディスク装置２に記録することが可能となる。これによりこの編集装置３０においては、図７について上述した編集装置１のように、空き時間を利用したサンプリングレートの変換処理を省略することができ、その分編集作業に要する時間を短縮して作業を効率化することができる。
【００６３】
またオーディオデータにおいては、この演算処理によるサンプリングレートの変換処理において、併せてロックモードの処理に対応するタイミングの補正処理が実行され、これにより図７について上述した編集装置１のように、サンプリングレートの変換処理と、ロックモードに対応するタイミングの補正処理とを個別に実行することによる音質劣化を防止することができ、さらには全体構成を簡略化することができる。
【００６４】
これに対してオーディオデータがサンプリングレート３２〔ｋＨｚ〕のデータ圧縮モードの場合、オーディオデータは、一旦メモリ３４より読み出された後、中央処理ユニット３５を介してデコーダ３６に入力され、ここで１２ビットによるオーディオデータが１６ビットによるオーディオデータにデータ伸長される。その後オーディオデータは、上述の場合と同様に順次中央処理ユニット３５、メモリ３７、ディジタルシグナルプロセッサ３８、メモリ３９を介してバスＢＵＳに出力され、サンプリングレート４８〔ｋＨｚ〕、ロックモードによりハードディスク装置２に記録される。
【００６５】
かくしてこのようにしてハードディスク装置２に記録されたオーディオデータがビデオデータと共に編集処理に供され、その編集結果がハードディスク装置２に記録される。
【００６６】
このようにしてハードディスク装置２に記録された編集結果は、外部機器等にダウンロードされて放送等に供される。このダウンロードにおいて、ビデオデータは、ハードディスク装置２より読み出されて所定の処理回路を介して図６について上述した１倍速又は４倍速によるパケット構造に対応するデータ構造によりＦＩＦＯ３１に入力される。これに対してオーディオデータは、ハードディスク装置２より読み出されてディジタル入出力部３２を介してＦＩＦＯ３１に入力され、これによりＦＩＦＯ３１より外部機器に１倍速又は４倍速により編集結果が送出される。
【００６７】
このディジタル入出力部３２において、オーディオデータは、メモリ３９、ディジタルシグナルプロセッサ３８、メモリ３７、中央処理ユニット３５、メモリ３４、メモリ３３を順次介してＦＩＦＯ３１に入力される。このときユーザーの指定により例えばサンプリングレート４８〔ｋＨｚ〕により１倍速でオーディオデータを出力する場合、オーディオデータは、この１倍速に対応するタイミングでハードディスク装置２より間欠的に読み出され、ディジタルシグナルプロセッサ３８により５フレームシーケンスのロックが図られる。さらにメモリ３４の入出力におけるアドレス制御によりインターリーブ処理された後、この１倍速に対応するタイミングでメモリ３３よりＦＩＦＯ３１に出力され、これにより第１のスロットＦ０に割り当てられて外部機器に出力される。
【００６８】
これに対してサンプリングレート３２〔ｋＨｚ〕により１倍速でオーディオデータを出力する場合、オーディオデータは、同様にしてハードディスク装置２より読み出され、ディジタルシグナルプロセッサ３８における演算処理によりサンプリングレートが３２〔ｋＨｚ〕に変換され、また５フレームシーケンスのロックが図られる。さらにメモリ３４の入出力におけるアドレス制御によりインターリーブ処理された後、この１倍速に対応するタイミングでメモリ３３よりＦＩＦＯ３１に出力され、これにより第１のスロットＦ０に割り当てられて外部機器に出力される。
【００６９】
またサンプリングレート３２〔ｋＨｚ〕、データ圧縮モードにより１倍速でオーディオデータを出力する場合、非圧縮の場合と同様にしてサンプリングレートが変換され、また５フレームシーケンスのロックが図られた後、オーディオデータは、中央処理ユニット３５よりデコーダ３６に入力され、ここで１６ビットによるオーディオデータがデータ圧縮されて１２ビットによりメモリ３４に格納される。オーディオデータにおいては、このようにしてデータ圧縮された後、メモリ３４においてインターリーブ処理された後、この１倍速に対応するタイミングでメモリ３３よりＦＩＦＯ３１に出力され、これにより第１のスロットＦ０に割り当てられて外部機器に出力される。
【００７０】
これに対して各サンプリングレートで４倍速によりオーディオデータを出力する場合、オーディオデータにおいては、この４倍速に対応するタイミングで間欠的にハードディスク装置２より読み出され、各サンプリングレート、データ圧縮モードによりそれぞれ１倍速の場合と同様に処理された後、メモリ３３より４倍速に対応するタイミングでＦＩＦＯ３１に出力され、これにより第１〜第４のスロットＦ０〜Ｆ３に割り当てられて外部機器に出力される。
【００７１】
このような１倍速及び４倍速におけるレート変換処理において、オーディオデータは、それぞれ対応するスロットに割り当てられた実時間以下の時間によりサンプリングレートが高速度で変換され、これにより１倍速による場合に限らず、４倍速による場合でも、リアルタイムでサンプリングレートを変換して外部機器に出力することが可能となる。これによりこの編集装置３０においては、短時間で編集結果をダウンロードでき、その分作業を効率化することができる。
【００７２】
またオーディオデータにおいては、このダウンロード時におけるサンプリングレートの変換処理においても、併せてロックモードの処理に対応するタイミングの補正処理が同時に実行され、これにより図７について上述した編集装置１のように、サンプリングレートの変換処理と、ロックモードに対応するタイミングの補正処理とを個別に実行して１倍速によりダウンロードすることによる音質劣化を防止することができ、さらには全体構成を簡略化することができる。
【００７３】
（１−３）第１の実施の形態の効果
以上の構成によれば、所定のスロットに時間軸圧縮したオーディオデータを割り当てて１倍速又は４倍速によりオーディオデータを入出力する際に、それぞれ対応するスロットに割り当てられた実時間以下の時間によりサンプリングレートを高速度で変換することにより、編集作業の効率を向上することができる。
【００７４】
（２）第２の実施の形態
図４は、図１との対比により本発明の第２の実施の形態に係る編集装置を示すブロック図である。この編集装置４０においては、図１について上述した中央処理ユニット３５、ディジタルシグナルプロセッサ３８の処理を演算処理回路４１により実行する。なおこの編集装置４０において、図１について上述した編集装置３０と同一の構成は、対応する符号を付して示し重複した説明は省略する。
【００７５】
図４に示す構成によれば、演算処理回路によりレート変換、５フレームシーケンスのロック処理、データ伸長等の処理を実行しても、第１の実施の形態と同様の効果を得ることができる。
【００７６】
（３）第３の実施の形態
図５は、図４との対比により本発明の第３の実施の形態に係る編集装置を示すブロック図である。この編集装置５０においては、大容量のメモリ５１をバンク構造により使用して、図４について上述したメモリ３３、３４、３７を一体化する。
【００７７】
図５に示す構成のように演算処理回路４１の周辺メモリを一体化しても、第１の実施の形態と同様の効果を得ることができる。
【００７８】
（４）他の実施の形態
なお上述の実施の形態においては、１倍速又は４倍速によりオーディオデータを入出力する場合について述べたが、本発明はこれに限らず、２倍速等によりオーディオデータを入出力する場合にも広く適用することができる。
【００７９】
また上述の実施の形態においては、編集装置に本発明を適用してオーディオデータをハードディスク装置に記録し、また再生して出力する場合について述べたが、本発明はこれに限らず、ビデオテープレコーダ等によりオーディオデータを記録し、また再生する場合、さらには編集装置以外の種々の映像機器においてオーディオデータを入出力する場合に広く適用することができる。
【００８０】
また上述の実施の形態においては、１フレーム周期でパケットを伝送する場合にあって、オーディオデータをインターリーブ処理してビデオデータと共に伝送する場合について述べたが、本発明はこれに限らず、インターリーブ処理を省略して伝送する場合、さらにはオーディオデータだけを伝送する場合等に広く適用することができる。
【００８１】
【発明の効果】
上述のように本発明によれば、少なくとも２以上のスロットに時間軸圧縮したオーディオデータをそれぞれ割り当ててスロットの数に対応するＮ倍速によりオーディオデータを入出力する際に、各スロットに割り当てられた実時間以下の時間によりサンプリングレートを変換することにより、編集作業等において作業の効率を向上することできる。
【図面の簡単な説明】
【図１】本発明の第１の実施の形態に係る編集装置を示すブロック図である。
【図２】図１の編集装置の動作の説明に供するフローチャートである。
【図３】図１の編集装置のダウンロード時の処理の説明に供するフローチャートである。
【図４】本発明の第２の実施の形態に係る編集装置を示すブロック図である。
【図５】本発明の第３の実施の形態に係る編集装置を示すブロック図である。
【図６】ビデオデータ及びオーディオデータの伝送フォーマットの説明に供する略線図である。
【図７】従来の編集装置を示すブロック図である。
【図８】図７の編集装置において１倍速によるアップロード時のオーディオデータの流れを示すブロック図である。
【図９】図７の編集装置において１倍速によるダウンロード時のオーディオデータの流れを示すブロック図である。
【図１０】図７の編集装置において４倍速によるアップロード時のオーディオデータの流れを示すブロック図である。
【符号の説明】
１、３０、４０、５０……編集装置、２……ハードディスク装置、４、７、８、１２、１６、２３、３３、３４、３７、３９、５２……メモリ、３６……デコーダ、３５……中央処理ユニット、３８……ディジタルシグナルプロセッサ、４１……演算処理回路[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an audio data processing apparatus, and can be applied to an editing apparatus, for example. According to the present invention, when audio data compressed in time axis is assigned to at least two slots and audio data is input / output at N times speed corresponding to the number of slots, the time is less than the real time assigned to each slot. By converting the sampling rate, work efficiency can be improved in editing work and the like.
[0002]
[Prior art]
Conventionally, in an editing apparatus, a format for transmitting video data and audio data at high speed by serial transmission has been proposed. That is, FIG. 6 is a schematic diagram for explaining this format. One packet is formed by 858 words × 525 words (in the case of the NTSC system), and this packet is repeated in one frame period, and video data and audio are recorded. Data is transmitted.
[0003]
In this one packet, 120 words × 525 words are allocated to the command data area, and commands, synchronization data, etc. for transmission of video data and audio data are allocated to the command data area. Further, five slots F0 to F4 of 140 words × 525 words are formed in an area of 720 words × 525 words in the remaining area, and video data DV for one frame formed by time-axis compression in each of the slots F0 to F4. And corresponding 4-channel audio data DA1 to DA4 are respectively assigned.
[0004]
As a result, in this format, one of these five slots F0 to F4 can be used so that video data and audio data can be transmitted at a period of 1 frame / 30 seconds, which is a so-called single speed, and these five slots. Video data and audio data can be transmitted at a maximum speed of 5 times using all of F0 to F4.
[0005]
The video data DV and audio data DA1 to DA4 transmitted in this way are transmitted with management data indicating the format and the like, respectively. Further, the video data DV and audio data DA1 to DA4 of each slot are used as a unit. , Each is interleaved and transmitted.
[0006]
In the audio data DA1 to DA4, a sampling rate of 32 [kHz], 44.1 [kHz] or 48 [kHz] is applied. When the sampling rate is 32 [kHz], the data compression mode can be set. In this data compression mode, 16-bit audio data is compressed to 12 bits and transmitted. In other cases, 16-bit audio data is transmitted.
[0007]
Further, the audio data DA1 to DA4 are transmitted in a lock mode (which is a lock mode based on a so-called 5-frame sequence) or an unlock mode. In this lock mode, an audio frame has a predetermined relationship with one frame of video data. Thus, the sampling number of the audio data DA1 to DA4 is set for continuous video frames. That is, in the audio frame and the video data, since the video frame and the audio frame do not coincide with each other, when the sampling rate is 48 [kHz], in the lock mode, 8008 samples of audio data corresponding to five consecutive frames of the video data. DA1 to DA4 are assigned to 1600, 1602, 1602, 1602, and 1602 samples for transmission to five consecutive video frames, respectively, and transmitted.
[0008]
In an editing apparatus that processes video data and audio data transmitted in such a format, for example, video data and audio data are recorded and processed in units of this packet structure on a hard disk device or the like. Audio data is recorded at a sampling rate of 48 [kHz] and a lock mode and processed in a unified manner.
[0009]
That is, FIG. 7 is a block diagram showing an audio processing system for one channel of the editing apparatus. This editing apparatus 1 transmits video data and audio data transmitted at 1 × speed and 4 × speed in the format of FIG. (HDD) 2 is recorded and processed. In the case of 1 × speed, the audio data and video data are assigned to the first slot F0 and transmitted. In the case of 4 × speed, the video data and audio data are assigned to the first to fourth slots F0 to F3. Are transmitted.
[0010]
That is, the editing device 1 selectively inputs audio data DA for one channel to the digital input / output unit (DIO) 3 via a buffer memory (not shown) when uploading video data and audio data to the hard disk device 2. To do.
[0011]
The digital input / output unit (DIO) 3 converts the audio data DA into parallel data via a serial / parallel conversion circuit (not shown) and inputs the parallel data to the memory 4, and the audio data DA is sent to the central processing unit via the memory 4. (CPU) 5 to input. The central processing unit 5 analyzes the format of the audio data DA from the management data added to the audio data DA. Here, when the audio data DA is in the compression mode at the sampling rate 32 [kHz], the central processing unit 5 accesses the decoder 6 by the read-only memory by using the audio data DA as an address, and thereby 12 bits according to this compression mode. The audio data DA is decompressed and re-stored in the memory 4 with 16 bits.
[0012]
In the case of the compression mode, the central processing unit 5 reads the audio data DA stored in the memory 4 in this way and outputs it to the bus BUS via the memories 7 and 8 which are buffer memories. In modes other than the compression mode, the audio data DA input from the external device is read from the memory 4 and similarly output to the bus BUS.
[0013]
When the audio data DA is read from the memory 4 in this way, the central processing unit 5 reads the audio data DA according to a predetermined rule, thereby deinterleaving and outputting the audio data DA.
[0014]
On the other hand, when the video data and audio data recorded on the hard disk device 2 are downloaded to an external device, the digital input / output unit 3 transmits the audio data output to the bus BUS via the memories 8 and 7 to the central processing unit. Enter 5. At this time, when outputting the audio data in the lock mode, the digital input / output unit 3 controls the data input / output timing in the memory 7 to control the audio of a predetermined number of samples in five consecutive video frames as described above with reference to FIG. Allocate data.
[0015]
In contrast to uploading, the central processing unit 5 outputs the audio data input from the memory 7 in this way to the external device via the memory 4 or via the decoder 6 and the memory 4. At this time, the audio data DA is interleaved by the address control of the memory 4 and output.
[0016]
The first playback unit (PB1) 10 outputs audio data output to the bus BUS to the monitor 11 at the time of uploading, downloading, and editing processing at 1 × speed. At this time, the first playback unit (PB1) 10 outputs the audio data in a format suitable for the processing of the monitor 11. That is, the first reproduction unit 10 inputs audio data from the bus BUS via the memory 12 and supplies the audio data to the decoder 13. Here, the decoder 13 outputs the audio data intermittently output to the bus BUS corresponding to the packet structure described above with reference to FIG. 6 as a continuous data string corresponding to the sampling rate of the audio data, and the subsequent rate converter. 14 converts the sampling rate of the audio data into a sampling rate suitable for the processing of the monitor 11 and outputs it. As a result, the editing apparatus 1 is configured so that, during upload, download, and editing processing, the audio data is time-axis expanded, the sampling rate is converted and output to an external device, and can be monitored by this external device.
[0017]
On the other hand, the second playback unit (PB2) 15 processes video data and audio data output to the bus BUS in the same way during uploading, downloading, and editing processing at 1 × speed, and outputs them to a switcher or the like. The data is output to the recording unit (REC) 20. At this time, the second reproducing unit 15 converts the sampling rate of the audio data into 48 [kHz] in the rate converter 18 and outputs the result. As a result, the editing apparatus 1 can perform the audio data unified editing process by extending the audio data in the time axis and converting the sampling rate to 48 [kHz].
[0018]
The recording unit 20 re-samples the audio data at the sampling rate 48 [kHz] input from the second playback unit 15 by the rate converter 21 at the time of uploading, downloading, and editing processing at 1 × speed, thereby sampling the audio data. Is corrected to a timing corresponding to the processing in the lock mode. The encoder 22 blocks the audio data output from the rate converter 21 to output the block data corresponding to the packet structure described above with reference to FIG. 6, and the memory 23 outputs the output data of the encoder 22 to the bus BUS. Output to.
[0019]
The hard disk device 2 records video data and audio data output to the bus BUS at the time of uploading and editing processing at 1 × speed under the control of a system controller (not shown), whereas recorded video data at the time of downloading and editing processing. And output audio data to the bus BUS.
[0020]
As shown in FIG. 8, the editing apparatus 1 records the audio data on the hard disk device 2 via the second playback unit 15 and the recording unit 20 at the time of uploading at 1 × speed, and the hard disk device 2. The audio data to be recorded on can be processed and monitored by the first reproduction unit 10.
[0021]
At the time of downloading at 1 × speed, the editing device 1 outputs the audio data output from the hard disk device 2 to the external device via the second playback unit 15 and recording unit 20 as shown in FIG. Audio data output to an external device can be monitored via the first playback unit 10.
[0022]
On the other hand, at the time of uploading at 4 × speed, the audio data input from the digital input / output unit 3 is directly recorded on the hard disk device 2 as shown in FIG. Further, the audio data recorded in this way is read out from the hard disk device 2 at the 1 × speed using the free time, processed by the second reproducing unit 15 and the recording unit 20 and re-recorded on the hard disk device 2 ( The flow of audio data due to this free time is indicated by a broken line in FIG. 10), and recording is performed again on the hard disk device 2 at a sampling rate of 48 [kHz] that can be processed uniformly. Can be monitored via the playback unit 10.
[0023]
At the time of downloading at quadruple speed, the audio data recorded in the hard disk device 2 in this way is directly output from the bus BUS and the digital input / output unit 3 to an external device.
[0024]
[Problems to be solved by the invention]
By the way, even when uploading at 4 × speed, if the sampling rate can be directly converted and recorded in the hard disk device, the rate conversion process using the idle time can be omitted, so that the time required for editing work can be shortened accordingly. It is thought that the efficiency of editing work can be improved.
[0025]
Even when downloading at quadruple speed, if the audio data can be downloaded at a desired sampling rate, the efficiency of editing work can be improved accordingly.
[0026]
The present invention has been made in view of the above points, and an object of the present invention is to propose an audio data processing apparatus capable of improving the efficiency of this kind of work.
[0027]
[Means for Solving the Problems]
In order to solve such a problem, in the invention according to claim 1, the audio data of each slot is inputted after converting the sampling rate by the time less than the real time assigned to each slot.
[0028]
In the invention according to claim 4, a packet having a plurality of slots is repeated at a constant period, and each block of audio data is assigned to at least two slots of the plurality of slots of the packet, and the audio data of each slot The sampling rate is converted by a time less than the real time assigned to each slot and output.
[0029]
With the configuration according to claim 1, if the audio data of each slot is input after converting the sampling rate in a time equal to or less than the real time assigned to each slot, the audio can be directly converted into the audio even if input at double speed. Data can be input, whereby the rate conversion process using the idle time can be omitted, and the time required for editing work can be shortened accordingly, and the work efficiency can be improved.
[0030]
According to the configuration of claim 4, a packet having a plurality of slots is repeated at a constant period, and each block of audio data is assigned to at least two slots of the plurality of slots of the packet, and the audio data of each slot is assigned. If the sampling rate is converted and output in less than the real time allocated to each slot, audio data can be output at the desired sampling rate even when audio data is output at double speed. The work efficiency can be improved by shortening the time.
[0031]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings as appropriate.
[0032]
(1) First embodiment
(1-1) Configuration of the first embodiment
FIG. 1 is a block diagram showing an audio data input / output system of the editing apparatus according to the first embodiment of the present invention. In the editing apparatus 30 according to this embodiment, video data and audio data in the format described above with reference to FIG. 6 are input / output to / from an external device at 1 × speed and 4 × speed. The editing apparatus 30 has four channels corresponding to the number of channels of audio data in the input / output system 30. In this way, the audio data input / output to / from an external device is processed one channel at a time by each input / output system. .
[0033]
That is, in this editing apparatus 30, a FIFO (First In First Out) 31 inputs and outputs video data and audio data in the format described above with reference to FIG. The digital input / output unit 32 inputs / outputs audio data for one channel to / from the FIFO 31.
[0034]
That is, in the digital input / output unit 32, the memory 33 is a buffer memory, and when video data and audio data are uploaded to the hard disk device 2, audio data for one channel is selectively inputted from the FIFO 31 at a predetermined timing. Output. Conversely, the memory 33 outputs the audio data output from the memory 34 to the FIFO 31 at a predetermined timing when uploading video data and audio data.
[0035]
The subsequent memory 34 is a buffer memory, and temporarily stores the audio data output from the memory 33 and outputs it to the central processing unit (CPU) 35 when uploading video data and audio data to the hard disk device 2. When the audio data output from the memory 33 is in the compression mode at the sampling rate 32 [kHz], the audio data is output to the central processing unit 35 in this way and the audio data obtained from the decoder 36 is re-stored. Thus, 16-bit audio data decompressed by the decoder 36 is re-stored and output to the central processing unit 35.
[0036]
In these processes, the memory 34 outputs audio data in a predetermined order different from that at the time of storage, thereby deinterleaving and outputting the audio data.
[0037]
On the other hand, when downloading video data and audio data to an external device, the memory 34 outputs the audio data output from the central processing unit 35 or the audio data output from the decoder 36 in an order different from that at the time of input. Thus, the audio data is interleaved and output to the memory 33.
[0038]
The central processing unit 35 receives the audio data output from the memory 34 when uploading the video data and audio data to the hard disk device 2 and analyzes the format of the audio data from the management data added to the audio data. From this analysis result, when the audio data is in the compression mode at the sampling rate 32 [kHz], the central processing unit 35 accesses the decoder 36 by the read-only memory by using the audio data output from the memory 34 as an address. The 12-bit audio data in the compression mode is decompressed and re-stored in the memory 34 with 16 bits.
[0039]
In the case of the compression mode, the central processing unit 35 reads the audio data stored in the memory 34 in this way and outputs it to the memory 37 which is a buffer memory. In modes other than the compression mode, audio data input from the memory 33 is read from the memory 34 and output to the memory 37 in the same manner.
[0040]
On the other hand, when downloading to an external device, the central processing unit 35 inputs audio data from the memory 37, selects management data, and outputs it to the memory 34. At this time, when the audio data is output in the compression mode, the central processing unit 35 outputs the audio data to the memory 34 via the decoder 36 instead of outputting the audio data directly to the memory 34. 34, audio data of 12 bits formed by data compression is output.
[0041]
Thus, the decoder 36 is a data compression circuit having a look-up table structure constituted by a read-only memory.
[0042]
The memory 37 sequentially outputs the audio data output from the central processing unit 35 at a timing suitable for processing of the subsequent digital signal processor (DSP) 38 at the time of downloading. On the other hand, the memory 37 outputs the audio data output from the digital signal processor 38 to the central processing unit 35 at the time of uploading.
[0043]
At the time of uploading, the digital signal processor 38 sets the sampling rate of audio data output from the memory 37 to 48 [kHz] and outputs it. At this time, the digital signal processor 38 converts the sampling rate by interpolation calculation processing by weighted addition of a plurality of consecutive samples of audio data, thereby returning the data transfer rate of the audio data to the data transfer rate corresponding to the sampling rate. , Rate conversion at high speed.
[0044]
Thus, when processing the audio data at 1 × speed, the digital signal processor 38 is assigned the audio data and video data only to the first slot F0 in FIG. The sampling rate of this audio data is converted by a time less than the real time assigned to. On the other hand, when processing the audio data at the quadruple speed, since the audio data and the video data are allocated to the four slots F0 to F3 in FIG. 6, the digital signal processor 38 has the four slots F0. The audio data assigned to each of the slots F0 to F3 is sequentially interpolated and converted at a time equal to or less than the real time assigned to .about.F3 to convert the sampling rate.
[0045]
Further, the digital signal processor 38 corrects the sampling timing of each audio data to the timing corresponding to the lock mode processing by setting the weighting coefficient in the interpolation calculation processing by weighted addition of a plurality of samples.
[0046]
Further, the digital signal processor 38 sequentially divides the audio data obtained by the interpolation processing in this way on the basis of the video frame and outputs the audio data to the memory 39 by dividing the audio data into a 5-frame sequence. Output by block corresponding to lock mode. In this case, since the sampling rate is unified to 48 [kHz] in the audio data, the digital signal processor 38 sequentially converts the continuous audio data into 5 consecutive video frames 1600, 1602, 1602, 1602. , 1602 samples are divided and output to the memory 39 so as to be allocated one by one.
[0047]
On the other hand, the digital signal processor 38 processes the audio data output from the memory 39 and outputs it to the memory 37 under the control of the host system controller at the time of downloading. In this case, the digital signal processor 38 processes the audio data in reverse to the time of uploading, so that the audio data at the sampling rate 48 [kHz] is converted into the sampling rate 48 [kHz] or 32 [kHz] according to the instruction of the system controller. ] To output. Also, the digital signal processor 38 divides each audio data into a predetermined number of samplings corresponding to the video frames and outputs them to the memory 37, thereby outputting the audio data in the 5-frame sequence lock mode.
[0048]
When uploading, the memory 39 outputs the audio data output from the digital signal processor 38 to the bus BUS at a predetermined timing, and the editing device 30 records the audio data in the hard disk device 2. Further, the memory 37 takes in audio data output from the hard disk device 2 to the bus BUS and outputs it to the digital signal processor 38 at the time of downloading.
[0049]
The editing device 30 edits the audio data by processing the audio data recorded in the hard disk device 2 at the sampling rate of 48 [kHz] at 1 × speed or 4 × speed in this manner by a processing circuit (not shown) to thereby edit the hard disk. The data is recorded in the apparatus 2, and at this time, the sampling rate is converted as necessary, and can be monitored by a monitor device which is an external device.
[0050]
FIG. 2 is a flowchart for explaining processing in the digital input / output unit 32. At the time of uploading, the digital input / output unit 32 moves from step SP1 to step SP2, analyzes the format of the audio data by the central processing unit 35, and determines whether or not the audio data is in the data compression mode of the sampling rate 32 [kHz]. . If the audio data is in the data compression mode with a sampling rate of 32 [kHz], the digital input / output unit 32 proceeds to step SP3 and decompresses the audio data compressed to 12 bits by the decoder 36 to 16 bits. At the same time, the data is deinterleaved and output to the memory 37. Further, in step SP5, the digital input / output unit 32 converts the sampling rate to 48 [kHz] by the subsequent digital signal processor 38. In step SP5, the digital input / output unit 32 converts the sampling rate to the lock mode based on the 5-frame sequence, and then proceeds to step SP6. End the procedure.
[0051]
On the other hand, when the audio data is other than the data compression mode of the sampling rate 32 [kHz], the digital input / output unit 32 proceeds from step SP2 to step SP7 and performs deinterleave processing by the output from the memory 34. In the subsequent step SP8, the central processing unit 35 determines whether or not the audio data has a sampling rate of 48 [kHz]. Here, when the audio data has a sampling rate of 48 [kHz], the digital input / output unit 32 proceeds to step SP5, converts the audio data to the lock mode based on the 5-frame sequence, and then proceeds to step SP6 to complete the processing procedure. To do.
[0052]
On the other hand, when the sampling rate of the audio data is other than 48 [kHz], the digital input / output unit 32 moves from step SP8 to step SP4, and after the digital signal processor 38 converts the sampling rate to 48 [kHz], The process proceeds to step SP5 to convert to the lock mode based on the 5-frame sequence, and the process proceeds to step SP6 to end this processing procedure.
[0053]
FIG. 3 is a flowchart for explaining processing at the time of downloading in the digital input / output unit 32. When downloading, the digital input / output unit 32 proceeds from step SP10 to step SP11, and the digital signal processor 38 determines whether the format of the audio data instructed by the host system controller is the format of the sampling rate 32 [kHz]. . If the sampling rate 32 [kHz] is instructed here, the digital input / output unit 32 moves to step SP12, converts the audio data sampling rate to 32 [kHz] by the digital signal processor 38, and then proceeds to step SP13. Move.
[0054]
Here, the digital input / output unit 32 determines in the digital signal processor 38 whether or not the format of the audio data instructed by the host system controller is the data compression mode. If the format is the data compression mode, the process proceeds to step SP14. The decoder 36 compresses the 16-bit audio data to 12 bits. Further, in step SP15, the digital input / output unit 32 converts the audio data into the 5-frame sequence lock mode by the digital signal processor 38, and in the subsequent step SP16, after interleaving the audio data by the input / output of the memory 34, The process proceeds to SP17 and the processing procedure is terminated.
[0055]
On the other hand, when audio data is output without being compressed at a sampling rate of 32 [kHz], the digital input / output unit 32 proceeds from step SP13 to step SP15. As a result, the digital input / output unit 32 omits the data compression process in the decoder 36 and sequentially converts the audio data into the lock mode of the 5-frame sequence, and in step SP16, the audio data is interleaved by the input / output of the memory 34. Thereafter, the process proceeds to step SP17 and the processing procedure is terminated.
[0056]
On the other hand, when outputting audio data at a sampling rate of 48 [kHz], the digital input / output unit 32 proceeds from step SP11 to step SP15. As a result, the digital input / output unit 32 sequentially converts the audio data read from the hard disk device 2 at the sampling rate 48 [kHz] into the lock mode of the 5-frame sequence, and in step SP16, the audio data is input / output to / from the memory 34. After the interleaving process, the process proceeds to step SP17 to end this processing procedure.
[0057]
(1-2) Operation of the first embodiment
In the configuration described above, in the editing apparatus 30, when audio data and video data are uploaded from an external device, audio data and video data having the packet structure shown in FIG. 6 are sequentially input from the external device to the FIFO 31, of which video data Is recorded in the hard disk device 2 from the FIFO 31 via a video data processing system (not shown). Audio data is input from the FIFO 31 to the digital input / output unit 32 and is recorded in the hard disk device 2 via the digital input / output unit 32.
[0058]
At this time, the audio data is output from the FIFO 31 at a timing corresponding to the packet structure shown in FIG. 6 and input to the memory 33, and then input to the central processing unit 35 via the memory 34. Here, the format of the audio data is detected by the added management data, and is recorded on the hard disk device 2 by the sampling rate 48 [kHz] and the lock mode by processing according to this format.
[0059]
That is, when the audio data is in the sampling rate 48 [kHz] and the lock mode, it is sequentially output to the bus BUS via the memory 34, the central processing unit 35, the memory 37, the digital signal processor 38, and the memory 39, and recorded on the hard disk device 2. The At this time, the audio data is deinterleaved by address control at the input / output of the memory 34. Further, the digital signal processor 38 synchronizes with the video frame, and is recorded in the hard disk device 2 by the lock mode of the 5-frame sequence.
[0060]
On the other hand, when the audio data has a sampling rate of 48 [kHz] and is not in the lock mode, the audio data is processed and recorded in the hard disk device 2 in the same manner as in the sampling rate of 48 [kHz] and the lock mode.
[0061]
Similarly, when the audio data has a sampling rate of 44.1 [kHz] or 32 [kHz], it is sequentially output to the bus BUS via the memory 34, the central processing unit 35, the memory 37, the digital signal processor 38, and the memory 39. Are recorded in the hard disk device 2. At this time, the audio data is converted into a sampling rate of 48 [kHz] by an arithmetic process in the digital signal processor 38, and then synchronized with the video frame, thereby being input at a sampling rate of 48 [kHz]. In the same manner as described above, the recording is performed on the hard disk device 2 by the sampling rate 48 [kHz] and the lock mode of the 5 frame sequence.
[0062]
Also, in this sampling rate conversion process, the sampling rate is converted at a high speed by a time less than the real time allocated to each corresponding slot, so that the sampling rate is not limited to 1 × speed, and even at 4 × speed sampling. The rate can be converted and recorded on the hard disk device 2. As a result, the editing apparatus 30 can omit the sampling rate conversion process using the idle time as in the editing apparatus 1 described above with reference to FIG. Can be made more efficient.
[0063]
In addition, in the audio data, in the sampling rate conversion processing by this arithmetic processing, timing correction processing corresponding to the lock mode processing is also executed, and as a result, as in the editing device 1 described above with reference to FIG. Sound quality deterioration due to the separate execution of the conversion process and the timing correction process corresponding to the lock mode can be prevented, and the overall configuration can be simplified.
[0064]
On the other hand, when the audio data is in the data compression mode at the sampling rate 32 [kHz], the audio data is once read from the memory 34 and then input to the decoder 36 via the central processing unit 35. The audio data with bits is decompressed into audio data with 16 bits. Thereafter, the audio data is sequentially output to the bus BUS via the central processing unit 35, the memory 37, the digital signal processor 38, and the memory 39 in the same manner as described above, and is output to the hard disk device 2 by the sampling rate 48 [kHz] and the lock mode. To be recorded.
[0065]
Thus, the audio data recorded in the hard disk device 2 in this way is used for editing processing together with the video data, and the editing result is recorded in the hard disk device 2.
[0066]
The editing result recorded in the hard disk device 2 in this way is downloaded to an external device or the like and used for broadcasting or the like. In this download, the video data is read from the hard disk device 2 and input to the FIFO 31 through a predetermined processing circuit in a data structure corresponding to the 1 × speed or 4 × speed packet structure described above with reference to FIG. On the other hand, the audio data is read from the hard disk device 2 and input to the FIFO 31 via the digital input / output unit 32, whereby the editing result is transmitted from the FIFO 31 to the external device at 1 × speed or 4 × speed.
[0067]
In the digital input / output unit 32, the audio data is input to the FIFO 31 through the memory 39, the digital signal processor 38, the memory 37, the central processing unit 35, the memory 34, and the memory 33 in order. At this time, when audio data is output at a single speed, for example, at a sampling rate of 48 [kHz] as specified by the user, the audio data is intermittently read from the hard disk device 2 at a timing corresponding to the single speed, and the digital signal processor. 38 locks the 5 frame sequence. Further, after interleave processing is performed by address control in the input / output of the memory 34, the data is output from the memory 33 to the FIFO 31 at a timing corresponding to the 1 × speed, and is assigned to the first slot F0 and output to the external device.
[0068]
On the other hand, when audio data is output at a single speed at a sampling rate of 32 [kHz], the audio data is read from the hard disk device 2 in the same manner, and the sampling rate is set to 32 [kHz] by arithmetic processing in the digital signal processor 38. And a 5 frame sequence is locked. Further, after interleave processing is performed by address control in the input / output of the memory 34, the data is output from the memory 33 to the FIFO 31 at a timing corresponding to the 1 × speed, and is assigned to the first slot F0 and output to the external device.
[0069]
When audio data is output at 1 × speed in the sampling rate 32 [kHz] and the data compression mode, the sampling rate is converted in the same manner as in the case of non-compression, and after the 5 frame sequence is locked, the audio data Is input to the decoder 36 from the central processing unit 35, where 16-bit audio data is compressed and stored in the memory 34 by 12 bits. The audio data is compressed in this manner, interleaved in the memory 34, and then output from the memory 33 to the FIFO 31 at a timing corresponding to the 1 × speed, thereby being assigned to the first slot F0. Output to the external device.
[0070]
On the other hand, when audio data is output at quadruple speed at each sampling rate, the audio data is intermittently read from the hard disk device 2 at a timing corresponding to the quadruple speed, and depending on each sampling rate and data compression mode. Each is processed in the same manner as in the case of 1 × speed, and then is output from the memory 33 to the FIFO 31 at a timing corresponding to 4 × speed, thereby being assigned to the first to fourth slots F0 to F3 and output to an external device. .
[0071]
In such rate conversion processing at 1 × speed and 4 × speed, the audio data is converted at a high sampling rate by a time less than the real time assigned to the corresponding slot, and this is not limited to the case of 1 × speed. Even in the case of quadruple speed, the sampling rate can be converted and output to an external device in real time. Thereby, in this editing apparatus 30, an editing result can be downloaded in a short time, and work can be made more efficient by that amount.
[0072]
Also, in the audio data, in the sampling rate conversion process at the time of downloading, the correction process of the timing corresponding to the lock mode process is simultaneously executed, and as in the editing apparatus 1 described above with reference to FIG. Sampling rate conversion processing and timing correction processing corresponding to the lock mode can be individually executed to prevent deterioration in sound quality caused by downloading at 1 × speed, and the overall configuration can be simplified. .
[0073]
(1-3) Effects of the first embodiment
According to the above configuration, when audio data compressed in time axis is assigned to a predetermined slot and audio data is input / output at 1 × speed or 4 × speed, sampling is performed at a time less than the real time assigned to the corresponding slot. By converting the rate at a high speed, the efficiency of editing work can be improved.
[0074]
(2) Second embodiment
FIG. 4 is a block diagram showing an editing apparatus according to the second embodiment of the present invention in comparison with FIG. In the editing apparatus 40, the arithmetic processing circuit 41 executes the processing of the central processing unit 35 and the digital signal processor 38 described above with reference to FIG. In this editing apparatus 40, the same configuration as that of the editing apparatus 30 described above with reference to FIG.
[0075]
According to the configuration shown in FIG. 4, even if processing such as rate conversion, 5-frame sequence lock processing, and data decompression is executed by the arithmetic processing circuit, the same effects as in the first embodiment can be obtained.
[0076]
(3) Third embodiment
FIG. 5 is a block diagram showing an editing apparatus according to the third embodiment of the present invention in comparison with FIG. In this editing apparatus 50, a large-capacity memory 51 is used in a bank structure to integrate the memories 33, 34, and 37 described above with reference to FIG.
[0077]
Even if the peripheral memory of the arithmetic processing circuit 41 is integrated as in the configuration shown in FIG. 5, the same effect as that of the first embodiment can be obtained.
[0078]
(4) Other embodiments
In the above-described embodiment, the case where audio data is input / output at 1 × speed or 4 × speed has been described. However, the present invention is not limited to this and is widely applied to the case where audio data is input / output at 2 × speed or the like. can do.
[0079]
In the above-described embodiment, the case where the present invention is applied to an editing apparatus to record audio data on a hard disk device, and is reproduced and output has been described. However, the present invention is not limited to this, and a video tape recorder is used. The present invention can be widely applied to the case where audio data is recorded and reproduced by the above-described method, and to the case where audio data is input / output in various video devices other than the editing device.
[0080]
In the above-described embodiment, the case where the audio data is interleaved and transmitted together with the video data in the case of transmitting the packet in one frame period has been described. However, the present invention is not limited to this, and the interleave processing is performed. When the transmission is omitted, the present invention can be widely applied to the case of transmitting only audio data.
[0081]
【The invention's effect】
As described above, according to the present invention, time-compressed audio data is assigned to at least two or more slots, and audio data is input / output at N times speed corresponding to the number of slots. By converting the sampling rate by a time shorter than the real time, the work efficiency can be improved in editing work or the like.
[Brief description of the drawings]
FIG. 1 is a block diagram showing an editing apparatus according to a first embodiment of the present invention.
FIG. 2 is a flowchart for explaining an operation of the editing apparatus of FIG. 1;
FIG. 3 is a flowchart for explaining processing at the time of downloading by the editing apparatus of FIG. 1;
FIG. 4 is a block diagram showing an editing apparatus according to a second embodiment of the present invention.
FIG. 5 is a block diagram showing an editing apparatus according to a third embodiment of the present invention.
FIG. 6 is a schematic diagram for explaining a transmission format of video data and audio data;
FIG. 7 is a block diagram showing a conventional editing apparatus.
8 is a block diagram showing the flow of audio data when uploading at 1 × speed in the editing apparatus of FIG. 7;
9 is a block diagram showing a flow of audio data at the time of downloading at 1 × speed in the editing apparatus of FIG. 7;
10 is a block diagram showing the flow of audio data when uploading at 4 × speed in the editing apparatus of FIG. 7;
[Explanation of symbols]
1, 30, 40, 50 ... Editing device, 2 ... Hard disk device, 4, 7, 8, 12, 16, 23, 33, 34, 37, 39, 52 ... Memory, 36 ... Decoder, 35 ... ... Central processing unit 38 ... Digital signal processor 41 ... Operation processing circuit

Claims

In an audio data processing apparatus for processing audio data input sequentially,
The audio data is
For a packet having a plurality of slots and repeated at a certain period,
It is divided into blocks by almost the fixed period and time-axis compressed,
And their respective blocks are assigned to at least two slots of a plurality of slots of the packet are inputted at a rate according to the number of blocks allocated to the audio data in one slot,
The audio data processing device includes:
From the management data added to the audio data, the sampling rate of the audio data is detected,
Based on the detection result, the audio data of each slot is converted into a predetermined sampling rate and input in a time less than the real time allocated to each slot.
Your audio data processing apparatus.

The fixed period is
The period of the video frame,
The audio data is
Along with the video data of the corresponding video frame, it is assigned to at least two slots of the plurality of slots of the packet.
Audio data processing device according to 請 Motomeko 1.

The audio data is
Interleaved and input in units of the slots,
The audio data processing device includes:
Deinterleaving the audio data and then converting the sampling rate
Audio data processing device according to 請 Motomeko 1.

In an audio data processing apparatus that outputs audio data supplied from a predetermined audio data supply means to an external device,
The audio data is
It is divided into blocks at almost constant intervals and compressed in time,
The audio data processing device includes:
Detecting the sampling rate of the audio data to be output to the external device;
After converting the sampling rate of the audio data based on the detection result,
The audio data of each block is allocated to a plurality of slots of a packet that repeats at a constant cycle according to the speed of the audio data output to the external device, and the audio is transmitted at a speed according to the number of blocks in which the audio data is allocated to one slot. Output data
Your audio data processing apparatus.

The fixed period is
The period of the video frame,
The audio data processing device includes:
Along with the video data of the corresponding video frame, the audio data is assigned to at least two slots of the plurality of slots of the packet and output.
Audio data processing device according to 請 Motomeko 4.

The audio data is interleaved and output in units of slots.
Audio data processing device according to 請 Motomeko 4.