JPH07226017A

JPH07226017A - 演奏記録再生装置

Info

Publication number: JPH07226017A
Application number: JP6037945A
Authority: JP
Inventors: Akira Hashimoto; 彰橋本
Original assignee: Yamaha Corp
Current assignee: Yamaha Corp
Priority date: 1994-02-10
Filing date: 1994-02-10
Publication date: 1995-08-22

Abstract

(57)【要約】【目的】映像信号、ステレオ音声、文字情報および演
奏データを記録再生してマルチメディアを実現する演奏
記録再生装置を提供する。【構成】ＣＰＵ１２がＭＩＤＩインタフェース回路２
１を介して入力されるＭＩＤＩ信号をパケットデータに
変換して映像信号の垂直帰線消去期間の走査線１０Ｈ〜
１４Ｈに重畳し、このパケットデータが重畳された映像
信号を映像トラックに記録する。また、ＣＰＵ１２は映
像トラックから再生出力される映像信号に含まれるパケ
ットデータあるいはクローズドキャプションデータＣＣ
を抽出し、当該映像信号に同期してパケットデータを復
号したＭＩＤＩ信号をＭＩＤＩ出力する一方、復号した
クローズドキャプションデータＣＣデータを映像信号に
付与して出力する。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、映像信号に演奏データ
を重畳して記録し、映像に同期して演奏データを再生す
る演奏記録再生装置に関する。

【０００２】

【従来の技術】近年、演奏操作に応じて生成される演奏
データと、その演奏シーンを撮像した映像信号とを記録
しておき、これらを同期再生する技術が知られてる。こ
うした技術にあっては、ビデオテープの映像トラックに
演奏シーンを撮像した映像信号を記録すると共に、演奏
操作に応じて電子楽器から出力されるＭＩＤＩ信号をア
ナログ信号に変換して音声トラックの片チャンネルに記
録する。そして、再生時には、この音声トラックの再生
出力をＭＩＤＩ信号に復号して自動演奏ピアノ等の自動
演奏装置に供給する一方、映像トラックの再生出力をデ
ィスプレイ装置に供給する。これにより、映像に同期し
て自動演奏ピアノがＭＩＤＩ信号に基づき自動演奏す
る。なお、この種の技術については、特願平４−２１８
０１８号に詳述されている。

【０００３】

【発明が解決しようとする課題】さて、上述した従来の
演奏記録再生装置では、演奏データと映像信号とを同一
の記録媒体であるビデオテープに記録するが、その際、
演奏データはＬ，Ｒチャンネルからなる音声トラックの
いずれか一方側のチャンネルに記録するようにしてい
る。このため、音声信号をも同時に録音する場合には、
音声トラックの一方側のチャンネルが演奏データによっ
て占有されてしまうことから、音声信号をステレオ録音
することができないという弊害が生じてしまう。また、
近年においては、映像／音声に加えて文字情報や上述し
た演奏データなどを付加した所謂、「マルチメディア」
が指向されており、こうした点を鑑みても、映像信号と
演奏データとを同期再生するだけではマルチメディア化
が十分とは言えず、ステレオ音声信号や文字情報をも映
像に同期して再生し得る装置が待望されている。

【０００４】ところで、映像／音声に文字情報を付加す
る技術としては、映像信号中に文字コードを重畳し、再
生時にその文字コードをデコードして画面上に字幕表示
するクローズドキャプション方式が知られている。しか
しながら、この方式では、単に映像に字幕表示するだけ
であるから、演奏データを含むマルチメディア化を達成
することはできない。そこで本発明は、上述した事情に
鑑みてなされたもので、映像信号、ステレオ音声、文字
情報および演奏データを記録再生し、マルチメディアを
実現する演奏記録再生装置を提供することを目的として
いる。

【０００５】

【課題を解決するための手段】上記目的を達成するた
め、請求項１に記載の発明にあっては、演奏データおよ
び字幕表示用の文字データが垂直帰線消去期間に重畳さ
れている映像信号から前記演奏データおよび文字データ
を抽出する抽出手段と、前記抽出手段が抽出した演奏デ
ータおよび文字データを当該映像信号に同期して復号す
る再生手段とを具備することを特徴としている。

【０００６】また、請求項２に記載の発明によれば、演
奏操作に応じて生成される演奏データと、字幕表示用の
文字データとを映像信号中の垂直帰線消去期間に重畳し
て記録媒体に記録する記録手段と、前記記録媒体から再
生出力される映像信号の垂直帰線消去期間に重畳される
前記演奏データおよび文字データを抽出する抽出手段
と、前記抽出手段が抽出した演奏データおよび文字デー
タを当該映像信号に同期して復号する再生手段とを具備
することを特徴としている。

【０００７】さらに、請求項３に記載の発明によれば、
外部からシリアル転送される演奏データをパケットデー
タに変換すると共に、映像信号から分離した水平同期信
号および垂直同期信号に応じて当該映像信号の垂直帰線
消去期間に含まれる所定の走査線を検出し、当該走査線
に前記パケットデータを重畳して記録媒体へ記録する記
録手段と、この記録媒体から再生出力される映像信号の
垂直帰線消去期間に含まれる所定の走査線に重畳された
前記パケットデータを抽出する抽出手段と、前記抽出手
段が抽出したパケットデータを当該映像信号に同期して
演奏データに復号する再生手段とを具備することを特徴
としている。

【０００８】また、請求項４に記載の発明にあっては、
前記再生手段から出力される演奏データが、発音遅延の
有る自動演奏装置に供給される場合、前記記録手段は、
前記演奏データを記録開始する時点から最初のイベント
タイミングまでの時間を前記発音遅延に相当する時間分
早めて記録するか、あるいは前記演奏データに対して前
記映像信号を前記発音遅延分遅らせて記録することを特
徴としている。

【０００９】請求項５に記載の発明によれば、前記記録
手段が演奏データを発音遅延に相当する時間分早めて媒
体記録した場合、前記再生手段は、当該演奏データを供
給する側の発音遅延量に応じて演奏データを所定時間分
遅延させて出力することを特徴としている。また、請求
項６に記載の発明によれば、前記記録手段は、複数の演
奏パートに対応する複数チャンネル分の演奏データを、
垂直帰線消去期間の複数の走査線に重畳して記録媒体
し、前記再生手段は、前記複数チャンネル分の演奏デー
タを選択的に復号出力することを特徴としている。さら
に、請求項７に記載の発明によれば、前記再生手段は、
前記記録媒体から再生出力される映像信号が途絶えた場
合、消音を指示する演奏データを発生することを特徴と
している。

【００１０】

【作用】本発明によれば、記録手段が演奏操作に応じて
生成される演奏データと、字幕表示用の文字データとを
映像信号中の垂直帰線消去期間に重畳して記録媒体に記
録し、抽出手段が前記記録媒体から再生出力される映像
信号の垂直帰線消去期間に重畳される前記演奏データお
よび文字データを抽出し、再生手段が抽出された演奏デ
ータおよび文字データを当該映像信号に同期して復号す
る。この結果、映像信号、ステレオ音声、文字情報およ
び演奏データを記録再生するマルチメディアが実現す
る。

【００１１】

【実施例】以下、図面を参照して本発明の実施例につい
て説明する。Ａ．実施例の構成マザーテープ作成システムの構成ここでは、まず、本発明の実施例である演奏記録再生装
置に適用されるマザーテープ作成システムの構成につい
て図１を参照して説明する。なお、ここで言うマザーテ
ープとは、周知の業務用ＶＴＲを用いて、例えば、自動
演奏ピアノを実際に演奏する風景を撮像して映像トラッ
クに記録し、その演奏に応じて自動演奏ピアノから発音
される楽音をハイファイ音声トラックにステレオ録音す
る一方、この自動演奏ピアノが演奏操作に応じて出力す
る演奏データ（ＭＩＤＩ信号）に対応する同期信号をノ
ーマル音声トラックに記録したものである。以下、この
マザーテープを作成するシステムについて説明する。

【００１２】図１において、１は自動演奏ピアノであ
り、演奏操作に応じたピアノ音を発音すると共に、その
演奏操作に対応したＭＩＤＩ信号を発生する。なお、こ
の自動演奏ピアノ１は、外部から供給されるＭＩＤＩ信
号に応じて自動演奏する構成をも備える。２はビデオカ
メラであり、演奏シーンを撮像して映像信号を出力す
る。３ａ，３ｂは自動演奏ピアノ１から発音される楽音
を収録し、ステレオ音声信号として出力するマイクロフ
ォンである。４は複数の記録トラックを備えるシーケン
サであり、自動演奏ピアノ１から出力されるＭＩＤＩ信
号を、対応するトラックに記憶する。

【００１３】また、シーケンサ４は、上記ＭＩＤＩ信号
がリアルタイム入力される他、例えば、楽曲のベースパ
ートやコードパート等に対応するＭＩＤＩ信号を他の記
録トラックにステップ入力することも可能になってい
る。さらに、シーケンサ４は、こうして各トラックに入
力されるＭＩＤＩ信号（演奏データ）に加えてイベント
タイミングをも記録するようになっており、記録開始タ
イミングから設定テンポ値に応じた周期の同期信号ＳＳ
を発生して出力する。５はシーケンサ４から出力される
同期信号ＳＳをアナログ形式の同期信号ＳＡにＤ／Ａ変
換して出力する同期信号発生器である。６は上述したマ
ザーテープを作成する業務用ビデオテープレコーダであ
り、映像トラック、ハイファイ音声トラックおよびノー
マル音声トラックにそれぞれ映像信号、ステレオ音声信
号および同期信号ＳＡを記録する。

【００１４】しかして、上記システムによれば、例え
ば、演奏風景を撮像した映像信号が映像トラックに記録
され、演奏に応じて自動演奏ピアノ１から発音される楽
音がマイクロフォン３ａ，３ｂを介してハイファイ音声
トラックにステレオ録音され、かつ、演奏操作に応じて
出力されるＭＩＤＩ信号のイベント（ノートオン／ノー
トオフ等）に対応する同期信号ＳＳがノーマル音声トラ
ックに記録されたマザーテープが作成される。

【００１５】マスタテープ作成システムの構成次に、上記システムによって作成されたマザーテープを
マスタテープに変換するマスタテープ作成システムの構
成について説明する。このシステムでは、マザーテープ
から再生されるステレオ音声をマスタテープのハイファ
イ音声トラックにそのまま記録する一方、マザーテープ
から再生される映像信号中にシーケンサ４から出力され
るＭＩＤＩ信号を重畳させてマスタテープの映像トラッ
クに記録する。ここでは、後述する演奏記録再生装置７
によって、映像信号中にＭＩＤＩ信号が重畳される。な
お、このシステムによってマザーテープをマスタテープ
に変換する際には、次の前処理が必要となる。

【００１６】前処理とは、シーケンサ４へ楽曲のベース
パートやコードパート等、ピアノのパート以外のＭＩＤ
Ｉ信号（演奏データ）を記録する操作と、自動演奏ピア
ノ１の発音遅延時間を考慮した補正操作とからなる。す
なわち、前述したマザーテープ作成システムでは、自動
演奏ピアノ１の演奏操作に応じてメロディパートがシー
ケンサ４の所定トラックに記録されたが、これに加えて
メロディパート以外のＭＩＤＩ信号（演奏データ）を別
トラックに順次ステップ入力、あるいは自動演奏ピアノ
１、他の電子楽器などを用いてリアルタイム入力し、こ
れら各パートのＭＩＤＩ信号をそれぞれ異なるＭＩＤＩ
チャンネルに対応付けておく。

【００１７】補正操作では、自動演奏ピアノ１に「５０
０ｍｓｅｃ」の発音遅れが存在することから、この遅延
量を相殺するようシーケンサ４の所定トラックに記録さ
れたメロディパートのイベントタイミングを「５００ｍ
ｓｅｃ」早める。具体的には、記録開始時点から最初の
イベントタイミングまでの時間を「５００ｍｓｅｃ」減
じる操作を施す。

【００１８】次に、こうした前処理が施されたマザーテ
ープをマスタテープに変換するシステムについて図２を
参照して説明する。なお、図２において、図１に示す各
部と共通する部分には、同一の番号を付している。業務
用ＶＴＲ６は、前述したマザーテープを再生出力するも
のであり、当該マザーテープの映像トラックを再生した
映像信号を次段の演奏記録再生装置７に供給すると共
に、ハイファイ音声トラックを再生したステレオ音声信
号をマスタテープ作成用ＶＴＲ８に供給する。また、Ｖ
ＴＲ６はノーマル音声トラックを再生した同期信号ＳＡ
を同期信号発生器５に供給する。同期信号発生器５は、
ＶＴＲ６から入力されるアナログの同期信号ＳＡをＡ／
Ｄ変換してディジタルの同期信号ＳＳを出力する。

【００１９】シーケンサ４は、同期信号ＳＳに応じて上
述した前処理が施された複数パートの演奏データ、すな
わち、各トラック毎にアサインされたＭＩＤＩチャンネ
ル毎のＭＩＤＩ信号を並列的に読み出して順次出力す
る。演奏記録再生装置７は、ＶＴＲ６から供給される映
像信号にシーケンサ４から供給されるＭＩＤＩ信号を重
畳してマスタテープ作成用ＶＴＲ８に供給する。ＶＴＲ
８は、映像トラックにＭＩＤＩ信号（および後述するク
ローズドキャプションデータＣＣ）が重畳された映像信
号を記録すると共に、ハイファイ音声トラックにステレ
オ音声信号を記録し、マスタテープを作成する。なお、
後述するクローズドキャプションデータＣＣは、周知の
手法により、この時点で映像信号に重畳される。

【００２０】再生システムの構成次に、上記システムによって作成されたマスタテープの
再生出力に基づき、映像信号、ステレオ音声、文字情報
および演奏データを再生してマルチメディアを実現する
再生システムの構成について図３を参照して説明する。
この図において、３０はマスタテープを再生するＶＴＲ
であり、当該マスタテープのハイファイ音声トラックか
ら再生出力されるステレオ音声をアンプ３１に供給する
と共に、映像トラックから再生出力される映像信号を演
奏記録再生装置７に供給する。なお、ＶＴＲ３０から出
力される映像信号には、上述したマスタテープ作成シス
テムにおいて、演奏記録再生装置７によってＭＩＤＩ信
号が重畳されていると共に、クローズドキャプションデ
ータＣＣも重畳されている。

【００２１】演奏記録再生装置７は、映像信号に重畳さ
れたＭＩＤＩ信号およびクローズドキャプションデータ
ＣＣを抽出して復号し、復号したＭＩＤＩ信号を自動演
奏ピアノ１に供給する一方、クローズドキャプションデ
ータＣＣを映像信号と共にテレビジョン受像機３２に出
力する。自動演奏ピアノ１は、演奏記録再生装置７から
出力される複数チャンネルのＭＩＤＩ信号の内、任意パ
ートのＭＩＤＩ信号を選択して受信するよう構成されて
いる。したがって、前述したマザーテープ作成システム
において、記録されたＭＩＤＩ信号に対応するＭＩＤＩ
チャンネル（すなわち、ピアノパートに対応するＭＩＤ
Ｉチャンネル）を選択すれば、そのＭＩＤＩ信号に応じ
て鍵を駆動して自動演奏することになる。

【００２２】自動演奏ピアノ１は、演奏記録再生装置７
から出力される複数チャンネルのＭＩＤＩ信号をそのま
ま他の電子楽器３３へ出力するよう構成されている。電
子楽器３３も自動演奏ピアノ１と同様、受信すべきＭＩ
ＤＩチャンネルを任意に選択し得る構成となっており、
任意パートのＭＩＤＩ信号を受信して楽音合成する。し
たがって、ピアノパート以外のパートに対応するＭＩＤ
Ｉチャンネルを選択すれば、そのＭＩＤＩ信号に基づき
電子的にピアノパート以外のパートの楽音が合成され
る。

【００２３】しかして、この再生システムによれば、マ
スタテープのハイファイ音声トラックの再生出力がアン
プ３１を介してスピーカＳＰよりステレオ再生されると
同時に、映像トラックの再生出力が演奏記録再生装置７
の再生処理に基づき、映像信号、文字信号およびＭＩＤ
Ｉ信号に分離され、これらがそれぞれテレビジョン受像
機３２、自動演奏ピアノ１および電子楽器３３で再生さ
れる。この結果、映像信号、ステレオ音声、文字情報お
よび演奏データを同期再生し得るマルチメディアが実現
する訳である。

【００２４】また、この再生システムによれば、マスタ
テープのハイファイ音声トラックのステレオ音声の出力
を「許可」あるいは「禁止」し、自動演奏ピアノ１およ
び電子楽器３３の受信すべきＭＩＤＩチャンネルを適宜
選択することによって、例えば、使用マスタテープの
ハイファイ音声トラックのステレオ音声の出力を禁止
し、自動演奏ピアノ１で受信すべきＭＩＤＩチャンネル
としてピアノパートに対応するＭＩＤＩチャンネルと
し、電子楽器３３で受信すべきＭＩＤＩチャンネルとし
てピアノパート以外のＭＩＤＩチャンネルとする、使
用マスタテープのハイファイ音声トラックのステレオ音
声の出力を許可し、自動演奏ピアノ１の自動演奏を禁止
し、電子楽器３３で受信すべきＭＩＤＩチャンネルとし
てピアノパート以外のＭＩＤＩチャンネルとする、自
動演奏ピアノ１で受信すべきＭＩＤＩチャンネルとして
ピアノパート以外のパートに対応するＭＩＤＩチャンネ
ルとし、電子楽器３３で受信すべきＭＩＤＩチャンネル
として上記パート以外のＭＩＤＩチャンネルとする、な
ど多彩な演奏が可能となる。

【００２５】上記、の演奏態様によれば、ピアノと
他の楽器とのアンサンブル演奏が再現でき、によれ
ば、さらにアンプおよび電子楽器によって音量が調整可
能であり、によれば、ピアノの連弾と他の楽器のアン
サンブル演奏が再現できるようになる。なお、ハイファ
イ音声トラックに記録される音声データは、ピアノ音で
なく他の楽器の楽音でもよく、これによってもピアノと
他の楽器とのアンサンブル演奏が可能になる。

【００２６】演奏記録再生装置７の構成次に、映像信号中にＭＩＤＩ信号あるいは周知のクロー
ズドキャプションデータを重畳する記録処理を行う一
方、上記再生システムにおいて映像信号中に重畳された
ＭＩＤＩ信号あるいはクローズドキャプションデータを
分離復号する再生処理を行う演奏記録再生装置７の構成
について図４を参照して説明する。

【００２７】図４において、Ｔ１はビデオ入力端子であ
り、マザーテープを再生するＶＴＲ６、あるいはマスタ
テープを再生するＶＴＲ３０から出力される映像信号
（例えば、ＮＴＳＣコンポジット映像信号）が供給され
る。１０，１１はそれぞれ高周波リレーであり、装置７
の電源状態に応じて回路切換えする。すなわち、装置７
が電源オフ状態にあると、高周波リレー１０，１１は接
点を回路１０ａ，１１ａ側へ切換え、ビデオ入力端子Ｔ
１とビデオ出力端子Ｔ２とをスルー状態とする。一方、
装置７が電源オン状態にあると、高周波リレー１０，１
１は回路１０ｂ，１１ｂ側に切換える。

【００２８】１２は装置各部を制御するＣＰＵである。
ＣＰＵ１２は、ＭＩＤＩ信号をパケットデータとして映
像信号に重畳、あるいは映像信号中から分離復号するた
め、パケット通信制御回路をも具備する。１３はＲＯＭ
であり、ＣＰＵ１２において実行される各種制御プログ
ラム等が記憶される。１４はＣＰＵ１２のワークエリア
として用いられるＲＡＭであり、各種演算結果やレジス
タ／フラグデータが一時記憶される。なお、このＲＡＭ
１４の所定記憶エリアは、ＣＰＵ１２のキャッシュメモ
リとして使用され、イニシャライズ時点で制御プログラ
ムがロードされるようになっており、ＣＰＵ１２の処理
の高速化を図っている。

【００２９】１５はビデオ入力端子Ｔ１から供給される
映像信号を一定レベルに増幅してクランプする増幅回路
である。１６はクローズドキャプション信号処理回路で
ある。この処理回路１６は、ＣＰＵ１２から供給される
モード信号Ｄｍに基づき増幅回路１５から供給される映
像信号に重畳されるクローズドキャプションデータＣＣ
（文字情報）を抽出して文字信号を出力する。また、こ
の回路１６は、映像信号中にクローズドキャプション信
号が重畳されているか否かを表わす重畳識別信号を発生
し、ＣＰＵ１２へ供給する。１７はビデオ入力端子Ｔ１
から供給される映像信号を増幅して出力する増幅回路、
１８はこの増幅回路１７の出力を波形整形する波形補正
回路である。

【００３０】１９は増幅器１７から出力される映像信号
から水平同期信号ＨＤと垂直同期信号ＶＤとを分離して
出力する同期分離回路である。２０は水平同期信号ＨＤ
と垂直同期信号ＶＤとに応じて垂直帰線消去期間ＶＢＬ
中に含まれる特定の走査線を検出した場合に、書込みタ
イミング信号ＷＴあるいは読み出しタイミング信号ＲＴ
を発生するタイミング発生回路である。垂直帰線消去期
間ＶＢＬには、図５に示すように、１水平周期分のパル
ス幅を持つ走査線１Ｈ〜２２Ｈが定義されており、タイ
ミング発生回路２０はこれら走査線１Ｈ〜２２Ｈの内、
１０Ｈ〜１３Ｈおよび１４Ｈ〜１７Ｈを検出した時点で
書込みタイミング信号ＷＴあるいは読み出しタイミング
信号ＲＴを発生する。なお、走査線２１Ｈには、周知の
クローズドキャプションデータＣＣが重畳される。

【００３１】ここで、書込みタイミング信号ＷＴは、後
述するミキサ２２に供給され、走査線１０Ｈ〜１３Ｈお
よび１４Ｈ〜１７ＨにＭＩＤＩ信号をパケットデータと
して重畳する際のタイミングとして用いられる。一方、
読み出しタイミング信号ＲＴは、ＣＰＵ１２に供給さ
れ、走査線１０Ｈ〜１３Ｈおよび１４Ｈ〜１７Ｈに重畳
されたＭＩＤＩ信号を抽出する際のタイミングとして用
いられる。２１はＭＩＤＩインタフェース回路であり、
ＭＩＤＩ入力端子Ｔ３から供給されるＭＩＤＩ信号をＣ
ＰＵ１２側へ入力する。また、ＭＩＤＩインタフェース
回路２１は、ＣＰＵ１２側から供給されるＭＩＤＩ信
号、すなわち、走査線１０Ｈ〜１３Ｈおよび１４Ｈ〜１
７Ｈから抽出したパケットデータを復号したＭＩＤＩ信
号をＭＩＤＩ出力端子Ｔ４に出力する。

【００３２】ミキサ２２は、増幅回路１５から供給され
る映像信号に対し、上述した書込みタイミング信号ＷＴ
に応じて垂直帰線消去期間ＶＢＬの対応する走査線期間
に、ＣＰＵ１２から供給されるパケットデータ化された
ＭＩＤＩ信号を重畳して次段へ出力する。ここで、図６
を参照してＣＰＵ１２から供給されるパケットデータの
フォーマットについて説明しておく。上述したようにＭ
ＩＤＩインタフェース回路２１を介してＣＰＵ１２に入
力されたＭＩＤＩ信号は、図６に示すように、２０バイ
ト長のパケットデータに変換され、このパケットデータ
は先頭２バイトで形成される同期／識別データＳｙｎｃ
と、これに続く１５バイト長のＭＩＤＩ信号と、１バイ
トのエンドマークＥと、２バイトのＣＲＣコードとから
構成される。ＭＩＤＩ信号は、ノートオン／ノートオフ
およびＭＩＤＩチャンネル番号を１バイトで表わし、キ
ーコードおよびタッチを各１バイトで表わすため、１つ
のイベント当り３バイトで表現される。このため、１パ
ケット当り少なくとも５つのイベントを割り当てること
が可能になる。

【００３３】したがって、１垂直帰線期間ＶＢＬ中に
は、走査線１０Ｈ〜１３Ｈに順次１パケットデータが割
り当てられるので、ＭＩＤＩイベントを少なくとも２０
個重畳することが可能になる。なお、走査線１４Ｈ〜１
７Ｈには、走査線１０Ｈ〜１３Ｈと同一のパケットが割
り当てられ、冗長パケットとして使用される。すなわ
ち、後述する再生処理において、ＣＲＣコードによる誤
り訂正ができない程、走査線１０Ｈ〜１３Ｈのいずれか
のパケットが欠落した場合、これら走査線１０Ｈ〜１３
Ｈにアサインされたパケットを全て棄却して、走査線１
４Ｈ〜１７Ｈにアサインされたパケットを使用する。

【００３４】２３はＲＳ−２３２Ｃ等のシリアル入出力
インタフェースであり、ＣＰＵ１２の制御の下に試験ポ
ートＴ５とのシリアルデータ通信を制御する。なお、こ
の試験ポートＴ５は、ＣＰＵ１２において実行される各
種制御プログラムのデバックに用いられる。Ｔ６は各種
操作スイッチあるいは表示ＬＥＤに接続される端子であ
る。ここで言う各種操作スイッチとは、記録処理開始を
指示する記録スイッチＲＥＣ、再生処理開始を指示する
再生スイッチＰＬＡＹ、記録／再生を解除する停止スイ
ッチＳＴＯＰ、あるいは記録／再生すべきＭＩＤＩチャ
ンネル（例えば、１ｃｈ〜１６ｃｈ）を選択指定する出
力選択スイッチ、映像信号に重畳されたクローズドキャ
プションデータＣＣに基づく文字表示のオン／オフを選
択するキャプションオン／オフスイッチ、あるいは文字
表示のモード（テキストモードとキャプションモード）
を選択するモード選択スイッチ等であり、これらスイッ
チの操作に応じた操作信号が端子Ｔ６を介してＣＰＵ１
２側に供給される。また、ＣＰＵ１２側からは装置パネ
ルに配設される複数の表示ＬＥＤへ上記スイッチ操作や
動作状態に応じた表示信号がこの端子Ｔ６を介して各表
示ＬＥＤに供給されるようになっている。

【００３５】Ｂ．実施例の動作次に、上記構成による演奏記録再生装置７の動作につい
て図２〜図４を参照して説明する。なお、ここでは、記
録処理と再生処理とに分けて動作説明するものとする。記録処理前述したマスタテープ作成システム（図２参照）におい
て、マザーテープがセットされたＶＴＲ６を再生動作さ
せ、かつ、演奏記録再生装置７を記録動作させたとす
る。そうすると、演奏記録再生装置７は、シーケンサ４
から出力されるＭＩＤＩ信号をＭＩＤＩインタフェース
回路２１を介してＣＰＵ１２に取込む一方、ビデオ入力
端子Ｔ１から入力される映像信号を増幅器１５および増
幅器１７へ供給する。増幅器１５によって所定レベルに
クランプされた映像信号は、ミキサ２２へ入力される。
なお、この記録処理では、クローズドキャプション信号
処理部１６および波形補正回路１８がＣＰＵ１２の指示
によりホルト状態となる。

【００３６】増幅器１７から出力される映像信号は、同
期分離回路１９において水平同期信号ＨＤおよび垂直同
期信号ＶＤに分離される。そして、タイミング発生回路
２０は、水平同期信号ＨＤと垂直同期信号ＶＤとに応じ
て垂直帰線消去期間ＶＢＬ中に含まれる走査線１０Ｈ〜
１３Ｈおよび１４Ｈ〜１７Ｈを検出した時点で書込みタ
イミング信号ＷＴを発生し、ミキサ２２へ供給する。Ｍ
ＩＤＩインタフェース回路２１を介してＣＰＵ１２に取
込まれたＭＩＤＩ信号は、パケットデータに変換されて
ミキサ２２へ入力される。ミキサ２２では、ＣＰＵ１２
から供給されるパケットデータを、書込みタイミング信
号ＷＴに応じて対応する走査線１０Ｈ〜１３Ｈ（および
１４Ｈ〜１７Ｈ）に介挿する。これにより、映像信号の
垂直帰線消去期間ＶＢＬ中にＭＩＤＩ信号（演奏デー
タ）が重畳される。

【００３７】こうしてＭＩＤＩ信号が重畳された映像信
号は、ミキサ２２から増幅器１８を介してビデオ出力端
子Ｔ２から出力され、マスタテープ作成用ＶＴＲ８によ
りマスタテープの映像トラックに記録される。一方、Ｖ
ＴＲ６から再生出力されるステレオ音声信号は、マスタ
テープ作成用ＶＴＲ８のハイファイ音声トラックに入力
され、ＭＩＤＩ信号が重畳された映像信号に同期して記
録される。この結果、映像信号、ステレオ音声、演奏デ
ータを記録したマスタテープが作成されることになる。
なお、この演奏記録再生装置７に周知のキャプションエ
ンコーダ機能を具備させれば、垂直帰線消去期間ＶＢＬ
中の走査線２１ＨにクローズドキャプションデータＣＣ
も同時に重畳させることも可能である。

【００３８】再生処理前述した再生システム（図３参照）において、マスタテ
ープがセットされたＶＴＲ６を再生すると共に、演奏記
録再生装置７を再生動作させる。そうすると、当該装置
７のビデオ入力端子Ｔ１にパケットデータ化されたＭＩ
ＤＩ信号あるいはクローズドキャプションデータＣＣが
重畳された映像信号が入力される。そして、この映像信
号は、増幅器１５を介してクローズドキャプション信号
処理部１６に供給される一方、増幅器１７を介して波形
補正回路１８および同期分離回路１９へ入力される。

【００３９】波形補正回路１８によって波形整形された
映像信号は、ＣＰＵ１２に供給される。ＣＰＵ１２で
は、水平同期信号ＨＤと垂直同期信号ＶＤとに応じてタ
イミング発生回路２０から生成される読み込みタイミン
グ信号ＲＴに基づき、映像信号の垂直帰線消去期間ＶＢ
Ｌ中に含まれる走査線１０Ｈ〜１３Ｈおよび１４Ｈ〜１
７Ｈに重畳されるパケットデータを抽出する。また、Ｃ
ＰＵ１２は、クローズドキャプション信号処理部１６か
ら出力された重畳識別信号が映像信号にクローズドキャ
プションデータＣＣが重畳されていることを示す場合に
は、キャプションオン／オフスイッチ、モード選択スイ
ッチの状態に応じて走査線２１Ｈに重畳されるクローズ
ドキャプションデータＣＣを抽出した場合、キャプショ
ンモードを表わすモード信号Ｄｍを発生し、これをクロ
ーズドキャプション信号処理部１６へ供給する。これに
より、当該処理部１６は映像信号に重畳されたクローズ
ドキャプションデータＣＣ（文字情報）を抽出して文字
信号を発生し、ミキサ２２へ出力する。

【００４０】この時、モード信号Ｄｍがクローズドキャ
プションデータＣＣに基づく文字表示のオフを指示する
場合には、文字信号は発生されない。モード信号Ｄｍが
クローズドキャプションデータＣＣに基づく文字表示の
オンを指示すると共に、テキストモードを指示する場合
には、テレビジョン受像器の画面中央部にクローズドキ
ャプションデータＣＣに基づく文字表示が行われる。モ
ード信号ＤｍがクローズドキャプションデータＣＣに基
づく文字表示のオンを指示すると共に、キャプションモ
ードを指示する場合には、テレビジョン受像器の画面中
央部に周囲にクローズドキャプションデータＣＣに基づ
く文字表示が行われる。

【００４１】さらに、ＣＰＵ１２は、走査線１０Ｈ〜１
３Ｈおよび１４Ｈ〜１７Ｈから抽出したパケットデータ
をデコードし、当該パケットデータに含まれるＭＩＤＩ
信号を生成し、これをＭＩＤＩインタフェース回路２１
を介してＭＩＤＩ出力端子Ｔ４へ出力する。ここで、Ｃ
ＰＵ１２は、パケットデータをデコードしたＭＩＤＩ信
号のうち、出力選択スイッチで選択されたＭＩＤＩチャ
ンネルのＭＩＤＩ信号のみを出力する。なお、このＭＩ
ＤＩ信号は、ノートオン／ノートオフ、ＭＩＤＩチャン
ネル番号、キーコードおよびタッチを表わす。次に、ミ
キサ２２は、クローズドキャプション信号処理部１６か
ら供給された文字信号と増幅器１５を介して供給される
映像信号とを混合して次段の増幅器１８に供給する。こ
の結果、ビデオ出力端子Ｔ２からクローズドキャプショ
ンデータＣＣ（文字情報）が字幕表示される映像信号が
出力される。

【００４２】このような再生処理がなされると、図３に
示す再生システムにおいて、ＶＴＲ３０から再生出力さ
れるステレオ音声信号がアンプ３１を介してスピーカＳ
Ｐよりステレオ再生されると共に、演奏記録再生装置７
から出力される映像信号がテレビジョン受像機３２に入
力されることによって、クローズドキャプションデータ
ＣＣがスーパーインポーズされた演奏シーンが画面表示
される。さらに、この演奏シーンに同期して自動演奏ピ
アノ１がＭＩＤＩ信号に応じて自動演奏する。この結
果、映像、ステレオ音声、文字情報および演奏データが
それぞれ同期して再生されるマルチメディアが実現す
る。

【００４３】ところで、この再生処理では、上述したよ
うに走査線１０Ｈ〜１３Ｈおよび１４Ｈ〜１７Ｈに重畳
されるパケットデータをデコードして得たＭＩＤＩ信号
をそのまま出力するが、再生システムにおける動作環境
から次の制約事項が存在する。まず、パケットデータか
ら「システムリセット」を意味するＭＩＤＩ信号（シス
テムメッセージ）を復調した場合、この装置７はこれを
ＭＩＤＩ信号として出力しないようにしている。「シス
テムリセット」を外部ＭＩＤＩ楽器へ供給すると、電源
投入時と同様に諸設定が初期化されてしまうため、これ
を回避する意味で「システムリセット」の出力を控える
ようにしている。

【００４４】また、ＭＩＤＩ信号が存在しない期間に
は、アクティブセンシングを少なくとも３００ｍｓｅｃ
以内に１回出力する。さらに、ＭＩＤＩクロックは装置
内部で生成するようにしており、これを外部ＭＩＤＩ楽
器へ出力することはない。加えて、再生システムにおい
て、ケーブルの断線等によりＶＴＲ３０と演奏記録再生
装置７との電気的な接続が断たれる、ＶＴＲ３０の再生
中に停止、早送り、巻戻し等を行う等により、ＶＴＲ３
０から出力される映像信号が途絶えた場合には、「オー
ルノートオフ」および「オールサウンドオフ」等のＭＩ
ＤＩ信号を発生して電子楽器３３で現在発音中の楽音を
消音させると共に、「ピッチベンドセンタ」等のＭＩＤ
Ｉ信号（ステイタス）を発生して外部ＭＩＤＩ楽器を通
常状態に戻す。これにより、演奏記録再生装置７に接続
される外部ＭＩＤＩ楽器（電子楽器３３）の鳴りっぱな
し、誤動作を回避する。

【００４５】このように、上述した実施例によれば、映
像信号の垂直帰線消去期間ＶＢＬ中に含まれる走査線１
０Ｈ〜１３Ｈおよび１４Ｈ〜１７ＨにＭＩＤＩ信号（演
奏データ）をパケットデータ化して重畳し、かつ、走査
線２１ＨにもクローズドキャプションデータＣＣを重畳
するから、映像トラックに映像、演奏データおよび文字
情報を記録でき、これに同期してハイファイ音声トラッ
クにステレオ音声信号を記録することが可能になる。そ
して、再生時には、映像信号から抽出したパケットデー
タをＭＩＤＩ信号に復調して外部ＭＩＤＩ楽器を映像に
同期して再生することが可能になる。しかも、映像には
字幕表示がなされ、結局、映像、ステレオ音声、文字情
報および演奏データがそれぞれ同期して再生されるマル
チメディアを実現することが可能になる。

【００４６】なお、上述した実施例では、自動演奏ピア
ノ１によってピアノのパートを自動演奏させるようにす
るため、予め当該自動演奏ピアノ１における発音遅延を
考慮してＭＩＤＩ信号を５００ｍｓｅｃ早めて記録し
た。したがって、自動演奏ピアノ１に替えてシンセサイ
ザ等の電子楽器を自動演奏させる際には、演奏記録再生
装置７から出力するＭＩＤＩ信号を５００ｍｓｅｃ遅延
させる必要がある。そこで、装置７において、ＭＩＤＩ
チャンネル毎に５００ｍｓｅｃの遅延を付与するか否か
を選択するスイッチを設けておき、当該スイッチ操作に
応じて指定チャンネルのＭＩＤＩ信号を遅延出力させ
る。

【００４７】また、上述した実施例では、自動演奏ピア
ノ１における発音遅延を考慮し、記録開始時点から最初
のイベントタイミングまでの時間を５００ｍｓｅｃ減じ
るようにしてピアノのパートの演奏データを５００ｍｓ
ｅｃ早めて記録するようにしたが、これに限らず、マス
タテープを作成する際に、（演奏データを修正すること
なく、）演奏データに対して映像信号およびステレオ音
声信号を５００ｍｓｅｃ遅延させて記録するようにして
もよい。

【００４８】さらに、上記実施例にあっては、演奏風景
を録画したものを用いるようにしたので、ビデオを再生
しながら、ピアノのパートを練習する（ピアノのパート
に対応するＭＩＤＩチャンネルのＭＩＤＩ信号の出力を
禁止）際に、演奏を視覚的に理解できるので好適であ
る。さらに、これに限らず、例えば、映像信号として映
画を録画し、クローズドキャプションとして字幕を記録
し、映画のバックグラウンド音楽をＭＩＤＩ信号として
記録することも可能である。

【００４９】加えて、周知のカラオケソフトにも本発明
による演奏記録再生装置７を適用することも考えられ
る。すなわち、画面に歌詞を字幕表示させると共に、Ｍ
ＩＤＩ信号に基づきＭＩＤＩ楽器を自動演奏させれば、
マルチメディアによる臨場感のあるカラオケを体験する
ことが可能になる。なお、この実施例では、図３に示し
たように、本発明による演奏記録再生装置７をＶＴＲと
別体として接続する態様にしたが、これに替えて、ＶＴ
Ｒやレーザディスク再生装置などに本装置７を内蔵した
形で一体化するようにしても良い。これにより、機器接
続の手間が省けると共に、その操作性が一層向上するこ
とになる。

【００５０】

【発明の効果】本発明によれば、記録手段が演奏操作に
応じて生成される演奏データと、字幕表示用の文字デー
タとを映像信号中の垂直帰線消去期間に重畳して記録媒
体に記録し、抽出手段が前記記録媒体から再生出力され
る映像信号の垂直帰線消去期間に重畳される前記演奏デ
ータおよび文字データを抽出し、再生手段が抽出された
演奏データおよび文字データを当該映像信号に同期して
復号するので、映像信号、ステレオ音声、文字情報およ
び演奏データを記録再生し得るマルチメディアを実現す
ることができる。

【図面の簡単な説明】

【図１】本発明の一実施例によるマザーテープ作成シ
ステムの構成を示すブロック図である。

【図２】同実施例におけるマスタテープ作成システム
の構成を示すブロック図である。

【図３】同実施例における再生システムの構成を示す
ブロック図である。

【図４】同実施例による演奏記録再生装置７の構成を
示すブロック図である。

【図５】映像信号の垂直帰線消去期間ＶＢＬに含まれ
る走査線を説明するための図である。

【図６】走査線１０Ｈ〜１３Ｈおよび１４Ｈ〜１７Ｈ
に重畳されるパケットデータの構成を示す図。

【符号の説明】

４…シーケンサ、５…同期信号発生器、６…業務用ＶＴ
Ｒ、７…演奏記録再生装置、８…マスタテープ作成用Ｖ
ＴＲ、１２…ＣＰＵ、１３…ＲＯＭ、１４…ＲＡＭ、１
６…クローズドキャプション信号処理部、１９…同期分
離回路、２０…タイミング発生回路、２１…ＭＩＤＩイ
ンタフェース回路、２２…ミキサ。

Claims

【特許請求の範囲】

【請求項１】演奏データおよび字幕表示用の文字デー
タが垂直帰線消去期間に重畳されている映像信号から前
記演奏データおよび文字データを抽出する抽出手段と、前記抽出手段が抽出した演奏データおよび文字データを
当該映像信号に同期して復号する再生手段とを具備する
ことを特徴とする演奏記録再生装置。
【請求項２】演奏操作に応じて生成される演奏データ
と、字幕表示用の文字データとを映像信号中の垂直帰線
消去期間に重畳して記録媒体に記録する記録手段と、前記記録媒体から再生出力される映像信号の垂直帰線消
去期間に重畳される前記演奏データおよび文字データを
抽出する抽出手段と、前記抽出手段が抽出した演奏データおよび文字データを
当該映像信号に同期して復号する再生手段とを具備する
ことを特徴とする演奏記録再生装置。
【請求項３】外部からシリアル転送される演奏データ
をパケットデータに変換すると共に、映像信号から分離
した水平同期信号および垂直同期信号に応じて当該映像
信号の垂直帰線消去期間に含まれる所定の走査線を検出
し、当該走査線に前記パケットデータを重畳して記録媒
体へ記録する記録手段と、この記録媒体から再生出力される映像信号の垂直帰線消
去期間に含まれる所定の走査線に重畳された前記パケッ
トデータを抽出する抽出手段と、前記抽出手段が抽出したパケットデータを当該映像信号
に同期して演奏データに復号する再生手段とを具備する
ことを特徴とする演奏記録再生装置。
【請求項４】前記再生手段から出力される演奏データ
が、発音遅延の有る自動演奏装置に供給される場合、前記記録手段は、前記演奏データを記録開始する時点か
ら最初のイベントタイミングまでの時間を前記発音遅延
に相当する時間分早めて記録するか、あるいは前記演奏
データに対して前記映像信号を前記発音遅延分遅らせて
記録することを特徴とする請求項２または請求項３に記
載の演奏記録再生装置。
【請求項５】前記記録手段が演奏データを発音遅延に
相当する時間分早めて媒体記録した場合、前記再生手段は、当該演奏データを供給する側の発音遅
延量に応じて演奏データを所定時間分遅延させて出力す
ることを特徴とする請求項４記載の演奏記録再生装置。
【請求項６】前記記録手段は、複数の演奏パートに対
応する複数チャンネル分の演奏データを、垂直帰線消去
期間の複数の走査線に重畳して記録媒体し、前記再生手段は、前記複数チャンネル分の演奏データを
選択的に復号出力することを特徴とする請求項３記載の
演奏記録再生装置。
【請求項７】前記再生手段は、前記記録媒体から再生
出力される映像信号が途絶えた場合、消音を指示する演
奏データを発生することを特徴とする請求項２または請
求項３に記載の演奏記録再生装置。