JP5000704B2 - Ａｖ編集装置、ａｖ処理装置、ａｖ編集システム、操作装置、ａｖ編集方法およびプログラム - Google Patents

Description

【技術分野】
【０００１】
本発明は、オーディオ信号またはビデオ信号であるＡＶ信号に対し、エフェクト処理等の編集処理を行うＡＶ編集装置、ＡＶ処理装置、ＡＶ編集システム、操作装置、ＡＶ編集方法およびプログラムに関するものである。
【背景技術】
【０００２】
従来、オーディオ信号に、ディレイ（ＤＥＬＡＹ）やエコー（ＥＣＨＯ）等の効果を付加するオーディオエフェクターが知られている（例えば、特許文献１）。同様に、ビデオ信号にスポットライトやレンズ等の効果を付加するビデオエフェクターも知られている。
【０００３】
ところで、オーディオエフェクターなどの音響機器は、クラブ等において用いられるＤＪ機器（ディスクジョッキー（ＤＪ）が音響パフォーマンスに用いる機器）に適用されることが多い。同様に、ビデオエフェクターなどの映像機器は、クラブ等において、会場のモニターに変化の多い映像を映し出すために用いられるＶＪ機器（ビジュアルジョッキーまたはビデオジョッキー（ＶＪ）が映像パフォーマスンスに用いる機器）に適用されることが多い。このように、ＤＪ機器とＶＪ機器は、利用される場所やニーズにおいては共通点が多いものの、それぞれに専門的な操作が必要であるため、同一人物によって操作が行われることはなかった。また、クラブ等では、ＤＪやＶＪが操作を行うためのブースが狭く、ＤＪ機器とＶＪ機器の両方を設置することが困難である。このような理由から、ＤＪ機器とＶＪ機器は別々の人物によって操作されることが常識であった。
【先行技術文献】
【０００４】
【特許文献１】
特開平９−１６０５８１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところが、ＤＪ機器とＶＪ機器が別々の人物によって操作されると、出力される音楽と映像にずれが生じてしまうことがある。一般的に、ＶＪはＤＪが操作する音楽に合わせて音楽に映像を切り替えたりエフェクトをかけたりしている。ところが、ＤＪとＶＪが事前に綿密な打合せしていたとしても、会場の盛り上がりや雰囲気によってＤＪの演奏が変化することも多いため、ＶＪがビートの急な変化や音楽の切り替えにシンクロして映像を変化させることができないといった問題がある。
【０００６】
このため、音楽と映像とを完全に融合させるためには、ＤＪ機器とＶＪ機器とを同一人物によって操作することが最も好ましいが、上記のとおり、操作性や設置スペースの問題もあって実現が困難であった。
【０００７】
また、設置スペースの問題を解決するためには、１台で音楽と映像とを操作可能な音響・映像機器を用いることが好ましいが、ＤＪやＶＪは、それぞれ専門分野が異なるため、使い易い操作子の形態や操作方法が異なる。したがって、両者の使い勝手を考慮すると、多数の操作子を配置して種々の操作を行い得るように構成する必要があるため、結局装置が大型化してしまうといった問題があった。
【０００８】
本発明は、上記の問題点に鑑み、操作性が良く且つ省スペースで、オーディオ信号およびビデオ信号に対する編集操作を行い得るＡＶ編集装置、ＡＶ処理装置、ＡＶ編集システム、操作装置、ＡＶ編集方法およびプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明のＡＶ編集装置は、オーディオ信号またはビデオ信号であるＡＶ信号に対し、オーディオ信号に合わせてエフェクト処理を行う機能であるオーディオエフェクトカテゴリーと、ＡＶ信号に対し、主に映像の操作結果に応じてエフェクト処理を行う機能である映像操作エフェクトカテゴリーと、を含む複数のエフェクトカテゴリーの中から、いずれかのエフェクトカテゴリーを選択するエフェクトカテゴリー選択手段と、オーディオ信号に対してのみエフェクト処理を行うオーディオモード、ビデオ信号に対してのみエフェクト処理を行うビデオモード、オーディオ信号およびビデオ信号に対してエフェクト処理を行うオーディオ・ビデオモード、のうち少なくとも２つのモードを含む複数のエフェクトモードの中から、１のエフェクトモードを選択するエフェクトモード選択手段と、エフェクト処理を実行させるためのエフェクト操作を含む各種編集操作を行う操作手段からの操作信号を受ける操作信号受信手段と、表示制御を行わせる表示制御手段と、エフェクトカテゴリー選択手段およびエフェクトモード選択手段の選択結果、並びに操作手段の操作結果に基づいて、オーディオ信号およびビデオ信号の少なくとも一方に対しエフェクト処理を行うエフェクト処理手段と、を備え、表示制御手段は、エフェクトカテゴリー選択手段の選択結果に応じて、エフェクト操作を行うためのエフェクト操作画面の仕様を変更させる一方、エフェクトモード選択手段の選択結果に応じては、エフェクト操作画面の仕様を変更させないことを特徴とする。
上記に記載のＡＶ編集装置において、表示制御手段は、エフェクト操作画面に、エフェクトモード選択手段の選択結果を表示させることが好ましい。
上記に記載のＡＶ編集装置において、エフェクトカテゴリー選択手段は、オーディオエフェクトカテゴリーおよび映像操作エフェクトカテゴリー以外に、ＡＶ信号に対し、主にテキストの入力結果を用いてエフェクト処理を行う機能であるテキストエフェクトカテゴリーを含む複数のエフェクトカテゴリーの中から、いずれかのエフェクトカテゴリーを選択することが好ましい。
上記に記載のＡＶ編集装置において、エフェクト操作画面には、エフェクト種類を選択するためのエフェクト種類選択肢群と、映像を表示すると共にエフェクト操作の一部を行うための映像操作領域と、が表示され、表示制御手段は、エフェクトカテゴリー選択手段の選択結果に応じて、エフェクト種類選択肢群に含まれるエフェクト種類、および映像操作領域のサイズのうち、少なくとも一方を変更させることが好ましい。
上記に記載のＡＶ編集装置において、エフェクト操作画面内に、出力映像を表示する出力映像表示領域を設けるか否かを選択する表示領域選択手段をさらに備え、表示制御手段は、表示領域選択手段により出力映像表示領域を設けると選択された場合は、出力映像表示領域を設けないと選択された場合と比較して、映像操作領域のサイズを小さくし、エフェクト種類選択肢群の各選択肢のサイズを変更しないことが好ましい。
上記に記載のＡＶ編集装置において、エフェクト操作画面には、エフェクトカテゴリー選択手段の各選択肢を表示するカテゴリー選択肢群と、エフェクトモード選択手段の各選択肢を表示するモード選択肢群と、が表示されることが好ましい。
上記に記載のＡＶ編集装置において、操作手段は、編集操作として、ミキシング処理を実行させるためのミキシング操作を行うと共に、表示機能付きタッチパネルは、当該ミキシング操作を行うためのミキシング操作画面を表示し、ＡＶ信号に対し、クロスフェーダーを用いてミキシング処理を行うクロスフェーダーカテゴリーと、ＡＶ信号に対し、トランジッションパッドを用いてミキシング処理を行うトランジッションパッドカテゴリーと、を含む複数のミキシングカテゴリーの中から、いずれかのミキシングカテゴリーを選択するミキシングカテゴリー選択手段と、ミキシングカテゴリー選択手段および操作手段の操作結果に基づいて、オーディオ信号およびビデオ信号の少なくとも一方に対しミキシング処理を行うミキシング処理手段と、をさらに備え、表示制御手段は、ミキシングカテゴリー選択手段の選択結果に応じて、ミキシング操作画面の仕様を変更させることが好ましい。
上記に記載のＡＶ編集装置において、エフェクトモード選択手段とは独立して、ミキシング処理手段の処理対象を、ビデオ信号のみとするか、オーディオ信号およびビデオ信号とするかのいずれかを選択するミキシングモード選択手段をさらに備えたことが好ましい。
本発明のＡＶ処理装置は、上記に記載のＡＶ編集装置における各手段と、ＡＶ信号を入力する入力手段と、入力されたＡＶ信号に対してエフェクト処理手段によりエフェクト処理を行った出力ＡＶ信号を出力する出力手段と、を備えたことを特徴とする。
本発明のＡＶ編集システムは、オーディオ信号またはビデオ信号であるＡＶ信号に対し、オーディオ信号に合わせてエフェクト処理を行う機能であるオーディオエフェクトカテゴリーと、ＡＶ信号に対し、主に映像の操作結果に応じてエフェクト処理を行う機能である映像操作エフェクトカテゴリーと、を含む複数のエフェクトカテゴリーの中から、いずれかのエフェクトカテゴリーを選択するエフェクトカテゴリー選択手段と、オーディオ信号に対してのみエフェクト処理を行うオーディオモード、ビデオ信号に対してのみエフェクト処理を行うビデオモード、オーディオ信号およびビデオ信号に対してエフェクト処理を行うオーディオ・ビデオモード、のうち少なくとも２つのモードを含む複数のエフェクトモードの中から、１のエフェクトモードを選択するエフェクトモード選択手段と、エフェクト処理を実行させるためのエフェクト操作を含む各種編集操作を行う操作手段からの操作信号を受ける操作信号受信手段と、表示制御を行わせる表示制御手段と、エフェクトカテゴリー選択手段およびエフェクトモード選択手段の選択結果、並びに操作手段の操作結果に基づいて、オーディオ信号およびビデオ信号の少なくとも一方に対しエフェクト処理を行うエフェクト処理手段と、を備え、表示制御手段は、エフェクトカテゴリー選択手段の選択結果に応じて、エフェクト操作を行うためのエフェクト操作画面の仕様を変更させる一方、エフェクトモード選択手段の選択結果に応じては、エフェクト操作画面の仕様を変更させないことを特徴とする。
本発明の操作装置は、上記に記載のＡＶ編集装置、上記に記載のＡＶ処理装置、上記に記載のＡＶ編集システムのいずれかに用いられ、操作手段として機能することを特徴とする。
本発明のＡＶ編集方法は、オーディオ信号またはビデオ信号であるＡＶ信号に対し、オーディオ信号に合わせてエフェクト処理を行う機能であるオーディオエフェクトカテゴリーと、ＡＶ信号に対し、主に映像の操作結果に応じてエフェクト処理を行う機能である映像操作エフェクトカテゴリーと、を含む複数のエフェクトカテゴリーの中から、いずれかのエフェクトカテゴリーを選択する工程と、オーディオ信号に対してのみエフェクト処理を行うオーディオモード、ビデオ信号に対してのみエフェクト処理を行うビデオモード、オーディオ信号およびビデオ信号に対してエフェクト処理を行うオーディオ・ビデオモード、のうち少なくとも２つのモードを含む複数のエフェクトモードの中から、１のエフェクトモードを選択する工程と、エフェクト処理を実行させるためのエフェクト操作を含む各種編集操作を行う操作手段からの操作信号を受ける工程と、表示制御を行わせる工程と、エフェクトカテゴリーおよびエフェクトモードの選択結果、並びに操作手段の操作結果に基づいて、オーディオ信号およびビデオ信号の少なくとも一方に対しエフェクト処理を行う工程と、を備え、表示制御を行わせる工程では、エフェクトカテゴリーの選択結果に応じて、エフェクト操作を行うためのエフェクト操作画面の仕様を変更させる一方、エフェクトモードの選択結果に応じては、エフェクト操作画面の仕様を変更させないことを特徴とする。
本発明のプログラムは、コンピュータを、上記に記載のＡＶ編集装置、上記に記載のＡＶ処理装置、上記に記載のＡＶ編集システムのいずれかにおける各手段として機能させることを特徴とする。
なお、以下の構成としても良い。
本発明のＡＶ複合編集装置は、オーディオ信号またはビデオ信号であるＡＶ信号に対し、主にＢＰＭに合わせてエフェクト処理を行う機能であるＢＰＭエフェクトカテゴリーと、ＡＶ信号に対し、主に映像の操作結果に応じてエフェクト処理を行う機能であるタッチエフェクトカテゴリーと、を含む複数のエフェクトカテゴリーの中から、いずれかのエフェクトカテゴリーを選択するエフェクトカテゴリー選択手段と、オーディオ信号に対してのみエフェクト処理を行うオーディオモード、ビデオ信号に対してのみエフェクト処理を行うビデオモード、オーディオ信号およびビデオ信号に対してエフェクト処理を行うオーディオ・ビデオモード、の３つのエフェクトモードの中から、いずれかのエフェクトモードを選択するエフェクトモード選択手段と、表示機能付きタッチパネルを用いて、エフェクト処理を実行させるためのエフェクト操作を含む各種編集操作を行う操作手段と、表示機能付きタッチパネルの表示制御を行う表示制御手段と、エフェクトカテゴリー選択手段およびエフェクトモード選択手段の選択結果、並びに操作手段の操作結果に基づいて、オーディオ信号およびビデオ信号の少なくとも一方に対しエフェクト処理を行うエフェクト処理手段と、を備え、表示制御手段は、エフェクトカテゴリー選択手段の選択結果に応じて、エフェクト操作を行うためのエフェクト操作画面の仕様を変更する一方、エフェクトモード選択手段の選択結果に応じては、エフェクト操作画面の仕様を変更しないことを特徴とする。
【００１０】
この構成によれば、１台の装置で、ＢＰＭエフェクトカテゴリーおよびタッチエフェクトカテゴリーのいずれかのエフェクトカテゴリーによる機能を実現することができるため、各機能を実現するための装置を１台ずつ設置する場合と比較してスペース効率が良い。また、１台の装置で、オーディオ信号およびビデオ信号のエフェクト処理を行うことができるため、各信号のエフェクト処理を行うための装置を１台ずつ設置する場合と比較してさらにスペース効率が良い。また、各エフェクトカテゴリーは、表示機能付きタッチパネルを用いて操作可能であるため、各エフェクトカテゴリーを操作するための操作手段としては、１つの表示機能付きタッチパネルを搭載するだけで良く、各エフェクトカテゴリーを操作するための操作手段を個別に備える場合と比較して、装置の小型化および低廉化を図ることができる。また、エフェクト操作画面は、ユーザが選択したエフェクトカテゴリーに応じて仕様が変更されるため、小型化が優先されることに伴って操作性が犠牲になるといったことがない。
さらに、エフェクトモードに応じてはエフェクト操作画面の仕様が変更されないため、操作方法を共通化することができ、ユーザにとっては操作方法の習得が容易である。また、操作方法を共通化することで、ＤＪやＶＪといった専門性に囚われることなく音楽および映像を操作することができ、汎用性を高めることができる。
【００１１】
上記に記載のＡＶ複合編集装置において、エフェクト操作画面には、エフェクトモード選択手段の選択結果が表示されることが好ましい。
【００１２】
この構成によれば、エフェクトモード選択手段の選択結果に応じては、エフェクト操作画面の仕様が変更されないが、エフェクトモード選択手段の選択結果が表示されることで、処理対象となっている信号をユーザが把握することができる。
【００１３】
上記に記載のＡＶ複合編集装置において、エフェクトカテゴリー選択手段は、ＢＰＭエフェクトカテゴリーおよびタッチエフェクトカテゴリー以外に、ＡＶ信号に対し、主にテキストの入力結果を用いてエフェクト処理を行う機能であるテキストエフェクトカテゴリーを含む複数のエフェクトカテゴリーの中から、いずれかのエフェクトカテゴリーを選択することが好ましい。
【００１４】
この構成によれば、ＶＪ機器などで注目されているテキストエフェクトを実現することができる。また、操作手段として表示機能付きタッチパネルを用いるため、テキストエフェクトカテゴリーを搭載したとしても、特別な構成を増設する必要が無い。したがって、安価にテキストエフェクトを実現できると共に、テキストエフェクトを容易に実現できるようにエフェクト操作画面の仕様も変更されるため、操作性も良い。
【００１５】
上記に記載のＡＶ複合編集装置において、エフェクト操作画面には、エフェクト種類を選択するためのエフェクト種類選択肢群と、映像を表示すると共にエフェクト操作の一部を行うための映像操作領域と、が表示され、表示制御手段は、エフェクトカテゴリー選択手段の選択結果に応じて、エフェクト種類選択肢群に含まれるエフェクト種類、および映像操作領域のサイズのうち、少なくとも一方を変更することが好ましい。
【００１６】
この構成によれば、各エフェクトカテゴリーに応じて使用用途が異なる場合があるが、そういった使用用途などを考慮してエフェクト種類が変更されるため、利便性を高めることができる。また、タッチエフェクトカテゴリーが選択された場合は、映像操作領域の使用頻度が高くなることが想定できるが、当該タッチエフェクトカテゴリーが選択された場合に映像操作領域のサイズを大きくすることで、操作性を高めることができる。
【００１７】
上記に記載のＡＶ複合編集装置において、エフェクト操作画面内に、出力映像を表示する出力映像表示領域を設けるか否かを選択する表示領域選択手段をさらに備え、表示制御手段は、表示領域選択手段により出力映像表示領域を設けると選択された場合は、出力映像表示領域を設けないと選択された場合と比較して、映像操作領域のサイズを小さくし、エフェクト種類選択肢群の各選択肢のサイズを変更しないことが好ましい。
【００１８】
この構成によれば、ユーザの好みや使用用途に応じて、エフェクト操作画面内に出力映像表示領域を設けるか否かを選択することができる。また、エフェクト操作画面内に出力映像表示領域を設ける場合でも、エフェクト種類選択肢群の各選択肢のサイズは変更されないため、操作性の犠牲を少なくすることができる。
【００１９】
上記に記載のＡＶ複合編集装置において、エフェクト操作画面には、エフェクトカテゴリー選択手段の各選択肢を表示するカテゴリー選択肢群と、エフェクトモード選択手段の各選択肢を表示するモード選択肢群と、が表示されることが好ましい。
【００２０】
この構成によれば、エフェクト操作画面によって、エフェクトカテゴリーとエフェクトモードとを選択することができるため、各選択手段を実現するための物理的な操作子を必要としない。
【００２１】
上記に記載のＡＶ複合編集装置において、操作手段は、編集操作として、ミキシング処理を実行させるためのミキシング操作を行うと共に、表示機能付きタッチパネルは、当該ミキシング操作を行うためのミキシング操作画面を表示し、ＡＶ信号に対し、クロスフェーダーを用いてミキシング処理を行うクロスフェーダーカテゴリーと、ＡＶ信号に対し、トランジッションパッドを用いてミキシング処理を行うトランジッションパッドカテゴリーと、を含む複数のミキシングカテゴリーの中から、いずれかのミキシングカテゴリーを選択するミキシングカテゴリー選択手段と、ミキシングカテゴリー選択手段および操作手段の操作結果に基づいて、オーディオ信号およびビデオ信号の少なくとも一方に対しミキシング処理を行うミキシング処理手段と、をさらに備え、表示制御手段は、ミキシングカテゴリー選択手段の選択結果に応じて、ミキシング操作画面の仕様を変更することが好ましい。
【００２２】
この構成によれば、エフェクト処理だけでなく、ミキシング処理も実現することができる。また、１台の装置で、クロスフェーダーカテゴリーおよびトランジッションパッドカテゴリーのいずれかのミキシングカテゴリーによる機能を実現することができるため、各機能を実現するための装置を１台ずつ設置する場合と比較してスペース効率が良い。また、各ミキシングカテゴリーは、表示機能付きタッチパネルの一部を用いて操作可能であるため、各ミキシングカテゴリーを操作するために、特別な構成を増設する必要が無く、装置の大型化を抑止できる。また、ミキシング操作画面は、ユーザが選択したミキシングカテゴリーに応じて仕様が変更されるため、装置の小型化が優先されることに伴って操作性が犠牲になるといったことがない。
なお、「トランジッションパッド」とは、ＡＶ信号の各チャンネルを指定するためのパッドがチャンネル数分用意されたものであり、当該パッドの指定に応じて、ミキシング処理の対象となるチャンネルを遷移させることができるものである。
【００２３】
上記に記載のＡＶ複合編集装置において、エフェクトモード選択手段とは独立して、ミキシング処理手段の処理対象を、ビデオ信号のみとするか、オーディオ信号およびビデオ信号とするかのいずれかを選択するミキシングモード選択手段をさらに備えたことが好ましい。
【００２４】
この構成によれば、エフェクト処理の処理対象と、ミキシング処理の処理対象とを個別に設定することができる。
なお、この場合、オーディオ信号のみをミキシング処理の処理対象とするための操作子を別途設けることが好ましい。
【００２５】
本発明のＡＶ処理装置は、上記に記載のＡＶ複合編集装置における各手段と、ＡＶ信号を入力する入力手段と、入力されたＡＶ信号に対してエフェクト処理手段によりエフェクト処理を行った出力ＡＶ信号を出力する出力手段と、を備えたことを特徴とする。
【００２６】
この構成によれば、操作性が良く且つ省スペースで、入力されたＡＶ信号に対するエフェクト操作を含む編集操作を行い得るＡＶ処理装置を提供することができる。
【００２７】
本発明のプログラムは、コンピュータを、上記に記載のＡＶ複合編集装置における各手段として機能させるためのものであることを特徴とする。
【００２８】
このプログラムを実行することにより、操作性が良く且つ省スペースで、オーディオ信号およびビデオ信号に対するエフェクト操作を含む編集操作を行い得るＡＶ複合編集装置を実現することができる。
【図面の簡単な説明】
【００２９】
【図１】 本発明の一実施形態に係るＡＶ処理システムのシステム構成図、およびＡＶ処理装置の簡易構成図である。
【図２】 ＡＶ処理装置に備えられたユーザインターフェースを示す図である。
【図３】 ＡＶ処理装置のブロック図である。
【図４】 エフェクトカテゴリーおよびミキシングカテゴリーの説明図である。
【図５】 ＢＰＭエフェクトカテゴリー（パフォーマンスモード）の表示例を示す図である。
【図６】 ＢＰＭエフェクトカテゴリー（オールインワンモード）の表示例を示す図である。
【図７】 タッチエフェクトカテゴリー（パフォーマンスモード）の表示例を示す図である。
【図８】 タッチエフェクトカテゴリー（オールインワンモード）の表示例を示す図である。
【図９】 テキストエフェクトカテゴリー（パフォーマンスモード）の表示例を示す図である。
【図１０】 テキストエフェクトカテゴリー（オールインワンモード）の表示例を示す図である。
【図１１】 クロスフェーダーカテゴリーの表示例を示す図である。
【図１２】 トランジッションパッドカテゴリーの表示例を示す図である。
【発明を実施するための形態】
【００３０】
以下、本発明の一実施形態に係るＡＶ編集装置、ＡＶ処理装置、ＡＶ編集システム、操作装置、ＡＶ編集方法およびプログラムについて、添付図面を参照しながら詳細に説明する。図１（ａ）は、本発明のＡＶ処理装置３０（ＡＶ編集装置、ＡＶ編集システム）を適用したＡＶ処理システムＳＹのシステム構成図である。ＡＶ処理システムＳＹは、ＡＶ処理装置３０に入力するための１個以上のオーディオ信号を生成する１台以上のＣＤプレーヤー１０（同図では、１台のみ図示）と、ＡＶ処理装置３０に入力するための１個以上のビデオ信号を生成する１台以上のＤＶＤプレーヤー２０（同図では、１台のみ図示）と、これら１台以上のＣＤプレーヤー１０および／または１台以上のＤＶＤプレーヤー２０から、１個以上のオーディオ信号および／または１個以上のビデオ信号（以下、オーディオ信号および／またはビデオ信号を指して「ＡＶ信号」と称する）を入力し、これらを編集して出力用のＡＶ信号を生成するＡＶ処理装置３０と、ＡＶ処理装置３０から出力されたオーディオ信号を音声出力するスピーカー４０と、ＡＶ処理装置３０から出力されたビデオ信号を表示するモニター５０と、から成る。
【００３１】
本実施形態のＡＶ処理装置３０は、入力されたＡＶ信号に対してエフェクトを付加するエフェクト処理など各種編集処理を行う。また、ＡＶ処理装置３０の一例としては、例えばクラブ等において用いられるものであり、音声と映像の両方にエフェクトをかけるなど、楽器感覚でオーディオ信号および／またはビデオ信号を扱い得るＤＶＪ機器（ディスクジョッキー（ＤＪ）が音響パフォーマンスに用いるＤＪ機器と、ビジュアルジョッキーまたはビデオジョッキー（ＶＪ）が映像パフォーマスンスに用いるＶＪ機器とを複合化した機器）等が挙げられる。
【００３２】
ここで、ＶＪおよびＤＪについて説明する。ＶＪは、音楽に合わせて即興で映像をミックス（合成したりつないだり）する。ＤＪが即興で音楽をミックスするのに対し、ＶＪは映像を用いてパフォーマンスを行う。主にイベントやクラブパーティでスクリーン等に映像を切換出力するパフォーマンスを行い、会場でかかっている音楽や企画の進行に合わせて、適切な映像をその場で選択し、タイミングよく流すことを担う。
【００３３】
これに対して、ＤＪは場の雰囲気から楽曲を選曲し、切れ目のない再生を行う。楽曲のピッチ（スピード）を変速できるターンテーブル等を使用したライブ演奏を行う。選曲の他に、ＤＪミックス、スクラッチなどのパフォーマンスを行う行為が一般化しており、ミックスでは現在再生している曲と次に再生する曲をスムーズにつなぎ、音の切れ目をなくすことでフロアのテンションを維持する。
【００３４】
現状、一般的にＶＪとＤＪは住み分けがなされており、普通は得意分野によって音楽、映像のどちらか一方を対象としてパフォーマンスを行う者が多い。それぞれに得意分野があることから、専門分野以外の対象をミックスすることは困難である。また、一方を対象とするだけでも、即興でつなぎつつさらにエフェクトをかけたりするので、多様な操作を行う必要があり非常に慌しい。そのため、双方を扱う余裕がない。
【００３５】
しかし、どちらも会場の雰囲気やパフォーマー自身のフィーリングに合わせて、楽曲、映像をテンポよく切換出力する行為を行うものである。提供される音と映像が一致する必要があることから、双方を１人の人物が行うことも望まれる。本来映像が得意なＶＪでも、映像の変化に追従して音楽が変化すれば、映像と共に音楽を扱うことが容易となるし、逆に本来音楽専任のＤＪでも、音を変化させることに追従して映像が変化すれば、より自然に音と映像を合わせて扱うことができる。
【００３６】
本実施形態のＡＶ処理装置３０は、本来1人の人物が同時に扱うことができない映像と音楽を、１人で同時に扱うことを可能とするものである。また、音楽と映像両方を扱おうとする者に対して、簡便で快適な操作を提供するものである。
【００３７】
なお、ＡＶ処理装置３０に入力するためのＡＶ信号を生成するための装置としては、ＣＤプレーヤー１０やＤＶＤプレーヤー２０に限らず、他の装置（各種音響機器、映像機器およびパーソナルコンピュータなど）であっても良い。また、ＡＶ処理装置３０に、ＣＤプレーヤー１０やＤＶＤプレーヤー２０の機能を内蔵させても良い。さらに、ビデオ信号は、動画であっても良いし静止画であっても良い。また、複数のオーディオ信号をＡＶ処理装置３０に入力する場合は、オーディオ信号を混合した場合の違和感を無くすため、ＣＤプレーヤー１０側またはＡＶ処理装置３０側のいずれかに、当該複数のオーディオ信号のＢＰＭを一致させる機能が搭載されていることが好ましい。
【００３８】
図１（ｂ）は、ＡＶ処理装置３０の簡易構成図である。ＡＶ処理装置３０は、その主要構成要素として、ユーザインターフェース３１、マイコン３２および信号処理部３３を有している。
【００３９】
ユーザインターフェース３１は、表示機能付きタッチパネルＴＰと、物理的に搭載されたフェーダ１１２やつまみ１１４等の各種操作子と、を含む（図２参照）。表示機能付きタッチパネルＴＰは、本実施形態において編集操作の大部分を担うものであり、ＴＦＴ等の表示素子を有するディスプレイと、当該ディスプレイ上に重ね合わされたタッチパネルと、から成る。このように、ユーザインターフェース３１として、主に表示機能付きタッチパネルＴＰ（以下単に「タッチパネルＴＰ」と称する）を採用することで、ユーザは、ディスプレイの表示上でタッチパネルを操作することができるため、簡便且つ直感的な操作が可能となる。
【００４０】
マイコン３２は、タッチパネルＴＰが操作されると、当該タッチパネルＴＰの操作（タッチ）に基づく電圧変化に応じて操作位置の位置検出や移動検出を行う。また、当該検出結果に基づいて、入力されたＡＶ信号の編集処理を指示するためのコントロール信号を生成し、これを信号処理部３３（オーディオ／ビデオコントロールデバイス）に出力する。
【００４１】
信号処理部３３は、マイコン３２から入力されたコントロール信号に基づいて、入力された各ＡＶ信号のエフェクト処理やミキシング処理を行い、その処理結果に基づいて、出力用のオーディオ信号および／または出力用のビデオ信号（以下、「出力ＡＶ信号」と称する）を生成し、それぞれの信号を各出力インターフェースから出力する。
【００４２】
また、信号処理部３３は、入力されたビデオ信号に基づく映像をマイコン３２に出力し、マイコン３２は、その映像をタッチパネルＴＰ上の所定領域（ＣＨモニター領域Ｅ１１，図１１等参照）に表示するなどの表示制御を行う。なお、マイコン３２は、この他にも、操作子の操作に基づく情報管理や、外部装置との信号の入出力など、ＡＶ処理装置３０の統括制御を行う。
【００４３】
なお、信号処理部３３は、出力される複数の信号の同期を合わせるための同期処理を行うことが好ましい。これにより、出力信号に遅れが生じるなどの違和感を無くすことができる。また、出力ＡＶ信号を再度信号処理部３３に戻し、編集処理後のＡＶ信号にさらに編集処理を行うといった２重処理を行うことも可能である。
【００４４】
次に、図２の平面図を参照し、ＡＶ処理装置３０に備えられたユーザインターフェース３１について説明する。同図に示すように、ＡＶ処理装置３０のユーザインターフェース３１は、物理的に搭載された各種操作子が配置される物理操作部１００と、タッチパネルＴＰを中心とした操作を行うためのタッチパネル操作部２００と、を備えている。
【００４５】
物理操作部１００は、ＣＨ１〜ＣＨ４に入力される各ＡＶ信号の編集操作を行うためのＣＨ１操作子群１１０〜ＣＨ４操作子群１４０と、物理的に搭載されたクロスフェーダー１５０と、を有している。各操作子群１１０〜１４０は、一般的なオーディオミキサーと同様に、ＣＦアサインスイッチ１１１、フェーダ１１２、ＣＵＥボタン１１３およびレベル調節つまみ（イコライザー）１１４等の操作子を有している。また、クロスフェーダー１５０は、ＣＦアサインスイッチ１１１により、ＡまたはＢにアサインされた各ＡＶ信号の出力レベルを調節するためのものである。
【００４６】
タッチパネル操作部２００は、タッチパネルＴＰと、当該タッチパネルＴＰの補助操作を行うために物理的に搭載された操作ボタンＢＴ１〜ＢＴ９と、を有している。タッチパネルＴＰは、パネルの長手方向を縦方向として利用され、１枚のパネルが上下２領域に仕切られている。このタッチパネルＴＰの上側領域は、主にエフェクト操作を行うために用いられるものであり、以下「エフェクト操作画面２１０」と称する。また、タッチパネルＴＰの下側領域は、主にミキシング操作を行うために用いられるものであり、以下「ミキシング操作画面２２０」と称する。
【００４７】
操作ボタンＢＴ１〜ＢＴ９については、各操作画面２１０，２２０の表示例（図５ないし図１２参照）を参照して適宜後述するため、ここでは簡単に説明する。操作ボタンＢＴ１は、エフェクト処理のモード（図４（ａ）参照）を切り替えるためのエフェクトモード切替ボタンである。操作ボタンＢＴ２は、ミキシング処理のカテゴリー（図４（ｂ）参照）を切り替えるためのミキシングカテゴリー切替ボタンである。操作ボタンＢＴ３は、エフェクト処理の対象となるチャンネルを切り替えるためのエフェクトチャンネル切替ボタンである。操作ボタンＢＴ４は、エフェクト処理のビデオパラメータを選択するためのビデオパラメータ選択ボタンである。操作ボタンＢＴ５は、エフェクト処理のエフェクトパラメータ（ＢＰＭ等）を切り替えるためのエフェクトパラメータ切替ボタンである。操作ボタンＢＴ６は、ＢＰＭエフェクトパフォーマンスを行うためのビートボタンである。その他、操作ボタンＢＴ７〜ＢＴ８は、一般的なオーディオミキサーにも搭載されているものであり、ＣＵＥボタンＢＴ７、ＴＡＰボタンＢＴ８、ＯＮ／ＯＦＦ切替ボタンＢＴ９（編集処理の処理結果を出力ＡＶ信号に反映させるか否かを切り替えるためのボタン）である。
【００４８】
次に、図３のブロック図を参照し、ＡＶ処理装置３０の制御構成について説明する。同図に示すように、ＡＶ処理装置３０は、入力手段３１０、操作手段３２０、エフェクトカテゴリー選択手段３３０、エフェクトモード選択手段３４０、ミキシングカテゴリー選択手段３５０、ミキシングモード選択手段３６０、表示制御手段３７０、エフェクト処理手段３８０、ミキシング処理手段３９０および出力手段４００を備えている。
【００４９】
入力手段３１０は、ＡＶ信号を入力するものであり、不図示の信号入力インターフェース（アナログまたはデジタル信号入力端子）によりその主要部が構成される。操作手段３２０は、エフェクト処理やミキシング処理を実行させるための各種編集操作を行うためのものであり、タッチパネルＴＰによりその主要部が構成される。
【００５０】
エフェクトカテゴリー選択手段３３０は、複数のエフェクトカテゴリーの中から、いずれかのエフェクトカテゴリーを選択するためのものであり、タッチパネルＴＰ（エフェクト操作画面２１０内のエフェクトカテゴリー選択領域Ｅ１，図５等参照）によりその主要部が構成される。具体的には、主にＢＰＭに合わせてエフェクト処理を行う機能であるＢＰＭエフェクトカテゴリー（オーディオエフェクトカテゴリー）、主に映像の操作結果に応じてエフェクト処理を行う機能であるタッチエフェクトカテゴリー（映像操作エフェクトカテゴリー）、主にテキストの入力結果を用いてエフェクト処理を行う機能であるテキストエフェクトカテゴリーの、３つのエフェクトカテゴリーの中から選択可能となっている。
【００５１】
エフェクトモード選択手段３４０は、エフェクト処理の対象となる信号を選択するためのものであり、タッチパネルＴＰ（エフェクト操作画面２１０内のエフェクトモード選択領域Ｅ４，図５等参照）によりその主要部が構成される。具体的には、オーディオ信号に対してのみエフェクト処理を行うオーディオモード（以下、「Ａモード」と称する）、ビデオ信号に対してのみエフェクト処理を行うビデオモード（以下、「Ｖモード」と称する）、オーディオ信号およびビデオに対してエフェクト処理を行うオーディオ・ビデオモード（以下、「ＡＶモード」と称する）、の３つのエフェクトモードの中から選択可能となっている。この「ＡＶモード」を選択することで、１つの操作で音楽と映像（画像）とを同じタイミングで変化させることが可能である。すなわち、ＤＪとＶＪのペアでは実現できない、全く同じタイミングでの変化スタートを実現できる。
【００５２】
ミキシングカテゴリー選択手段３５０は、複数のミキシングカテゴリーの中から、いずれかのミキシングカテゴリーを選択するためのものであり、ミキシングカテゴリー切替ボタンＢＴ２（図２等参照）によりその主要部が構成される。具体的には、ＧＵＩ表示されたクロスフェーダー６３（図１１参照）を用いてミキシング処理を行うクロスフェーダーカテゴリーと、トランジッションパッド６４（図１２参照）を用いてミキシング処理を行うトランジッションパッドカテゴリーのいずれかを選択可能となっている。
【００５３】
ミキシングモード選択手段３６０は、ミキシング処理の対象となる信号を選択するためのものであり、タッチパネルＴＰ（ミキシング操作画面２２０内の同期切り替えボタン６２，図１１等参照）によりその主要部が構成される。具体的には、同期切り替えボタン６２を「同期」に設定することにより、ミキシング処理のＡＶモードを選択できる。また、同期切り替えボタン６２を「非同期」に設定することにより、ミキシング処理のＶモードを選択できる。なお、オーディオ信号のみをミキシング処理の処理対象とする場合（Ａモードを選択する場合）は、物理的に搭載されたクロスフェーダー１５０（図２参照）を用いる。このように、ミキシングモード選択手段３６０は、エフェクトモード選択手段３４０とは独立して、処理対象となる信号を選択可能となっているため、エフェクト処理とミキシング処理とで個別に処理対象を選択することができ、より多彩な音楽表現や映像表現の実現が可能となっている。
【００５４】
表示制御手段３７０は、タッチパネルＴＰの表示制御を行うものであり、マイコン３２（図１（ｂ）参照）によりその主要部が構成される。表示制御手段３７０は、エフェクトカテゴリー選択手段３３０の選択結果に応じて、エフェクト操作画面２１０の仕様を変更する一方、エフェクトモード選択手段３４０の選択結果に応じては、エフェクト操作画面２１０の仕様を変更しない。つまり、操作形態の異なるエフェクトカテゴリーに応じてエフェクト操作画面２１０の仕様を変更することで操作性の向上を図る一方、処理対象となる信号が異なるエフェクトモードに応じてはエフェクト操作画面２１０の仕様を変更しないことで、操作方法を共通化させて利便性および汎用性を高めている。また、表示制御手段３７０は、ミキシングカテゴリー選択手段３５０の選択結果に応じて、ミキシング操作画面２２０の仕様を変更することで、ミキシング操作の操作性向上も図っている。
【００５５】
エフェクト処理手段３８０は、エフェクトカテゴリー選択手段３３０およびエフェクトモード選択手段３４０の選択結果、並びに操作手段３２０の操作結果に基づいて、入力されたＡＶ信号に対しエフェクト処理を行うものであり、マイコン３２および信号処理部３３（図１（ｂ）参照）によりその主要部が構成される。
【００５６】
ミキシング処理手段３９０は、ミキシングカテゴリー選択手段３５０およびミキシングモード選択手段３６０の選択結果、並びに操作手段３２０の操作結果に基づいて、入力されたＡＶ信号に対しミキシング処理を行うものであり、マイコン３２および信号処理部３３（図１（ｂ）参照）によりその主要部が構成される。
【００５７】
また、出力手段４００は、エフェクト処理手段３８０および／またはミキシング処理手段３９０による処理後の出力ＡＶ信号を出力するものであり、不図示の信号出力インターフェース（アナログまたはデジタル信号出力端子）により、その主要部が構成される。
【００５８】
次に、図４を参照し、エフェクトカテゴリーおよびミキシングカテゴリーの各機能構成について説明する。同図（ａ）に示すように、エフェクトカテゴリーは、ＢＰＭエフェクトカテゴリー、タッチエフェクトカテゴリーおよびテキストエフェクトカテゴリーの中からいずれかを選択可能となっている。また、各エフェクトカテゴリーでは、複数のエフェクト種類の中からいずれかを選択して実現可能となっている（エフェクト種類選択領域Ｅ３，図５等参照）。なお、エフェクト種類の内容は、エフェクトカテゴリーに応じて全く異なっていても良いし、一部同一であっても良い。
【００５９】
また、各エフェクトカテゴリーは、エフェクト操作画面２１０内に出力映像表示領域Ｅ９（図６等参照）を設けないパフォーマンスモード（図５等参照）と、エフェクト操作画面２１０内に出力映像表示領域Ｅ９を設けるオールインワンモードとのいずれかを選択可能となっている（表示領域選択手段）。文字通り、パフォーマンスモードは、操作性向上を図るため、エフェクト操作画面２１０をパフォーマンスのためにフル活用したい場合に選択されるモードである。また、オールインワンモードは、外部モニター等を必要とすることなく出力映像を確認したい場合に選択されるモードである。
【００６０】
さらに、各エフェクトカテゴリーおよび各モードでは、上記のとおりエフェクトモード（Ａモード、ＶモードおよびＡＶモードのいずれか）を選択可能となっている。このように、エフェクト操作画面２１０では、エフェクトモードやエフェクト種類の異なる多数のエフェクト処理を実行させることが可能であり、その操作方法もエフェクトカテゴリーに応じて変更可能となっている。
【００６１】
同図（ｂ）は、ミキシングカテゴリーの機能構成を示す図である。同図に示すように、ミキシングカテゴリーは、クロスフェーダーカテゴリーと、トランジッションパッドカテゴリーのいずれかを選択可能となっている。また、各ミキシングカテゴリーでは、複数のミキシング種類の中からいずれかを選択して実現可能となっている（ミキシング種類選択領域Ｅ１２，図１１等参照）。なお、ミキシング種類の内容は、ミキシングカテゴリーに応じて全く異なっていても良いし、一部同一であっても良い。
【００６２】
また、各ミキシングカテゴリーでは、オーディオ信号とビデオ信号を同時に（連動させて）操作する「同期」と、オーディオ信号とビデオ信号を個別に操作する「非同期」と、を選択可能となっている。したがって、ミキシングモードとしては、同期の選択によってＡＶモードを、非同期の選択によってＡモードまたはＶモードを選択可能である。すなわち、物理的に搭載されたクロスフェーダー１５０（図２参照）によりＡモードの操作が可能となり、タッチパネルＴＰ上にＧＵＩ表示されたクロスフェーダー６３（図１１参照）またはトランジッションパッド６４（図１２参照）によりＶモードの操作が可能となる。
【００６３】
このように、ミキシング操作画面２２０でも、エフェクト操作画面２１０と同様に、ミキシングモードやミキシング種類の異なる多数のミキシング処理を実行させることが可能であり、その操作方法もミキシングカテゴリーに応じて変更可能となっている。
【００６４】
次に、図５ないし図１０を参照し、エフェクト操作画面２１０の詳細について説明する。図５は、ＢＰＭエフェクトカテゴリー（パフォーマンスモード）が選択された場合のエフェクト操作画面２１０を示す図である。同図に示すように、当該エフェクト操作画面２１０には、画面左上部にエフェクトカテゴリー選択領域Ｅ１（カテゴリー選択肢群）、その右側にチャンネル表示領域Ｅ２、これら領域Ｅ１，Ｅ２の下側にエフェクト種類選択領域Ｅ３（エフェクト種類選択肢群）、その下側にエフェクトモード選択領域Ｅ４（モード選択肢群）、その下側に映像操作領域Ｅ５、さらにその下側にビート選択領域Ｅ６、エフェクトモード選択領域Ｅ４の右側にＢＰＭオートボタン５１、その下側且つ映像操作領域Ｅ５の右側にビデオパラメータ表示領域Ｅ７、その下側且つ映像操作領域Ｅ５の右側にエフェクトパラメータ表示領域Ｅ８、が設けられている。
【００６５】
エフェクトカテゴリー選択領域Ｅ１は、エフェクトカテゴリーの選択肢となるアイコン（ＢＰＭ，タッチ，テキスト）が横並びに配置される。また、現在どのエフェクトカテゴリーが選択されているか（エフェクトモード選択手段３４０の選択結果）が分かるようにアイコンが色分け表示される。
【００６６】
チャンネル表示領域Ｅ２は、編集対象として選択可能なチャンネル名（ＣＨ１，ＣＨ２，ＣＨ３，ＣＨ４，ＭＩＣ，ＣＦ（クロスフェーダー）Ａ，ＣＦＢ，ＭＡＳＴＥＲ）が表示される。また、現在どのチャンネルが選択されているかが分かるようにチャンネル名が色分け表示される。
【００６７】
エフェクト種類選択領域Ｅ３は、エフェクト種類の選択肢となるアイコン（ＤＥＬＡＹ，ＥＣＨＯ，ＰＡＮ，ＴＲＡＮＳ，ＦＩＬＴＥＲ，ＦＲＡＮＧＥＲ，ＰＨＡＳＥＲ，ＲＥＶＥＲＢ，ＲＯＢＯＴ，ＣＨＯＲＵＳ，ＲＯＬＬ，ＲＥＶ
ＲＯＬＬ等）が横並びに配置される。また、現在どのエフェクト種類が選択されているかが分かるようにアイコンが色分け表示される。
【００６８】
エフェクトモード選択領域Ｅ４は、エフェクトモードの選択肢となるアイコン（Ａモード，ＡＶモード，Ｖモード）が横並びに配置される。また、現在どのエフェクトモードが選択されているかが分かるようにアイコンが色分け表示される。
【００６９】
映像操作領域Ｅ５は、エフェクト操作画面２１０の中心部に位置し、編集対象として選択されているチャンネルのビデオ信号に基づく映像が表示される。また、映像操作領域Ｅ５は、ユーザによるタッチ毎に、ビデオパラメータ選択ボタンＢＴ４により選択されたビデオパラメータに基づく効果の反映／非反映を切り替え可能となっている。
【００７０】
ビート選択領域Ｅ６は、ビートボタンＢＴ６に近接して設けられ、ビート種類の選択肢となるアイコン（１／８，１／４，１／２，１／１，２／１，４／１，８／１等）が横並びに配置されている。ビート種類は、各アイコンのタッチまたはビートボタンＢＴ６によって選択可能となっている。なお、エフェクト種類に応じて、拍表示にするか％表示にするかが決定される。
【００７１】
ＢＰＭオートボタン５１は、ＢＰＭの測定を、オートにするかマニュアルにするかを選択するためのボタンであり、ユーザによるタッチ毎に、オート／マニュアルを切り替え可能となっている。また、現在いずれが選択されているかが分かるように、「ＡＵＴＯ」か「ＭＡＮＵＡＬ」の文字がボタン上に表示される。
【００７２】
ビデオパラメータ表示領域Ｅ７は、ビデオパラメータ選択ボタンＢＴ４に近接して設けられ、選択可能なビデオパラメータ名（ＢＰＭエフェクトカテゴリーでは、ＩＮＶＥＲＳＥ，ＳＥＰＩＡ，ＥＤＧＥ，ＨＵＥ）が表示される。また、現在どのビデオパラメータが選択されているかが分かるようにビデオパラメータ名が色分け表示される。
【００７３】
エフェクトパラメータ表示領域Ｅ８は、エフェクトパラメータ切替ボタンＢＴ５に近接して設けられ、測定されたＢＰＭの値と、エフェクトパラメータ切替ボタンＢＴ５によって選択されたエフェクトパラメータの値が表示される。なお、エフェクトパラメータの単位は、エフェクト種類によって「ｍｓ」や「％」に変化する。
【００７４】
次に、図６を参照し、ＢＰＭエフェクトカテゴリー（オールインワンモード）が選択された場合のエフェクト操作画面２１０について説明する。図５に示したパフォーマンスモードから当該オールインワンモードには、エフェクトモード切替ボタンＢＴ１の操作により、切替可能となっている。
【００７５】
オールインワンモードが選択された場合のエフェクト操作画面２１０には、パフォーマンスモードが選択された場合と同様の各領域Ｅ１〜Ｅ８およびＢＰＭオートボタン５１の他、出力映像表示領域Ｅ９が設けられている。また、オールインワンモードが選択された場合とパフォーマンスモードが選択された場合とでは、各領域の配置も異なる。以下、パフォーマンスモードが選択された場合と異なる点のみを説明する。
【００７６】
ＢＰＭエフェクトカテゴリー（オールインワンモード）が選択された場合のエフェクト操作画面２１０は、出力映像表示領域Ｅ９が画面上部に設けられたことに伴い、エフェクトカテゴリー選択領域Ｅ１およびエフェクトモード選択領域Ｅ４の選択肢、並びにチャンネル表示領域Ｅ２のチャンネル名が縦並びに配置されると共に、映像操作領域Ｅ５のサイズ（占有面積）が小さくなっている。また、ＢＰＭオートボタン５１の上下に、ビデオパラメータ表示領域Ｅ７およびエフェクトパラメータ表示領域Ｅ８が配置される。
【００７７】
出力映像表示領域Ｅ９は、出力映像を表示するモニターであり、当該映像表示領域Ｅ９を設けることで、外付けモニター等を必要とすることなくユーザが出力映像を確認できるようになっている。
【００７８】
このように、オールインワンモードでは、エフェクト操作画面２１０内に出力映像表示領域Ｅ９を設けるため、映像操作領域Ｅ５の占有面積が小さくなってしまうが、エフェクト種類選択領域Ｅ３など、選択肢となる各アイコンのサイズは変更されないため、操作性の犠牲を少なくすることができる。
【００７９】
次に、図７を参照し、タッチエフェクトカテゴリー（パフォーマンスモード）が選択された場合のエフェクト操作画面２１０について説明する。図５に示したＢＰＭエフェクトカテゴリーから当該タッチエフェクトカテゴリーには、エフェクトカテゴリー選択領域Ｅ１の操作により、切替可能となっている。
【００８０】
タッチエフェクトカテゴリーが選択された場合のエフェクト操作画面２１０には、ＢＰＭエフェクトカテゴリーが選択された場合と比較して、ビート選択領域Ｅ６が無くなり、新たにホールドボタン５２が設けられた点や、パラメータ選択ボタンＢＴ４の機能が異なる。また、映像操作領域Ｅ５の占有面積が大きくなり、これに伴ってビデオパラメータ表示領域Ｅ７およびエフェクトパラメータ表示領域Ｅ８が映像操作領域Ｅ５内に配置された点も異なる。以下、ＢＰＭエフェクトカテゴリーが選択された場合と異なる点のみを説明する。
【００８１】
ホールドボタン５２は、エフェクトの効果をホールド（持続させる）ためのボタンであり、映像操作領域Ｅ５の上側且つエフェクト種類選択領域Ｅ３の左側に配置される。
【００８２】
パラメータ選択ボタンＢＴ４は、ビデオエフェクトの動き方のパターンを選択するためのボタンである。例えば、エフェクト種類「ＲＩＰＰＬＥ」の場合は、波紋の形を円状やカーテン状に変更できる。
【００８３】
映像操作領域Ｅ５は、ＢＰＭエフェクトカテゴリーの場合のスイッチ的なインターフェースとは異なり、タッチパッド的に用いられる。すなわち、映像操作領域Ｅ５のＸＹ座標でエフェクトの位置情報を変化させることができるようになっている。また、映像操作領域Ｅ５のタッチがエフェクトのトリガーとなっており、映像操作領域Ｅ５内の任意の位置を触れることで、その位置を中心に波紋のエフェクトをかけるなどのエフェクト処理を実行させることができる。また、映像操作領域Ｅ５内をタッチし続けることで、ホールドボタン５２を操作することなく効果を持続させることができる。
【００８４】
このように、タッチエフェクトカテゴリーが選択された場合は、ＢＰＭエフェクトカテゴリーが選択された場合と比較して映像操作領域Ｅ５の使用頻度が高くなることが想定できるが、当該タッチエフェクトカテゴリーが選択された場合に映像操作領域Ｅ５のサイズを大きくすることで、操作性を高めることができる。
【００８５】
なお、映像操作領域Ｅ５がタッチパッド的に用いることができることをユーザに対し明確に示すため、映像操作領域Ｅ５のサイズ以外の仕様（外枠の色や形状など種々の表示態様）を、ＢＰＭエフェクトカテゴリーが選択された場合とは変化させることが好ましい。
【００８６】
次に、図８を参照し、タッチエフェクトカテゴリー（オールインワンモード）が選択された場合のエフェクト操作画面２１０について説明する。オールインワンモードが選択された場合のエフェクト操作画面２１０には、パフォーマンスモードが選択された場合と同様の各領域（Ｅ６を除くＥ１〜Ｅ８）、ＢＰＭオートボタン５１およびホールドボタン５２の他、出力映像表示領域Ｅ９が設けられている。また、出力映像表示領域Ｅ９が設けられたことに伴い、エフェクトカテゴリー選択領域Ｅ１およびエフェクトモード選択領域Ｅ４の選択肢、並びにチャンネル表示領域Ｅ２のチャンネル名が縦並びに配置されると共に、映像操作領域Ｅ５の占有面積が小さくなっている。また、ビデオパラメータ表示領域Ｅ７およびエフェクトパラメータ表示領域Ｅ８が、映像操作領域Ｅ５の外部且つＢＰＭオートボタン５１の上下に配置され、エフェクトモード選択領域Ｅ４の下側にホールドボタン５２が配置される。
【００８７】
すなわち、タッチエフェクトカテゴリー（オールインワンモード）が選択された場合のエフェクト操作画面２１０は、図６に示したＢＰＭエフェクトカテゴリー（オールインワンモード）が選択された場合と、図７に示したタッチエフェクトカテゴリー（パフォーマンスモード）との両方の長所を生かした仕様となっている。
【００８８】
次に、図９を参照し、テキストエフェクトカテゴリー（パフォーマンスモード）が選択された場合のエフェクト操作画面２１０について説明する。テキストエフェクトカテゴリーが選択された場合のエフェクト操作画面２１０には、タッチエフェクトカテゴリーが選択された場合（図７参照）と比較して、ホールドボタン５２が無くなり、新たにテキストエディットボタン５３が設けられた点で異なる。また、エフェクト種類選択領域Ｅ３に、テキストバンク５４の選択肢が設けられた点、並びに映像操作領域Ｅ５内に配置されていたビデオパラメータ表示領域Ｅ７およびエフェクトパラメータ表示領域Ｅ８が無くなった点も異なる。以下、タッチエフェクトカテゴリーが選択された場合と異なる点のみを説明する。
【００８９】
テキストエディットボタン５３は、エフェクト操作画面２１０をソフトキーボードモードに移行させるためのボタンである。ソフトキーボードモードのエフェクト操作画面２１０の表示例については特に図示しないが、映像操作領域Ｅ５に相当する領域がソフトキーボードおよびキー入力結果の確認欄となる。
【００９０】
エフェクト種類選択領域Ｅ３は、上記のエフェクト種類の一部（特にテキスト入力パフォーマンス時に使用頻度が高いと想定できるエフェクト種類）と共に、予め設定されているテキスト（文字列）を呼び出すためのテキストバンク５４の選択肢を設けている。なお、テキストバンク５４には、ユーザが入力したテキストを登録することも可能である。
【００９１】
次に、図１０を参照し、テキストエフェクトカテゴリー（オールインワンモード）が選択された場合のエフェクト操作画面２１０について説明する。オールインワンモードが選択された場合のエフェクト操作画面２１０には、パフォーマンスモードが選択された場合と同様の各領域Ｅ１〜Ｅ５、ＢＰＭオートボタン５１およびテキストエディットボタン５３の他、出力映像表示領域Ｅ９が設けられている。また、出力映像表示領域Ｅ９が設けられたことに伴い、エフェクトカテゴリー選択領域Ｅ１およびエフェクトモード選択領域Ｅ４の選択肢、並びにチャンネル表示領域Ｅ２のチャンネル名が縦並びに配置されると共に、映像操作領域Ｅ５の占有面積が小さくなっている。また、エフェクトモード選択領域Ｅ４の下側にテキストエディットボタン５３が配置される。
【００９２】
すなわち、テキストエフェクトカテゴリー（オールインワンモード）が選択された場合のエフェクト操作画面２１０は、図８に示したタッチエフェクトカテゴリー（オールインワンモード）が選択された場合と、図９に示したテキストエフェクトカテゴリー（パフォーマンスモード）との両方の長所を生かした仕様となっている。
【００９３】
次に、図１１および図１２を参照し、ミキシング操作画面２２０の詳細について説明する。図１１は、クロスフェーダーカテゴリーが選択された場合のミキシング操作画面２２０を示す図である。同図に示すように、当該ミキシング操作画面２２０には、画面上部にＣＨモニター領域Ｅ１１、その下側にミキシング種類選択領域Ｅ１２、その右側に同期切り替えボタン６２、ミキシング種類選択領域Ｅ１２の下側にＧＵＩ表示されたクロスフェーダー６３、その左右に一対のトランスフォーマーボタン６１，６１が設けられている。
【００９４】
ＣＨモニター領域Ｅ１１は、ＣＨ１〜ＣＨ４に入力されたビデオ信号に基づく映像を表示するＣＨモニター７１と、クロスフェーダー６３のアサイン先を示すアサインバー７２と、を有している。クロスフェーダー６３は、操作子６３ａの移動範囲となる軌道６３ｂが、例えば右側が赤色、左側が青色に彩色されており、アサインバー７２は、赤または青で表示されることによりアサイン先（クロスフェーダー６３の右または左）を示している。
【００９５】
ミキシング種類選択領域Ｅ１２は、ミキシング種類の選択肢となるアイコン（ＦＡＤＥ，ＷＩＰＥ１／２，ＣＲＯＭＡ，ＬＵＭＩ，ＭＯＴＩＯＮ等）が横並びに配置される。また、現在どのエフェクト種類が選択されているかが分かるようにアイコンが色分け表示される。
【００９６】
同期切り替えボタン６２は、物理的に配置されたクロスフェーダー１５０（図２参照）の動きに合わせてＧＵＩ表示されたクロスフェーダー６３の位置が同様に動く「同期」と、物理的に配置されたクロスフェーダー１５０をオーディオ信号用のフェーダー、ＧＵＩ表示されたクロスフェーダー６３をビデオ信号用のフェーダーとして機能させる「非同期」とを切り替えるためのボタンである。すなわち、クロスフェーダー６３を操作することで音を変えずに映像だけを切り替えたりミックスしたりすることができ、逆にクロスフェーダー１５０を操作することで映像を変えずに音だけを切り替えたりミックスしたりすることができる。
【００９７】
クロスフェーダー６３は、上記のとおり操作子６３ａと、当該操作子６３ａの移動経路である軌道６３ｂと、を有しており、ユーザが操作子６３ａを軌道６３ｂに沿って移動させることにより、左右にアサインされたＡＶ信号の出力レベルを調節可能となっている。トランスフォーマーボタン６１は、クロスフェーダー６３でメインとされていない方の音を、その押下によって細かく出すためのボタンである。
【００９８】
このように、クロスフェーダーカテゴリーでは、シンプルなクロスフェーダー６３を用いることで、スクラッチ系のＤＪが簡単に操作することを可能とするものである。なお、クロスフェーダー６３と、ミキシング種類選択領域Ｅ１２とが距離的に近いため、クロスフェーダー６３を操作している間は、ミキシング種類選択領域Ｅ１２内の操作を無効とすることが好ましい。
【００９９】
次に、図１２を参照し、トランジッションパッドカテゴリーが選択された場合のミキシング操作画面２２０について説明する。図１１に示したクロスフェーダーカテゴリーから当該トランジッションパッドカテゴリーには、ミキシングカテゴリー切替ボタンＢＴ２の操作により、切替可能となっている。
【０１００】
トランジッションパッドカテゴリーが選択された場合のミキシング操作画面２２０には、クロスフェーダーカテゴリーが選択された場合と同様の領域Ｅ１１，Ｅ１２および同期切り替えボタン６２の他、トランジッションパッド６４、ビート選択領域Ｅ１３、メモボタン６５およびオートボタン６６が設けられている。また、ミキシング種類選択領域Ｅ１２内のアイコンが横並びではなく、縦並び（２列）となっている点も異なる。以下、クロスフェーダーカテゴリーが選択された場合と異なる点のみを説明する。
【０１０１】
トランジッションパッド６４は、ＡＶ信号の各チャンネルを指定するためのパッドがチャンネル数分用意されたものであり、当該パッドの指定に応じて、ミキシング処理の対象となるチャンネルを遷移させることができるものである。例えば、エフェクト種類として「ＦＡＤＥ」が選択され、パッド１→パッド２の順にタッチされた場合、ＣＨ１の信号からＣＨ２の信号にフェーダー方式で移行させる。なお、トランジッションパッド６４の中央部がくり抜き状態となっているのは、タッチ位置の移動によってミックス処理する２つの信号が指定されたような場合に、誤って他の信号のパッドに触れないようにするためである。これにより、誤操作を大幅に軽減することができる。
【０１０２】
ビート選択領域Ｅ１３は、ビート選択領域（図５等参照）と同様の機能である。また、メモボタン６５は、トランジッションパッド６４の操作結果をメモリーさせるためのボタンである。また、オートボタン６６は、メモボタン６５でメモリーした順序またはランダムに、ＢＰＭに合わせた拍でトランジットさせるためのものである。
【０１０３】
このように、トランジッションパッドカテゴリーは、映像を専門分野とするＶＪが、容易に音と映像とを簡単に操作することを可能とするものである。なお、メモボタン６５やオートボタン６６は、図１１に示したクロスフェーダーカテゴリーにも搭載可能である。この場合、メモボタン６５を押下することで、クロスフェーダー６３の動作をメモリーさせることができる。
【０１０４】
以上説明したとおり、本実施形態のＡＶ処理装置３０によれば、１台の装置で、複数のエフェクトカテゴリーやミキシングカテゴリーによる機能を実現することができるため、各機能を実現するための装置を１台ずつ設置する場合と比較してスペース効率が良く、導入コストを大幅に軽減できる。また、１台の装置で、オーディオ信号およびビデオ信号の両方の編集処理を行うことができるため、さらにスペース効率の向上、および導入コストの低廉化を図ることができる。また、各エフェクトカテゴリーおよび各ミキシングカテゴリーは、１つのタッチパネルＴＰを用いて操作可能であるため、各カテゴリーを操作するための操作手段を個別に備える場合と比較して、装置の小型化を図ることができる。また、エフェクト操作画面２１０およびミキシング操作画面２２０は、ユーザが選択したカテゴリーに応じて仕様が変更されるため、小型化が優先されることに伴って操作性が犠牲になるといったことがない。一方、エフェクト操作画面２１０は、エフェクトモード（処理対象となる信号）に応じては仕様が変更されないため、操作方法を共通化することができ、ユーザにとっては操作方法の習得が容易である。また、操作方法を共通化することで、ＤＪやＶＪといった専門性に囚われることなく音楽および映像を操作することができ、汎用性を高めることができる。
【０１０５】
なお、上記の実施形態では、ＡＶ処理装置３０として、クラブ等において用いられるＤＶＪ機器を例示したが、当該ＤＶＪ機器以外にも、ＡＶ信号に対してエフェクト効果を付加可能な装置やプログラム（音声／映像エフェクター、音声／映像ミキサー、音声／映像コントローラ、音声／映像処理アプリケーションなど）であれば、本発明を適用可能である。すなわち、オーディオ信号とビデオ信号の両方を処理する装置でなくとも、オーディオ信号のみ、ビデオ信号のみを処理する装置にも、本発明を適用可能である。
【０１０６】
また、上記の例に示したＡＶ処理装置３０における各部、並びに各機能をプログラムとして提供することも可能である。また、そのプログラムを記録媒体（図示省略）に格納して提供することも可能である。記録媒体としては、ＣＤ―ＲＯＭ、フラッシュＲＯＭ、メモリカード（コンパクトフラッシュ（登録商標）、スマートメディア、メモリースティック等）、コンパクトディスク、光磁気ディスク、デジタルバーサタイルディスク、フレキシブルディスクおよびハードディスク等を利用することができる。
【０１０７】
また、上述した実施例によらず、ＡＶ処理システムＳＹのシステム構成、ＡＶ処理装置３０の装置構成や処理工程等について、本発明の要旨を逸脱しない範囲で、適宜変更も可能である。
【符号の説明】
【０１０８】
１０…ＣＤプレーヤー，２０…ＤＶＤプレーヤー，３０…ＡＶ処理装置，３１…ユーザインターフェース，３２…マイコン，３３…信号処理部，５１…ＢＰＭオートボタン，５２…ホールドボタン，５３…テキストエディットボタン，５４…テキストバンク，６２…同期切り替えボタン，１００…物理操作部，２００…タッチパネル操作部，２１０…エフェクト操作画面，２２０…ミキシング操作画面，Ｅ１…エフェクトカテゴリー選択領域，Ｅ２…チャンネル表示領域，Ｅ３…エフェクト種類選択領域，Ｅ４…エフェクトモード選択領域，Ｅ５…映像操作領域，Ｅ６…ビート選択領域，Ｅ７…ビデオパラメータ表示領域，Ｅ８…エフェクトパラメータ表示領域，Ｅ９…出力映像表示領域，Ｅ１１…ＣＨモニター領域，Ｅ１２…ミキシング種類選択領域，Ｅ１３…ビート選択領域，ＳＹ…ＡＶ処理システム，ＴＰ…タッチパネル

Claims (13)

1. オーディオ信号またはビデオ信号であるＡＶ信号に対し、オーディオ信号に合わせてエフェクト処理を行う機能であるオーディオエフェクトカテゴリーと、
   前記ＡＶ信号に対し、主に映像の操作結果に応じてエフェクト処理を行う機能である映像操作エフェクトカテゴリーと、を含む複数のエフェクトカテゴリーの中から、いずれかのエフェクトカテゴリーを選択するエフェクトカテゴリー選択手段と、
   前記オーディオ信号に対してのみ前記エフェクト処理を行うオーディオモード、前記ビデオ信号に対してのみ前記エフェクト処理を行うビデオモード、前記オーディオ信号および前記ビデオ信号に対して前記エフェクト処理を行うオーディオ・ビデオモード、のうち少なくとも２つのモードを含む複数のエフェクトモードの中から、１のエフェクトモードを選択するエフェクトモード選択手段と、
   前記エフェクト処理を実行させるためのエフェクト操作を含む各種編集操作を行う操作手段からの操作信号を受ける操作信号受信手段と、
   表示制御を行わせる表示制御手段と、
   前記エフェクトカテゴリー選択手段および前記エフェクトモード選択手段の選択結果、並びに前記操作手段の操作結果に基づいて、前記オーディオ信号および前記ビデオ信号の少なくとも一方に対し前記エフェクト処理を行うエフェクト処理手段と、を備え、
   前記表示制御手段は、前記エフェクトカテゴリー選択手段の選択結果に応じて、前記エフェクト操作を行うためのエフェクト操作画面の仕様を変更させる一方、前記エフェクトモード選択手段の選択結果に応じては、前記エフェクト操作画面の仕様を変更させないことを特徴とするＡＶ編集装置。
2. 前記表示制御手段は、前記エフェクト操作画面に、前記エフェクトモード選択手段の選択結果を表示させることを特徴とする請求項１に記載のＡＶ編集装置。
3. 前記エフェクトカテゴリー選択手段は、前記オーディオエフェクトカテゴリーおよび前記映像操作エフェクトカテゴリー以外に、前記ＡＶ信号に対し、主にテキストの入力結果を用いてエフェクト処理を行う機能であるテキストエフェクトカテゴリーを含む複数のエフェクトカテゴリーの中から、いずれかのエフェクトカテゴリーを選択することを特徴とする請求項１に記載のＡＶ編集装置。
4. 前記エフェクト操作画面には、エフェクト種類を選択するためのエフェクト種類選択肢群と、前記映像を表示すると共に前記エフェクト操作の一部を行うための映像操作領域と、が表示され、
   前記表示制御手段は、前記エフェクトカテゴリー選択手段の選択結果に応じて、前記エフェクト種類選択肢群に含まれる前記エフェクト種類、および前記映像操作領域のサイズのうち、少なくとも一方を変更させることを特徴とする請求項３に記載のＡＶ編集装置。
5. 前記エフェクト操作画面内に、出力映像を表示する出力映像表示領域を設けるか否かを選択する表示領域選択手段をさらに備え、
   前記表示制御手段は、前記表示領域選択手段により前記出力映像表示領域を設けると選択された場合は、前記出力映像表示領域を設けないと選択された場合と比較して、前記映像操作領域のサイズを小さくし、前記エフェクト種類選択肢群の各選択肢のサイズを変更しないことを特徴とする請求項４に記載のＡＶ編集装置。
6. 前記エフェクト操作画面には、前記エフェクトカテゴリー選択手段の各選択肢を表示するカテゴリー選択肢群と、前記エフェクトモード選択手段の各選択肢を表示するモード選択肢群と、が表示されることを特徴とする請求項１に記載のＡＶ編集装置。
7. 前記操作手段は、前記編集操作として、ミキシング処理を実行させるためのミキシング操作を行うと共に、前記表示機能付きタッチパネルは、当該ミキシング操作を行うためのミキシング操作画面を表示し、
   前記ＡＶ信号に対し、クロスフェーダーを用いて前記ミキシング処理を行うクロスフェーダーカテゴリーと、前記ＡＶ信号に対し、トランジッションパッドを用いて前記ミキシング処理を行うトランジッションパッドカテゴリーと、を含む複数のミキシングカテゴリーの中から、いずれかのミキシングカテゴリーを選択するミキシングカテゴリー選択手段と、
   前記ミキシングカテゴリー選択手段および前記操作手段の操作結果に基づいて、前記オーディオ信号および前記ビデオ信号の少なくとも一方に対し前記ミキシング処理を行うミキシング処理手段と、をさらに備え、
   前記表示制御手段は、前記ミキシングカテゴリー選択手段の選択結果に応じて、前記ミキシング操作画面の仕様を変更させることを特徴とする請求項１に記載のＡＶ編集装置。
8. 前記エフェクトモード選択手段とは独立して、前記ミキシング処理手段の処理対象を、前記ビデオ信号のみとするか、前記オーディオ信号および前記ビデオ信号とするかのいずれかを選択するミキシングモード選択手段をさらに備えたことを特徴とする請求項７に記載のＡＶ編集装置。
9. 請求項１に記載のＡＶ編集装置における各手段と、
   前記ＡＶ信号を入力する入力手段と、
   入力された前記ＡＶ信号に対して前記エフェクト処理手段により前記エフェクト処理を行った出力ＡＶ信号を出力する出力手段と、を備えたことを特徴とするＡＶ処理装置。
10. オーディオ信号またはビデオ信号であるＡＶ信号に対し、オーディオ信号に合わせてエフェクト処理を行う機能であるオーディオエフェクトカテゴリーと、
    前記ＡＶ信号に対し、主に映像の操作結果に応じてエフェクト処理を行う機能である映像操作エフェクトカテゴリーと、を含む複数のエフェクトカテゴリーの中から、いずれかのエフェクトカテゴリーを選択するエフェクトカテゴリー選択手段と、
    前記オーディオ信号に対してのみ前記エフェクト処理を行うオーディオモード、前記ビデオ信号に対してのみ前記エフェクト処理を行うビデオモード、前記オーディオ信号および前記ビデオ信号に対して前記エフェクト処理を行うオーディオ・ビデオモード、のうち少なくとも２つのモードを含む複数のエフェクトモードの中から、１のエフェクトモードを選択するエフェクトモード選択手段と、
    前記エフェクト処理を実行させるためのエフェクト操作を含む各種編集操作を行う操作手段からの操作信号を受ける操作信号受信手段と、
    表示制御を行わせる表示制御手段と、
    前記エフェクトカテゴリー選択手段および前記エフェクトモード選択手段の選択結果、並びに前記操作手段の操作結果に基づいて、前記オーディオ信号および前記ビデオ信号の少なくとも一方に対し前記エフェクト処理を行うエフェクト処理手段と、を備え、
    前記表示制御手段は、前記エフェクトカテゴリー選択手段の選択結果に応じて、前記エフェクト操作を行うためのエフェクト操作画面の仕様を変更させる一方、前記エフェクトモード選択手段の選択結果に応じては、前記エフェクト操作画面の仕様を変更させないことを特徴とするＡＶ編集システム。
11. 請求項１に記載のＡＶ編集装置、請求項９に記載のＡＶ処理装置、請求項１０に記載のＡＶ編集システムのいずれかに用いられ、前記操作手段として機能する操作装置。
12. オーディオ信号またはビデオ信号であるＡＶ信号に対し、オーディオ信号に合わせてエフェクト処理を行う機能であるオーディオエフェクトカテゴリーと、
    前記ＡＶ信号に対し、主に映像の操作結果に応じてエフェクト処理を行う機能である映像操作エフェクトカテゴリーと、を含む複数のエフェクトカテゴリーの中から、いずれかのエフェクトカテゴリーを選択する工程と、
    前記オーディオ信号に対してのみ前記エフェクト処理を行うオーディオモード、前記ビデオ信号に対してのみ前記エフェクト処理を行うビデオモード、前記オーディオ信号および前記ビデオ信号に対して前記エフェクト処理を行うオーディオ・ビデオモード、のうち少なくとも２つのモードを含む複数のエフェクトモードの中から、１のエフェクトモードを選択する工程と、
    前記エフェクト処理を実行させるためのエフェクト操作を含む各種編集操作を行う操作手段からの操作信号を受ける工程と、
    表示制御を行わせる工程と、
    前記エフェクトカテゴリーおよび前記エフェクトモードの選択結果、並びに前記操作手段の操作結果に基づいて、前記オーディオ信号および前記ビデオ信号の少なくとも一方に対し前記エフェクト処理を行う工程と、を備え、
    前記表示制御を行わせる工程では、前記エフェクトカテゴリーの選択結果に応じて、前記エフェクト操作を行うためのエフェクト操作画面の仕様を変更させる一方、前記エフェクトモードの選択結果に応じては、前記エフェクト操作画面の仕様を変更させないことを特徴とするＡＶ編集方法。
13. コンピュータを、請求項１に記載のＡＶ編集装置、請求項９に記載のＡＶ処理装置、請求項１０に記載のＡＶ編集システムのいずれかにおける各手段として機能させるためのプログラム。

Images