JP2007300516A - リップシンク信号発生装置 - Google Patents

Abstract

【課題】本発明は、リップシンク信号発生装置に関し、例えばリップシンクの調整、検査に適用して、映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができるようにする。
【解決手段】本発明は、リップシンク映像信号による映像を基準のタイミングで切り換えるようにして、この基準タイミングより一定時間だけ早いタイミングと、この基準タイミングと同一のタイミングと、この基準タイミングより一定時間だけ遅いタイミングとで、順次タイミングを切り換えて、リップシンク用映像信号による映像が切り換わる毎に、リップシンク用音声信号の信号レベルを立ち上げる。
【選択図】 図１

Description

本発明は、リップシンク信号発生装置に関し、例えばリップシンクの調整、検査に適用することができる。本発明は、リップシンク映像信号による映像を基準のタイミングで切り換えるようにして、この基準タイミングより一定時間だけ早いタイミングと、この基準タイミングと同一のタイミングと、この基準タイミングより一定時間だけ遅いタイミングとで、順次タイミングを切り換えて、リップシンク用映像信号による映像が切り換わる毎に、リップシンク用音声信号の信号レベルを立ち上げることにより、映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができるようにする。

従来、放送局等においては、映像信号及び音声信号が異なる伝送路により伝送される等により、映像と音声との間に時間のずれが発生する。このため放送局においては、テスト用の映像信号及び音声信号（以下、リップシンク映像信号及びリップシンク音声信号と呼ぶ）を送信側より受信側に伝送すると共に、これらの伝送されたリップシンク信号を受信側で解析することにより、時間のずれを測定、補正し、リップシンクを図るようになされている。

このようなリップシンクに関して、従来、専用装置を送受信側にそれぞれ配置して時間のずれを測定する方法と、モニタ装置を用いて視覚と聴覚とにより時間のずれを検出する方法があり、専用装置による場合には、数ミリ秒単位で時間のずれを検出することができる。

このような専用装置に関して、例えば特開平１０−２８５４８３号公報には、専用装置の構成を簡略化する方法が提案されている。

これに対してモニタ装置を用いて視覚と聴覚とにより時間のずれを検出する方法に関しては、特開２００３−４７０３０号公報等に種々の工夫が提案されている。

ここでこの特開２００３−４７０３０号公報に提案の方法は、静止物体に移動物体が徐々に接近する映像を表示するようにリップシンク映像信号を生成し、静止物体に移動物体が接触したタイミングでリップシンク音声信号を立ち上げ、これによりモニタ装置を用いて、視覚、聴覚により時間のずれを簡易に確認することができるようになされている。

ところでこのようにモニタ装置を用いて視覚、聴覚により時間のずれを確認する場合に、検出精度を向上することができれば、一段と使い勝手を向上することができ、便利であると考えられる。特に、従来方法では、オペレータの個人差により時間ずれの検出精度が大きく変化し、また確認を繰り返すうちにオペレータの視覚、聴覚の感覚が麻痺して時間ずれの検出精度が著しく低下する傾向がある。
特開平１０−２８５４８３号公報 特開２００３−４７０３０号公報

本発明は以上の点を考慮してなされたもので、映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができるリップシンク信号発生装置を提案しようとするものである。

かかる課題を解決するため請求項１の発明は、リップシンク用映像信号を生成する映像信号発生回路と、前記リップシンク用映像信号に対応するリップシンク用音声信号を生成する音声信号発生回路とを有するリップシンク信号発生装置に適用して、前記映像信号発生回路は、所定の基準タイミングで、前記リップシンク用映像信号による映像を切り換え、前記音声信号発生回路は、前記基準タイミングより一定時間だけ早いタイミングと、前記基準タイミングと同一のタイミングと、前記基準タイミングより前記一定時間だけ遅いタイミングとで、順次循環的にタイミングを切り換えて、前記リップシンク用映像信号による映像が切り換わる毎に、前記リップシンク用音声信号の信号レベルを立ち上げる。

また請求項２の発明は、請求項１の構成において、前記リップシンク用映像信号による映像の切り換わりが、一定の時間間隔の繰り返しであるようにする。

また請求項３の発明は、請求項１の構成において、前記リップシンク用音声信号による信号レベルの立ち上がりが、一定の時間間隔の繰り返しであるようにする。

請求項１の構成によれば、映像信号ＳＶの表示切り換えに係るタイミングに対して、一定時間だけ早いタイミング、同一のタイミング、一定時間だけ遅れたタイミングを順次繰り返して音声信号が立ち上がる。この場合、単に同一のタイミングで繰り返し音声信号を立ち上げている場合に比して、慣れによる感覚の麻痺を防止することができる。また時間ずれの検出精度、時間ずれの検出感度の個人差についても低減することができる。これによりオペレータの視覚、聴覚における感覚の麻痺を防止して時間ずれの検出精度の低下を防止することができ、またオペレータの個人差も少なくすることができ、これらにより映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができる。

また請求項２の構成によれば、請求項１の構成において、前記リップシンク用映像信号による映像の切り換わりが、一定の時間間隔の繰り返しであることから、一定の時間間隔による映像の切り換わりに対する、リップシンク音声信号の信号レベルの立ち上がりのタイミングの変化を把握して、映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができる。

また請求項３の構成によれば、請求項１の構成において、前記リップシンク用音声信号による信号レベルの立ち上がりが、一定の時間間隔の繰り返しであることから、一定の時間間隔によるリップシンク音声信号の信号レベルの立ち上がりに対する、映像の切り換わりのタイミングの変化を把握して、映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができる。

本発明によれば、映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができる。

以下、適宜図面を参照しながら本発明の実施例を詳述する。

（１）実施例の構成
図２は、本発明の実施例に係るリップシンク信号発生装置を示すブロック図である。このリップシンク信号発生装置１は、モニタ装置２を用いて視覚と聴覚により映像と音声の時間ずれを検出する場合に適用される。これによりこのリップシンク信号発生装置１は、被測定対象３である伝送路、信号処理回路等を介してリップシンク信号ＳＬが伝送され、伝送端でリップシンク信号ＳＬがモニタ装置２によりモニタされる。なおここでこのモニタ装置２には、例えばハイビジョンテレビのテレビジョン受像機等が適用される。

ここでこのリップシンク信号発生装置１において、映像信号発生回路４は、図示しないトリガ信号発生回路から出力されるトリガ信号ＳＴを基準にして、リップシンク映像信号ＳＶを生成して出力する。また音声信号発生回路５は、トリガ信号発生回路から出力されるトリガ信号ＳＴを基準にして、リップシンク音声信号ＳＡを生成して出力する。

ここで図１は、これら映像信号発生回路４、音声信号発生回路５から出力されるリップシンク映像信号ＳＶ、リップシンク音声信号ＳＡを示すタイミングチャートである。映像信号発生回路４は、一定の時間間隔Ｔで、リップシンク映像信号ＳＶによる映像を切り換える。映像信号発生回路４は、この一定の時間間隔Ｔによる映像の切り換えを、順次、循環的に、３種類の映像を一定時間表示するようにして実行する。

すなわちこれら３種類の映像は、図１（Ａ１）、（Ａ２）、（Ａ３）により示すように、黒色による背景の画面左側、画面中央、画面右側に、それぞれ白色の矩形形状を表示する映像である。またこれら３種類の映像は、各表示の開始のタイミングに対する、対応するリップシンク用音声信号ＳＡの立ち上がりの時間ずれを示す表示が、各矩形形状の表示領域の上に形成される。

これに対して音声信号発生回路５は、リップシンク用映像信号ＳＶによる映像の切り換えの基準タイミングより一定時間だけ早いタイミングと、この基準タイミングと同一のタイミングと、この基準タイミングより一定時間だけ遅いタイミングとで、順次循環的にタイミングを切り換えて、リップシンク用映像信号ＳＶによる映像の切り換わり毎に、リップシンク用音声信号ＳＡの信号レベルを立ち上げる。なおここでリップシンク音声信号は、例えば周波数１［ｋＨｚ］等の単一周波数の正弦波信号である。

（２）実施例の動作
以上の構成において、このリップシンク信号発生装置１では（図１及び図２）、被測定対象である伝送路、各種設備にリップシンク用映像信号ＳＶ及びリップシンク用音声信号ＳＡを出力し、これら伝送路、各種設備から出力されるリップシンク用映像信号ＳＶ及びリップシンク用音声信号ＳＡをモニタ装置に入力する。リップシンク信号発生装置１では、このモニタ装置２によりリップシンク用映像信号ＳＶ及びリップシンク用音声信号ＳＡをモニタして視覚及び聴覚によりリップシンク用映像信号ＳＶ及びリップシンク用音声信号ＳＡの時間ずれを把握することになる。

このリップシンク信号発生装置１では、一定の時間間隔Ｔによる基準のタイミングで、リップシンク用映像信号ＳＶによる映像が切り換えられ、画面左側に矩形形状が表示され、一定時間の経過によりこの矩形形状の表示が停止される。また続いて画面中央に矩形形状が表示され、一定時間の経過によりこの矩形形状の表示が停止され、さらに画面右側に矩形形状が表示され、一定時間の経過によりこの矩形形状の表示が停止される。また続いて画面左側における矩形形状の表示に戻って、同様の表示の繰り返しにより一定の時間間隔Ｔによる基準のタイミングで、順次映像が切り換えられる。

これに対してリップシンク音声信号ＳＡは、映像信号ＳＶに係る一定の時間間隔によるタイミングに対して、一定時間ΔＴだけ早いタイミング、同一のタイミング、一定時間ΔＴだけ遅れたタイミングが順次循環的に選択されて、対応する映像の切り換え表示毎に、選択したタイミングで信号レベルが立ち上がる。

ここでこのように映像信号ＳＶの表示切り換えに係る基準のタイミングに対して、一定時間ΔＴだけ早いタイミング、同一のタイミング、一定時間ΔＴだけ遅れたタイミングを繰り返しして音声信号を立ち上げる場合には、単に同一のタイミングで繰り返し音声信号を立ち上げている場合に比して、慣れによる感覚の麻痺を防止することができる。また時間ずれの検出精度、時間ずれの検出感度の個人差についても低減することができる。

これによりこの実施例では、オペレータの視覚、聴覚における感覚の麻痺を防止して時間ずれの検出精度の低下を防止することができ、またオペレータの個人差も少なくすることができ、これらにより映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができる。

またこの実施例では、この映像信号ＳＶの表示切り換えに係る基準のタイミングが一定の時間間隔Ｔに設定され、これによりオペレータは、一定の時間間隔による映像の切り換わりに対する、リップシンク音声信号の信号レベルの立ち上がりのタイミングの変化を把握して、すなわち視覚を介してリズムを取りながら、聴覚を介して把握されるリズムの変化を把握して、映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができる。

（３）実施例の効果
以上の構成によれば、リップシンク映像信号による映像を基準のタイミングで切り換えるようにして、この基準タイミングより一定時間だけ早いタイミングと、この基準タイミングと同一のタイミングと、この基準タイミングより一定時間だけ遅いタイミングとで、順次タイミングを切り換えて、リップシンク用映像信号による映像が切り換わる毎に、リップシンク用音声信号の信号レベルを立ち上げることにより、映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができる。

またこのときこの映像による基準のタイミングを一定の時間間隔とすることにより、一定の時間間隔による映像の切り換わりに対する、リップシンク音声信号の信号レベルの立ち上がりのタイミングの変化を把握して、映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができる。

図３は、図２との対比により本発明の実施例２に係るリップシンク信号発生装置によるリップシンク用映像信号及びリップシンク用音声信号を示すタイムチャートである。この実施例では、リップシンク用音声信号における信号レベルの立ち上がりが一定の時間間隔Ｔに設定されている点を除いて、実施例１と同一に構成される。

この実施例のように映像信号における映像の切り換わりに代えて、リップシンク用音声信号における信号レベルの立ち上がりを一定の時間間隔とするようにしても、実施例１と同様の効果を得ることができる。またこの場合、一定の時間間隔によるリップシンク音声信号の信号レベルの立ち上がりに対する、映像の切り換わりのタイミングの変化を把握して、すなわち聴覚によりリズムを取りながら、視覚を介して把握されるリズムの変化を把握して、映像と音声の時間のずれを視覚と聴覚により従来に比して精度よく確認することができる。

なお上述の実施例においては、矩形形状を表示して映像を切り換える場合について述べたが、本発明はこれに限らず、要は映像によるタイミングを把握することができればよく、種々の形状、記号等を一時的に表示してもよく、さらには画面全体の色を切り換えるようにしてもよい。

また上述の実施例においては、単にリップシンク映像信号、リップシンク音声信号を生成する構成に本発明を適用する場合について述べたが、本発明はこれに限らず、このようにして生成したリップシンク映像信号、リップシンク音声信号により時間のずれを検出して自動補正する場合等にも広く適用することができる。

本発明は、リップシンク信号発生装置に関し、例えばリップシンクの調整、検査に適用することができる。

本発明の実施例１に係るリップシンク信号発生装置によるリップシンク用映像信号及びリップシンク用音声信号を示すタイミングチャートである。 本発明の実施例１に係るリップシンク信号発生装置を示すブロック図である。 本発明の実施例２に係るリップシンク信号発生装置によるリップシンク用映像信号及びリップシンク用音声信号を示すタイミングチャートである。

符号の説明

１……リップシンク信号発生装置、３……被測定対象、４……映像信号発生回路、５……音声信号発生回路

Claims (3)

1. リップシンク用映像信号を生成する映像信号発生回路と、前記リップシンク用映像信号に対応するリップシンク用音声信号を生成する音声信号発生回路とを有するリップシンク信号発生装置において、
   前記映像信号発生回路は、
   所定の基準タイミングで、前記リップシンク用映像信号による映像を切り換え、
   前記音声信号発生回路は、
   前記基準タイミングより一定時間だけ早いタイミングと、前記基準タイミングと同一のタイミングと、前記基準タイミングより前記一定時間だけ遅いタイミングとで、順次循環的にタイミングを切り換えて、前記リップシンク用映像信号による映像が切り換わる毎に、前記リップシンク用音声信号の信号レベルを立ち上げる
   ことを特徴とするリップシンク信号発生装置。
2. 前記リップシンク用映像信号による映像の切り換わりが、一定の時間間隔の繰り返しである
   ことを特徴とする請求項１に記載のリップシンク信号発生装置。
3. 前記リップシンク用音声信号による信号レベルの立ち上がりが、一定の時間間隔の繰り返しである
   ことを特徴とする請求項１に記載のリップシンク信号発生装置。
   

Images