JP3727736B2 - Video / audio signal generator for time difference detection between video and audio - Google Patents

Video / audio signal generator for time difference detection between video and audio Download PDF

Info

Publication number
JP3727736B2
JP3727736B2 JP29621696A JP29621696A JP3727736B2 JP 3727736 B2 JP3727736 B2 JP 3727736B2 JP 29621696 A JP29621696 A JP 29621696A JP 29621696 A JP29621696 A JP 29621696A JP 3727736 B2 JP3727736 B2 JP 3727736B2
Authority
JP
Japan
Prior art keywords
video
audio
time difference
sound
signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP29621696A
Other languages
Japanese (ja)
Other versions
JPH10145645A (en
Inventor
幸一 黒住
清孝 岡田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Japan Broadcasting Corp
Original Assignee
Japan Broadcasting Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Japan Broadcasting Corp filed Critical Japan Broadcasting Corp
Priority to JP29621696A priority Critical patent/JP3727736B2/en
Publication of JPH10145645A publication Critical patent/JPH10145645A/en
Application granted granted Critical
Publication of JP3727736B2 publication Critical patent/JP3727736B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Television Receiver Circuits (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、テレビジョンの番組製作や中継回線によって生じる映像と音声の時間的なずれ(時間差)を検知するために使用する映像信号・音声信号発生装置に関する。本発明装置を用いて映像と音声の時間差が検知されたときには、映像または音声の系統に挿入される遅延回路により時間差がゼロになるように調整することが可能になる。
【0002】
【従来の技術】
従来、上記生じた映像と音声の時間差を検知するために、テレビジョンカメラの前に人が立って、声を出したり、手を叩いたりして、主観的に映像と音声の時間差がゼロになるように両者の時間的位置(以下、再生時刻という)を合わせていた。
【0003】
また、上記時間差を定量的に測定しようとするものとして、溝口ほか、「映像音声遅延量差測定器の開発」、1992年度電気関係学会東海支部連合大会、527や、あるいは本願人の出願に係る特開平5−219459号公報に記載のものがある。
【0004】
【発明が解決しようとする課題】
しかし、従来技術として上述した最初の方法、すなわち主観的に合わせる方法は、黒住ほか、「テレビの映像と音声の相対時間差に関する検討」、日本音響学会平成8年春季研究発表会講演論文、3−3−6から分かるように、映像と音声の再生時刻が主観的に合っていると判断される範囲は170msもあり、上記方法では映像と音声の再生時刻を主観的に正確に合わせることは困難である。言い換えると、人間の異なる感覚(視覚と聴覚)を同時に用いて、映像と音声の再生時刻の差を正確に判断することは困難である。
【0005】
また、上記溝口ほか、により発表された「映像音声遅延量差測定器の開発」のものは、映像と音声が同時に1回しか提示されないので、この1回の提示では、映像と音声の再生時刻の差を主観的に正確に判断することは困難である。
【0006】
さらに、特開平5−219459号公報に記載のものは、中継現場から映像と、これに時間的に同期させた音声信号を伝送し、受信側ではこの映像、音声を検出装置で検出制御することにより、映像と音声のずれを、映像モニタで視覚的に観察し、短時間で定量的に受信側の音声および/または映像の遅延量を調整して両者の同期をとるものであるが、この方法においても、最終的に映像は目で、音声は耳でという人間の異なる感覚を同時に用いて、映像と音声の再生時刻の差を判断しなければならないという上述した課題を含んでいる。
【0007】
【課題を解決するための手段】
上述したように、人間の異なる感覚を同時に用いて、映像と音声の再生時刻の差を判断する方法では正確な判断が困難であるので、本発明では、等時間間隔で発光する光源を用いて、その時間間隔(タイミングあるいはテンポ)を人間が一旦、脳の中に記憶する方法を採用する。これによれば、等時間間隔で発光する光源を用いて記憶した時間間隔で発生する音源の発生時刻を聴覚のみを用いて判断することができる。
【0008】
同様に、等時間間隔で音声を発生する音源を用いて、その時間間隔(タイミングあるいはテンポ)を一旦記憶するようにすると、その記憶した時間間隔で発光する光源の発光時刻を視覚のみを用いて判断することができる。このように聴覚あるいは視覚のいずれか一方の感覚のみを用いて、映像と音声の時間差を判断することができるので、視覚と聴覚を同時に用いて判断する従来の場合と比較して、精度の高い判断をすることができる。
【0009】
これは、例えば、田中ほか、「空虚時間の知覚における時間誤差」、日本音響学会平成4年度春季研究発表会講演論文集、平成4年3月、1−6−8によれば、本発明における時間感覚(タイミングあるいはテンポ)が800msの場合には誤差約10ms以下の精度で判断できることを示している。
【0010】
すなわち、本発明による映像信号・音声信号発生装置は、光源を等時間間隔で複数回発光させた後、次の発光のタイミングで音源から音声を発生させ、前記発光状況および前記音声の発生状況を、テレビジョンカメラおよびマイクロホンによりそれぞれ撮像および収音し、映像と音声の時間差検知用のそれぞれ映像信号および音声信号を発生させるように構成したことを特徴とするものである。
【0011】
また、本発明による映像信号・音声信号発生装置は、前記音声の発生時には前記発光を停止するように構成したことを特徴とするものである。
【0012】
また、本発明による映像信号・音声信号発生装置は、音源から等時間間隔で複数回音声を発生させた後、次の音声発生のタイミングで光源を発光させ、前記音声の発生状況および前記発光状況を、マイクロホンおよびテレビジョンカメラによりそれぞれ収音および撮像し、映像と音声の時間差検知用のそれぞれ音声信号および映像信号を発生させるように構成したことを特徴とするものである。
【0013】
また、本発明による映像信号・音声信号発生装置は、前記光源の発光時には前記音声の発生を停止するように構成したことを特徴とするものである。
【0014】
また、本発明による映像信号・音声信号発生装置は、テレビジョンカメラによる撮像およびマイクロホンによる収音によって得られるそれぞれ映像信号および音声信号の少なくとも一方は、人工的手法によって直接に得られる信号であることを特徴とするものである。
【0015】
【発明の実施の形態】
以下に添付図面を参照し、発明の実施の形態に基づいて本発明を詳細に説明する。
図1は、本発明装置の第1の実施の形態を示し、中でも、(a)、(b)はそれぞれ実施例1および2である。
【0016】
図1(a)、(b)において、1はタイミングパルス発生器、2は光源、3は最終パルス通過回路、4は音源、および5は最終パルス遮断回路である。
その動作は、まず図1(a)(実施例1)の場合、タイミングパルス発生器において、例えば、1秒間隔で4個のパルスを発生させる。光源2をこの4個のパルスにそれぞれ同期させて発光させる。他方、最終パルス通過回路3では到来した最終の4個目のパルスのみを通過させ、その最後のパルスに同期させて音源4から音声信号を発生させる。光源2としては、例えば、発光ダイオード(LED:Light Emitting Diode)を、音声信号としては、例えば、1kHzの純音を用いることができる。
【0017】
なお、図1(b)(実施例2)では、音源4から音声信号を発生させるときは光源2の発光を停止させるように、タイミングパルス発生器1と光源2との間に最後のパルス(4個目のパルス)を遮断する最終パルス遮断回路5を介挿させている。
【0018】
図2は、本発明装置の第2の実施の形態を示し、中でも(a)、(b)はそれぞれ実施例3および4である。
【0019】
図2(a)、(b)においては、図1の場合と同じ構成要素に対して、図1で付したものと同じ符号を付して示している。
その動作は、まず図2(a)(実施例3)の場合、タイミングパルス発生器1において、例えば、1秒間隔で4個のパルスを発生させ、それに同期させて、例えば、20msの間継続する500Hzの音声信号を音源4から発生させる。他方、最終パルス通過回路3では到来した最後の4個目のパルスのみを通過させ、この最後のパルスに同期させて光源2を発光させる。
【0020】
なお、図2(b)(実施例4)では、光源2が発光するときは音源4からの500Hzの音声信号の発生を停止するように、タイミングパルス発生器1と音源2との間に最後のパルス(4個目のパルス)を遮断する最終パルス遮断回路5を介挿させている。
【0021】
以上のようにして生じさせた発光、および発生させた音声は、図1(a)(実施例1)の場合を例にとって図3に示すように、発光ダイオードなど発光源2の発光状況をテレビジョンカメラ6により、またスピーカなど音源4からの音声の発生状況をマイクロホン7によりそれぞれ映像信号および音声信号に変換して、中継回路など映像と音声の時間差が生じる伝送系へ時間差検知用の基準信号として送出する。
【0022】
このように、時間差検知用の基準信号は、結局は、映像信号および音声信号であるから、これらの信号を得るのに、例えば、コンピュータグラフィック(CG)や可聴周波発振器を用いることにより、上述例のようにテレビジョンカメラやマイクロホンを介してでなく、人工的かつより直接的な方法で、時間差検知用の映像信号・音声信号を発生させるようにしてもよい。
【0023】
なお、本発明装置によって得られる映像信号・音声信号にとって重要なことは、例えば、発光している発光ダイオードが撮像されているということではなく、単に発光して明るくなっているという状況を示す情報が得られていればよく、その意味で、後者の人工的手法の場合、常時黒レベルの画像信号を送出し、その中で等時間間隔で白レベルの画像信号を送出するようにすればよい。また、音声信号についても同様の考え方が適用できる。
【0024】
本発明装置によって発生された映像信号・音声信号は、それらが送出される伝送系(実際には、映像信号と音声信号とでは別ルートをとって伝送される)において相互間に時間差が生じる。いま、図1(a)の装置によって発生された映像信号・音声信号に基づいて到達時間差を検知するには次のようにする。
【0025】
すなわち、受信側においてまず、テレビジョンの画像モニタおよび音声モニタを用意する。図1(a)(実施例1)の装置からの発光および音声の発生を表わす映像信号および音声信号を用意した上記それぞれのモニタにより、それらのタイミングを知覚できるようにする。本例の場合、映像モニタに映出される発光の等時間間隔(タイミングあるいはテンポ)を、時間差を検知する人(担当者)が、自分自身の脳の中に記憶する。すなわち、人間の脳の中にはある時間間隔のテンポが形成されることになる。このテンポに合致したタイミングで音声モニタから音声が発生すれば、映像信号と音声信号との時間差がないことになる。
【0026】
しかし、もし、テンポからはずれて音声が発生したならば、映像、音声両信号間には時間差があることになり、映像および音声のいずれかの伝送系に挿入される時間差補償用の遅延回路の遅延量を調整して時間差ゼロに調整する。この方法によれば、上記(課題を解決するための手段の項)に紹介した文献に記載のように、きわめて高精度に時間差を検知することができ、従ってまた、その時間差をゼロに調整することができる。
【0027】
本発明による映像と音声の時間差検知用映像信号・音声信号発生装置は、上述した第1、第2の実施形態(それぞれ、実施例1;実施例2、および実施例3;実施例4)に限定されるものではない。例えば、上記それぞれの実施例(実施例1〜4)において、実施例1および2(それぞれ図1(a)および図1(b)参照)の場合には音源4に並置して別の光源を設け、この光源が音源4からの音声の発生と同時に発光するようにしてもよい。
【0028】
また、実施例3および4(それぞれ図2(a)および図2(b)参照)の場合には光源2に並置して別の音源を設け、この音源が光源2の発光と同時に音声を発生するようにしてもよい。なお、この場合には、別の音源から発生する音声を上記音源4から発生する音声と区別する(音声伝送路に多重伝送するとき必要)ために、例えば、周波数1kHz、継続時間500ms(音源4からの音声は、周波数500Hz、継続時間20ms)とする。
【0029】
また、本発明装置によって発生する映像信号と音声信号は、これらをセットとしてただ1回の発生で終わらせるのでなく、同一セットの信号を繰り返し発生させることにより、時間差の検知、時間合わせに一層便利なものとすることができる。さらにまた、上記映像信号と音声信号は、テレビジョン映像信号の同期信号に同期して発生させるのが実際的である。
【0030】
最後に、本発明装置においては、等時間間隔で複数回発生する発光(または、音声の発生)と、次のタイミングで発生する音声の発生(または、発光)とが同時に発生する必要は全くなく、それは、本発明が発光と音声の発生を知覚するという人間の異なる感覚(視覚と聴覚)を同時に用いて時間差を知覚するものではないからである。
【0031】
【発明の効果】
本発明装置を用いて、映像信号と音声信号の時間差を測定すれば、受信側に、何らの物理的な時間差測定装置を必要としないだけでなく、従来のように、視覚と聴覚という人間の異なる感覚に基づいて時間差を検知するのではなく、例えば視覚のみ、または、聴覚のみといったいずれか一方の感覚のみ(比較の基準は、本発明装置から送られて来る等時間間隔信号に基づいて人間の脳内にタイミングとして記憶されている)に基づいて時間差を主観的に検知するので精度の高い検知が可能となる。
【0032】
また、本発明装置を用いれば、精度の高い時間差の検知が可能であることから、映像と音声を高精度に時間合わせすることが可能になる。
【0033】
さらに、本発明装置は、図1(a),(b)、および図2(a),(b)から分かるように、きわめて簡単に構成することができる。
【図面の簡単な説明】
【図1】本発明装置の第1の実施の形態を示している。
【図2】本発明装置の第2の実施の形態を示している。
【図3】図1または図2によって発生させた、発光状況および音声の発生状況を、それぞれ映像信号および音声信号に変換する過程を示している。
【符号の説明】
1 タイミングパルス発生器
2 光源(発光ダイオード)
3 最終パルス通過回路
4 音源(スピーカ)
5 最終パルス遮断回路
6 テレビジョンカメラ
7 マイクロホン
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a video signal / audio signal generator used to detect a time lag (time difference) between video and audio caused by television program production or a relay line. When a time difference between video and audio is detected using the apparatus of the present invention, it is possible to adjust the time difference to be zero by a delay circuit inserted in the video or audio system.
[0002]
[Prior art]
Conventionally, in order to detect the time difference between the generated video and audio, a person stands in front of the television camera and makes a voice or claps his hands, subjectively, the time difference between the video and audio is zero. Both time positions (hereinafter referred to as reproduction times) were matched.
[0003]
In addition, as a measure to measure the time difference quantitatively, Mizoguchi et al., “Development of Video / Audio Delay Difference Measuring Device”, 1992 Institute of Electrical Engineers of Tokai Branch, 527, or related to the applicant's application. There exists a thing of Unexamined-Japanese-Patent No. 5-219459.
[0004]
[Problems to be solved by the invention]
However, the first method described above as the prior art, that is, the method of subjectively matching is the method of Kurosumi et al., “Study on the relative time difference between TV video and audio”, Acoustical Society of Japan, Spring 2008 presentation paper, 3- As can be seen from 3-6, the range in which the playback time of video and audio is judged to be subjectively matched is 170 ms, and it is difficult to accurately match the playback time of video and audio with the above method. It is. In other words, it is difficult to accurately determine the difference between video and audio playback times using different human senses (visual and auditory) simultaneously.
[0005]
In addition, in the “development of video / audio delay difference measuring device” announced by Mizoguchi et al., Video and audio are presented only once at the same time. It is difficult to accurately judge the difference between them subjectively.
[0006]
Furthermore, the device described in Japanese Patent Laid-Open No. 5-219459 transmits a video from a relay site and an audio signal temporally synchronized therewith, and the receiving side detects and controls the video and audio by a detection device. By visually observing the difference between video and audio on a video monitor and adjusting the amount of audio and / or video delay on the receiving side quantitatively in a short time, the two are synchronized. The method also includes the above-described problem that it is necessary to determine the difference between the reproduction time of the video and the sound by using simultaneously different human senses that the video is finally an eye and the sound is an ear.
[0007]
[Means for Solving the Problems]
As described above, since it is difficult to accurately determine the difference between the playback time of video and audio using different human senses simultaneously, the present invention uses a light source that emits light at equal time intervals. A method in which a human once memorizes the time interval (timing or tempo) in the brain is adopted. According to this, the generation time of the sound source generated at the time interval stored using the light source that emits light at equal time intervals can be determined using only auditory sense.
[0008]
Similarly, when a sound source that generates sound at equal time intervals is used to temporarily store the time interval (timing or tempo), the light emission time of the light source that emits light at the stored time interval is used only for vision. Judgment can be made. In this way, the time difference between video and audio can be determined using only one of auditory and visual senses, so it is more accurate than the conventional case of determining using visual and auditory simultaneously. Judgment can be made.
[0009]
For example, according to Tanaka et al., “Time Error in Perception of Empty Time”, Proceedings of the Acoustical Society of Japan 1992 Spring Research Presentation, March 1992, 1-6-8, When the time sensation (timing or tempo) is 800 ms, it can be determined with an accuracy of an error of about 10 ms or less.
[0010]
That is, the video signal / audio signal generator according to the present invention emits sound from a sound source at the next light emission timing after the light source emits light a plurality of times at equal time intervals, and the light emission status and the sound generation status are indicated. The television camera and the microphone are respectively picked up and picked up to generate a video signal and an audio signal for detecting a time difference between the video and the audio, respectively.
[0011]
The video signal / audio signal generator according to the present invention is characterized in that the light emission is stopped when the sound is generated.
[0012]
Also, the video signal / audio signal generating apparatus according to the present invention generates a sound a plurality of times at equal time intervals from a sound source, and then causes the light source to emit light at the next sound generation timing, and the sound generation status and the light emission status Are picked up and picked up by a microphone and a television camera, respectively, to generate an audio signal and a video signal for detecting a time difference between the video and audio, respectively.
[0013]
The video signal / audio signal generator according to the present invention is characterized in that the generation of the audio is stopped when the light source emits light.
[0014]
The video signal / audio signal generator according to the present invention is such that at least one of the video signal and the audio signal obtained by imaging by a television camera and sound collection by a microphone is a signal obtained directly by an artificial method. It is characterized by.
[0015]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, the present invention will be described in detail based on an embodiment of the invention with reference to the accompanying drawings.
FIG. 1 shows a first embodiment of the device of the present invention, and (a) and (b) are Examples 1 and 2, respectively.
[0016]
1A and 1B, 1 is a timing pulse generator, 2 is a light source, 3 is a final pulse passage circuit, 4 is a sound source, and 5 is a final pulse cutoff circuit.
As for the operation, first, in the case of FIG. 1A (Example 1), for example, four pulses are generated at intervals of one second in the timing pulse generator. The light source 2 emits light in synchronization with the four pulses. On the other hand, the final pulse passing circuit 3 passes only the final fourth pulse that has arrived, and generates a sound signal from the sound source 4 in synchronization with the last pulse. For example, a light emitting diode (LED) can be used as the light source 2, and a pure sound of 1 kHz can be used as the audio signal.
[0017]
In FIG. 1B (Example 2), the last pulse (between the timing pulse generator 1 and the light source 2 is stopped so as to stop the light emission of the light source 2 when the sound signal is generated from the sound source 4. A final pulse cut-off circuit 5 for cutting off the fourth pulse) is inserted.
[0018]
FIG. 2 shows a second embodiment of the device of the present invention, in which (a) and (b) are Examples 3 and 4, respectively.
[0019]
2A and 2B, the same components as those in FIG. 1 are denoted by the same reference numerals as those in FIG.
In the case of FIG. 2A (Embodiment 3), the operation is first generated, for example, by generating four pulses at intervals of 1 second in the timing pulse generator 1, and continuing for, for example, 20 ms. A sound signal of 500 Hz is generated from the sound source 4. On the other hand, the last pulse passing circuit 3 passes only the last fourth pulse that has arrived, and the light source 2 emits light in synchronization with the last pulse.
[0020]
In FIG. 2B (Example 4), when the light source 2 emits light, the generation of a 500 Hz audio signal from the sound source 4 is stopped between the timing pulse generator 1 and the sound source 2. The final pulse cut-off circuit 5 for cutting off the pulse (the fourth pulse) is inserted.
[0021]
As shown in FIG. 3, the light emission generated and the sound generated as described above are shown in FIG. 3 taking the case of FIG. The sound generation state from the sound source 4 such as a speaker is converted into a video signal and an audio signal by the John camera 6 and the microphone 7 respectively, and a reference signal for time difference detection is transmitted to a transmission system such as a relay circuit where a time difference between the video and the audio occurs. Send out as
[0022]
Thus, since the reference signal for time difference detection is eventually a video signal and an audio signal, for example, by using a computer graphic (CG) or an audio frequency oscillator to obtain these signals, the above example is used. As described above, the video signal / audio signal for time difference detection may be generated by an artificial and more direct method, not through a television camera or a microphone.
[0023]
In addition, what is important for the video signal / audio signal obtained by the device of the present invention is not, for example, that a light emitting diode emitting light is imaged, but information indicating a situation where the light emitting diode simply emits light and becomes bright. In that sense, in the case of the latter artificial method, a black level image signal may be constantly transmitted, and a white level image signal may be transmitted at equal time intervals. . The same concept can be applied to audio signals.
[0024]
The video signal and the audio signal generated by the apparatus of the present invention cause a time difference between them in the transmission system (in fact, the video signal and the audio signal are transmitted through different routes). Now, in order to detect the arrival time difference based on the video signal / audio signal generated by the apparatus of FIG.
[0025]
That is, first, a television image monitor and an audio monitor are prepared on the receiving side. The timings can be perceived by each of the above-mentioned monitors prepared for video signals and audio signals representing the generation of light emission and sound from the apparatus of FIG. In the case of this example, the person (person in charge) who detects the time difference memorizes the equal time interval (timing or tempo) of the light emission projected on the video monitor in his own brain. That is, a tempo of a certain time interval is formed in the human brain. If audio is generated from the audio monitor at a timing that matches this tempo, there will be no time difference between the video signal and the audio signal.
[0026]
However, if audio is generated outside the tempo, there will be a time difference between the video and audio signals, and a delay circuit for compensating for the time difference inserted into either the video or audio transmission system. Adjust the delay amount to zero time difference. According to this method, the time difference can be detected with extremely high accuracy as described in the literature introduced in the above section (Means for Solving the Problems), and accordingly, the time difference is adjusted to zero. be able to.
[0027]
The video / audio signal generating device for detecting the time difference between video and audio according to the present invention is the same as that of the first and second embodiments described above (Example 1; Example 2 and Example 3; Example 4 respectively). It is not limited. For example, in each of the above examples (Examples 1 to 4), in the case of Examples 1 and 2 (see FIGS. 1 (a) and 1 (b), respectively), another light source is arranged in parallel with the sound source 4. This light source may emit light simultaneously with the generation of sound from the sound source 4.
[0028]
In the case of Examples 3 and 4 (see FIGS. 2 (a) and 2 (b), respectively), another sound source is provided in parallel with the light source 2, and this sound source generates sound simultaneously with the light emission of the light source 2. You may make it do. In this case, in order to distinguish the sound generated from another sound source from the sound generated from the sound source 4 (necessary when multiplexed transmission is performed on the sound transmission path), for example, the frequency is 1 kHz and the duration is 500 ms (sound source 4 ) Is assumed to have a frequency of 500 Hz and a duration of 20 ms.
[0029]
In addition, the video signal and audio signal generated by the device of the present invention are not only terminated once as a set, but are generated more and more conveniently by repeatedly generating the same set of signals. Can be. Furthermore, it is practical to generate the video signal and the audio signal in synchronization with the synchronization signal of the television video signal.
[0030]
Finally, in the device of the present invention, it is not absolutely necessary that the light emission (or sound generation) that occurs a plurality of times at equal time intervals and the sound generation (or light emission) that occurs at the next timing occur simultaneously. This is because the present invention does not perceive a time difference by simultaneously using different human senses (sight and hearing) of perceiving light emission and sound generation.
[0031]
【The invention's effect】
If the time difference between the video signal and the audio signal is measured using the device of the present invention, not only a physical time difference measuring device is not required on the receiving side, but also human beings of vision and hearing as in the past. Instead of detecting the time difference based on different sensations, only one sensation, for example, only visual sense or auditory sense (comparison is based on an equal time interval signal sent from the device of the present invention. The time difference is subjectively detected on the basis of the timing (which is stored in the brain as a timing), so that highly accurate detection is possible.
[0032]
Moreover, if the apparatus of the present invention is used, it is possible to detect a time difference with high accuracy, and therefore it is possible to time-align video and audio with high accuracy.
[0033]
Furthermore, as can be seen from FIGS. 1 (a) and 1 (b) and FIGS. 2 (a) and 2 (b), the device of the present invention can be configured very simply.
[Brief description of the drawings]
FIG. 1 shows a first embodiment of an apparatus according to the present invention.
FIG. 2 shows a second embodiment of the apparatus of the present invention.
FIG. 3 shows a process of converting a light emission state and a sound generation state generated according to FIG. 1 or FIG. 2 into a video signal and a sound signal, respectively.
[Explanation of symbols]
1 Timing pulse generator 2 Light source (light emitting diode)
3 Final pulse passage circuit 4 Sound source (speaker)
5 Final pulse cut-off circuit 6 Television camera 7 Microphone

Claims (5)

光源を等時間間隔で複数回発光させた後、次の発光のタイミングで音源から音声を発生させ、前記発光状況および前記音声の発生状況を、テレビジョンカメラおよびマイクロホンによりそれぞれ撮像および収音し、映像と音声の時間差検知用のそれぞれ映像信号および音声信号を発生させるように構成したことを特徴とする映像と音声の時間差検知用の映像信号・音声信号発生装置。  After causing the light source to emit light a plurality of times at equal time intervals, sound is generated from the sound source at the next light emission timing, and the light emission state and the sound generation state are respectively imaged and collected by a television camera and a microphone, A video signal / audio signal generator for detecting a time difference between video and audio, wherein the video signal and the audio signal are generated for detecting the time difference between video and audio, respectively. 請求項1記載の映像信号・音声信号発生装置において、前記音声の発生時には前記発光を停止するように構成したことを特徴とする映像と音声の時間差検知用の映像信号・音声信号発生装置。2. The video signal / audio signal generator according to claim 1, wherein the light emission is stopped when the sound is generated, and the time difference detection between video and audio is detected. 音源から等時間間隔で複数回音声を発生させた後、次の音声発生のタイミングで光源を発光させ、前記音声の発生状況および前記発光状況を、マイクロホンおよびテレビジョンカメラによりそれぞれ収音および撮像し、映像と音声の時間差検知用のそれぞれ音声信号および映像信号を発生させるように構成したことを特徴とする映像と音声の時間差検知用の映像信号・音声信号発生装置。  After generating sound several times at regular time intervals from the sound source, the light source is caused to emit light at the next sound generation timing, and the sound generation state and the light emission state are collected and imaged by a microphone and a television camera, respectively. A video signal / audio signal generator for detecting a time difference between video and audio, wherein the audio signal and video signal for detecting the time difference between video and audio are generated. 請求項3記載の映像信号・音声信号発生装置において、前記光源の発光時には前記音声の発生を停止するように構成したことを特徴とする映像と音声の時間差検知用の映像信号・音声信号発生装置。4. The video signal / audio signal generator according to claim 3, wherein the generation of the audio is stopped when the light source emits light, and the time difference detection between video and audio is detected. . 請求項1乃至4のいずれか1項記載のテレビジョンカメラによる撮像およびマイクロホンによる収音によって得られるそれぞれ映像信号および音声信号の少なくとも一方は、人工的手法によって直接に得られる信号であることを特徴とする映像と音声の時間差検知用の映像信号・音声信号発生装置。5. At least one of a video signal and an audio signal obtained by imaging with a television camera according to any one of claims 1 to 4 and sound collection with a microphone is a signal directly obtained by an artificial method. A video / audio signal generator for detecting the time difference between video and audio.
JP29621696A 1996-11-08 1996-11-08 Video / audio signal generator for time difference detection between video and audio Expired - Fee Related JP3727736B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP29621696A JP3727736B2 (en) 1996-11-08 1996-11-08 Video / audio signal generator for time difference detection between video and audio

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP29621696A JP3727736B2 (en) 1996-11-08 1996-11-08 Video / audio signal generator for time difference detection between video and audio

Publications (2)

Publication Number Publication Date
JPH10145645A JPH10145645A (en) 1998-05-29
JP3727736B2 true JP3727736B2 (en) 2005-12-14

Family

ID=17830689

Family Applications (1)

Application Number Title Priority Date Filing Date
JP29621696A Expired - Fee Related JP3727736B2 (en) 1996-11-08 1996-11-08 Video / audio signal generator for time difference detection between video and audio

Country Status (1)

Country Link
JP (1) JP3727736B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007049451A1 (en) * 2005-10-27 2007-05-03 National University Corporation Chiba University Method and device for accurately and easily measuring a time difference between video and audio
WO2010137166A1 (en) * 2009-05-29 2010-12-02 Necディスプレイソリューションズ株式会社 Delay detection device and delay detection method
JP2014207642A (en) * 2013-04-16 2014-10-30 日本放送協会 Lip-sync signal transmission device, synchronization shift amount estimation device, and synchronization shift amount estimation method

Also Published As

Publication number Publication date
JPH10145645A (en) 1998-05-29

Similar Documents

Publication Publication Date Title
ES2921057T3 (en) System and method for testing audio and video synchronization
Vroomen et al. Perception of intersensory synchrony: a tutorial review
US7020894B1 (en) Video and audio synchronization
Bertelson Ventriloquism: A case of crossmodal perceptual grouping
WO2016089133A1 (en) Binaural audio signal processing method and apparatus reflecting personal characteristics
US20050259829A1 (en) Stand-alone microphone test system for a hearing device
JP2019536395A (en) System and method for capturing an image of the pinna and using the pinna image to characterize human auditory anatomy
JP2008172409A (en) Sound collecting apparatus, and sound transmission system
RU2011105393A (en) STEREO IMAGE DATA TRANSMISSION METHOD, STEREO IMAGE DATA TRANSFER METHOD, STEREO IMAGE DATA RECEIVER AND METHOD OF STEREO IMAGE DATA
EP2737727A2 (en) Method and apparatus for processing audio signal
Mowrer et al. Analysis of five acoustic correlates of laughter
ATE172836T1 (en) METHOD AND DEVICE FOR DETERMINING SIGNAL QUALITY
JP2011055409A (en) Audio data combination device
US20110013085A1 (en) Method and Apparatus for Measuring Audio-Video Time skew and End-to-End Delay
JP3727736B2 (en) Video / audio signal generator for time difference detection between video and audio
CN112351251A (en) Image processing system and terminal device
JP2017199017A (en) Virtual reality experience system of simulation earthquake damage, and virtual reality experience method of simulation earthquake damage
Thurlow et al. Some determinants of localization‐adaptation effects for successive auditory stimuli
JPH11234640A (en) Communication control system
US20190394421A1 (en) Method for synchronising a first audio signal and a second audio signal
JP2020505861A (en) Capture motion and synchronize motion with recorded audio / video
EP1784049A1 (en) A method and system for sound reproduction, and a program product
CN110675923B (en) Audio-visual integration method based on portable eye tracker
US1944182A (en) Reproduction of spacially coordinated sight and sound
JP5305488B2 (en) Delay detection apparatus and delay detection method

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20050601

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050614

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050815

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20050906

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20050929

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091007

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101007

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111007

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees