JP2005310258A - Video voice signal reproducing device - Google Patents

Video voice signal reproducing device Download PDF

Info

Publication number
JP2005310258A
JP2005310258A JP2004125239A JP2004125239A JP2005310258A JP 2005310258 A JP2005310258 A JP 2005310258A JP 2004125239 A JP2004125239 A JP 2004125239A JP 2004125239 A JP2004125239 A JP 2004125239A JP 2005310258 A JP2005310258 A JP 2005310258A
Authority
JP
Japan
Prior art keywords
output
audio
hdmi
video
analog
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2004125239A
Other languages
Japanese (ja)
Other versions
JP4333464B2 (en
Inventor
Masato Negishi
政人 根岸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP2004125239A priority Critical patent/JP4333464B2/en
Publication of JP2005310258A publication Critical patent/JP2005310258A/en
Application granted granted Critical
Publication of JP4333464B2 publication Critical patent/JP4333464B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To set an optimal condition without increasing costs when using an HDMI connection TV and an analog voice connection amplifier. <P>SOLUTION: A video voice signal reproducing device has two settings for determining an HDMI output from HDMI connecting information and an analog output and determining a voice system by neglecting HDMI connecting voice information. <P>COPYRIGHT: (C)2006,JPO&NCIPI

Description

本発明は、DVDプレーヤのように映像と音声を再生可能であり、HDMI出力とアナログ出力との2系統の出力を持つ機器に関するものである。   The present invention relates to a device that can reproduce video and audio, such as a DVD player, and has two outputs of HDMI output and analog output.

近年、アナログ伝送による劣化を防ぐため、映像信号のデジタル伝送が増えつつある。さらに、映像信号の隙間に音声信号を入れて伝送するHDMI機能を持った映像音声信号再生装置が発売されようとしている。HDMIは、デジタル伝送によって信号の劣化が発生しないだけでなく、接続先の機器の情報を読みとって出力形式を合わせたり、暗号化して伝送することにより違法コピーを防止する特徴を持っている。   In recent years, digital transmission of video signals is increasing in order to prevent deterioration due to analog transmission. Furthermore, a video / audio signal reproduction apparatus having an HDMI function for transmitting an audio signal in a gap between video signals is about to be released. HDMI not only does not cause signal deterioration due to digital transmission, but also has the feature of preventing illegal copying by reading the information of the connected device, matching the output format, and transmitting it after encryption.

接続先の機器の情報を読みとって出力形式を合わせる機能は便利であるが、デコーダの音声出力が1系統しかない場合には、アナログ出力も強制的に切り換えられてしまう。   The function of reading the information of the connected device and matching the output format is convenient, but if there is only one audio output of the decoder, the analog output is also forcibly switched.

例えば、6チャンネルのアナログ音声入力を持つアンプに接続し、映像をテレビにHDMI接続した場合、テレビは一般に音声が2チャンネルなので、再生装置の出力はHDMIで2チャンネルに自動設定されてしまい、アンプからの出力も2チャンネルに制限されてしまう。   For example, if you connect to an amplifier with 6-channel analog audio input and connect the video to a TV with HDMI, the TV generally has 2 channels of audio, so the output of the playback device is automatically set to 2 channels with HDMI. The output from is also limited to 2 channels.

図2はHDMI接続の第1の例を示す。図2において、21はテレビ、22はAVアンプ、23はDVDプレーヤ、24はスピーカ群であり、DVDプレーヤ23からAVアンプ22へはHDMIで接続され、AVアンプ22の映像出力がテレビ21に接続され、AVアンプ22のスピーカ出力がスピーカ群24に接続されて構成されている。DVDプレーヤ23は、AVアンプ22の接続先情報を読み取り、情報に合う形式でHDMI出力する。AVアンプ22の情報が音声6チャンネルになっていれば、DVDプレーヤ23の音声出力は自動的に6チャンネルになる。   FIG. 2 shows a first example of HDMI connection. In FIG. 2, 21 is a television, 22 is an AV amplifier, 23 is a DVD player, and 24 is a speaker group. The DVD player 23 is connected to the AV amplifier 22 via HDMI, and the video output of the AV amplifier 22 is connected to the television 21. The speaker output of the AV amplifier 22 is connected to the speaker group 24. The DVD player 23 reads the connection destination information of the AV amplifier 22 and outputs the HDMI in a format suitable for the information. If the information of the AV amplifier 22 is 6 audio channels, the audio output of the DVD player 23 is automatically 6 channels.

図3はHDMI接続の第2の例を示す。図3において、31はテレビ、32はAVアンプ、33はDVDプレーヤ、34はスピーカ群であり、DVDプレーヤ33からテレビ31へはHDMIで接続され、DVDプレーヤ33のアナログ音声出力がAVアンプ32に接続され、AVアンプ32のスピーカ出力がスピーカ群24に接続されて構成されている。DVDプレーヤ33は、HDMI接続先であるテレビの情報を読みとり、テレビの音声が2チャンネルなので、2チャンネルで出力する。DVDプレーヤ33からのHDMIの音声とアナログ音声出力が両方とも2チャンネルになってしまい、AVアンプから接続されているスピーカ群からは、2チャンネルの音しか出ない。   FIG. 3 shows a second example of HDMI connection. In FIG. 3, 31 is a television, 32 is an AV amplifier, 33 is a DVD player, and 34 is a speaker group. The DVD player 33 is connected to the television 31 via HDMI, and the analog audio output of the DVD player 33 is sent to the AV amplifier 32. The speaker output of the AV amplifier 32 is connected to the speaker group 24. The DVD player 33 reads information on the television to which the HDMI is connected, and outputs it on two channels because the television audio is two channels. Both the HDMI audio and the analog audio output from the DVD player 33 become two channels, and only two channels of sound are output from the speaker group connected from the AV amplifier.

これを回避するために、2個のデコーダを搭載する方法がある。図4は映像音声信号再生装置の例を示す。図4において、41は第1デコード手段、42は第2デコード手段、43はHDMI出力手段、44はアナログ音声出力手段、45は制御手段で構成している。制御手段45は、HDMI接続先情報を読み取り、その情報に合わせて音声出力するように第1デコード手段41を制御し、同時にHDMI接続先情報に無関係にデコードするよう第2デコード手段42を制御する。この方法により、図3の接続においてもスピーカ群から6チャンネルの音を出すことができる。しかし、2つのデコード手段が必要なので、デコード手段がひとつの場合と比べてコストが高くなってしまう。   In order to avoid this, there is a method of mounting two decoders. FIG. 4 shows an example of a video / audio signal reproducing apparatus. In FIG. 4, reference numeral 41 is a first decoding means, 42 is a second decoding means, 43 is an HDMI output means, 44 is an analog audio output means, and 45 is a control means. The control means 45 reads the HDMI connection destination information, controls the first decoding means 41 so as to output audio in accordance with the information, and simultaneously controls the second decoding means 42 to decode irrespective of the HDMI connection destination information. . By this method, it is possible to output 6-channel sound from the speaker group even in the connection of FIG. However, since two decoding means are required, the cost becomes higher than that in the case of one decoding means.

解決しようとする課題は、HDMI接続のテレビと、アナログ音声接続のアンプを使用する場合、コストアップ無しで最適な条件を設定することができない点である。   The problem to be solved is that when an HDMI-connected television and an analog audio-connected amplifier are used, it is not possible to set optimum conditions without increasing costs.

この課題を解決するために本発明の映像音声信号再生装置は、映像・音声ストリームをデコードしデジタル音声出力を1系統とデジタル映像出力を持つデコード手段と、デコード手段からの映像・音声データをHDMI伝送するHDMI出力手段と、デコード手段からの音声データをアナログ信号に変換して出力するアナログ音声出力手段と、HDMI接続先情報と設定を入力してデコード手段の音声出力を制御する制御手段とを備え、HDMI接続先情報によってHDMI出力とアナログ出力の音声方式を決める設定と、HDMI接続先の音声情報を無視して音声方式を決める設定との、2つの設定を持つように構成したものである。   In order to solve this problem, the video / audio signal reproducing apparatus of the present invention decodes a video / audio stream, decodes a digital audio output with one system and digital video output, and converts video / audio data from the decode means to HDMI. HDMI output means for transmission, analog audio output means for converting the audio data from the decoding means into analog signals and outputting, and control means for controlling the audio output of the decoding means by inputting HDMI connection destination information and settings And is configured to have two settings: a setting for determining the audio system for HDMI output and analog output according to the HDMI connection destination information, and a setting for determining the audio system by ignoring the audio information for the HDMI connection destination. .

本発明は、HDMI接続のテレビと、アナログ音声接続のアンプを使用する場合、コストアップ無しで最適な条件を設定することができるという優れた効果が得られるものである。   The present invention provides an excellent effect that, when an HDMI-connected television and an analog audio-connected amplifier are used, optimum conditions can be set without increasing the cost.

本発明の請求項1に記載の発明は、映像・音声ストリームをデコードしデジタル音声出力を1系統とデジタル映像出力を持つデコード手段と、前記デコード手段からの映像・音声データをHDMI伝送するHDMI出力手段と、前記デコード手段からの音声データをアナログ信号に変換して出力するアナログ音声出力手段と、HDMI接続先情報と設定を入力してデコード手段の音声出力を制御する制御手段とを備え、前記制御手段から入力されるHDMI接続先情報によってHDMI出力とアナログ出力の音声方式を決める設定と、HDMI接続先の音声情報を無視して音声方式を決める設定との、2つの設定を持つものであり、これにより、HDMI接続のテレビと、アナログ音声接続のアンプを使用する場合、コストアップ無しで最適な条件を設定することができる。   According to the first aspect of the present invention, there is provided a decoding means for decoding a video / audio stream and having one system for digital audio output and a digital video output, and an HDMI output for transmitting video / audio data from the decoding means by HDMI. Means, analog audio output means for converting the audio data from the decoding means into an analog signal and outputting, and control means for controlling the audio output of the decoding means by inputting HDMI connection destination information and settings, It has two settings: the setting that determines the audio system for HDMI output and analog output based on the HDMI connection destination information input from the control means, and the setting that determines the audio system by ignoring the audio information of the HDMI connection destination. Because of this, when using a TV with HDMI connection and an amplifier with analog audio connection, it is optimal without cost increase. It is possible to set the conditions.

(実施の形態1)
図1は本発明の実施の形態における映像音声信号再生装置のブロック図を示す。図1において、1は入力される映像・音声ストリームを映像信号とデジタル音声信号とに変換するデコード手段、2はデコード手段1からの映像信号とデジタル音声信号とからHDMIフォーマットの信号を生成するHDMI出力手段、3はデコード手段1からのデジタル音声信号をアナログ音声信号に変換して出力するアナログ音声出力手段で、本実施の形態では出力されるアナログ音声信号は、6CHとなっているが、これに限定されない。4は制御手段であり、制御手段4には、接続先情報と設定が外部から入力される。設定としては、「HDMI接続先情報によってHDMI出力とアナログ出力の音声方式を決める設定」と「HDMI接続先の音声情報を無視して音声方式を決める設定」とがある。
(Embodiment 1)
FIG. 1 is a block diagram of a video / audio signal reproduction apparatus according to an embodiment of the present invention. In FIG. 1, 1 is a decoding means for converting an input video / audio stream into a video signal and a digital audio signal, and 2 is an HDMI signal for generating an HDMI format signal from the video signal and the digital audio signal from the decoding means 1. The output means 3 is an analog audio output means for converting the digital audio signal from the decoding means 1 into an analog audio signal and outputting the analog audio signal. In this embodiment, the output analog audio signal is 6CH. It is not limited to. Reference numeral 4 denotes a control unit, and connection destination information and settings are input to the control unit 4 from the outside. The settings include “setting for determining the audio system for HDMI output and analog output according to HDMI connection destination information” and “setting for determining the audio system by ignoring the audio information of the HDMI connection destination”.

以上のように構成された本実施の形態の映像音声信号再生装置について、以下その動作について説明する。   The operation of the video / audio signal reproducing apparatus of the present embodiment configured as described above will be described below.

まず図3を用いて全体構成を説明する。   First, the overall configuration will be described with reference to FIG.

図3はHDMI接続の例を示す。図3において、31は入力される映像信号を映出したり音声信号を出力したりするテレビジョン受像機(以下、テレビと記す)、32は入力される音声信号を増幅などの信号処理を行うAVアンプ、33はDVDディスクなどの記録媒体を装填しその記録媒体に記録された映像音声信号を再生する再生装置であるDVDプレーヤで、本実施の形態ではDVDプレーヤとしたが、これに限定されるものではなく、映像音声信号を出力可能なものであればこれに限定されない。34はAVアンプ32から出力される音声信号を音響出力可能なスピーカ群であり、本実施の形態では6個(6チャンネル)のスピーカー群としたがこの個数やチャンネル数には限定されない。   FIG. 3 shows an example of HDMI connection. In FIG. 3, reference numeral 31 denotes a television receiver (hereinafter referred to as a television) that displays an input video signal and outputs an audio signal, and 32 denotes an AV that performs signal processing such as amplification of the input audio signal. The amplifier 33 is a DVD player that is a playback device that loads a recording medium such as a DVD disk and reproduces a video / audio signal recorded on the recording medium. In this embodiment, the DVD player is used, but the present invention is not limited to this. However, the present invention is not limited to this as long as it can output a video / audio signal. Reference numeral 34 denotes a speaker group capable of acoustically outputting the audio signal output from the AV amplifier 32. In the present embodiment, six (six channel) speaker groups are used, but the number and the number of channels are not limited.

DVDプレーヤ33からテレビ31へはHDMIで接続され、DVDプレーヤ33のアナログ音声出力がAVアンプ32に接続され、AVアンプ32のスピーカ出力がスピーカ群24に接続されて構成されている。DVDプレーヤ33は、HDMI接続先であるテレビの情報を読みとり、テレビの音声が2チャンネルなので、2チャンネルで出力する。DVDプレーヤ33からのHDMIの音声とアナログ音声出力が両方とも2チャンネルになってしまい、AVアンプから接続されているスピーカ群からは、2チャンネルの音しか出ない。   The DVD player 33 is connected to the television 31 by HDMI, the analog audio output of the DVD player 33 is connected to the AV amplifier 32, and the speaker output of the AV amplifier 32 is connected to the speaker group 24. The DVD player 33 reads information on the television to which the HDMI is connected, and outputs it on two channels because the television audio is two channels. Both the HDMI audio and the analog audio output from the DVD player 33 become two channels, and only two channels of sound are output from the speaker group connected from the AV amplifier.

次に、DVDプレーヤ33の内部構成について説明する。   Next, the internal configuration of the DVD player 33 will be described.

まず、「HDMI接続先情報によってHDMI出力とアナログ出力の音声方式を決める設定」である場合、制御手段4はHDMI接続先情報を読み取り、その情報に合わせて音声出力するようにデコード手段1を制御する。デコード手段1には映像・音声ストリームが入力されており、デコード手段1からの映像出力とデジタル音声出力はHDMI出力手段2でHDMI信号に変換され出力される。デコード手段1からのデジタル音声出力はアナログ音声出力手段3に接続され、アナログ音声出力手段3からアナログ音声出力される。アナログ音声出力は、HDMI接続先情報によって決められてしまう。   First, in the case of “setting to determine the audio system of HDMI output and analog output by the HDMI connection destination information”, the control means 4 reads the HDMI connection destination information and controls the decoding means 1 so as to output the sound in accordance with the information. To do. The video / audio stream is input to the decoding unit 1, and the video output and digital audio output from the decoding unit 1 are converted into an HDMI signal by the HDMI output unit 2 and output. The digital audio output from the decoding unit 1 is connected to the analog audio output unit 3 and is output from the analog audio output unit 3. The analog audio output is determined by the HDMI connection destination information.

次に「HDMI接続先の音声情報を無視して音声方式を決める設定」である場合、制御手段4はHDMI接続先情報を無視するので、デコード手段1は入力される映像・音声ストリームをデコードしてそのまま出力し、アナログ音声出力手段3からアナログ音声出力される。図3のように接続している場合、「HDMI接続先の音声情報を無視して音声方式を決める設定」にすると、テレビ31が2チャンネルであったとしても、DVDプレーヤ33のアナログ音声出力は2チャンネルに制限されないので、スピーカ群34からは6チャンネルの音が出る。   Next, in the case of “setting for deciding the audio system by ignoring the audio information at the HDMI connection destination”, the control means 4 ignores the HDMI connection destination information, so the decoding means 1 decodes the input video / audio stream. The analog audio output means 3 outputs the analog audio as it is. In the case of the connection as shown in FIG. 3, if “the setting for deciding the audio system by ignoring the audio information of the HDMI connection destination” is set, the analog audio output of the DVD player 33 is output even if the television 31 has two channels. Since it is not limited to 2 channels, 6-channel sound is output from the speaker group 34.

以上のように本実施形態によれば、HDMI接続のテレビ31と、アナログ音声接続のアンプ32を使用する場合、コストアップ無しで最適な条件を設定することができることとなる。   As described above, according to the present embodiment, when the HDMI-connected television 31 and the analog audio-connected amplifier 32 are used, optimum conditions can be set without increasing costs.

本発明は、DVDプレーヤなどの映像音声信号再生装置として説明をしたが、少なくとも映像信号と音声信号とをHDMIフォーマットで他機器と接続するようなものであれば、DVDプレーヤ以外にも応用範囲は広がる。   The present invention has been described as a video / audio signal reproducing apparatus such as a DVD player. However, as long as at least a video signal and an audio signal are connected to other devices in the HDMI format, the application range is not limited to that of a DVD player. spread.

本発明の一実施の形態による映像音声信号再生装置のブロック図1 is a block diagram of a video / audio signal reproduction apparatus according to an embodiment of the present invention. HDMI接続の第1の例を示すブロック図Block diagram showing a first example of HDMI connection HDMI接続の第2の例を示すブロック図Block diagram showing a second example of HDMI connection 映像音声信号再生装置の例を示すブロック図Block diagram showing an example of a video / audio signal reproduction apparatus

符号の説明Explanation of symbols

1 デコード手段
2 HDMI出力手段
3 アナログ音声出力手段
4 制御手段
21 テレビ
22 AVアンプ
23 DVDプレーヤ
24 スピーカ群
31 テレビ
32 AVアンプ
33 DVDプレーヤ
34 スピーカ群
DESCRIPTION OF SYMBOLS 1 Decoding means 2 HDMI output means 3 Analog audio | voice output means 4 Control means 21 Television 22 AV amplifier 23 DVD player 24 Speaker group 31 Television 32 AV amplifier 33 DVD player 34 Speaker group

Claims (1)

映像・音声ストリームをデコードしデジタル音声出力を1系統とデジタル映像出力を持つデコード手段と、前記デコード手段からの映像・音声データをHDMI伝送するHDMI出力手段と、前記デコード手段からの音声データをアナログ信号に変換して出力するアナログ音声出力手段と、HDMI接続先情報と設定を入力してデコード手段の音声出力を制御する制御手段とを備え、前記制御手段から入力されるHDMI接続先情報によってHDMI出力とアナログ出力の音声方式を決める設定と、HDMI接続先の音声情報を無視して音声方式を決める設定との、2つの設定を持つことを特徴とする映像音声信号再生装置。 Decoding means for decoding a video / audio stream and having one digital audio output and digital video output; HDMI output means for HDMI transmission of video / audio data from the decoding means; and analog audio data from the decoding means An analog audio output means for converting to a signal and outputting, and a control means for controlling the audio output of the decoding means by inputting HDMI connection destination information and settings, and the HDMI connection destination information inputted from the control means 2. A video / audio signal reproducing apparatus having two settings: a setting for determining an audio system for output and an analog output, and a setting for determining an audio system by ignoring audio information of an HDMI connection destination.
JP2004125239A 2004-04-21 2004-04-21 Video / audio signal playback device Expired - Fee Related JP4333464B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004125239A JP4333464B2 (en) 2004-04-21 2004-04-21 Video / audio signal playback device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004125239A JP4333464B2 (en) 2004-04-21 2004-04-21 Video / audio signal playback device

Publications (2)

Publication Number Publication Date
JP2005310258A true JP2005310258A (en) 2005-11-04
JP4333464B2 JP4333464B2 (en) 2009-09-16

Family

ID=35438844

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004125239A Expired - Fee Related JP4333464B2 (en) 2004-04-21 2004-04-21 Video / audio signal playback device

Country Status (1)

Country Link
JP (1) JP4333464B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010004467A (en) * 2008-06-23 2010-01-07 Onkyo Corp Image processing apparatus, and program therefor
US8553150B2 (en) 2008-06-23 2013-10-08 Onkyo Corporation Image processing apparatus

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010004467A (en) * 2008-06-23 2010-01-07 Onkyo Corp Image processing apparatus, and program therefor
JP4501087B2 (en) * 2008-06-23 2010-07-14 オンキヨー株式会社 Image processing apparatus and program thereof
US8553150B2 (en) 2008-06-23 2013-10-08 Onkyo Corporation Image processing apparatus
US8654249B2 (en) 2008-06-23 2014-02-18 Onkyo Corporation Image processing apparatus

Also Published As

Publication number Publication date
JP4333464B2 (en) 2009-09-16

Similar Documents

Publication Publication Date Title
JP4553839B2 (en) Control method for video / audio reproduction system and video / audio reproduction system
JP5145633B2 (en) Sound reproduction apparatus and video / audio viewing system
JP4460655B2 (en) Apparatus and method for reproducing a digital audio signal from a record carrier
JP2008252834A (en) Audio playback apparatus
US20090292377A1 (en) Multi-channel audio output device
JP2007149151A (en) Optical disk player, sound signal output device and av system
JP4333464B2 (en) Video / audio signal playback device
JP2007287199A (en) Reproducing apparatus
US20100215333A1 (en) Image audio reproduction system, av amplification device and program
JP2005006166A (en) Imaging apparatus
JP2009194893A (en) Voice processor and its program, and voice reproducing method
JP2007200415A (en) Reproducing device and reproducing method
JP2008310915A (en) Sound reproduction device and sound reproduction method
JP5109210B2 (en) CONTENT REPRODUCTION SYSTEM, CONTENT PROCESSING DEVICE, CONTENT REPRODUCTION DEVICE, AND PROGRAM THEREOF
JP2008187253A (en) Reproducing device
JP3783361B2 (en) Audio playback device
KR100775697B1 (en) Optical-disc display apparatus and method for outputting video signal using by it
JP2007266651A (en) Data recording device
JP2008130118A (en) Sound reproducing system, personal computer constituting the system, and control program
JP4630753B2 (en) Decryption device
JP2002077823A (en) Video reproducer
JP2002074721A (en) Reproducing device
JP2005057721A (en) Method for processing av signals
KR20080010620A (en) Audio/video system and method for controlling resolution
JP2004213731A (en) Device and method for optical disk recording

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070305

RD01 Notification of change of attorney

Effective date: 20070412

Free format text: JAPANESE INTERMEDIATE CODE: A7421

A977 Report on retrieval

Effective date: 20090519

Free format text: JAPANESE INTERMEDIATE CODE: A971007

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090602

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Effective date: 20090615

Free format text: JAPANESE INTERMEDIATE CODE: A61

FPAY Renewal fee payment (prs date is renewal date of database)

Year of fee payment: 3

Free format text: PAYMENT UNTIL: 20120703

FPAY Renewal fee payment (prs date is renewal date of database)

Year of fee payment: 3

Free format text: PAYMENT UNTIL: 20120703

FPAY Renewal fee payment (prs date is renewal date of database)

Year of fee payment: 4

Free format text: PAYMENT UNTIL: 20130703

LAPS Cancellation because of no payment of annual fees