JP4652709B2 - On-vehicle acoustic device, control method, and program - Google Patents
On-vehicle acoustic device, control method, and program Download PDFInfo
- Publication number
- JP4652709B2 JP4652709B2 JP2004096118A JP2004096118A JP4652709B2 JP 4652709 B2 JP4652709 B2 JP 4652709B2 JP 2004096118 A JP2004096118 A JP 2004096118A JP 2004096118 A JP2004096118 A JP 2004096118A JP 4652709 B2 JP4652709 B2 JP 4652709B2
- Authority
- JP
- Japan
- Prior art keywords
- passenger
- reproduction signal
- height
- speakers
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Stereophonic System (AREA)
Description
本発明は、搭乗者の会話を配慮した車載用音響装置、制御方法及びプログラムに関する。 The present invention relates to an on-vehicle acoustic device, a control method, and a program that take into account passenger conversation.
特許文献1は、搭乗者の会話と騒音とを区別して検出し、音響装置の音量を、会話期間では、自動的に下げ、非会話期間では、自動的に上げることを開示する。 Patent Document 1 discloses that a passenger's conversation and noise are detected separately, and the volume of the acoustic device is automatically lowered during a conversation period and automatically raised during a non-conversation period.
特許文献2は、騒音の大きさに応じて、カーナビゲーション装置の経路案内の音量を自動的に増大する場合に、マイクロホンにより車室内の騒音を検出することにすると、エンジン音や窓開き時の風切り音やオーディオの再生音等の騒音と共に会話音も騒音として検出してしまい、結果、会話期間にも経路案内の音量が自動的に増大してしまって、会話を妨害することになるので、マイクロホンを廃止して、騒音は、エアコンのブロアのモータ電流や、窓の開閉スイッチ等から検出することを開示する。 In Patent Document 2, when the volume of the route guidance of the car navigation device is automatically increased according to the level of noise, the noise in the passenger compartment is detected by a microphone. Since the conversation sound is detected as noise along with noise such as wind noise and audio playback sound, as a result, the volume of the route guidance automatically increases even during the conversation period, and the conversation is disturbed. It is disclosed that noise is detected from a motor current of a blower of an air conditioner, a window opening / closing switch or the like by eliminating a microphone.
特許文献3は、左右のスピーカが左右のドアの下部に配設されるのに対し、仮想音像を搭乗者前方でかつ搭乗者の目の高さに定位させる技術を開示している。
スピーカからの再生音は会話を妨害しないようにすることが望ましい。特許文献1,2の車載用音響装置では、会話が妨害されることを、スピーカからの音量を自動的に下げたり、又は上げなかったりすることにより達成している。 It is desirable that the reproduced sound from the speaker does not disturb the conversation. In the in-vehicle acoustic devices disclosed in Patent Documents 1 and 2, the fact that the conversation is interrupted is achieved by automatically decreasing or not increasing the volume from the speaker.
特許文献3は、仮想音像を所定の高さに生成することを開示するものの、会話期間における仮想音像の制御については一切、言及していない。 Patent Document 3 discloses generating a virtual sound image at a predetermined height, but does not mention any control of the virtual sound image during the conversation period.
本発明の目的は、音量を調節することなく、会話中の再生音による会話妨害を防止する車載用音響装置、制御方法及びプログラムを提供することである。 An object of the present invention is to provide an in-vehicle acoustic device, a control method, and a program that prevent conversation disturbance due to reproduced sound during conversation without adjusting the volume.
本発明の車載用音響装置は、車室内の異なる位置に配備される複数個のスピーカを備える。該車載用音響装置は次の手段を有している。
搭乗者の発声に基づき会話期間か非会話期間かを検出する会話期間検出手段、及び
複数個のスピーカからの放音により生成される仮想音像が、非会話期間では、搭乗者のほぼ、耳の高さになるように、また、会話期間では、仮想音像が搭乗者のほぼ、耳の高さからは消失しているように、メディアからの再生信号を補正処理した補正信号を生成して該補正信号を各スピーカへ出力する再生信号補正手段。
The on-vehicle acoustic device of the present invention includes a plurality of speakers arranged at different positions in the vehicle interior. The in-vehicle acoustic device has the following means.
The conversation period detecting means for detecting whether the period is a conversation period or a non-conversation period based on the utterance of the passenger, and a virtual sound image generated by sound emission from a plurality of speakers is almost A correction signal is generated by correcting the reproduction signal from the media so that the virtual sound image disappears from the height of the ear of the passenger so that the virtual sound image disappears during the conversation period. Reproduction signal correction means for outputting a correction signal to each speaker.
本発明の制御方法が適用される車載用音響装置は、車室内の異なる位置に配備される複数個のスピーカを備え、該制御方法は次のステップを有している。
搭乗者の発声に基づき会話期間か非会話期間かを検出する会話期間検出ステップ、
複数個のスピーカからの放音により生成される仮想音像が、非会話期間では、搭乗者のほぼ、耳の高さになるように、また、会話期間では、仮想音像が搭乗者のほぼ、耳の高さからは消失しているように、メディアからの再生信号を補正処理した補正信号を生成して該補正信号を各スピーカへ出力する再生信号補正ステップ。
The on-vehicle acoustic device to which the control method of the present invention is applied includes a plurality of speakers arranged at different positions in the vehicle interior, and the control method includes the following steps.
A conversation period detection step for detecting whether the conversation period or non-conversation period based on the utterance of the passenger,
The virtual sound image generated by sound emission from a plurality of speakers is almost the height of the passenger during the non-conversation period, and the virtual sound image is almost the ear of the passenger during the conversation period. A reproduction signal correction step of generating a correction signal obtained by correcting the reproduction signal from the media so as to disappear from the height of the medium and outputting the correction signal to each speaker.
本発明のプログラムは、前述の車載用音響装置の各手段としてコンピュータを機能させるためのプログラム。 The program of the present invention is a program for causing a computer to function as each means of the above-described on-vehicle acoustic device.
本発明によれば、会話期間では、搭乗者のほぼ、耳の高さにおける仮想音像が消失するので、搭乗者は、スピーカからの再生音による会話妨害を抑制される。 According to the present invention, during the conversation period, the virtual sound image at almost the ear height of the passenger disappears, so that the passenger is prevented from disturbing the conversation due to the reproduced sound from the speaker.
図1及び図2は車室11内のスピーカ18a,18bの配置例を示す自動車10の概略側面図及び概略平面図である。車室11内において、運転席12及び助手席13は前側に、後席14は後ろ側に、それぞれ配設される。図示の例では、搭乗者16は、運転席12及び助手席13にそれぞれ着席している。搭乗者16は後席14に存在することもある。左右のスピーカ18a,18bは、左右の前側ドアの内面側でかつ下側半部に配備される。該下側半部の位置は、着座中の搭乗者16のほぼ膝近辺の位置である。
1 and 2 are a schematic side view and a schematic plan view of the
図3は車載用音響装置25のハードウェア構成図である。メディアでかつソースとしてのCD28、MD29及びDVD30は対応の再生器でオーディオを再生され、その再生信号はセレクタ34へ送られる。チューナ31は、放送メディアとしてのラジオ放送を受信し、復調したオーディオ信号を再生信号としてセレクタ34へ出力する。セレクタ34は、CD28、MD29、DVD30及びチューナ31の再生信号のいずれかを選択し、選択した機器に係る再生信号を音場制御部37及び会話検出回路39へ送る。会話検出回路39は、マイクロホン40の出力信号と共に、セレクタ34からの再生信号を入力される。マイクロホン40は、搭乗者16の顔の方へ指向性を合わせられ、搭乗者16の人声を検出する。マイクロホン40は、ダッシュボード又は天井等に配備され、運転席12及び助手席13の搭乗者16用に1個と、後席14の搭乗者16用に1個の計2個設けることもできる。会話検出回路39におけるセレクタ34からの再生音信号の入力には2つの使用方法がある。第1の使用方法では、会話検出回路39におけるセレクタ34からの再生音信号の入力は、ソースの再生中か否かの判断に使用される。すなわち、会話検出回路39は、セレクタ34から再生信号を入力されている期間では、所定のソースの再生中と判断する。会話検出回路39は、所定のソースの再生中で、かつ人声が入力されている期間では、再生中の会話期間として所定の検出信号をマイコン44へ送る。第2の使用方法では、会話検出回路39におけるセレクタ34からの再生音信号の入力は、マイクロホン40から会話検出回路39への音検出信号の入力から該再生音信号を引いた差分を人声として検出するために使用される。マイクロホン40の検出した音信号には、人声の他に再生音も混ざるので、マイコン44は、両者の差分を会話検出回路39から受けることにより、会話期間を正確に検出できる。なお、会話検出回路39はセレクタ34からの再生音信号の入力を省略されてもよい。操作キー46a,46b,・・・46nは、再生(PLAY)キー、停止(STOP)キー、音量調節(VOL)キー及び音場選択キー等を含み、ユーザにより操作される。マイコン44は、各操作キー46a,46b,・・・46nから入力に基づきセレクタ34、音場制御部37及び音量・音質調整部49を制御する。
FIG. 3 is a hardware configuration diagram of the in-vehicle acoustic device 25. CD28, MD29, and DVD30 as media and sources are played back audio by a corresponding player, and the playback signal is sent to
音場制御部37は、車室11内に所定の音場が生成されるように、セレクタ34からの再生信号を補正した補正信号を生成する。音場制御部37が生成する音場とは、車室11内の搭乗者16のほぼ耳の高さに仮想音像が生成されるものである。左右のスピーカ18a,18bの仮想音像を左右のスピーカ18a,18bとは別の位置に生成するために、頭部伝達関数を利用する周知の技術(例えば、特許文献3に開示されている。)が使用される。マイコン44が、音場生成処理を中止する指示を音場制御部37に出している場合には、音場制御部37は、セレクタ34からの再生信号についての補正処理は中止して、該再生信号をそのまま音量・音質調整部49へ送る。音量・音質調整部49は、マイコン44からの制御信号に基づき音場制御部37からのオーディオ信号に係る音の音量及び音質を制御し、電力増幅部50へ送る。なお、セレクタ34、音場制御部37、音量・音質調整部49及び電力増幅部50では、左右の音に係るオーディオ信号、すなわち計2個のオーディオ信号が処理される。メディアからの再生信号がモノである場合は、すなわち、再生信号が1個のみである場合は、音場制御部37は、同一の再生信号を左右の再生信号として2個の再生信号を生成してから、処理を行なう。電力増幅部50は、左右のオーディオ信号を増幅して、左右のスピーカ18a,18bへ送る。
The sound
図4は車載用音響装置55の機能ブロック図である。車載用音響装置55は、車室11内の異なる位置に配備される複数個のスピーカ56を備える。車載用音響装置55は、さらに、会話期間検出手段58及び再生信号補正手段60を有している。会話期間検出手段58は、搭乗者16の発声に基づき会話期間か非会話期間かを検出する。再生信号補正手段60は、複数個のスピーカ56からの放音により生成される仮想音像が、非会話期間では、搭乗者16のほぼ、耳の高さになるように、また、会話期間では、仮想音像が搭乗者16のほぼ、耳の高さからは消失しているように、メディア63からの再生信号を補正処理した補正信号を生成して該補正信号を各スピーカ56へ出力する。
FIG. 4 is a functional block diagram of the in-vehicle
スピーカ56は、例えば図1の左右のスピーカ18a,18bである。メディア63は、CD28、MD29、DVD30又はチューナ31の放送メディアである。典型的には、各メディア63は、左右のスピーカ18a,18b用の再生信号、すなわち2個の再生信号を出力する。再生信号補正手段60は、現実の音像(=スピーカ56)に対して仮想音像を任意の位置に設定するスピーカ56への出力信号を頭部伝達関数に基づいて生成する。任意の位置における仮想音像の生成の仕方の詳細は、例えば特許文献3に説明されているとおりで周知である。該周知の方法によれば、左右の仮想音像から一人の搭乗者16の左右の各耳までの複素数表現の計4個の頭部伝達関数Vtと、現実の音像から該一人の搭乗者16の左右の各耳までの複素数表現の計4個の頭部伝達関数Vrをあらかじめ、実験で求めておく。すなわち、実験では、仮想及び現実の各音像位置にはテストスピーカを、耳位置にはダミー人形の耳に取り付けたマイクロホンを配置し、テストスピーカの入力オーディオ信号と、マイクロホンの検出信号との関係から計4個(左右のスピーカの2個×左右の耳の2個=4個)の頭部伝達関数が求まる。そして、メディア63からの再生信号にVt/Vrを乗算した計4個の第1の補正信号を求め、さらに、左右の各耳用の第1の補正信号同士を加算して、左右各1個の、すなわち計2個の第2の補正信号を求め、各補正信号を左右のスピーカ56へ入力させる。
The
搭乗者16の発声は、例えば、搭乗者16の方へ指向性を合わせられたマイクロホン(図示せず)により検出できる。例えば、搭乗者16の発声を最初に検出した時を会話期間の開始とし、搭乗者16の発声を最後に検出した時から所定時間経過した時を会話期間の終了とする。仮想音像が搭乗者16のほぼ、耳の高さからは消失しているとは、仮想音像が搭乗者16のほぼ、耳の高さではない高さに生成されることも含むものとする。こうして、会話期間では、搭乗者16のほぼ耳の高さの仮想音像は消失していることになるので、搭乗者16の感じる再生音が弱まり、搭乗者は会話を円滑に進めることができる。
The utterance of the
好ましくは、複数個のスピーカ56は、搭乗者16のほぼ、耳の高さとは別の高さに配備される。スピーカ56が左右のスピーカ18a,18bであったときには、現実の音像としての左右のスピーカ18a,18bは、左右のドアの下側半部に配備されていることになる。再生信号補正手段60は、会話期間では、再生信号の補正処理を中止して、該再生信号をそのまま補正信号としてスピーカ56へ出力するものである。結果、会話期間では、音像は現実の左右のスピーカ18a,18bの位置となるので、再生音による会話への妨害が抑制される。
Preferably, the plurality of
図5は車載用音響装置の制御方法のフローチャートである。車載用音響装置は、車室11内の異なる位置に配備される複数個のスピーカ56を備える。S70では、搭乗者16の発声に基づき会話期間か非会話期間かを検出する。非会話期間であれば、S71へ進み、会話期間では、S72へ進む。S71では、複数個のスピーカ56からの放音により生成される仮想音像が、搭乗者16のほぼ、耳の高さになるように、メディア63からの再生信号を補正処理した補正信号を生成して該補正信号を各スピーカ56へ出力する。S72では、仮想音像が搭乗者16のほぼ、耳の高さからは消失しているように、メディア63からの再生信号を補正処理した補正信号を生成して該補正信号を各スピーカ56へ出力する。
FIG. 5 is a flowchart of a method for controlling the in-vehicle acoustic device. The on-vehicle acoustic device includes a plurality of
非会話期間では、仮想音像が搭乗者のほぼ、耳の高さに定位することにより、搭乗者16は、音量調節部で設定してある音量で、メディア63からの再生音を聴き取ることになる。一方、会話期間では、搭乗者のほぼ、耳の高さの仮想音像が消失し、搭乗者16の感じる再生音は弱まり、搭乗者16は会話を円滑に進めることができる。
During the non-conversation period, the virtual sound image is localized at almost the ear level of the occupant, so that the
好ましくは、複数個のスピーカ56が、左右のスピーカ18a,18bであったときには、複数個のスピーカ56は、搭乗者16のほぼ、耳の高さとは別の高さに配備されることになる。S72では、会話期間では、再生信号の補正処理を中止して、該再生信号をそのまま補正信号としてスピーカ56へ出力する。
Preferably, when the plurality of
S72における搭乗者のほぼ、耳の高さの仮想音像の消失には、仮想音像が搭乗者のほぼ、耳の高さとは別の高さに定位することも含むものとする。複数個のスピーカ56が、左右のドアの下側半部に配備されている左右のスピーカ18a,18bであってもよい。その場合、S72では、再生信号の補正処理を解除して、該再生信号をそのままスピーカ56へ出力する。これにより、車室11内の仮想音像が消失し、搭乗者16は、再生音を現実の音像としての左右のスピーカ18a,18bから聞くことになるので、搭乗者16の感じる再生音が弱まり、搭乗者16は円滑に会話を進めることができる。
The disappearance of the virtual sound image of almost the ear height of the passenger in S72 includes that the virtual sound image is localized at a height different from the height of the passenger's ear. The plurality of
本発明の制御プログラムは、図3の車載用音響装置55の各手段としてコンピュータを機能させる。あるいは、図4の各ステップをコンピュータに実行させる。
The control program of the present invention causes a computer to function as each unit of the in-vehicle
11:車室、16:搭乗者、55:車載用音響装置、56:スピーカ、58:会話期間検出手段、60:再生信号補正手段、63:メディア。 11: passenger compartment, 16: passenger, 55: vehicle-mounted acoustic device, 56: speaker, 58: conversation period detecting means, 60: reproduction signal correcting means, 63: media.
Claims (5)
搭乗者の発声に基づき会話期間か非会話期間かを検出する会話期間検出手段、及び
前記複数個のスピーカからのメディアの再生音により生成される仮想音像が、非会話期間では、搭乗者のほぼ、耳の高さになるように、また、会話期間では、仮想音像が搭乗者のほぼ、耳の高さからは消失しているように、メディアからの再生信号を補正処理した補正信号を生成して該補正信号を前記各スピーカへ出力する再生信号補正手段、
を有していることを特徴とする車載用音響装置。 In an in-vehicle audio apparatus provided with a plurality of speakers arranged at different positions in a vehicle interior and outputting reproduced sound of media,
Conversation period detection means for detecting a conversation period or a non-conversation period based on the utterance of the passenger, and a virtual sound image generated by the reproduced sound of the media from the plurality of speakers, Generates a correction signal that corrects the playback signal from the media so that the virtual sound image disappears from the height of the ear, so that the virtual sound image disappears from the height of the ear so that it becomes the height of the ear. Reproduction signal correction means for outputting the correction signal to each speaker,
A vehicle-mounted acoustic device characterized by comprising:
前記再生信号補正手段は、会話期間では、再生信号の補正処理を中止して、該再生信号をそのまま補正信号としてスピーカへ出力するものであることを特徴とする請求項1記載の車載用音響装置。 The plurality of speakers are arranged at a height different from the height of the ears of the passenger,
2. The in-vehicle acoustic device according to claim 1, wherein the reproduction signal correcting means stops the reproduction signal correction processing during a conversation period and outputs the reproduction signal as it is to the speaker as a correction signal. .
搭乗者の発声に基づき会話期間か非会話期間かを検出する会話期間検出ステップ、
前記複数個のスピーカからのメディアの再生音により生成される仮想音像が、非会話期間では、搭乗者のほぼ、耳の高さになるように、また、会話期間では、仮想音像が搭乗者のほぼ、耳の高さからは消失しているように、メディアからの再生信号を補正処理した補正信号を生成して該補正信号を前記各スピーカへ出力する再生信号補正ステップ、
を有していることを特徴とする車載用音響装置の制御方法。 In a control method of an in-vehicle acoustic device provided with a plurality of speakers arranged at different positions in a vehicle interior and outputting reproduced sound of media,
A conversation period detection step for detecting whether the conversation period or non-conversation period based on the utterance of the passenger,
The virtual sound image generated by the reproduced sound of the media from the plurality of speakers is almost at the ear level of the passenger in the non-conversation period, and the virtual sound image of the passenger is in the conversation period. A reproduction signal correction step for generating a correction signal obtained by correcting the reproduction signal from the media and outputting the correction signal to each of the speakers so as to almost disappear from the height of the ear,
A control method for an on-vehicle acoustic device, comprising:
前記再生信号補正ステップでは、会話期間では、再生信号の補正処理を中止して、該再生信号をそのまま補正信号としてスピーカへ出力することを特徴とする請求項3記載の車載用音響装置の制御方法。 The plurality of speakers are arranged at a height different from the height of the ears of the passenger,
4. The method of controlling an on-vehicle acoustic device according to claim 3, wherein in the reproduction signal correction step, the reproduction signal correction process is stopped during the conversation period, and the reproduction signal is directly output to the speaker as a correction signal. .
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004096118A JP4652709B2 (en) | 2004-03-29 | 2004-03-29 | On-vehicle acoustic device, control method, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004096118A JP4652709B2 (en) | 2004-03-29 | 2004-03-29 | On-vehicle acoustic device, control method, and program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005286591A JP2005286591A (en) | 2005-10-13 |
JP4652709B2 true JP4652709B2 (en) | 2011-03-16 |
Family
ID=35184527
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004096118A Expired - Fee Related JP4652709B2 (en) | 2004-03-29 | 2004-03-29 | On-vehicle acoustic device, control method, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4652709B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4713398B2 (en) * | 2006-05-15 | 2011-06-29 | シャープ株式会社 | Video / audio reproduction device and sound image moving method thereof |
-
2004
- 2004-03-29 JP JP2004096118A patent/JP4652709B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2005286591A (en) | 2005-10-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8705753B2 (en) | System for processing sound signals in a vehicle multimedia system | |
JP2007019980A (en) | Audio sound calming device | |
JP2001057699A (en) | Audio system | |
JP2009255735A (en) | Noise cancellation device | |
JP2007208828A (en) | Vehicular audio input controller | |
JP2008236397A (en) | Acoustic control system | |
US10115392B2 (en) | Method for adjusting a voice recognition system comprising a speaker and a microphone, and voice recognition system | |
JP2010124435A (en) | Device for assisting conversation in vehicle | |
JP4627973B2 (en) | Speaker device | |
JP4652709B2 (en) | On-vehicle acoustic device, control method, and program | |
JP2006295443A (en) | Voice output control device and voice output control program | |
JP4466010B2 (en) | In-vehicle 5-channel audio device | |
JP6658887B2 (en) | An in-car sound system using a musical instrument, an in-car sound method using a musical instrument, an in-car sound device, and an in-car sound system. | |
JP2001286000A (en) | Acoustic device for vehicle | |
JP2007266937A (en) | Guidance voice mixing apparatus | |
JP2002112400A (en) | Car audio system | |
JPS60123200A (en) | Acoustic device for car | |
JP2008288628A (en) | Speaker detector, device and method for setting the number of channels, and control program | |
JP2001069598A5 (en) | ||
JP2007030732A (en) | Acoustic system | |
JP2004155385A (en) | Angle control device for vehicular indicator | |
JP3892101B2 (en) | In-vehicle audio equipment | |
JP7013514B2 (en) | vehicle | |
JP2007281534A (en) | Acoustic device for vehicle | |
JP6567985B2 (en) | In-vehicle device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060517 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060622 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080617 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080702 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080812 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20080903 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080922 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20081106 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20081226 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20101216 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 4652709 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131224 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131224 Year of fee payment: 3 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131224 Year of fee payment: 3 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |