JP2019008381A - On-vehicle device - Google Patents
On-vehicle device Download PDFInfo
- Publication number
- JP2019008381A JP2019008381A JP2017120909A JP2017120909A JP2019008381A JP 2019008381 A JP2019008381 A JP 2019008381A JP 2017120909 A JP2017120909 A JP 2017120909A JP 2017120909 A JP2017120909 A JP 2017120909A JP 2019008381 A JP2019008381 A JP 2019008381A
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- recording
- camera
- cameras
- video
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Abandoned
Links
Images
Abstract
Description
本発明は、車両に搭載された車載器に関する。 The present invention relates to a vehicle-mounted device mounted on a vehicle.
従来、ドライブレコーダは、予め設定されたカメラ数で動作し、動作中にその数量を変更することは難しかった。一方、ドライブレコーダで記録される映像には、死角があり、このような映像の死角を少なくするには、カメラの数量を増やすことが一般的な対策である。 Conventionally, a drive recorder operates with a preset number of cameras, and it has been difficult to change the number during operation. On the other hand, the video recorded by the drive recorder has a blind spot, and in order to reduce the blind spot of such a video, it is a general measure to increase the number of cameras.
先行技術として、前方用カメラと、後方用カメラと、映像信号入力部と、制御部と、記憶部とを備え、制御部が、車両の状態を表すリバース信号によって、前方用カメラと後方用カメラのいずれからの映像信号を記憶部に記録するかを選択するドライブレコーダが特許文献1に開示されている。
As a prior art, a front camera, a rear camera, a video signal input unit, a control unit, and a storage unit are provided, and the control unit uses a reverse signal that represents the state of the vehicle according to a reverse signal.
また、後方カメラと、モニタと、周囲撮像ユニット(前方カメラ及び側方カメラを含む)と、撮像データ記録部とが接続される分配器を備え、撮像データ記録部は、周囲撮像ユニットで撮像された画像データを記録する他、バックギアが入っている場合、分配器を介して後方カメラで撮像された画像データも記録するドライブレコーダが特許文献2に開示されている。 In addition, a distributor to which a rear camera, a monitor, a surrounding imaging unit (including a front camera and a side camera) and an imaging data recording unit are connected is provided, and the imaging data recording unit is imaged by the surrounding imaging unit. Japanese Patent Application Laid-Open No. 2004-228688 discloses a drive recorder that records image data captured by a rear camera via a distributor when a back gear is used.
また、複数のカメラで撮影した映像を記録する際、外部信号に基づき選択したカメラにより撮影した映像を高画質(高いビットレート、フレームレートもしくは低い圧縮率)で記録し、一方、選択されなかったカメラにより撮影した映像を低画質(低いビットレート、フレームレートもしくは高い圧縮率)で記録するドライブレコーダが特許文献3に開示されている。例えば、左ウィンカの信号入力があった場合、車両が左折しようとしていることがわかるので、CPUは、車両の左側に設置したカメラが撮影する映像を高画質で記録するモードに切り替える。 Also, when recording video shot by multiple cameras, video shot by the camera selected based on external signals is recorded with high image quality (high bit rate, frame rate or low compression rate), but not selected Japanese Patent Application Laid-Open No. 2004-228688 discloses a drive recorder that records video captured by a camera with low image quality (low bit rate, frame rate, or high compression rate). For example, if there is a left winker signal input, it can be seen that the vehicle is about to turn left, so the CPU switches to a mode in which video captured by a camera installed on the left side of the vehicle is recorded with high image quality.
また、車両の後方を撮影する撮影カメラによる撮影・記録開始時に取得したGPS位置情報とバック走行禁止の位置情報とが一致した場合、撮影カメラによって取得した画像データ及びGPS位置情報を車両管理装置に送信するドライブレコーダが特許文献4に開示されている。 In addition, when the GPS position information acquired at the start of shooting / recording by the shooting camera for shooting the rear of the vehicle matches the position information for prohibiting the reverse travel, the image data and the GPS position information acquired by the shooting camera are stored in the vehicle management device. A drive recorder for transmission is disclosed in Patent Document 4.
しかしながら、映像の死角を少なくするために、安易にカメラの数量を増やすと、メモリの負荷が増大し、メモリに対してアクセスを行うハードウェア(メモリを含む)の規模が大きくなる。また、ハードウェア規模を抑えるために、カメラの数量を抑えると、撮影された映像に死角が増えてドライブレコーダの価値が低下する。さらに、映像の死角を少なくしても、運転者が車両に接近する対象があることに気付かないこともあり、安全確認が万全でなかった。左折時や後退時等の車両の運転状態が変化した時、運転者は、車両に接近する対象に対し、特に注意して運転しなければならなかった。 However, if the number of cameras is easily increased in order to reduce the blind spot of the video, the load on the memory increases and the scale of hardware (including memory) for accessing the memory increases. Further, if the number of cameras is reduced in order to reduce the hardware scale, the blind spots are increased in the captured video and the value of the drive recorder is reduced. Furthermore, even if the blind spots in the video are reduced, the driver may not be aware that there is an object approaching the vehicle, and safety confirmation has not been completed. When the driving state of the vehicle changed, such as when turning left or reverse, the driver had to drive with particular attention to the object approaching the vehicle.
特許文献1では、メモリに記録する前方カメラと後方カメラの切り替えるが、前方カメラと後方カメラの両方で撮像される映像を記録することは特に考慮されていない。また、特許文献2では、バックギアが入った時に後方カメラで撮像された画像データを、前方カメラ及び側方カメラで撮像された画像データと併せて記録するが、後退する時に運転者に安全確認を促すことはしていない。
In
また、特許文献3では、選択したカメラで撮像された画像を高画質に切り替え、選択されないカメラで撮像された画像を低画質に切り替えるが、カメラの数を変更することはしていない。また、特許文献4には、複数のカメラの切り替えについて特に示されない。 In Patent Document 3, an image captured by a selected camera is switched to high image quality, and an image captured by a non-selected camera is switched to low image quality, but the number of cameras is not changed. Further, Patent Document 4 does not particularly indicate switching of a plurality of cameras.
本発明は、上述した事情に鑑みてなされたものであり、その目的は、車両の運転状態の変化が検知された時、記録される映像の死角を減らし、車両に接近する対象がある場合、運転者に対し注意喚起を行う車載器を提供することにある。 The present invention has been made in view of the circumstances described above, and its purpose is to reduce the blind spot of the recorded image when a change in the driving state of the vehicle is detected, and when there is an object approaching the vehicle, The object is to provide an in-vehicle device that alerts the driver.
前述した目的を達成するために、本発明に係る車載器は、下記(1)〜(4)を特徴としている。
(1) 車両の運転状態の変化を検知する検知部と、前記車両の運転状態の変化が検知された場合、前記車両の周辺を撮像する、1つ以上の第1カメラで撮像される映像の記録に加え、前記第1カメラと異なる画角で前記車両の周辺を撮像する、1つ以上の第2カメラで撮像される映像の記録を開始する記録部と、前記車両の周辺に監視領域を設定し、前記第2カメラで撮像される映像内の前記監視領域に対象が出現した場合、警報を出力する警報部とを備えること。
(2) 上記(1)の構成の車載器であって、前記第1カメラは、前記車両の運転時、前記記録部によって常時記録される映像を撮像する常時記録カメラであり、前記第2カメラは、前記車両の運転状態の変化が検知されている間、前記記録部によって記録される映像を撮像する予備記録カメラであること。
(3) 上記(1)又は(2)の構成の車載器であって、前記記録部は、前記車両の運転状態の変化が検知された場合、当該運転状態の変化に対応する前記第2カメラで撮像される映像の記録を開始すること。
(4) 上記(3)の構成の車載器であって、前記検知部は、左ウインカの操作を検知するスイッチであり、前記記録部は、前記左ウインカの操作が検知された場合、前記車両の左側方を撮像する、前記第2カメラの記録を開始すること。
In order to achieve the above-described object, the vehicle-mounted device according to the present invention is characterized by the following (1) to (4).
(1) A detection unit that detects a change in the driving state of the vehicle, and an image captured by one or more first cameras that capture the periphery of the vehicle when a change in the driving state of the vehicle is detected. In addition to recording, a recording unit that starts recording of an image captured by one or more second cameras that captures the periphery of the vehicle at an angle of view different from that of the first camera, and a monitoring area around the vehicle An alarm unit configured to output an alarm when an object appears in the monitoring area in the video imaged by the second camera.
(2) The vehicle-mounted device having the configuration of (1), wherein the first camera is a constantly-recording camera that captures images that are constantly recorded by the recording unit during driving of the vehicle, and the second camera Is a preliminary recording camera that captures an image recorded by the recording unit while a change in the driving state of the vehicle is detected.
(3) The in-vehicle device having the configuration of (1) or (2), wherein the recording unit detects the change in the driving state of the vehicle when the change in the driving state of the vehicle is detected. Start recording the video imaged at.
(4) The vehicle-mounted device having the configuration of (3), wherein the detection unit is a switch that detects an operation of the left turn signal, and the recording unit is configured to detect the operation of the left turn signal when the operation of the left turn signal is detected. Starting the recording of the second camera that images the left side of the camera.
上記(1)の構成の車載器によれば、車両の運転状態の変化が検知された時、記録される映像の死角を減らし、車両に接近する対象がある場合、運転者に対し注意喚起を行うことができる。つまり、車両の運転状態の変化が検知された時に映像を記録するカメラの台数を増やすことで、映像の死角を減らすことができ、また、カメラの台数が増える時期を制限することで、メモリの負荷を抑制できる。また、運転者は、監視領域における対象(人物等)の有無を把握して安全確認を行うことができる。
上記(2)の構成の車載器によれば、常時映像を記録する動作が行われている場合でも、メモリ負荷を抑えて、死角の少ない映像を記録できる。
上記(3)の構成の車載器によれば、車両の運転状態の変化が検知された場合でも、全ての予備記録カメラによる映像を記録することなく、運転状態の変化に対応する予備記録カメラによる映像の記録だけで済む。従って、メモリの負荷を抑制できる。
上記(4)の構成の車載器によれば、運転者は左折(左旋回)時に人物等の対象の存在に気づき、内輪差等による人物等の巻き込みを防止できる。
According to the vehicle-mounted device having the above configuration (1), when a change in the driving state of the vehicle is detected, the blind spot of the recorded image is reduced, and when there is an object approaching the vehicle, the driver is alerted. It can be carried out. In other words, by increasing the number of cameras that record video when a change in the driving state of the vehicle is detected, the blind spot of the video can be reduced, and by limiting the time when the number of cameras increases, The load can be suppressed. In addition, the driver can confirm the safety by grasping the presence or absence of a target (person or the like) in the monitoring area.
According to the vehicle-mounted device having the configuration (2), it is possible to record an image with a small number of blind spots while suppressing a memory load even when an operation of constantly recording an image is performed.
According to the vehicle-mounted device having the configuration of (3) above, even when a change in the driving state of the vehicle is detected, the pre-recording camera corresponding to the change in the driving state is recorded without recording images from all the pre-recording cameras. All you have to do is record a video. Therefore, the memory load can be suppressed.
According to the vehicle-mounted device having the above configuration (4), the driver can notice the presence of an object such as a person when turning left (turning left), and can prevent the person from being involved due to an inner ring difference or the like.
本発明によれば、車両の運転状態の変化が検知された時、記録される映像の死角を減らし、車両に接近する対象がある場合、運転者に対し注意喚起を行うことができる。
以上、本発明について簡潔に説明した。更に、以下に説明される発明を実施するための形態(以下、「実施形態」という。)を添付の図面を参照して通読することにより、本発明の詳細は更に明確化されるであろう。
According to the present invention, when a change in the driving state of the vehicle is detected, the blind spot of the recorded image is reduced, and when there is an object approaching the vehicle, the driver can be alerted.
The present invention has been briefly described above. Further, the details of the present invention will be further clarified by reading through a mode for carrying out the invention described below (hereinafter referred to as “embodiment”) with reference to the accompanying drawings. .
以下、本実施形態に係る車載器について図面を用いて説明する。本実施形態の車載器は、マイクロバスやワンボックスカー等の車両に搭載されたドライブレコーダに適用される。 Hereinafter, the vehicle-mounted device according to the present embodiment will be described with reference to the drawings. The vehicle-mounted device of the present embodiment is applied to a drive recorder mounted on a vehicle such as a microbus or a one-box car.
図1は実施の形態におけるドライブレコーダ10のハードウェア構成を示すブロック図である。ドライブレコーダ10は、CPU11、映像処理部12、画像認識処理部13、プログラムデータメモリ14、ワークデータメモリ15、不揮発性メモリ16、データ処理部17、及びカードインタフェース(I/F)18を有する。また、ドライブレコーダ10は、信号I/F19、Gセンサ20、GPS受信部21、スピーカ22、及び電源I/F23を有する。
FIG. 1 is a block diagram showing a hardware configuration of a
車両5には、映像処理部12に接続される、常時記録カメラCA1〜CAn及び予備記録カメラRC1〜RCmが設置される。n,mは任意の整数である。本実施形態では、常時記録カメラCA1〜CAnが2台(n=3)であり、予備記録カメラRC1〜RCmが2台(m=5)である場合を一例として挙げる。常時記録カメラCA1〜CAn及び予備記録カメラRC1〜RCmは、それぞれCCD(電荷結合素子)イメージセンサやCMOS(相補性金属酸化膜半導体)イメージセンサ等の撮像素子を有する。常時記録カメラCA1〜CAn及び予備記録カメラRC1〜RCmは、いずれも固定カメラであり、予め設定された画角で被写体を撮像し、映像を出力する。なお、常時記録カメラCA1〜CAnと予備記録カメラRC1〜RCmとは、同じ仕様を有するカメラであるが、異なる仕様のカメラであってもよい。また、これら複数のカメラには、暗所を撮像可能な赤外線カメラが含まれてもよい。
In the
本実施形態では、車両5のフロントガラスの上方には、車両前方を撮像する常時記録カメラCA1、及び車室内を前方から撮像する常時記録カメラCA2が設置される(図2,図3参照)。また、車両5の左前方の上部には、車両5の左側方を前側から撮像する予備記録カメラRC1が設置される。車両5の左後方の上部には、車両5の左側方を後側から撮像する予備記録カメラRC2が設置される。車両5のリアドア5yの上部には、車両5の後方を撮像する予備記録カメラRC3が設置される。車両5の右前方の上部には、車両5の右側方を前側から撮像する予備記録カメラRC4が設置される。車両5の後方の右上部には、車両5の右側方を後側から撮像する予備記録カメラRC5が設置される。
In the present embodiment, an always-recording camera CA1 that images the front of the vehicle and a constantly-recording camera CA2 that images the vehicle interior from the front are installed above the windshield of the vehicle 5 (see FIGS. 2 and 3). In addition, a preliminary recording camera RC <b> 1 that captures an image of the left side of the
CPU11は、ドライブレコーダ10の各部を統括的に制御する。CPU11は、左ウインカ信号を入力すると、予備記録カメラRC1,RC2による映像を記録可能にする。また、CPU11は、右ウインカ信号を入力すると、予備記録カメラRC4,RC5による映像を記録可能にする。また、CPU11は、リバース信号を入力すると、予備記録カメラRC3による映像を記録可能にする。また、CPU11は、ドア開信号を入力すると、予備記録カメラRC1による映像を記録可能にする。また、CPU11は、あらかじめ車両5の周辺に監視エリアDZを設定し、不揮発性メモリ16に保持する。CPU11は、予備記録カメラRC1〜RC5でそれぞれ撮像される映像内の各監視エリアDZ(図3参照)に、対象が出現した場合、スピーカ22を鳴動させて警報を出力する。対象は、人物、その一部(顔)、犬や猫等の動物、バイク、自転車、落下物、障害物等である。
The
映像処理部12は、常時記録カメラCA1〜CAn及び予備記録カメラRC1〜RCmで撮像された映像を入力し、各種画像処理を行う。画像処理として、コントラスト調整、色調補正(ホワイトバランス)、ノイズ除去、ガンマ補正等の処理を行う。また、映像処理部12は、画像の拡大・縮小、回転、2値化、グレイスケール化、平滑化、色情報抽出、輪郭抽出(エッジ検出)等の処理を行ってもよい。
The
画像認識処理部13は、画像に出現する人物や顔等の対象を認識する。画像認識の技術は、さまざまな方法で公知である。例えば、画像認識処理部13は、画像に出現する人物の顔を認識する場合、目、鼻、口等の顔のパーツを検出する方法、肌色を検出する方法、頭髪を検出する方法、首や肩などの部分を検出する方法等を用いる。また、画像認識処理部13は、人物の顔以外の場合、画像中に出現する動体や、画像中に占める特定領域のサイズから、対象を認識してもよい。また、画像認識処理部13は、ディープラーニング(深層学習)による機械学習を行って人工知能に用いられるニューラルネットワークを生成し、このニューラルネットワークに映像を入力することで、顔や人物等の対象を認識してもよい。
The image
プログラムデータメモリ14には、ドライブレコーダ10の基本機能のプログラムの他、記録データの表示機能、ハザードマップ作成機能、ライブラリ作成機能、日報出力機能等の各種ブログロムが保存される。ワークデータメモリ15は、CPU11がプログラムを実行する際、一時記憶メモリとして使用される。不揮発性メモリ16には、警告音や各種の設定値等のデータが記憶される。設定値としては、車速パルス信号の数と比較されるしきい値(速度しきい値)、G値(加速度)と比較されるしきい値(G値しきい値)、監視エリアDZの設定情報(例えば座標値)等が挙げられる。
The
データ処理部17は、映像データの圧縮・伸長処理等を行う。カードI/F18には、データ処理部17との間で転送される映像データを記録する映像メモリ30が着脱自在に接続される。映像メモリ30として、SDカード、コンパクトフラッシュ(登録商標)等のメモリカード、ハードディスクドライブ、SSD(solid state drive)等のストレージメモリが挙げられる。ここでは、映像メモリは、ドライブレコーダに対し取外し可能な外部記憶装置(メモリカード等の外部記憶媒体を含む)であったが、ドライブレコーダに内蔵された記憶媒体でもよい。外部記憶装置の場合、外部のモニタあるいはモニタを備えたPC等に接続されることで、外部記憶装置に記録された映像をモニタの画面に表示可能である。
The
信号I/F19には、ブレーキ信号、右ウインカ信号、左ウインカ信号、車速パルス信号、リバース信号、アナログ信号、各種SW信号が入力される。ブレーキ信号は、運転者がブレーキ操作を行った時にブレーキスイッチ(SW)41がオンになることで、出力される信号である。右ウインカ信号は、ウインカ(方向指示器)が右方向に操作された時に右ウインカスイッチ(SW)42がオンになることで、出力される信号である。左ウインカ信号は、ウインカが左方向に操作された時に左ウインカスイッチ(SW)43がオンになることで、出力される信号である。車速パルス信号は、車輪の回転に応じて出力される信号である。リバース信号は、ギアがバック(後退)に入っている時に出力される信号である。アナログ信号は、例えば燃料計から出力される信号である。各種SW信号は、ドア開閉SW、シートベルトSW、イグニッション(IGN)SW等のオン/オフ信号である。
A brake signal, a right turn signal, a left turn signal, a vehicle speed pulse signal, a reverse signal, an analog signal, and various SW signals are input to the signal I /
Gセンサ20は、車両5に加わる衝撃を感知し、衝撃(加速度)に応じた信号を出力する。GPS受信部21は、GPS衛星から送信されるGPS信号を受信し、現在位置情報(緯度、経度、高度)を取得する。スピーカ22は、警告として警報音を鳴動する。また、スピーカ22は、各種の音声を発する。電源I/F23は、イグニッションSW45がオンになると、バッテリに接続され、ドライブレコーダ10の各部に適正な電圧を供給する。また、電源I/F23は、イグニッションSW45のオフ時、省電力モードでCPU11を動作可能な電圧を供給する。
The
図2は車両5の側方から視た、車両5に搭載された予備記録カメラRC1、RC2の撮像範囲ag1,ag2を示す図である。図3は車両5の上方から視た、車両5に搭載された予備記録カメラRC1、RC2の撮像範囲ag1,ag2を示す図である。本実施形態では、車両5は、マイクロバスやワンボックスカー等のように、比較的全長の長い車両である。このため、左折時、運転者は、内輪差を考慮し、車両5の側方を十分に注意しながら車両5を左旋回する。
FIG. 2 is a diagram illustrating the imaging ranges ag1 and ag2 of the preliminary recording cameras RC1 and RC2 mounted on the
車両5の左側方には、車両5が矢印y1に示すように、左旋回する時に通行人等の人物hmを巻き込まないように、運転者が注意しなければならない監視エリアDZが設定される。監視エリアDZは、運転中、運転席に着座する運転者の視線から死角となる範囲に設定される。ここでは、監視エリアDZは、車両が左折する際に死角となる車両の左側方(図3参照)に設定される。監視エリアDZは、車両5の左側方に沿うように全長に亘ってブロック状に設定される。監視エリアDZの設定は、ブロックの角の点を座標として登録し、各角の点を結んで囲まれる閉空間にすることで行われる。なお、監視エリアの形状は、ブロック状に限らず、球状、紡錘状等に設定されてもよい。また、監視エリアの数は、1つに限らず、複数に分割されて設定されもよい。
On the left side of the
予備記録カメラRC1が撮像する撮像範囲ag1には、監視エリアDZの前方が大方含まれるように、予備記録カメラRC1の画角は調整される。また、予備記録カメラRC2が撮像する撮像範囲ag2には、監視エリアDZの後方が大方含まれるように予備記録カメラRC2の画角は調整される。撮像範囲ag1及び撮像範囲ag2は、監視エリアDZを全て含んでもよいし、一部だけ含んでもよい。 The angle of view of the preliminary recording camera RC1 is adjusted so that the imaging range ag1 captured by the preliminary recording camera RC1 includes mostly the front of the monitoring area DZ. In addition, the angle of view of the preliminary recording camera RC2 is adjusted so that the imaging range ag2 captured by the preliminary recording camera RC2 includes mostly the rear of the monitoring area DZ. The imaging range ag1 and the imaging range ag2 may include the entire monitoring area DZ or only a part thereof.
上記構成を有するドライブレコーダ10の動作を示す。ドライブレコーダ10のCPU11は、イグニッションSW45がオフの状態であっても、省電力モードで動作している。
The operation of the
図4はドライブレコーダ10の動作手順を示すフローチャートである。CPU11は、イグニッションSW45がオンになるまで待つ(S1)。イグニッションSW45がオンになると、CPU11は、省電力モードから通常モードに遷移し、ドライブレコーダ10の初期化を行う(S2)。この初期化処理では、例えば、電源I/F23からドライブレコーダ10の各部に適正な電圧を供給し、常時記録カメラCA1〜CAn及び予備記録カメラRC1〜RCmで撮像される映像データを記憶する、映像メモリ30の記憶領域を初期化(消去)すること等が挙げられる。また、CPU11は、ワークデータメモリ15に記憶されたデータを消去する。
FIG. 4 is a flowchart showing the operation procedure of the
CPU11は、カメラCA1,CA2で撮像された映像を映像メモリ30に記録する、常時画像記録を開始する(S3)。CPU11は、トリガの発生があったか否かを判別する(S4)。トリガの発生として、例えば、左折時に運転者によって左ウインカ操作が行われ、左ウインカスイッチ43がオンになると、左ウインカ信号が信号I/F19を介して、CPU11に通知される。なお、トリガは、左ウインカ信号の入力に限らず、信号I/F19を介して、CPU11に通知される車速パルス信号がしきい値を超える、あるいは、Gセンサ20によって検知された衝撃(加速度)がしきい値を超えるイベントの発生であってもよい。
The
トリガの発生がない場合、CPU11は、イグニッションSW45がオフになったか否かを判別する(S5)。イグニッションSW45がオンである場合、CPU11は、ステップS4の処理に戻る。一方、イグニッションSW45がオフになった場合、CPU11は、通常モードから省電力モードに遷移し、本動作を終了する。
If no trigger is generated, the
また一方、ステップS4でトリガの発生があった場合、CPU11は、常時記録カメラCA1〜CAn(ここでは、CA1,CA2)による映像の記録に加え、予備記録カメラRC1〜RCm(ここでは、RC1〜RC5のいずれか)によって撮像される映像を映像メモリ30に記録する、記録動作を開始する(S6)。左折時の場合、2つの予備記録カメラRC1,RC2で撮像される映像を記録するので、マイクロバス、ワンボックスカー等の全長の長い車両であっても、先頭付近及び最後尾付近の映像を確実に捉えることができる。
On the other hand, when a trigger occurs in step S4, the
CPU11は、トリガの発生が終了したか否かを判別する(S7)。CPU11は、トリガの発生が終了した場合、予備記録カメラRC1〜RCmによる映像の記録動作を終了し、常時記録カメラCA1〜CAnによる映像だけを記録する(S8)。この後、CPU11はステップS5の処理に進む。一方、ステップS7でトリガの発生が終了していない場合、CPU11は、監視エリアDZにいる対象(ここでは、人物)を認識したか否かを判別する(S9)。監視エリアDZで人物を認識していない場合、CPU11は、ステップS7の処理に戻る。一方、ステップS9で監視エリアDZで人物を認識した場合、CPU11は、スピーカ22から警報音を鳴動して運転者に警告し、注意喚起を促す(S10)。なお、ステップS10では、警報音の鳴動が行われたが、インストルメントパネル等に設置されたランプを点灯することで、警告が行われてもよい。また、CPU11は、運転者に警告すると共に、映像メモリ30に監視エリアDZにいる人物を認識したことのイベントを記録してもよい、また、通信部を有する場合、事務所PCに無線でこのイベントを送信してもよい。この後、CPU11はステップS7の処理に戻る。
The
上記実施形態では、車両5が左折する時、予備記録カメラRC1,RC2による撮像記録動作を示したが、車両の運転状態の変化が検知される場合として、他の動作例を以下に示す。
In the above embodiment, when the
(他の動作例1)
図5は他の動作例1における、車両5の上方から視た、車両5に搭載された予備記録カメラRC3の撮像範囲ag3を示す図である。運転者がギアをバックに入れると、CPU11は、信号I/F19を介してリバース信号を入力する。CPU11は、予備記録カメラRC1〜RC5のうち、リアドア5yの上部に設置された予備記録カメラRC3による映像の撮像・記録動作を開始する。図5では、車両5が矢印y2に示すように後退していくと、予備記録カメラRC3で撮像される映像内の監視エリアDZが撮像範囲ag3と共にバック方向に移動し、映像内の監視エリアDZに人物hmが入ってくる状況が想定される。CPU11は、監視エリアDZに人物hmが入ると、スピーカ22を鳴動させて警告し(警報を出力し)、運転者に注意喚起を促す。
(Other operation example 1)
FIG. 5 is a diagram illustrating an imaging range ag3 of the preliminary recording camera RC3 mounted on the
(他の動作例2)
図6は他の動作例2における、車両5の上方から視た、車両5に搭載された予備記録カメラRC4,RC5の撮像範囲ag4,ag5を示す図である。運転者が右ウインカを操作すると、CPU11は、信号I/F19を介して右ウインカ信号を入力する。CPU11は、予備記録カメラRC1〜RC5のうち、車両5の右側方の上部に設置された予備記録カメラRC4,RC5による映像の撮像・記録動作を開始する。
(Other operation example 2)
FIG. 6 is a diagram illustrating imaging ranges ag4 and ag5 of the preliminary recording cameras RC4 and RC5 mounted on the
車両5の右側方には、右折時に直進しようとするバイクbcを巻き込まないように、運転者が注意しなければならない監視エリアDZが設定される。ここでは、監視エリアDZは、車両5の右側方に沿うように全長に亘って台形ブロック状に設定される。
On the right side of the
予備記録カメラRC4が撮像する撮像範囲ag4には、監視エリアDZの前方が含まれるように、予備記録カメラRC4の画角は調整される。また、予備記録カメラRC5が撮像する撮像範囲ag5には、監視エリアDZの後方が大方含まれるように予備記録カメラRC5の画角は調整される。撮像範囲ag4及び撮像範囲ag5は、監視エリアDZを全て含んでもよいし、一部だけ含んでもよい。 The angle of view of the preliminary recording camera RC4 is adjusted so that the imaging range ag4 captured by the preliminary recording camera RC4 includes the front of the monitoring area DZ. Further, the angle of view of the preliminary recording camera RC5 is adjusted so that the imaging range ag5 captured by the preliminary recording camera RC5 includes mostly the rear of the monitoring area DZ. The imaging range ag4 and the imaging range ag5 may include the entire monitoring area DZ or only a part thereof.
図6では、車両5が矢印y3に示すように右旋回しようとすると、予備記録カメラRC4,RC5で撮像される映像内の監視エリアDZにバイクbcが入ってくる。CPU11は、監視エリアDZにバイクbcが入ると、スピーカ22を鳴動させて警報を出力する。
In FIG. 6, when the
(他の動作例3)
図7は他の動作例3における、車両5の上方から視た、車両5に搭載された予備記録カメラRC1の撮像範囲を示す図である。ここでは、車両5として、乗用車を想定する。
(Other operation example 3)
FIG. 7 is a diagram illustrating an imaging range of the preliminary recording camera RC1 mounted on the
車両5の停止時、乗員によってサイドドア5zが開かれると、CPU11は、信号I/F19を介してドア開信号を入力する。CPU11は、予備記録カメラRC1〜RC5のうち、車両5の前方に設置された予備記録カメラRC1による映像の撮像・記録動作を開始する。
When the side door 5z is opened by the occupant when the
監視エリアDZは、車両5の側方にやや短いブロック状に設定される。なお、ドア開の場合における監視エリアDZは、左折時と異なるように設定されてもよい。また、ドア開の場合、予備記録カメラRC2による撮像・記録動作は開始されないが、開始されるようにしてもよい。
The monitoring area DZ is set in a slightly short block shape on the side of the
図7では、サイドドア5zが開いた時、自転車ccが接近している状況が想定される。CPU11は、予備記録カメラRC1によって撮像される映像の撮像範囲ag1内の監視エリアDZに自転車ccが入ると、スピーカ22を鳴動させて警告し、運転者に注意喚起を促す。
In FIG. 7, it is assumed that the bicycle cc is approaching when the side door 5z is opened. When the bicycle cc enters the monitoring area DZ in the imaging range ag1 of the video imaged by the preliminary recording camera RC1, the
本実施形態のドライブレコーダ10(車載器)は、車両5に搭載され、信号I/F19に例えば左ウインカ信号を出力する(車両の運転状態の変化を検知する)左ウインカスイッチ43(検知部)と、車両5の周辺を撮像する常時記録カメラCA1〜CAn(1つ以上の第1カメラ)と、常時記録カメラCA1〜CAnと異なる画角で車両の周辺を撮像する予備記録カメラRC1〜RCm(1つ以上の第2カメラ)と、トリガ発生時(車両5の運転状態の変化が検知された場合)、常時記録カメラCA1〜CAnで撮像される映像の記録に加え、予備記録カメラRC1〜RCmで撮像される映像の記録を映像メモリ30に開始するCPU11(記録部)と、を備える。CPU11(警報部)は、車両5の周辺に監視エリアDZ(監視領域)を設定し、予備記録カメラRC1〜RCmで撮像される映像内の監視エリアDZに人物hm等の対象が出現した場合、スピーカ22を鳴動する(警報を出力する)。
The drive recorder 10 (on-vehicle device) of the present embodiment is mounted on the
これにより、トリガ発生時に記録される映像の死角を減らし、車両に接近する対象がある場合、運転者に対し注意喚起を行うことができる。つまり、トリガ発生時に映像を記録するカメラの台数を増やすことで、映像の死角を減らすことができ、また、カメラの台数が増える時期を制限することで、メモリの負荷を抑制できる。また、運転者は、監視エリア内の対象(人物等)の有無を把握して安全確認を行うことができる。また、メモリに対してアクセスを行うハードウェア(メモリを含む)の規模を小さくでき、ドライブレコーダを小型化できる。 Thereby, the blind spot of the image recorded when the trigger is generated can be reduced, and when there is an object approaching the vehicle, the driver can be alerted. That is, by increasing the number of cameras that record video when a trigger occurs, the blind spot of the video can be reduced, and by limiting the time when the number of cameras increases, the load on the memory can be suppressed. In addition, the driver can confirm the safety by grasping the presence or absence of a target (person or the like) in the monitoring area. Further, the scale of hardware (including memory) for accessing the memory can be reduced, and the drive recorder can be reduced in size.
また、常時記録カメラCA1〜CAnは、車両5の運転時、CPU11によって映像メモリ30に常時記録される映像を撮像するカメラである。予備記録カメラRC1〜RCmは、トリガが発生している間、CPU11によって記録される映像を撮像するカメラである。
The constantly recording cameras CA <b> 1 to CAn are cameras that capture images that are constantly recorded in the
これにより、常時映像を記録する動作が行われている場合でも、メモリ負荷を抑えて、死角の少ない映像を記録できる。 As a result, even when an operation for constantly recording a video is performed, it is possible to record a video with few blind spots while suppressing the memory load.
また、CPU11は、トリガが発生した(運転状態の変化が検知された)場合、トリガの種類(当該運転状態の変化)に対応する予備記録カメラRC1〜RCmで撮像される映像の記録を映像メモリ30に開始する。
In addition, when a trigger is generated (a change in the driving state is detected), the
これにより、トリガが発生した場合でも、全ての予備記録カメラによる映像を記録することなく、運転状態の変化に対応する予備記録カメラによる映像の記録だけで済む。従って、メモリの負荷を抑制できる。 As a result, even when a trigger occurs, it is only necessary to record the video by the preliminary recording camera corresponding to the change in the operation state without recording the video by all the preliminary recording cameras. Therefore, the memory load can be suppressed.
また、左ウインカスイッチ43がオンになった場合、CPU11は、車両5の左側方を撮像する、予備記録カメラRC1の記録を開始する。
Further, when the left
これにより、運転者は左折(左旋回)時に人物等の対象の存在に気づき、内輪差等による人物等の巻き込みを防止できる。 As a result, the driver notices the presence of an object such as a person when making a left turn (left turn), and can prevent the person from being involved due to an inner ring difference or the like.
尚、本発明の技術的範囲は、上述した実施形態に限定されるものではない。上述した実施形態は、本発明の技術的範囲内で種々の変形や改良等を伴うことができる。 The technical scope of the present invention is not limited to the embodiment described above. The above-described embodiments can be accompanied by various modifications and improvements within the technical scope of the present invention.
例えば、ドライブレコーダは、モニタを接続可能な機器であってもよい。この場合、左折時等のトリガが発生する場合、予備記録カメラで撮像される映像をモニタに表示できる。運転者は、モニタに表示された映像を確認しながら運転操作を行うことができ、安全運転に繋がる。 For example, the drive recorder may be a device to which a monitor can be connected. In this case, when a trigger such as a left turn occurs, an image captured by the preliminary recording camera can be displayed on the monitor. The driver can perform the driving operation while confirming the image displayed on the monitor, which leads to safe driving.
また、車載器としては、ドライブレコーダに限らず、オプションとして、カメラが接続可能なデジタルタコグラフ、パネルメータ、カーナビゲーション等であってもよい。 The on-vehicle device is not limited to a drive recorder, and may optionally be a digital tachograph, a panel meter, a car navigation, or the like to which a camera can be connected.
また、上記実施形態では、トリガが発生していない通常動作の場合、常時記録カメラによる撮像映像を記録し、トリガ発生している場合、常時記録カメラ及び予備記録カメラによる撮像映像を記録する場合を示した。トリガ発生時のカメラの数量を削減する方法として、例えば、トリガ発生時、常時記録カメラによる映像の記録を停止し、予備記録カメラよる映像の記録だけに切り替えてもよい。これにより、トリガ発生時、メモリに負荷をかけることなく、予備記録カメラによる映像を高解像度、高ビットレート、高フレームレート、低圧縮率または無圧縮で記録することが可能である。これにより、予備記録カメラで撮像される映像を鮮明にすることができる。 In the above embodiment, in the normal operation in which the trigger is not generated, the captured image is always recorded, and in the case where the trigger is generated, the captured image is always recorded by the recording camera and the preliminary recording camera. Indicated. As a method for reducing the number of cameras when a trigger occurs, for example, when a trigger occurs, video recording by the recording camera may be stopped at all times, and switching to only video recording by the preliminary recording camera may be performed. As a result, when a trigger occurs, it is possible to record the video from the preliminary recording camera at a high resolution, a high bit rate, a high frame rate, a low compression rate, or no compression without imposing a load on the memory. As a result, the image captured by the preliminary recording camera can be made clear.
また、上記実施形態では、トリガ発生時、常時記録カメラの記録動作に予備記録カメラの記録動作を追加した。単に追加するだけでなく、あらかじめ記録可能なカメラの数量(上限数)を設定しておき、トリガ発生時、上限数に達するまで予備記録カメラを動作可能にしてもよい。例えば、一部の常時記録カメラを動作させない場合、予備記録カメラの数量を増やしてもよい。これにより、予備記録カメラによる撮像映像の記録を増加できる。 In the above embodiment, the recording operation of the preliminary recording camera is added to the recording operation of the constant recording camera when a trigger occurs. In addition to simply adding, the number of cameras that can be recorded (upper limit number) may be set in advance, and when a trigger occurs, the preliminary recording camera may be operable until the upper limit number is reached. For example, when some of the continuous recording cameras are not operated, the number of preliminary recording cameras may be increased. Thereby, the recording of the captured image by the preliminary recording camera can be increased.
また、上記実施形態では、警報は、スピーカから警報音を鳴動することで、運転者に注意を喚起したが、警報音の代わりに、具体的な注意内容を表す音声メッセージを発音させてもよい。 Moreover, in the said embodiment, although the alarm alerted the driver | operator by sounding an alarm sound from a speaker, you may sound the audio | voice message showing specific attention content instead of an alarm sound. .
また、トリガ発生によって予備記録カメラによる映像の記録動作が開始される場合、予備記録カメラによって撮像される映像を、リアルタイムにモニタで表示してもよい。 Further, when the video recording operation by the preliminary recording camera is started by the occurrence of the trigger, the video captured by the preliminary recording camera may be displayed on the monitor in real time.
ここで、上述した本発明に係る車載器の実施形態の特徴をそれぞれ以下[1]〜[4]に簡潔に纏めて列記する。
[1]
車両(5)の運転状態の変化を検知する検知部(左ウインカスイッチ43)と、
前記車両の運転状態の変化が検知された場合、前記車両の周辺を撮像する、1つ以上の第1カメラ(常時記録カメラCA1〜CAn)で撮像される映像の記録に加え、前記第1カメラと異なる画角で前記車両の周辺を撮像する、1つ以上の第2カメラ(予備記録カメラRC1〜RCm)で撮像される映像の記録を開始する記録部(映像メモリ30、CPU11)と、
前記車両の周辺に監視領域(監視エリアDZ)を設定し、前記第2カメラ(予備記録カメラRC1〜RCm)で撮像される映像内の前記監視領域(監視エリアDZ)に対象が出現した場合、警報を出力する警報部(スピーカ22、CPU11)と、
を備えることを特徴とする車載器(ドライブレコーダ10)。
[2]
前記第1カメラは、前記車両(5)の運転時、前記記録部(映像メモリ30、CPU11)によって常時記録される映像を撮像する常時記録カメラ(常時記録カメラCA1〜CAn)であり、
前記第2カメラは、前記車両(5)の運転状態の変化が検知されている間、前記記録部(映像メモリ30、CPU11)によって記録される映像を撮像する予備記録カメラ(予備記録カメラRC1〜RCm)である、
ことを特徴とする上記[1]に記載の車載器(ドライブレコーダ10)。
[3]
前記記録部(映像メモリ30、CPU11)は、前記車両(5)の運転状態の変化が検知された場合、当該運転状態の変化に対応する前記第2カメラ(予備記録カメラRC1〜RCm)で撮像される映像の記録を開始する、
ことを特徴とする上記[1]又は[2]に記載の車載器(ドライブレコーダ10)。
[4]
前記検知部は、左ウインカの操作を検知するスイッチ(左ウインカスイッチ43)であり、
前記記録部(映像メモリ30、CPU11)は、前記左ウインカの操作が検知された場合、前記車両の左側方を撮像する、前記第2カメラ(予備記録カメラRC1〜RCm)の記録を開始する、
ことを特徴とする上記[3]に記載の車載器(ドライブレコーダ10)。
Here, the features of the above-described embodiments of the vehicle-mounted device according to the present invention are summarized and listed in the following [1] to [4], respectively.
[1]
A detection unit (left turn signal switch 43) for detecting a change in the driving state of the vehicle (5);
In addition to recording images picked up by one or more first cameras (always-recording cameras CA1 to CAn) that pick up images around the vehicle when a change in the driving state of the vehicle is detected, the first camera A recording unit (
When a monitoring area (monitoring area DZ) is set around the vehicle, and an object appears in the monitoring area (monitoring area DZ) in an image captured by the second camera (preliminary recording cameras RC1 to RCm), An alarm unit (
A vehicle-mounted device (drive recorder 10) comprising:
[2]
The first camera is a constantly-recording camera (always-recording cameras CA1 to CAn) that captures images that are constantly recorded by the recording unit (
The second camera is a preliminary recording camera (preliminary recording camera RC1 to RC1) that captures an image recorded by the recording unit (
The on-vehicle device (drive recorder 10) according to the above [1], characterized in that.
[3]
When the change in the driving state of the vehicle (5) is detected, the recording unit (
The on-vehicle device (drive recorder 10) according to the above [1] or [2].
[4]
The detection unit is a switch (left turn signal switch 43) that detects the operation of the left turn signal.
When the operation of the left turn signal is detected, the recording unit (
The in-vehicle device (drive recorder 10) according to the above [3], which is characterized in that
本発明は、車載器において、車両の運転状態の変化が検知された時、記録される映像の死角を減らし、車両に接近する対象がある場合、運転者に対し注意喚起を行うことができ、有用である。 The present invention reduces the blind spot of the recorded video when a change in the driving state of the vehicle is detected in the on-vehicle device, and can alert the driver when there is an object approaching the vehicle, Useful.
5 車両
5y リアドア
5z サイドドア
10 ドライブレコーダ
11 CPU
12 映像処理部
13 画像認識処理部
14 プログラムデータメモリ
15 ワークデータメモリ
16 不揮発性メモリ
17 データ処理部
18 カードI/F
19 信号I/F
20 Gセンサ
21 GPS受信部
22 スピーカ
23 電源I/F
41 ブレーキスイッチ
42 右ウインカスイッチ
43 左ウインカスイッチ
45 イグニッションスイッチ
ag1〜ag5 撮像範囲
bc バイク
cc 自転車
CA1〜CAn 常時記録カメラ
DZ 監視エリア
hm 人物
RC1〜RCm 予備記録カメラ
y1〜y3 矢印
5
12
19 Signal I / F
20
41
Claims (4)
前記車両の運転状態の変化が検知された場合、前記車両の周辺を撮像する、1つ以上の第1カメラで撮像される映像の記録に加え、前記第1カメラと異なる画角で前記車両の周辺を撮像する、1つ以上の第2カメラで撮像される映像の記録を開始する記録部と、
前記車両の周辺に監視領域を設定し、前記第2カメラで撮像される映像内の前記監視領域に対象が出現した場合、警報を出力する警報部と、
を備えることを特徴とする車載器。 A detection unit for detecting a change in the driving state of the vehicle;
When a change in the driving state of the vehicle is detected, in addition to recording a video image captured by one or more first cameras that capture the surroundings of the vehicle, the vehicle has an angle of view different from that of the first camera. A recording unit that starts recording of an image captured by one or more second cameras that captures the surroundings;
An alarm unit that sets a monitoring area around the vehicle and outputs an alarm when a target appears in the monitoring area in an image captured by the second camera;
A vehicle-mounted device comprising:
前記第2カメラは、前記車両の運転状態の変化が検知されている間、前記記録部によって記録される映像を撮像する予備記録カメラである、
ことを特徴とする請求項1に記載の車載器。 The first camera is a continuous recording camera that captures images that are constantly recorded by the recording unit during driving of the vehicle;
The second camera is a preliminary recording camera that captures an image recorded by the recording unit while a change in the driving state of the vehicle is detected.
The on-vehicle device according to claim 1.
ことを特徴とする請求項1又は2に記載の車載器。 When the change in the driving state of the vehicle is detected, the recording unit starts recording a video imaged by the second camera corresponding to the change in the driving state.
The vehicle-mounted device according to claim 1 or 2, wherein
前記記録部は、前記左ウインカの操作が検知された場合、前記車両の左側方を撮像する、前記第2カメラ記録を開始する、
ことを特徴とする請求項3に記載の車載器。 The detection unit is a switch that detects an operation of the left turn signal,
The recording unit, when an operation of the left turn signal is detected, images the left side of the vehicle, and starts the second camera recording;
The vehicle-mounted device according to claim 3.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017120909A JP2019008381A (en) | 2017-06-20 | 2017-06-20 | On-vehicle device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017120909A JP2019008381A (en) | 2017-06-20 | 2017-06-20 | On-vehicle device |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2019008381A true JP2019008381A (en) | 2019-01-17 |
Family
ID=65029583
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017120909A Abandoned JP2019008381A (en) | 2017-06-20 | 2017-06-20 | On-vehicle device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2019008381A (en) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002127948A (en) * | 1998-11-30 | 2002-05-09 | Tuner Kk | On-vehicle image recording system |
JP2009193257A (en) * | 2008-02-13 | 2009-08-27 | West Nippon Expressway Co Ltd | Drive recorder |
JP2011114850A (en) * | 2009-11-30 | 2011-06-09 | Yupiteru Corp | Vehicle-mounted video recorder, reproducing apparatus, and program |
-
2017
- 2017-06-20 JP JP2017120909A patent/JP2019008381A/en not_active Abandoned
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002127948A (en) * | 1998-11-30 | 2002-05-09 | Tuner Kk | On-vehicle image recording system |
JP2009193257A (en) * | 2008-02-13 | 2009-08-27 | West Nippon Expressway Co Ltd | Drive recorder |
JP2011114850A (en) * | 2009-11-30 | 2011-06-09 | Yupiteru Corp | Vehicle-mounted video recorder, reproducing apparatus, and program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10741082B2 (en) | Driving assistance device | |
US9349225B2 (en) | Accident reporting system for vehicles | |
US20220111857A1 (en) | Vehicular driving assist with driver monitoring | |
US11616905B2 (en) | Recording reproduction apparatus, recording reproduction method, and program | |
JP2008221906A (en) | Damage part informing system for vehicle | |
US11917326B2 (en) | Recording reproduction apparatus, recording reproduction method, and non-transitory computer readable medium | |
CN102211547A (en) | Driving visual blind area detection system and method | |
KR101455847B1 (en) | Digital tachograph with black-box and lane departure warning | |
JP2014096632A (en) | Imaging system | |
JP3125587U (en) | Drive monitor with accident prevention alarm | |
KR101580567B1 (en) | Apparatus of recording event based image data | |
TW201344648A (en) | Driving monitoring system and driving monitoring method | |
CN111464797A (en) | Driving assistance apparatus, method, vehicle, and storage medium | |
TW201538369A (en) | Traffic lane deviation warning system and method by combination with driving behavior | |
US20210407227A1 (en) | On-vehicle recording control apparatus, on-vehicle recording apparatus, on-vehicle recording control method, and non-transitory computer-readable recording medium | |
JP2018205845A (en) | On-vehicle image recording device | |
EP1447780A1 (en) | Method and apparatus for capturing and recording images of surrounding environment of a vehicle | |
KR20180094717A (en) | Driving assistance apparatus using avm | |
JP2019008381A (en) | On-vehicle device | |
JP2008305189A (en) | On-vehicle camera system | |
JP7057074B2 (en) | On-board unit and driving support device | |
JP6018840B2 (en) | Drive recorder | |
WO2022185653A1 (en) | Vehicular recording control device and recording control method | |
US11580750B2 (en) | Recording apparatus, recording method, and non-transitory computer-readable medium | |
JP2012022610A (en) | Drive recorder and image storage method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200519 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210317 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210323 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210426 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20210615 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210804 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20210804 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20210813 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20210817 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20210903 |
|
C211 | Notice of termination of reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C211 Effective date: 20210907 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20220329 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20220412 |
|
C13 | Notice of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: C13 Effective date: 20220517 |
|
A762 | Written abandonment of application |
Free format text: JAPANESE INTERMEDIATE CODE: A762 Effective date: 20220708 |