JP7184779B2 - ミラー代替カメラのビデオシーケンスの再生を検査する装置および方法 - Google Patents
ミラー代替カメラのビデオシーケンスの再生を検査する装置および方法 Download PDFInfo
- Publication number
- JP7184779B2 JP7184779B2 JP2019540044A JP2019540044A JP7184779B2 JP 7184779 B2 JP7184779 B2 JP 7184779B2 JP 2019540044 A JP2019540044 A JP 2019540044A JP 2019540044 A JP2019540044 A JP 2019540044A JP 7184779 B2 JP7184779 B2 JP 7184779B2
- Authority
- JP
- Japan
- Prior art keywords
- camera
- video sequence
- image
- movement
- motion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 31
- 230000033001 locomotion Effects 0.000 claims description 47
- 238000012545 processing Methods 0.000 claims description 7
- 230000008859 change Effects 0.000 claims description 5
- 230000000694 effects Effects 0.000 claims description 3
- 230000009471 action Effects 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 21
- 238000003384 imaging method Methods 0.000 description 5
- 238000011161 development Methods 0.000 description 3
- 230000018109 developmental process Effects 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000002123 temporal effect Effects 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 1
- 230000008014 freezing Effects 0.000 description 1
- 238000007710 freezing Methods 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 230000004313 glare Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/28—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with an adjustable field of view
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
- B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/12—Mirror assemblies combined with other articles, e.g. clocks
- B60R2001/1253—Mirror assemblies combined with other articles, e.g. clocks with cameras, video cameras or video screens
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
- B60R2011/0001—Arrangements for holding or mounting articles, not otherwise provided for characterised by position
- B60R2011/004—Arrangements for holding or mounting articles, not otherwise provided for characterised by position outside the vehicle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
- B60R2011/0042—Arrangements for holding or mounting articles, not otherwise provided for characterised by mounting means
- B60R2011/008—Adjustable or movable supports
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/40—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the details of the power supply or the coupling to vehicle components
- B60R2300/402—Image calibration
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
- B60R2300/8046—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for replacing a rear-view mirror system
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Mechanical Engineering (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Closed-Circuit Television Systems (AREA)
- Studio Devices (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Rear-View Mirror Devices That Are Mounted On The Exterior Of The Vehicle (AREA)
Description
本発明は、サイドミラー代替品およびバックミラー代替品用のシステムに関する。
特に、本発明は、車両用ミラー代替カメラのビデオシーケンスの再生を検査する装置および方法に関する。
サイドミラーおよびバックミラーは、ますますカメラモニタシステムにより代替可能になってきている。そのようなミラー代替システムはカメラとモニタを有し、例えば車両用サイドミラーおよびバックミラーを代替する。
空気力学的に有利であり、それにより燃費が低減されることに加え、カメラが代替されることによって初めて可能になる技術的な改良点も存在する。
サラウンドビューシステムにおける複数のカメラの画像はフュージョンされるが、つまりまとめて搭載され、妨害となる歪みまたは画像の影響が差し引かれ、運転者にとっての眩しさが回避される。
一般的なミラーの代替物とシステムが略１００％機能するための、カメラと表示用の拡張機能を開発し、システムを不具合なく構成する必要がある。従来のミラーには関係がないものの、ミラー代替システムには一層問題となっている知られた課題とは、とりわけ、画像処理システムのエラーにより表示の際に画像がフリーズすることである。
道路走行中、運転者はそのようなエラーが存在するかどうかきわめて迅速に見きわめるべきだが、非常に緩やかに変化するか、またはまったく変化がない背景、例えば車両の出車または駐車の際、静止画像はおそらくはミラー代替システムのエラーでもある可能性がある。
運転者は例えばミラーモニタを見て、危険がないと判断して狭い所から発進する。しかしこの時は静止画像であった可能性があるのである。
本発明の課題は、運転支援システム用の改善されたカメラ機能を提供することである。
本課題は、独立請求項の主題により解決される。発展形態と実施形態が従属請求項、明細書および図面の図から見出される。
本発明の第１態様は、車両用ミラー代替カメラのビデオシーケンスの再生を検査する装置に関する。
本装置は、撮像し、画像データを供給するように構成される可動カメラ装置と；さらに、カメラ装置と接続され、得られた画像データに基づいてビデオシーケンスを生成するように構成される画像データ処理装置と；さらに、生成されたビデオシーケンスを表示するように構成される出力装置と；さらに、カメラ装置を運動動作させ、かつ／またはビデオシーケンス生成時に画像移動を発生させ、表示されるビデオシーケンスを検査するように構成される診断装置と、を備える。
本発明は、例えば、車両用カメラモニタシステムのビデオデータのフリーズを識別する技術システムと方法を提案する。
ここで、本発明は、例えば、自動および自立した反復テストを提案する。
本発明は、例えば、カメラの運動動作または画像移動を用いて、画像比較により、ミラー代替システムの静止画像またはフリーズ画像を同定することを提案する。
さらに、本方法は、運転者に危険を喚起する可能性を構成する。
本発明は、まさに機能安全性の向上も必要とされるミラー代替システムに提供される。
提案される方法および手順は、ミラー代替システムの不具合の可能性を低減することを可能にする。
画像のフリーズによるエラーが発生した際、一方で、システムは自立して回復できるか、またはエラーを診断することができ、他方で、運転者に対して技術的な信頼と新しいシステムを提供することができる。
これにより、ミラー代替物を適用するデジタルシステムの受け入れ性を改善することができる。
本発明は、自動車においてさらに一層重要性が増している撮像カメラシステムの安全性の向上に貢献する。本発明は、乗物における他の撮像システム、例えばレーダまたは超音波に基づく撮像センサシステムに適用可能である。
本発明は、カメラまたはミラー代替システムの安全性を向上させる解決手段を提供する。さらに本発明は、技術システムにより引き起こされる事故を回避でき、運転者または乗員にエラーの存在と不在を表示することができ、安全なシステムへの信頼を生み出すことができる。
本発明の有利な形態はサブクレームから見出される。
本発明の有利な形態において、診断装置は、乗員による出力装置とのアイコンタクトが認識された場合、表示されるビデオシーケンスの検査を実施するように構成される。
本発明の有利な形態において、診断装置は、トリガイベントが確認された場合、表示されるビデオシーケンスの検査を実施するように構成される。トリガイベントとして、走行状況、走行状態、運転者の挙動または周期的に実施されるシステム検査が含まれてよい。
本発明の有利な形態において、診断装置は、表示されるビデオシーケンスの検査を所定の時間間隔内で反復して実施するように構成される。
本発明の有利な形態において、診断装置は、表示されるビデオシーケンスの検査を主流の走行状況に基づいて、かつ／または主流の走行状態に基づいて実施するように構成される。
本発明の有利な形態において、可動カメラ装置は、撮影された像を変更するために、カメラの視野の移動を実施するように構成される。言い換えると、カメラ装置のパン、例えば所定の角度範囲での移動が実施される。
記載される形態と発展形態は任意に組み合わされてよい。
本発明のさらなる可能な形態、発展形態および実装は、明示して言及されない、上記または以下に実施形態に関して記載される本発明の特徴の組み合わせも含む。
添付の図面により、本発明の実施形態はさらに理解されるだろう。
添付の図面は実施形態を例示し、明細書とともに本発明の概念の解釈に役立つものである。
他の実施形態および多くの言及される有利な点は、図面の図を参照して得られる。図面の図に示される要素は、必ずしも互いに縮尺通りに示されているわけではない。
図面の図中、同一の参照符号は、別段の記載がない限り、同一または機能が同一の要素、部材、部品または方法ステップを示す。
車両または乗物とは、例えば車両または例えばセーリング機能を有するハイブリッド車両などのハイブリッド車両、例えば自動二輪車、バスもしくはトラックまたは自転車に関する。
ミラー代替カメラのビデオシーケンスの再生を検査する装置は、さらなるカメラおよびセンサに基づくシステムに適用可能である。
基本的に、本方法はレーダセンサまたはライダーセンサにも転用でき、その場合ミラー代替カメラのビデオシーケンスの再生を検査する装置を適用可能である。
センサはそれ自体が可動に構成される必要がないのは、乗物それ自体が可動オブジェクトとして使用され、またはドア、電動スクリーン、尾灯、方向指示器といった乗物の一部が、撮影された像の範囲に応じて可動オブジェクトとして使用されるためである。
図１は、本発明を説明するための、カメラを備えるシステム全体、ミラー代替システム、または略してＭＲＳ、英語では「Ｍｉｒｒｏｒ Ｒｅｐｌａｃｅｍｅｎｔ Ｓｙｓｔｅｍ」を記載する概略図である。
図１はカメラ、または乗物に搭載され所定の視野範囲もしくは視野を有するカメラ装置も示す。
また、画像データ処理装置、ＭＲＳと、画像データまたはビデオシーケンスを表示する出力装置の形態を有するディスプレイが図示されている。
図２は、本発明を説明するための、ミラー代替カメラの概略図を示す。
図２は、ミラーカメラの例示的な視界の図を示す。
これにより、ほとんどの場合で乗物の一部または部分領域も可視であり、つまり、そのような周囲が可視の場合、それにより運転者はカメラが向けられている方向をより良好に確認できる。
記載される方法は：
ｉ）様々なフレームを撮影し、時間の経過に関して互いに比較し；かつ／または
ｉｉ）カメラを自動的に位置合わせするか、または運動動作させ、画像を互いに比較する、システムを記載するものである。
ｉ）様々なフレームを撮影し、時間の経過に関して互いに比較し；かつ／または
ｉｉ）カメラを自動的に位置合わせするか、または運動動作させ、画像を互いに比較する、システムを記載するものである。
本発明は、カメラが操作中そして画面に表示中に運動動作され、表示とシステム全体を検査するように構成されるメカニズムを提案する。また、複数のカメラも対応して制御可能であり、このカメラを用いた検査用の運動動作が実施可能である。
この場合、カメラまたはレンズが例えば左方向または右方向に運動動作し、他の場面を撮影する。このようにして、場面が静止している場合にも、つまり、乗物の移動がない場合にも、または撮影された場面に種々雑多なオブジェクトがある場合にも、新しいオブジェクトにカメラの焦点が合わせられる。
したがって、運動動作の前に撮影された、その前の画像とは異なる画像が撮影される。
例えば、カメラは車体の方に向けることができる。これは、このときにつねに或る背景が予想されるためである。
また、この背景は予め記憶されておいてよく、極端な濃霧と強雨を除いて、カメラの角度に基づいて一義的にも決定されえる。
図３は、本発明の１つの実施形態例による、２つの時間的に連続して撮影された像の時間的な連続性を明らかにするためのタイムラインの概略図を示す。
図３は、２つの連続する画像の比較を示す。これは、画像処理システムのフリーズまたは画像処理システムの画像の欠落を識別するための方法であってもよい。
この場合、カメラシステムにより時間的に連続する画像が記憶され、これらの連続して撮影された画像は、続いて、ソフトウェアに基づく画像処理方法を用いて演算システムで互いに比較される。
図４は、本発明のさらなる実施形態例による、他の視野範囲を有するカメラレンズの変更を例示する概略図を示す。
図４は、カメラが運動動作すると、図１の視野とは異なる他の視野が生じることを例示する。
図５は、本発明のさらなる実施形態例による、ミラー代替カメラのビデオシーケンスの再生を検査する方法のフローチャートの概略図を示す。
図５は、撮影された像を時間の経過に関して簡単に画像比較する際に生じえる複雑な点を示す。
例えば、駐車スペースまたは駐車場から出発する場合、撮影の時点でカメラの視野において、ほとんどまたはまったく移動しないオブジェクトを識別する必要があることが起こりえる。
カメラは図示されるように時間的に連続する画像を撮影し、これらの撮影された像を比較する。
この場合、カメラは差分を発見しておらず、カメラモニタシステムがフリーズしている場合がありえるが、そうでない場合、つまり示されるオブジェクトが移動していない場合もありえる。
図６は、本発明のさらなる実施形態例による、ミラー代替カメラのビデオシーケンスの再生を検査する方法のフローチャートの概略図を示す。
図７は、本発明のさらなる実施形態例による、ミラー代替カメラのビデオシーケンスの再生を検査する方法を開始する、「Ｔｒｉｇｇｅｒ」とも称される、起こりえるトリガイベントを示す。
図７は、車両側方の特定の一部または部分領域の撮影または像を用いて、移動の識別をより迅速かつ確実に見きわめる、本発明の実施形態を示す。
図８は、カメラが１つの形態（ここではミラー）で固定されて搭載される場合のさらなる可能性を示す。
本発明の１つの実施形態例によると、さらに、ミラー調整を介して、カメラを運動動作させるか、ミラー代替システムの画像処理プロセスおよび表示プロセスのフリーズを識別するように構成されてよい。
図９は、本発明のさらなる実施形態例による、ミラー代替カメラのビデオシーケンスの再生を検査する方法のフローチャートの概略図を示す。
図９は、カメラの調整を介して画像のエラーを識別するためのフローチャートを示す。
図９は、方法の結果を示す。カメラは多くの場合、自車両または少なくとも自車両の一部を撮影する可能性が高いため、ここでも、例えば方向指示器が操作された場合に、一義的に差分が識別可能である。任意で、乗物には目印が設けられてもよい。
図１０は、本発明のさらなる実施形態例による、車両用ミラー代替カメラのビデオシーケンスの再生の検査の概略図を示す。
車両用ミラー代替カメラのビデオシーケンスの再生を検査する装置１００は、カメラ装置１０と、画像データ処理装置２０と、出力装置３０と、診断装置４０とを有する。
可動カメラ１０は、撮像し、画像データを供給するように構成される。
画像データ処理装置２０は、カメラ装置１０と接続され、得られた画像データに基づいてビデオシーケンスを生成するように構成される。
出力装置３０は、生成されたビデオシーケンスを表示するように構成される。
診断装置４０は、カメラ装置１０を運動動作させ、かつ／またはビデオシーケンス生成時に画像移動を発生させ、表示されるビデオシーケンスを検査するように構成される。
図１１は、本発明のさらなる実施形態例による、車両用ミラー代替カメラのビデオシーケンスの再生を検査する方法のフローチャートの概略図を示す。
車両用ミラー代替カメラのビデオシーケンスの再生を検査する方法は、以下の方法ステップを有する。
第１方法ステップとして、撮像し、可動カメラ装置１０を用いて画像データを供給するステップＳ１が実施される。
第２方法ステップとして、得られた画像データに基づいてビデオシーケンスを生成するステップＳ２が実施される。
第３方法ステップとして、生成されたビデオシーケンスを表示するステップＳ３が実施される。
第４方法ステップとして、カメラ装置１０を運動動作させ、かつ／またはビデオシーケンス生成時に画像移動を発生させ、表示されるビデオシーケンスを検査するステップＳ４が実施される。
本発明を有利な実施形態例に基づいて上述したが、それに限定されるのではなく、様々な方法および形態で修正可能である。特に、本発明は、発明の本質を逸脱することなく、様々に変形または修正可能である。
また、「備える」および「有する」は、他の要素またはステップを排除するものではなく、「１つ」は、複数を排除するものではないことに注意されたい。
さらに、上記実施形態例を参照して記載された特徴またはステップは、他の上記記載の実施形態例の他の特徴またはステップと組み合わせても適用可能であることに注意されたい。請求項の参照符号は限定と見なされてはならない。
Claims (8)
- 車両用ミラー代替カメラのビデオシーケンスの再生を検査する装置において：
－像を撮影し、画像データを供給するように構成され、さらに、撮影される前記像を変更するために、カメラの運動動作によりカメラの視野の移動を実施するように構成される可動カメラ装置（１０）と；
－前記カメラ装置（１０）と接続され、得られた前記画像データに基づいてビデオシーケンスを生成するように構成される画像データ処理装置（２０）と；
－生成された前記ビデオシーケンスを表示するように構成される出力装置（３０）と；
－前記カメラ装置（１０）を制御して運動動作させ、運動動作の前に撮影された前の像とは異なる像が撮影され、表示される前記ビデオシーケンスをカメラの運動動作前後に撮影された像の画像比較により検査し、ビデオシーケンスのフリーズを識別するように構成される診断装置（４０）と、
を備え、
前記診断装置（４０）は、乗員による前記出力装置（３０）とのアイコンタクトが認識された場合、表示される前記ビデオシーケンスの検査を実施するように構成される装置（１）。 - 車両用ミラー代替カメラのビデオシーケンスの再生を検査する装置において：
－像を撮影し、画像データを供給するように構成され、さらに、撮影される前記像を変更するために、カメラの運動動作によりカメラの視野の移動を実施するように構成されるサイドミラー代替カメラとしての可動カメラ装置（１０）と；
－前記カメラ装置（１０）と接続され、得られた前記画像データに基づいてビデオシーケンスを生成するように構成される画像データ処理装置（２０）と；
－生成された前記ビデオシーケンスを表示するように構成される出力装置（３０）と；
－前記カメラ装置（１０）を制御してカメラを車体の方に向けるように運動動作させ、運動動作の前に撮影された前の像とは異なる像が撮影され、カメラを車体の方に向けるときのカメラの角度に基づいて一義的に決定される車体の一部の像が予め記憶されており、表示される前記ビデオシーケンスをカメラの運動動作前後に撮影された像の画像比較により検査し、ビデオシーケンスのフリーズを識別するように構成される診断装置（４０）と、を備える装置（１）。 - 前記診断装置（４０）は、乗員による前記出力装置（３０）とのアイコンタクトが認識された場合、表示される前記ビデオシーケンスの検査を実施するように構成される、請求項２に記載の装置。
- 前記診断装置（４０）は、表示される前記ビデオシーケンスの検査を所定の時間間隔内で反復して実施するように構成される、請求項１～３のいずれか１項に記載の装置。
- 前記診断装置（４０）は、表示される前記ビデオシーケンスの検査を主流の走行状況に基づいて、かつ／または主流の走行状態に基づいて実施するように構成される、請求項１～４のいずれか１項に記載の装置。
- ミラー代替カメラと、請求項１～５のいずれか１項に記載の装置とを備えるミラーモニタシステム。
- 車両用ミラー代替カメラのビデオシーケンスの再生を検査する方法において：
－像を撮影し、撮影される前記像を変更するために、カメラの運動動作によりカメラの視野の移動を実施するように構成される可動カメラ装置（１０）を用いて画像データを供給するステップ（Ｓ１）と；－得られた前記画像データに基づいてビデオシーケンスを生成するステップ（Ｓ２）と；－生成された前記ビデオシーケンスを表示するステップ（Ｓ３）と；
－前記カメラ装置（１０）を制御して運動動作させ、運動動作の前に撮影された前の像とは異なる像が撮影され、表示される前記ビデオシーケンスをカメラの運動動作前後に撮影された像の画像比較により検査し、ビデオシーケンスのフリーズを識別するステップ（Ｓ４）と、
を備え、
生成された前記ビデオシーケンスを表示するための出力装置（３０）との乗員によるアイコンタクトが認識された場合、表示される前記ビデオシーケンスの検査を実施するように構成される方法。 - 車両用ミラー代替カメラのビデオシーケンスの再生を検査する方法において：
－像を撮影し、撮影される前記像を変更するために、カメラの運動動作によりカメラの視野の移動を実施するように構成されるサイドミラー代替カメラとしての可動カメラ装置（１０）を用いて画像データを供給するステップ（Ｓ１）と；－得られた前記画像データに基づいてビデオシーケンスを生成するステップ（Ｓ２）と；－生成された前記ビデオシーケンスを表示するステップ（Ｓ３）と；
－前記カメラ装置（１０）を制御してカメラを車体の方に向けるように運動動作させ、運動動作の前に撮影された前の像とは異なる像が撮影され、カメラを車体の方に向けるときのカメラの角度に基づいて一義的に決定される車体の一部の像が予め記憶されており、表示される前記ビデオシーケンスをカメラの運動動作前後に撮影された像の画像比較により検査し、ビデオシーケンスのフリーズを識別するステップ（Ｓ４）と、
を備える方法。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| DE102017207792.1A DE102017207792A1 (de) | 2017-05-09 | 2017-05-09 | Vorrichtung und Verfahren zum Prüfen einer Wiedergabe einer Videosequenz einer Spiegelersatzkamera |
| DE102017207792.1 | 2017-05-09 | ||
| PCT/DE2018/200034 WO2018206059A1 (de) | 2017-05-09 | 2018-04-06 | Vorrichtung und verfahren zum prüfen einer wiedergabe einer videosequenz einer spiegelersatzkamera |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2020520132A JP2020520132A (ja) | 2020-07-02 |
| JPWO2018206059A5 JPWO2018206059A5 (ja) | 2022-06-06 |
| JP7184779B2 true JP7184779B2 (ja) | 2022-12-06 |
Family
ID=62196283
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019540044A Active JP7184779B2 (ja) | 2017-05-09 | 2018-04-06 | ミラー代替カメラのビデオシーケンスの再生を検査する装置および方法 |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US10821895B2 (ja) |
| EP (1) | EP3529979B1 (ja) |
| JP (1) | JP7184779B2 (ja) |
| CN (1) | CN110226323B (ja) |
| DE (1) | DE102017207792A1 (ja) |
| WO (1) | WO2018206059A1 (ja) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE102018218735B4 (de) * | 2018-10-31 | 2024-01-18 | Continental Automotive Technologies GmbH | Kamerasystem und Assistenzsystem für ein Fahrzeug sowie Verfahren zum Betreiben eines Kamerasystems |
| DE102019003061B4 (de) | 2018-11-15 | 2023-11-23 | Günter Fendt | Vorrichtung zum Prüfen eines optischen Erfassungssystems für ein Kraftfahrzeug, sowie ein Verfahren hierzu |
| DE102019110871A1 (de) * | 2019-04-26 | 2020-10-29 | Mekra Lang Gmbh & Co. Kg | Sichtsystem für ein Fahrzeug |
| DE102020101794A1 (de) * | 2020-01-27 | 2021-07-29 | Sick Ag | Absichern einer Maschine |
| CN114347917B (zh) * | 2021-12-28 | 2023-11-10 | 华人运通(江苏)技术有限公司 | 一种车辆、车载摄像系统的校准方法和装置 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004328246A (ja) | 2003-04-23 | 2004-11-18 | Mitsubishi Electric Corp | 車載映像表示装置 |
| JP2007318480A (ja) | 2006-05-26 | 2007-12-06 | Matsushita Electric Ind Co Ltd | 監視妨害抑制装置および監視妨害抑制方法 |
| JP2008283431A (ja) | 2007-05-10 | 2008-11-20 | Matsushita Electric Ind Co Ltd | 画像処理装置 |
| JP2010188903A (ja) | 2009-02-19 | 2010-09-02 | Denso Corp | 車外映像表示システムおよび車両 |
| JP2016134657A (ja) | 2015-01-15 | 2016-07-25 | 株式会社デンソー | 視界支援装置 |
| JP2017216518A (ja) | 2016-05-30 | 2017-12-07 | アイシン精機株式会社 | 画像表示システム |
Family Cites Families (20)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| FR2792488B1 (fr) * | 1999-04-16 | 2001-06-08 | Aerospatiale Airbus | Dispositif d'emission d'images video numeriques |
| JP3298851B2 (ja) * | 1999-08-18 | 2002-07-08 | 松下電器産業株式会社 | 多機能車載カメラシステムと多機能車載カメラの画像表示方法 |
| US8292433B2 (en) * | 2003-03-21 | 2012-10-23 | Queen's University At Kingston | Method and apparatus for communication between humans and devices |
| CN101754045B (zh) * | 2008-12-08 | 2013-07-24 | 北京中星微电子有限公司 | 监控系统中区分呆死画面的方法、监控系统及装置 |
| DE102009023435A1 (de) * | 2009-05-29 | 2010-01-14 | Daimler Ag | Kamerasystem, Verfahren zur Erkennung eines Wiedergabezustands des Kamerasystems und Computerprogramm |
| EP4170937A1 (en) * | 2010-12-10 | 2023-04-26 | Sun Patent Trust | Signal generation method and signal generation device |
| CN102118629B (zh) * | 2011-03-30 | 2014-04-09 | 上海美琦浦悦通讯科技有限公司 | 基于监控平台的网络视频监控服务质量保障系统及方法 |
| US20130155236A1 (en) * | 2011-12-15 | 2013-06-20 | Pradeep Ramdeo | Camera-mirror system for motor vehicle |
| DE102012021403A1 (de) * | 2012-10-30 | 2014-04-30 | Audi Ag | Verfahren zum Identifizieren eines von einer Sensoreinrichtung erfassten Fahrzeugs |
| JP6163207B2 (ja) * | 2013-07-18 | 2017-07-12 | クラリオン株式会社 | 車載装置 |
| DE102013221879A1 (de) * | 2013-10-28 | 2015-05-21 | Continental Teves Ag & Co. Ohg | Fahrerassistenzsystem mit einer Kamera mit Verstellmechanismus |
| DE102014106035A1 (de) * | 2014-04-30 | 2015-11-05 | Connaught Electronics Ltd. | Verfahren zum Betreiben eines Fahrerassistenzsystems mit einem elektronischen Rückspiegel, Fahrerassistenzsystem und Kraftfahrzeug |
| US20160011657A1 (en) * | 2014-07-14 | 2016-01-14 | Futurewei Technologies, Inc. | System and Method for Display Enhancement |
| US10000154B2 (en) | 2014-08-07 | 2018-06-19 | Ford Global Technologies, Llc | Vehicle camera system having live video indication |
| US9661280B2 (en) * | 2014-10-23 | 2017-05-23 | Honda Motor Co., Ltd. | Rearview obstruction camera system and associated method |
| US9672433B2 (en) * | 2014-11-14 | 2017-06-06 | Toyota Motor Engineering & Manufacturing North America, Inc. | Multi-directional vehicle maneuvering assistance |
| GB2539471B (en) * | 2015-06-17 | 2018-06-27 | Ford Global Tech Llc | A method for adjusting a mirror |
| US20180032822A1 (en) * | 2016-08-01 | 2018-02-01 | Ford Global Technologies, Llc | Vehicle exterior monitoring |
| CN106427783B (zh) * | 2016-11-11 | 2019-12-10 | 北京汽车股份有限公司 | 车载摄像头和具有它的车辆 |
| CN106585530A (zh) * | 2016-11-18 | 2017-04-26 | 重庆泰奥豪骋科技有限公司 | 一种车载抓拍装置及其控制方法 |
-
2017
- 2017-05-09 DE DE102017207792.1A patent/DE102017207792A1/de active Pending
-
2018
- 2018-04-06 US US16/478,247 patent/US10821895B2/en active Active
- 2018-04-06 JP JP2019540044A patent/JP7184779B2/ja active Active
- 2018-04-06 CN CN201880008127.4A patent/CN110226323B/zh active Active
- 2018-04-06 WO PCT/DE2018/200034 patent/WO2018206059A1/de unknown
- 2018-04-06 EP EP18725391.9A patent/EP3529979B1/de active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004328246A (ja) | 2003-04-23 | 2004-11-18 | Mitsubishi Electric Corp | 車載映像表示装置 |
| JP2007318480A (ja) | 2006-05-26 | 2007-12-06 | Matsushita Electric Ind Co Ltd | 監視妨害抑制装置および監視妨害抑制方法 |
| JP2008283431A (ja) | 2007-05-10 | 2008-11-20 | Matsushita Electric Ind Co Ltd | 画像処理装置 |
| JP2010188903A (ja) | 2009-02-19 | 2010-09-02 | Denso Corp | 車外映像表示システムおよび車両 |
| JP2016134657A (ja) | 2015-01-15 | 2016-07-25 | 株式会社デンソー | 視界支援装置 |
| JP2017216518A (ja) | 2016-05-30 | 2017-12-07 | アイシン精機株式会社 | 画像表示システム |
Also Published As
| Publication number | Publication date |
|---|---|
| US20190359132A1 (en) | 2019-11-28 |
| CN110226323B (zh) | 2022-04-29 |
| EP3529979B1 (de) | 2024-08-21 |
| DE102017207792A1 (de) | 2018-11-15 |
| EP3529979A1 (de) | 2019-08-28 |
| WO2018206059A1 (de) | 2018-11-15 |
| CN110226323A (zh) | 2019-09-10 |
| US10821895B2 (en) | 2020-11-03 |
| JP2020520132A (ja) | 2020-07-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7184779B2 (ja) | ミラー代替カメラのビデオシーケンスの再生を検査する装置および方法 | |
| US11310461B2 (en) | Imaging apparatus, imaging system, and display system | |
| JP7055743B2 (ja) | 複数カメラを用いた車両用モニタリングシステム | |
| US9393917B2 (en) | Method for operating a driver assistance system with an electronic rearview mirror, driver assistance system and motor vehicle | |
| US20190100156A1 (en) | System and method for controlling a display | |
| CN102971776B (zh) | 障碍物检测系统以及方法、障碍物检测装置 | |
| WO2018159017A1 (ja) | 車両用表示制御装置、車両用表示システム、車両用表示制御方法およびプログラム | |
| JP6350113B2 (ja) | 画像処理装置、及び画像処理装置の故障診断方法 | |
| WO2018123546A1 (ja) | 車両用視認装置 | |
| CN112298036B (zh) | 车辆用电子镜系统 | |
| JPWO2018206059A5 (ja) | ||
| JP2016032978A (ja) | 車体周り撮影装置 | |
| US20150035982A1 (en) | Image capturing device for a vehicle | |
| JP2020017942A (ja) | 車両周囲の状況をアーチファクトを低減して提示するための方法およびシステム | |
| JP2012147308A (ja) | 画像処理装置、画像表示システム、及び、画像処理方法 | |
| CN112602318B (zh) | 车载用拍摄装置及车载用图像识别装置 | |
| US20210217146A1 (en) | Image processing apparatus and image processing method | |
| CN114097216A (zh) | 图像处理装置和图像处理程序 | |
| JP2010188926A (ja) | 車両後方表示装置および車両後方表示方法 | |
| JP2009230343A (ja) | ドライブレコーダー装置 | |
| CN111819110A (zh) | 用于监视车辆摄像机系统的设备和方法 | |
| JP7177618B2 (ja) | 信頼性判定装置および信頼性判定方法 | |
| JP7459607B2 (ja) | 表示制御装置、表示制御方法およびプログラム | |
| US11611692B2 (en) | Fixed pattern noise reduction and high spatial frequency filtering using vari-focus lenses in low contrast scenes | |
| JP2017046059A (ja) | 車両用表示装置および車両用表示方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20200707 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210302 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220204 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220309 |
|
| A524 | Written submission of copy of amendment under article 19 pct |
Free format text: JAPANESE INTERMEDIATE CODE: A524 Effective date: 20220526 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220706 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220816 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221102 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221124 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7184779 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| S631 | Written request for registration of reclamation of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313631 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |