JP7403196B2 - 情報処理システム及びプログラム等 - Google Patents
情報処理システム及びプログラム等 Download PDFInfo
- Publication number
- JP7403196B2 JP7403196B2 JP2023028069A JP2023028069A JP7403196B2 JP 7403196 B2 JP7403196 B2 JP 7403196B2 JP 2023028069 A JP2023028069 A JP 2023028069A JP 2023028069 A JP2023028069 A JP 2023028069A JP 7403196 B2 JP7403196 B2 JP 7403196B2
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- photographing
- camera
- image
- person
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title description 75
- 230000006870 function Effects 0.000 claims description 169
- 238000001514 detection method Methods 0.000 claims description 47
- 239000011521 glass Substances 0.000 claims description 18
- 238000003384 imaging method Methods 0.000 description 80
- 238000012545 processing Methods 0.000 description 73
- 238000000034 method Methods 0.000 description 59
- 238000010586 diagram Methods 0.000 description 44
- 230000008859 change Effects 0.000 description 38
- 230000001133 acceleration Effects 0.000 description 34
- 230000008569 process Effects 0.000 description 29
- 238000013459 approach Methods 0.000 description 28
- 238000004891 communication Methods 0.000 description 21
- 230000000694 effects Effects 0.000 description 18
- 230000002265 prevention Effects 0.000 description 16
- 230000015654 memory Effects 0.000 description 15
- 238000012544 monitoring process Methods 0.000 description 14
- 238000013461 design Methods 0.000 description 13
- 238000009434 installation Methods 0.000 description 11
- 239000005357 flat glass Substances 0.000 description 10
- 230000033001 locomotion Effects 0.000 description 10
- 230000002829 reductive effect Effects 0.000 description 9
- 230000007246 mechanism Effects 0.000 description 8
- 230000003287 optical effect Effects 0.000 description 8
- 230000009471 action Effects 0.000 description 7
- 230000004044 response Effects 0.000 description 7
- 238000004458 analytical method Methods 0.000 description 6
- 230000006835 compression Effects 0.000 description 6
- 238000007906 compression Methods 0.000 description 6
- 230000007958 sleep Effects 0.000 description 6
- 230000006399 behavior Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 5
- 239000000446 fuel Substances 0.000 description 5
- 230000005484 gravity Effects 0.000 description 5
- 238000005259 measurement Methods 0.000 description 5
- 230000036961 partial effect Effects 0.000 description 5
- 230000002441 reversible effect Effects 0.000 description 5
- 230000001960 triggered effect Effects 0.000 description 5
- 241001465754 Metazoa Species 0.000 description 4
- 230000005856 abnormality Effects 0.000 description 4
- 230000000903 blocking effect Effects 0.000 description 4
- 238000010191 image analysis Methods 0.000 description 4
- 238000003780 insertion Methods 0.000 description 4
- 230000037431 insertion Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 241000282412 Homo Species 0.000 description 3
- 206010041349 Somnolence Diseases 0.000 description 3
- 238000012790 confirmation Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000010295 mobile communication Methods 0.000 description 3
- 238000007781 pre-processing Methods 0.000 description 3
- 230000029305 taxis Effects 0.000 description 3
- 230000002159 abnormal effect Effects 0.000 description 2
- 230000004913 activation Effects 0.000 description 2
- 239000000853 adhesive Substances 0.000 description 2
- 230000001070 adhesive effect Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000036760 body temperature Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 235000019504 cigarettes Nutrition 0.000 description 2
- 210000000078 claw Anatomy 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 239000012141 concentrate Substances 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000000474 nursing effect Effects 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 230000035939 shock Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 241000282326 Felis catus Species 0.000 description 1
- HBBGRARXTFLTSG-UHFFFAOYSA-N Lithium ion Chemical compound [Li+] HBBGRARXTFLTSG-UHFFFAOYSA-N 0.000 description 1
- 241000699670 Mus sp. Species 0.000 description 1
- PXHVJJICTQNCMI-UHFFFAOYSA-N Nickel Chemical compound [Ni] PXHVJJICTQNCMI-UHFFFAOYSA-N 0.000 description 1
- 206010039203 Road traffic accident Diseases 0.000 description 1
- 239000002253 acid Substances 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 238000013019 agitation Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000003796 beauty Effects 0.000 description 1
- 238000005452 bending Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- OJIJEKBXJYRIBZ-UHFFFAOYSA-N cadmium nickel Chemical compound [Ni].[Cd] OJIJEKBXJYRIBZ-UHFFFAOYSA-N 0.000 description 1
- 239000003990 capacitor Substances 0.000 description 1
- 238000002485 combustion reaction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000001816 cooling Methods 0.000 description 1
- 239000000498 cooling water Substances 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 230000030808 detection of mechanical stimulus involved in sensory perception of sound Effects 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 239000002828 fuel tank Substances 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 230000004886 head movement Effects 0.000 description 1
- 238000002347 injection Methods 0.000 description 1
- 239000007924 injection Substances 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 229910001416 lithium ion Inorganic materials 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012806 monitoring device Methods 0.000 description 1
- 230000007935 neutral effect Effects 0.000 description 1
- 229910000652 nickel hydride Inorganic materials 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 238000012856 packing Methods 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000001568 sexual effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000001931 thermography Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Emergency Alarm Devices (AREA)
- Time Recorders, Dirve Recorders, Access Control (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
Description
そこで、本発明は、例えば、リア側から車室内を撮影する仕組みなど、従来よりも優れたシステム等を提供する。
本願は上記課題を解決する手段を複数含んでいるが、その一例を挙げるならば、車両後方から車両前方に向かって撮影した車室内の映像データを処理することを特徴とし、例えば、車両後方から車両前方に向かって撮影した車室内の映像データと、車両後方から車両後方外部を撮影した車外の映像データと、を処理する、ことを特徴とする。
上記した以外の課題、構成及び効果は、以下の実施例の説明により明らかにされる。
また、以下の説明では、車両後方から車両前方に向かって撮影した車室内の映像データと、車両後方から車両後方外部を撮影した車外の映像データと、を処理する、情報処理システムにおける、個々の構成要素について具体的に説明するが、本システムの構成要素は、それらに限定されるものではなく、個々の構成要素に関連して説明した機能を実行できるものであれば、別の構成や様態であっても構わない。
また、映像データは、静止画映像及び動画映像のいずれを構成するデータであってもよいが、動画映像とすると特によい。以下の説明における「映像」なる用語は、人の目で見る静止画映像(静止画画像ともいう。)又は動画映像(動画画像ともいう。)とするとよいが、技術内容と整合する限り「映像データ」、「画像」、「画像情報」と読み替えることも可能である。
図1(a)は車両10の側面図であり、図1(b)は車両10の上面図である。
また同様に、車内に更にフロント側の撮影機器が存在し、リア側の撮影機器101Rとフロント側の撮影機器の間に、電源及びデータを通信するためのケーブル接続が存在する構成でも、空間から引き出した両方のケーブルを統合し、フロント側の撮影機器との接続ケーブルに接続することも可能である。
また、そのような構成では撮影機器101Rと車室内撮影用リアカメラ102は、更に、例えば設計及び製造段階でそれぞれの撮影画像の中心軸を予め一致させる構成とするとよく、このようにすれば、それぞれのカメラからの映像の比較等の処理を容易に行うことができる。
撮影機器101Rと車室内撮影用リアカメラ102が縦に配置されて一体化された構成であって、両者の中心軸を予め一致した構成とすることで、ユーザは、カメラ縦配置の一体化構成のカメラを1つ配置するだけで、互いに中心が揃った状態の車室内の画像及び車両後方の車両外部の画像を獲得することができる。
さらに、ユーザが、自身のユーザ端末や、車両に備え付けられたユーザ端末、リモコン等を用いて、ユーザ端末のディスプレイ等で映像を確認しながら、車内撮影用の車室内撮影用リアカメラ102の撮影方向の角度調整を行う構成としてもよい。
フロント前方撮影カメラは、その取り付け位置の関係で、太陽光による直射及びそれによる熱の影響を受けやすかった。一方、フロント前方撮影カメラは、フロントガラス等に設置されるため、車両前方に視界が開けていなければならないという機能面での制限から、有効な遮光措置を採用することが困難であった。
太陽光の直射や熱の影響の少ないリア後方撮影カメラをメインユニットとし、このリア後方撮影カメラが、増設した車室内撮影用カメラの映像やフロント前方撮影カメラの映像を処理し、記録する構成とすることで、システム全体が故障しにくくなり、又熱による誤動作を低減することが可能となる。
車室内撮影用リアカメラ102は、車内を後ろから撮影することで、人の顔を撮影せずプライバシーを守りながら行動を撮影し、解析し、検知する構成とするとよい。
車室内撮影用リアカメラ102は、車内の後方からサイドの窓ガラス越しに車両外部を撮影して車両周辺の様子を検知する構成とするとよい。
車室内撮影用リアカメラ102は、車両天井に設置されているものの状態を検出する構成とするとよい。
車室内撮影用リアカメラ102は、荷台や座席上等の荷物を検出する構成とするとよい。
車室内撮影用リアカメラ102は、車両の表示部、例えば座席背面に設けられたモニタや天井に設けられたモニタ等の状態を検出する構成とするとよい。
車室内撮影用リアカメラ102は、車内、特に車両後部空間に人がいるかを検知する構成とするとよい。
車室内撮影用リアカメラ102は、車内の人の有無に基づき駐車状態を検知する構成とするとよい。
これらの点については、図4との関連でより詳細に説明する。
それにより車室内撮影用リアカメラ102からの映像に基づき、撮影機器101Rの制御部303が、チャイルドシート内の乳児を良好に識別し、置き去りの発生等を確実に検出することができる。このような置き去りの検出及びその警告は、後述する人検知センサを備えた構成により更に確実に実行できる。
例えば、リア後方カメラである撮影機器101R及び車室内撮影用リアカメラ102がそれぞれ180°の撮影範囲をカバーしている構成では、更に、撮影機器101Rが撮影した後方からの急接近、後方煽り、及び、車室内撮影用リアカメラ102が車室の窓ガラス越しに撮影した、側方煽り、危険な追い抜き、を途切れなく連続的に記録する構成とするとよい。
例えば、後方車両がリアから接近し、車線変更し、仮に幅寄せされた状況でも、360°カメラを用いて、状況変化を切れ目なく録画する構成とするとよい。
また、通常360°カメラでは視野角が大きく画像が小さいが、車室内に合わせた視野角(運転席、助手席の外が見える)にしてなるべく画角を広く設定した構成とするとよい。
上記の実施例では、車室内の映像データを取得する車室内撮影用リアカメラ102と、車外の映像データを取得する撮影機器101Rを、撮影目的等に応じて、それぞれ別々に且つより柔軟に設計することが可能である。
特に、車両外部で車両の左右に取り付けられた車外監視用のカメラとは異なり、車室内撮影用リアカメラ102は、例えば側方から煽りの様子と、その際の車室内の様子を共に撮影することが可能である。
例えば、前方及び後方の撮影機器101F、101Rは、横配置(カメラ用語でいう横位置)で映像を撮影し、車室内撮影用リアカメラ102は縦配置(カメラ用語でいう縦位置)で映像を撮影するとよい。つまり、車室内撮影用リアカメラ102は、映像の長手方向が当該映像の縦方向(つまり、天地方向)になり、短手方向が天地方向に直交する方向になるように、画像を撮影する構成とするとよい。例えば、車室内撮影用リアカメラ102はリア左右方向のセンターから車内を撮影する構成とするとよい。
車室内撮影用リアカメラ102は、普通車であれば4:3、バンなど車室が前後に長い車であれば16:9のイメージセンサを使用して、縦配置で映像を撮影する構成とするとよい。
フロントから車内を撮影するフロント車内撮影カメラを縦配置にしてもよい。ただしリアから車内を撮影するカメラはセンターに取り付けやすいのでなおよい。センターに取り付けることで、7人乗りなどの車でセンターの通路部分を介して前方まで広い範囲を撮影する構成とするとよい。
これは例えば、
・フロント車内撮影カメラより、車室内撮影用リアカメラのほうが解像度が高いカメラとしたこと(ピクセル数が多い)、
・フロント車内撮影カメラは熱画像カメラとし、車室内撮影用リアカメラは可視光カメラとしたこと、
・フロント車内撮影カメラは白黒映像のカメラ(赤外カメラ)とし、車室内撮影用リアカメラは可視光カメラとしたこと
などの措置を採用することによって、実現する構成とするとよい。
また、車内カメラは、車内の音声を記録する(録音ともいう。)構成とするとよい。
車室内撮影用リアカメラ102は、車両の車室を後方から前方に向かって撮影するものであるので、運転手席や助手席の後等の従来のフロント車内撮影カメラやルームミラーでは死角となる車室領域をカバーした撮影を行う構成とするとよい。
また、車室内撮影用リアカメラ102の撮影方向を車両後方へ変更できる構成とするとよい。このような実施例については図6を用いて後述する。
撮影機器101F、101Rと、ユーザ端末103と、外部サーバ104とは、それぞれがネットワーク105を介して接続されている。なお、ネットワーク105は有線、無線を問わず、それぞれのユーザ端末103はネットワーク105を介して情報を送受信する構成とするとよい。ネットワーク105はインターネットに限られず、また異なるプロトコルのネットワークの組み合わせであってもよい。
但し、搭載対象の車両は本実施例では四輪の自動車であるが、四輪自動車に限定されるものではなく、撮影機器101F、101Rを設置することが可能な車両であればよい。例えば、バス、トラック等の四輪以上の大型輸送車、自動二輪車や自転車等の二輪車、その他の車両が対象となり得る。また例えば、電車、モノレール、リニアモーターカー等の交通機関の乗り物も搭載の対象となり得る。
撮影機器101F、101Rは、取得した各種情報や後述のイベント判定の結果に関する情報等をネットワーク105経由でユーザ端末103に送信する構成とするとよい。
また、ユーザ端末103は、これらのネットワーク105経由で外部サーバ104と接続され、外部サーバ104に各種情報を送信する構成とするとよい。
撮影機器コントローラ304(DVRコントローラ304)は、特には車両直後を含む主に車両外部の後方映像を撮影するカメラ302、加速度センサ305、SDカード306、GNSSセンサ307、入出力部315、図示しないその他センサ等と接続されており、これらを制御する。また、これらの要素から受信した情報に基づいて、撮影機器コントローラ304が、撮影機器コントローラ304の状態を示すステータス情報を生成する。また、撮影機器コントローラ304は生成したステータス情報をマイコン301に送信する。
撮影機器コントローラ304は、入出力部315を介して、カメラ302とは異なる、後方から前方に向かって車内を撮影する車室内撮影用リアカメラ102と接続されている。
・通信処理部314を制御する。
・通信処理部314が取得した位置情報を撮影機器コントローラ304に通知する。
・撮影機器コントローラ304から取得したステータス情報や、通信処理部314から取得した位置情報を例えば16byteのデータに変換する。
・二次電池駆動時にスリープ制御を行う。
・製造、試験時のテストモードを実行する。
マイコン301はプログラム可能であり、マイコン301には上記のような各種処理を実行するためのプログラムが記憶されており、このプログラムをマイコン301の処理部が実行することで、上記の各種処理を実現する。本実施例においては、このマイコン301の処理部やマイコン301自体を制御部と呼ぶこともある。
・画像の中から対象物をメタデータで出力する。
・ISP(Image Signal Processor)出力形式の例えばYUVやRGBの画像を出力する。
・特定領域のみ切り出した画像を出力する。
上記のAI処理機能は、車室内撮影用リアカメラ102から伝送された映像データに対しても同様の処理を実行する構成とするとよい。
例えば、撮影機器101Rが、カメラ302のイメージセンサに前処理を行うAI処理機能を搭載している場合では、撮影機器101Rが独自に映像処理や画像処理を実行し、撮影機器101Rが、理想的な画質の画像情報を作成する構成とするとよい。
同様の処理は、車室内撮影用リアカメラ102から伝送された映像データに対しても実行可能であり、撮影機器101Rの更新により、接続する車室内撮影用リアカメラ102の機種や種類に応じた処理を追加できる構成としてもよい。
SDカード306は、画像情報や、その画像情報に対応する録画情報等、各種情報を記録する記憶装置である。なお、SDカードに限られず、データを記憶できる構成であればよいが、車載のために耐振動性の高いフラッシュメモリが好ましい。
GNSSセンサ307は集積回路等で実装された位置情報取得部を有し、GPS(Global Positioning System)等のGNSS(Global Navigation Satellite System、全球測位衛星システム)に対応したGNSSアンテナから受信した信号に基づいて、位置情報を取得する。また、位置情報取得部は、時刻情報や移動速度情報や移動方位情報を取得する構成とするとよい。
電源311は、車両電源310から受信(又は受電と呼ぶこともある)した電力を撮影機器コントローラ304に供給し、また二次電池312を充電する。なお、後述の入出力部315が電力の供給も行える構成としてもよく、この場合、撮影機器101Rは、入出力部315を介して、車両電源310を受電する。
入出力部315は、撮影機器コントローラ304に接続されるが、その代わりにマイコン301に接続される構成としてもよい。
入出力部315は直接ネットワーク105に接続されているが、車室内撮影用リアカメラ102を介して、ネットワーク105に接続される構成であってもよい。
また、上述の通り、入出力部315は車両電源310からの電力の入出力ができる構成としてもよい。
車室内撮影用リアカメラ102は、車室内撮影用リアカメラ102が撮影した映像データを、入出力部315を介して、撮影機器101Rの撮影機器コントローラ304に送信する。
車室内撮影用リアカメラ102が映像データや電力を入出力できる構成とすることで、入出力部315を有する撮影機器101Rに、車室内撮影用リアカメラ102を接続するだけで、映像データや電力を外部にパススルーすることができ、既存の撮影機器101Rの構成を変える必要が無く新たなカメラを追加することが可能となり便利である。
撮影機器101Rの制御部303は、処理フロー400に従い、以下の処理を実行する。以下の説明では、撮影機器101Rの制御部303による画像処理や映像処理の具体的なアルゴリズムや設定等の説明は省略する。
制御部303は、解析結果に基づき、後述する設定された個々の状況についての判定を行う(S430)。
制御部303は、判定結果に基づき、後述する出力を行う(S430)。
例えば、画像取得モジュールが画像取得処理ステップS410を実行し、画像解析モジュールが画像解析ステップS420を実行し、判定モジュールが判定ステップS430を実行し、出力モジュールが出力処理ステップS440を実行し、制御部303がそれぞれのモジュールと連携する構成としてもよい。
更に、個々のモジュールはハードウェア的に実装されていてもよいし、ソフトウェア的に実装されていてもよい。
第1の例
想定されるケース
後ろから車内を撮影して人物を検出して、フィルタをかける。
入力例
人物を確認できる画像
出力例
人物に映像フィルタをかけた画像等
制御部303は、S410で車室内撮影用リアカメラ102により撮影された画像を取得し、S420で撮影された画像を解析し、S430で人物が写っているか、写っている人物の顔が識別できるか或いは背面しか写っていないか、等を判定する。
S440では、制御部303は、写っている人物の顔を識別すると、顔の範囲に例えば動物の顔をモチーフとしたフィルタをかけた画像を作成し出力する。
制御部303は、映像内の人物に対して、3Dモデルとして、(覆面のように)顔全体にかぶせ、顔の向きによって、表示位置を変化させる構成とするとよいが、そのような処理は演算負荷が高いため、前からのカメラは正面、後ろからのカメラは背面の側の絵をかぶせるような構成とすると、処理に掛かる演算負荷を格段に低下させることができる。
更に、人物の顔等にフィルタをかけることにより、より一層車内の人物のプライバシーに配慮した映像を作成することができる。これにより例えばバスやタクシー等の利用者が感じる、自身の映像が記録されることに対する抵抗感を、低減させることができる。そのような抵抗感は、例えば車内モニタにフィルタのかかった状態の映像を表示し、乗客自身が確認できるようにすることで、より一層低減させることができる。この構成では、事件事故等で警察等の要請が認められた場合に、フィルタを外した映像を確認できるように設定することもできる。
想定されるケース
車両周辺の様子を検知して、その状態に基づいて通知や警告等を行う。
入力例
車両周辺の様子を撮影した画像
出力例
車両周辺の様子についての通知や警告等
制御部303は、後ろから撮影された車室内撮影用リアカメラ102の映像データを解析し、例えばサイドの車検知、人検知、障害物検知を実行する構成とするとよい。この構成では更に、車室内撮影用リアカメラ102が広角カメラであるとよく、180°カメラ、半球カメラ、天球カメラであってもよい。
例えば、予め窓ガラスの輪郭を指定することにより、制御部303は、車内の様子と車両周辺の様子(車両外部の様子)を切り分けて判定することが可能となり、状況に応じてそれぞれの部分の映像データのみを解析することにより、より低い演算負荷で状況を識別する構成とするとよい。
・方向指示器を出したときに、サイドに車や人、障害物がいる状況、
・車内に人がいない状態で駐車している自車両に不自然に接近する者がいる状況、
・そのような者が車内を覗き込んでいるような状況、
・エンジン始動時、徐行時、走行時等に車両の周囲に、人、特に子供が存在する、接近する或いは遊んでいるような状況、
・車両の後方や側方からの煽りを受けているような状況、
等である。
フロントに設置された車内撮影カメラでは、前方のシート(運転席、助手席)が邪魔をして、後部座席の窓ガラスからの横の撮影が難しく、高精度の判定は困難であった。一方、本実施例のように、車両の後ろ側に設置された車室内撮影用リアカメラ102から前方を撮影する構成であると、車両サイド、前方サイドを良好に撮影することができるので、制御部303がこれらの状況を高精度で判定することが可能となる。
想定されるケース
車両天井に設置されているものの状態を検出して、その状態に基づいて通知や警告等を行う。
入力例
車両天井の設置物が撮影された画像
出力例
車両天井の設置物の状態についての通知や警告等
制御部303は、S410で車室内撮影用リアカメラ102により撮影された画像を取得し、S420で撮影された画像を解析し、S430で車両天井の設置物が写っているか、写っている車両天井の設置物が適切な位置や状態であるか、車両天井の設置物が乗客、特には乗客の頭部と接触していないかあるいは接触の危険はないか、等を判定する。
S440では、制御部303は、車両天井の設置物が適切な位置や状態にないこと、車両天井の設置物が乗客、特には乗客の頭部と接触している状態あるいは接触の危険がある状態であること、等を判定するとその点についての警告を出力する。
例えば、制御部303は、
・プロジェクタが所望の位置あるいは方向に調整されているか、
・乗客を乗せていない等の状態でプロジェクタが起動しているか又は逆に乗客を乗せている状態でプロジェクタが起動していないか、
・画像が投影されている状態で、画像とスクリーンの位置関係は適切であるか、
・乗客がプロジェクタに頭をぶつけていないか、
等を判定する構成とするとよい。
制御部303が、これらの状況の発生を判定すると、制御部303は、車内のスピーカやモニタ等から警告音や「プロジェクタの状態が異常です」等の警告音声や、警告画像を出力するとよい。
ドライバーは、これらの警告に基づいて、プロジェクタの位置や状態、設定等を適宜修正することが可能である。例えば、乗客がいない状態ではプロジェクタを利用して車外へ向けて広告映像を確実に投射し、車内に乗客がいる状態では映像の投射を辞め乗客にとっての快適性を担保することができる。また、乗客がいない状態ではプロジェクタを利用して車外へ向けて広告映像を確実に投射し、車内に乗客がいる状態ではその乗客向けの映像の投射を行い、広告宣伝効果を高めることができる。
例えば、制御部303は、
・乗客を乗せている状態でフリップダウンモニタが映像を停止していることあるいは閉状態にあること、
・逆に乗客を乗せていない状態でフリップダウンモニタが映像を再生していること或いはフリップダウンモニタが開状態であること、
等を判定する構成とするとよい。
制御部303がそれらの状況の発生を判定すると、制御部303は、車内のスピーカやモニタ等から警告音や「フリップダウンモニタの状態を確認してください」等の警告音声や警告画像を出力する。
また、車両リア側に設けられた車室内撮影用リアカメラ102は、フリップダウンモニタに映されている映像を良好に認識することが可能であるので、制御部303は、映像ごとに乗客がフリップダウンモニタの方向を向いていた時間の長さ等のデータを分析することにより、広告映像ごとに乗客の興味や関心の度合いを記録することができる。
また、制御部303が、そのような記録を分析した結果を、乗客がより興味をもつ傾向が高い広告映像を再生するために利用する構成や、ネットワーク105を介して、広告映像を提供する企業の外部サーバ104へ分析結果を送信する構成とすることもできる。
想定されるケース
荷台や座席上等の荷物の状態を検出して、その状態に基づいて通知や警告等を行う。
入力例
荷物の状態が撮影された画像
出力例
荷物の安定性についての通知や警告等
制御部303は、S410で車室内撮影用リアカメラ102により撮影された画像を取得し、S420で撮影された画像を解析し、S430で荷台や座席上等に置かれたあるいは積まれた荷物の状態、例えば荷台や座席と荷物の位置関係、推定される荷物の重心の位置、複数の荷物の重心位置の位置関係、車両の速度や加速度及びそれらの変化に関連した荷物の位置の変化、等を判定する。荷物の重心は、例えば画面内で荷物として認識された2次元的な形状の中心点として簡易的に推定する構成とするとよいが、その他の方法で推定してもよい。
例えば、他車両による後方からの急な側方煽りに対応するためにドライバーがハンドルを切ったことにより、他車両との接触事故は回避できたものの、車両に積み込んだ荷物が崩れ、損害が発生した場合などには、車室内撮影用リアカメラの映像には、側方から急接近する他車両、それに対応するドライバーの運転、その際の他車両の運転軌道、及び、どのタイミングで荷物が崩れたか、等が1つの映像データに記録されるので、事故や発生した事象の解析に非常に有利である。
想定されるケース
車両の表示部の状態を検出して、その状態に基づいて通知や命令等を行う。
入力例
車両の表示部を撮影した画像
出力例
表示部の状態についての通知、表示部の状態に応じた命令等
また、後述の第9の例と組み合わせて、制御部303は、例えば後部座席の子供が眠っていると判定した場合、モニタの表示を一時停止或いは非表示にする命令を出力することもできる。
そのため、ドライバーの適切な運転操作中に事故等に巻き込まれた場合、本情報処理システムの撮影機器101Rは、
・事故が端末の操作時に発生したものではないこと、
・事故が端末の誤操作によるものではないこと、
・事故が自動運転中に起きたものであるか手動運転中に起きたものであるか、
等についての、客観的証拠を提供する構成とするとよい。
なお、前後の車内カメラの映像から上記の各状態を総合的に判断する構成は、判断の精度の向上させることまた客観的証拠を増やすことができるので、更に有利である。
想定されるケース
撮影映像に頭が映ってばかりの状態を検出して、その状態に基づいて通知や警告等を行う。
入力例
人物、特に頭部の状態が映っている画像
出力例
撮影映像に頭が映ってばかりであることの通知や警告等
制御部303は、S410で車室内撮影用リアカメラ102により撮影された画像を取得し、S420で撮影された画像を解析し、S430で撮影された映像の画面内に頭部が写っているか、写っている頭部の画面内に占める割合がどの程度であるか、等を判定する、あるいは事前にそのような事態が想定される設置状態にあるか、等を判定する。
それにより、制御部303は、ユーザに対して車室内撮影用リアカメラ102により撮影する映像の状態を所望の状態に修正するきっかけを適切なタイミングで提供することができる。
想定されるケース
駐車状態を検出、その状態に基づいて撮影モードの切り替え命令等を行う。
入力例
人物が撮影された画像
出力例
駐車監視モードへの切り替え命令等
制御部303は、S410で車室内撮影用リアカメラ102により撮影された画像を取得し、S420で撮影された画像を解析し、S430で撮影された映像内に人物がいるか、車両が駐車状態であるか、等を判定する。
S440では、制御部303は、車両が駐車状態であると判定した場合、車室内撮影用リアカメラ102の撮影モードを駐車監視モードに切り替える命令を出力する。
この構成は、後述の第8の置き去り検知の例と合わせることもでき、駐車監視モードの場合に、置き去り検知が起動するようにするとよい。また、例えば上記の第2の例と組み合わせて、駐車監視モードの場合に、車両周辺の状態検知を起動するようにするとよい。
想定されるケース
車内での人物の置き去り等の状態を検出、その状態に基づいて通知や警告等を行う。
入力例
人物が撮影された画像
出力例
置き去り等についての通知や警告等
制御部303は、S410で車室内撮影用リアカメラ102により撮影された画像を取得し、S420で撮影された画像を解析し、S430で撮影された映像内に人物がいるか、映像内の人物が子供や障碍者であるか、子供や障碍者以外の人物が乗車しているか、車両が駐車状態であるか、置き去りの状態であるか、等を判定する。
これにより、ドライバー自身が発生している置き去りに対応可能な状況では、最小限の警告のみで置き去りを解消することが可能であるし、ドライバーが自身で置き去りに対応することができない状況では、周囲に対して置き去りの状況を知らせることができる。
例えば人検出可能なセンサの検知範囲を車両の後部領域あるいは後部座席付近に限定し、運転手と乗客とを、高精度に分けて判別する構成とするとよい。
想定されるケース
車内の人物の居眠り、睡眠を検出して、それに基づいて、通知や警告等を行う。
入力例
人物が撮影された画像
出力例
居眠りや睡眠についての通知、警告等
制御部303は、S410で車室内撮影用リアカメラ102により撮影された画像を取得し、S420で撮影された画像を解析し、S430で撮影された映像内に人物がいるか、映像内の人物がドライバーであるか或いは同乗者であるか、ドライバーの頭部が写っているか、頭部の状態が例えばコクリコクリと動くような居眠りに関する警告のパターンを示しているか、後部座席の同乗者の顔や頭部が写っているか、顔や頭部の状態が睡眠状態のパターンを示しているか、等を判定する。
想定されるケース
車両に人が乗っている場合に撮影する
入力例
人を確認できる画像等の車両に人が乗っていることを判定するための情報
出力例
撮影した画像の画像情報
制御部303は、車両に人が乗っていると判定した期間のみの画像情報を、所定の出力先に出力してもよいが、その期間の前、後又はこれらの両方である期間(以下「前後期間」という。)の画像情報を出力すると尚良い。前後期間は、固定の時間長(例えば、前5分、後5分)としてもよいが、ユーザが設定できるように撮影機器101Rが構成されてもよい。このようにすると、車両に人が乗っている期間の前後の画像情報も出力されるため、例えば車両に人が乗ってきたときの様子、又は降りたときの様子も、撮影画像から把握できるようにすることができる。
想定されるケース
人がしゃべった場合に撮影する
入力例
人の音声等の人がしゃべったことを判定するための情報
出力例
撮影した画像の画像情報
制御部303は、車室内において人がしゃべった期間の前、後又はそれらの両方である前後期間の画像情報を、出力するとよい。前後期間は、固定の時間長としてもよいが、ユーザが設定できるように撮影機器101Rが構成されてもよい。このようにすると、車室内において人がしゃべった期間の前後の画像情報も出力されるため、そのしゃべった期間の前後の様子も撮影画像から把握できるようにすることができる。
想定されるケース
車内の人が手を伸ばした場合に撮影する
入力例
人を確認できる画像等の車内の人が手を伸ばしたことを判定するための情報
出力例
撮影した画像の画像情報
上記のようにシフトレバーの可動範囲やセンターコンソールの範囲等は、人が手を伸ばしたと判定するための基準として利用することができるが、ユーザは、車室内撮影用リアカメラ102により撮影された画像を用いて、例えば運転席と助手席の間の任意の位置に、人が手を伸ばしたと判定するための基準を、独自に設定でき、更に、その基準を必要に応じて変更や調整できる構成とするとよい。
制御部303は、車室内において人が手を伸ばした期間の前、後又はそれらの両方である前後期間の画像情報を、出力するとよい。前後期間は、固定の時間長としてもよいが、ユーザが設定できるように撮影機器101Rが構成されてもよい。このようにすると、車室内の人が手を伸ばした期間の前後の画像情報も出力されるため、人が手を伸ばした期間の前後の様子も把握できるようにすることができる。
図5(a)の実施例では、車両10には、撮影機器101Rの他に、2つの車室内撮影用リアカメラ102a、102bが設置されている。また、図5(b)の実施例では、車両10には、撮影機器101Rの他に、2つの車室内撮影用リアカメラ102c、102dが設置されている。
1つの撮影機器101Rと2つの追加の車室内撮影用リアカメラ102a、102b又は102c、102dは、有線または無線で接続されており、2つの追加の車室内撮影用リアカメラ102a、102b又は102c、102dで撮影された映像データは、撮影機器101Rで画像処理されるとよい。
リアカメラは、電線をガラスにつける部分から出すように設計されたコネクタを実装してもよい。このようなコネクタは、車内でケーブルがより目立たなくなるような位置にあるとよく、車両の種類やデザインに応じて取り付け位置の調整する構成とするとなおよい。
これらの映像データが、第5世代移動通信システム(5G)を用いて伝送される構成であると、例えばたくさんの天球カメラを取り付けた場合でもデータの伝送をスムーズに行うことができる。
(a)は、車室内撮影用リアカメラ102の概観を示すものであり、筐体2001にレンズ2004があり、2つのLEDランプ2003がレンズ2004の左右についている構成である。なお、LEDランプの位置はこの部分に限られず、筐体2001の別の位置にあってもよい。
図7(a)の広角カメラ700は広角レンズを有している。広角レンズは、標準のレンズよりも画角が広いレンズである。広角レンズは、標準のレンズよりも焦点距離が短い。広角カメラ700は広角レンズを用いて撮影する撮影手段を有する。広角カメラ700の撮影手段は、撮影し、撮影した画像を示す画像データを生成する。
広角カメラ700は、レンズの方向に投光器701を有しており、この投光器701の向きはレンズの向きと連動して変化する。広角カメラ700は、その車両後方側半分がフィルタ702で覆われている。図7(b)の実施例では、フィルタ702は、広角カメラ700を覆うハウジングカバーに取り付けられている。
投光器701からの光が赤外光であり、広角カメラ700がIRカメラであると、夜間等にも車室内を明瞭に撮影することができる。
操作面120が有する平坦面の法線は水平方向120Hを向いており、広角レンズ114の光軸114Aが鉛直下方向に対して操作面120が存在する側とは反対側に所定の角度θ傾いている。
θ=((X-200)×0.5)° ・・・(1)
式(1)を満たすように所定の角度θを設定することにより、広角カメラ100は、広角レンズ114の光軸114Aが、鉛直下方向に対して操作面120の存在する側とは反対側に((X-200)×0.5)°傾き、水平方向120Hよりも上の(X-190)°の領域を含む、上下に広範な領域を撮影できる。
この様にリア側を1つのカメラで実装すると、リア側のカメラを室内側のカメラと後方側のカメラの2つのカメラとする場合に比べて、コストダウン、設置の手間の軽減、小型化が可能となる。
図8(a)は、救急車両のリアハッチが閉じた状態を示しており、図8(b)は、救急車両のリアハッチが開いた状態を示している。図8(b)の状態では、車室内撮影用リアカメラ102は、ストレッチャーや担架の救急車両内へ移動や、停車中の周囲の環境等を良好に撮影することができる。
リアハッチなど跳ね上げ式のドアの内側に、例えば天球カメラ、或いはそれに準じる広角カメラ、を取りつけることにより、ハッチが開いた状態で、上からちょうど路上においたストレッチャーや担架の状態を撮影する構成とするとよい。
この実施例では、例えば救急車の出動時から現地への到着までは車室内撮影用リアカメラ102を作動させず、制御部303がハッチの開放を検出したことをトリガとして、車室内撮影用リアカメラ102による記録を開始する構成や、又は、撮影の設定や使用するレンズを変更する構成とするとよい。
車室内撮影用リアカメラ102で撮影したビデオを病院や消防司令へ5G等で伝送することで、正確な情報を映像や音声で伝えることが可能となる。また、音声認識で自動的に文字起こしすることも有効である。
加えて、事故時に周囲にいた人も撮影できるので、事故原因の特定、犯人の特定にも利用できる。
制御部303が、ハッチを開いた状態か、閉じた状態かを判定して、その時点を記録する機能を備えるとよい。望ましくはハッチを空けている途中か、締めている途中かも判定して記録する構成とするとよい。
他方のカメラは、空の方を撮影することになるが、火災や飛び降りなどでは上空方向の現場状況や、天気の状況を撮影することができる。
半天球カメラの場合、ハッチへの取り付け位置は、ハッチの窓部のすぐ下の位置で、左右方向中央部とするとよい。
このようにすれば、ハッチを開いているときは、風雨の影響を受けにくいとともに、ハッチの下で行われる様子を含め周囲の様子を撮影することができる。
それらの構成においても、荷物の積み込み時の状況、積み込まれた荷物の状態の変化、または、運転者など患者以外の搭乗者等の乗車時の状況、リアハッチを開放した状態で行っていた作業の様子等を記録する構成とするとよい。
例えば、図8で説明した実施の形態と共通する思想に基づく実施の形態として、以下のようなものがある。続いて、図9を参照して、福祉車両である車両500を用いて、デイサービスの利用者U1の送迎を行う場合の実施の形態を説明する。図9では、車両500は、車椅子仕様の福祉車両である。撮影機器101Rのカメラは、半天球カメラ、或いはそれに準じる広角カメラで、その撮影範囲が図8(a)、(b)と同様である場合を例に挙げて説明する、車両500は、スロープやリフトによって車椅子を乗せる作業をスムーズにするための仕組みを有するとよいが、図示は省略してある。
(A)図9(b)から図9(c)で説明した期間、つまり、利用者U1及び車椅子501が車両500に乗せられる期間においては、車両500のエンジンがオンされていることもあれば、オフされていることもある。そのような場合でも、例えば、上述した第10の例で説明した電源制御が行わる構成とすることで、撮影機器101Rは、車室内撮影用リアカメラ102を用いて、車両500のエンジンのオン/オフ、又はアクセサリ電源のオン/オフに関係なく、撮影し、記録をすることができる。
例えば、リアハッチへの車室内撮影用リアカメラ102に関する訴求については、例えば、以下のようなものがある。
(O-1)撮影機器101Rのカメラ402、車室内撮影用リアカメラ102、及び撮影機器101Rのカメラ(図示略)は、例えば、それぞれFULL HDの画質として、1080Pの解像度で画像を記録するとよい。このようにすると、3つのカメラで均質な画像、例えば高解像度の画像を記録することができる。
上述したような、車両の開閉部の開閉動作をトリガとして、映像の撮影又は記録の設定を変更することに関し、以下のような構成が採用されるとよい。映像の撮影又は記録の設定に関しては、どのカメラで撮影した画像を記録するのかという録画の有無と、どのカメラをどのようなフレームレート、解像度等の品質で記録するのかという録画の品質、という観点がある。
リアハッチが開状態のときには、リアハッチの周辺を後で確認したい状況が生じることがあるから、リアハッチの周辺を品質良く録画するとよい。そのために、車室内撮影用リアカメラ102での録画の品質を相対的に高くして録画するとよい。例えば、リアハッチが開状態のときは、撮影機器101Fは前方を、撮影機器101Rは後方を相対的に低い品質で(例えば、粗く)撮影して、車室内撮影用リアカメラ102は、相対的に高い品質で(例えば、細かく)撮影するとよい。撮影機器101F及び101Rのカメラ402、車室内撮影用リアカメラ102よりも品質の低い録画を行うようにすると、車両の周辺の状況を広範囲で確認できる。
車両の走行中は、車両の外、本実施形態では、車両の前方、後方又はこれらの両方を後で確認した状況が生じる必要性が高いから、車両の外を品質良く録画するとよい。そのために、撮影機器101F、及び撮影機器101Rのカメラ402の撮影画像の品質を相対的に高くして録画するとよい。例えば、車両の走行中は、撮影機器101Fは前方を、撮影機器101Rのカメラ402は後方を相対的に高い品質で(例えば、細かく)撮影するとよい。
車両の前方側としては、車両の車室内における前方側の領域、車両の外の前方側の領域、又はこれらの両方を含む領域がある。例えば、車両の運転席及び助手席の周辺、又は/及び車両の外の前方側の領域の状況を後で確認したい場合がある。そこで、車両前方側を品質良く録画するとよい。そのために、車室内における前方側の領域を相対的に品質良く録画したい場合は、車室内撮影用リアカメラ102は、撮影機器101F及び撮影機器101Rのカメラ402よりも、高い品質で撮影画像を録画するとよい。
車両のエンジンがオン又はアクセサリ電源がオンである場合において、車両が走行中でないときは、車両が停車中、例えば駐車中であることが考えられる。そこで、車両の外を品質良く録画するとよい。そのために、撮影機器101F、及び撮影機器101Rのカメラ402の撮影画像の品質を相対的に高くして録画するとよい。車室内撮影用リアカメラ102は、録画を停止してもよいが、車室内を相対的に低い品質で撮影するとよい。
車両のエンジンがオフ又はアクセサリ電源がオフであるが、指定時間帯内の録画を行う場合、上述したように、送迎等の目的で、リアハッチの周辺の状況を後で確認したい場合があるから、リアハッチの周辺の撮影画像を品質良く録画するとよい。そのために、車室内撮影用リアカメラ102の撮影画像の品質を相対的に高くして録画するとよい。例えば、車室内撮影用リアカメラ102は相対的に高い品質で撮影して、撮影機器101F及びカメラ402は、相対的に低い品質の撮影画像を録画するとよい。撮影機器101F及びカメラ402の少なくとも一方の撮影画像の録画を停止してもよい。
車両の駆動源がオフ又はアクセサリ電源がオフからの指定時間延長録画を行う場合も、上述したように、送迎等の目的で、リアハッチの周辺の状況を後で確認したい場合があるから、リアハッチの周辺を品質良く録画するとよい。その録画制御については、例えば(P-5)と同じとするとよいが、異なっていてもよい。
車両のエンジンがオン又はアクセサリ電源がオンであるが、指定時間帯内の録画を行う場合も、上述したように、送迎等の目的で、リアハッチの周辺の状況を後で確認したい場合があるから、リアハッチの周辺を品質良く録画するとよい。その場合、録画制御については、例えば(P-5)と同じとするとよいが、異なっていてもよい。又は、指定時間帯内である場合に、車両の駆動源がオン又はアクセサリ電源がオンである場合は、車両からの電力の供給を受けられるため、(P-6)の場合よりも少なくとも一部のカメラについて高品質の録画をしてもよい。
取付具901は、第1の取り付け部位902、第2の取り付け部位903、固定手段904を有している。
第2の取り付け部位903はパイプ状に形成されており、その内径は車室内撮影用リアカメラ102の外形よりもわずかに大きく形成されている。第2の取り付け部位903内に挿入された車室内撮影用リアカメラ102は、円周方向及び上下方向で容易に方向調整可能であり、ユーザは、例えば螺子などの固定手段904を用いて、所望の状態で車室内撮影用リアカメラ102を固定することができる。
また、取り付け部位902がパイプ状に形成されているため、例えばリアウインドウに接着した撮影機器101Rに対して、取付具901をパイプの軸に対して回転させることで、取付具901の方向を変更することが可能である。
また、取り付け部位903がパイプ状に形成されているため、取付具901に対して、車室内撮影用リアカメラ102をパイプの軸に対して回転させることで、撮影方向を変更することが可能である。
図示されたパイプ状の取付具1001は、3つのジョイント部(開口部)1002を有しており、それらのジョイント部1002のそれぞれは、円筒形のカメラを差し込むことができるように、各々の円弧部分を有するリアカメラの少なくとも一方の端の外径をパイプジョイントの内径と一致するかやや大きく設定すると有利である。それにより、穴にリアカメラを嵌めることができる。例えば穴が2つパイプ状の取付具には2台、3つのパイプ状の取付具には2台か3台のリアカメラを取り付けることができる。
図12の場合と同様に、車室内撮影用リアカメラ102は円周方向及び上下方向で容易に位置や方向を調整可能である。
取付具1001には、様々な形状や開口部の位置関係が設計可能であり、また、望まれる取付状態によっては延長パイプを用いることもできる。取付具1001の好ましい形状については、図15に図示する。
図14の取付具1101は、自由雲台状の取付具1101であり、撮影機器101R及び車室内撮影用リアカメラ102が自由雲台状の取付具1101を介して互いに接続している構成が特に有利である。このように、車両10に取り付けられた撮影機器101R及び車室内撮影用リアカメラ102のみがくるくる回るようなイメージのカメラの構成とすることができる。
また、車室内撮影用リアカメラ102を車内撮影位置から、後方又は左右といった車外撮影位置へ移動させる場合でも、撮影機器101R及び車室内撮影用リアカメラ102の取付状態を安定して維持することが可能である。
図15に示す取付具1201~1208を用いて、円筒形のカメラを複数、簡潔且つ容易に取り付け、組み合わせることができる構成とするとよい。特に、円筒形のカメラの外形の一部及び取付具1201~1208の開口部1210、1220の形状を規格化することで、カメラシステムに対して幅広い拡張性を安価に提供することができる。パイプ状の取付具1201~1208には、円筒形のカメラが取り付けられる開口部1210が円形であるものもあれば、開口部1220のようにパイプの側方側が開放しているもの(例えば、断面形状がC状である)もある。
また、取付具1201~1208の円形の開口部1210は、パイプの一部に切込みを入れた形状にしてもよい。
パイプ状の取付具1201~1208を用いる構造では、取り付けられたカメラの角度や位置が調整可能でありまた調整後固定可能である。
更に、パイプジョイント用のパイプキャップの上に円筒形のカメラやドライブレコーダを貼り付けた(あるいは一体化した)構造とするとよい。
このようにパイプジョイントの規格を共通化すれば、車両内で用いられていた円筒形のドライブレコーダや車室内撮影用リアカメラ102を取り外し、パイプを組み合わせた棚や柵(囲い)、カートなどのパイプに差し込むだけで、工場や展示会等でも車室内撮影用リアカメラ102を流用して簡単にカメラを取り付けることができる。
また、カメラを取り付けた箇所には、パイプキャップを取り付ける必要がなくなる。
取付具は、その種類に応じて複数のジョイント部(開口部)を有しており、複数のジョイント部(開口部)に、それぞれ別のリアカメラを差し込めるよう、各々の円弧部分を有するリアカメラの少なくとも一方の端の外径は、取付具の内径と一致するかやや大きく設定されている。
図16(a)は、2つのカメラを接続するための別の取付具1301を図示している。
図16(b)は、2つのカメラを接続するための更に別の取付具1311を図示している。
別の取付具1301及び更に別の取付具1311の開口部のそれぞれには、円筒形のカメラを取り付けることができる。
図16(a-1)は、第1固定部1302及び第2固定部1303の開口部が共に同一の方向を向いている状態を示している。
図16(a-2)は、図16(a-1)の別の取付具1301を回転軸1307の周りで90°回転した状態を示している。
第1固定部1302及び第2固定部1303はそれぞれ、2つの固定部部材1305a、1305b、1306a、1306b、及び、それらを互いに回動可能に接続する回動接続部1304から構成されている。回動接続部1304のネジを緩め、固定部部材1305a、1305b、1306a、1306bを開き、カメラを取り付け、再度固定部部材1305a、1305b、又は、1306a、1306bを閉じることで、第1固定部1302及び第2固定部1303にカメラを取り付ける構成とするとよい。
図16(b-1)は、第1固定部1312及び第2固定部1313の開口部が共に同一の方向を向いている状態を示している。
図16(b-2)は、図16(b-1)の取付具1311の第1固定部1312を回動接続部1314の周りで回動させた状態を示している。ユーザは所望の角度で回動接続部1314をネジ締めすることで、第1固定部1312、第2固定部1313、を互いに回転不能に固定することができる。
第1固定部1312及び第2固定部1313の開口部へのカメラの取り付けや固定は、図15との関連で説明した方法で行うことができる。
図17の実施例では、車室内撮影用リアカメラ102は、ピンプラグ1401を有しており、このピンプラグ1401は、ドライブレコーダ等の撮影機器101Rや他の追加カメラのプラグジャックに挿入可能である。
車室内撮影用リアカメラ102が、例えば撮影機器101Rの接合面にかみ合うように、回転防止構造1402として円周内側に三角突起を有する構成とするとなおよい。この回転防止構造1402が、0°、30°、45°、90°、180°、等のあらかじめ決められた角度で撮影機器101Rとかみ合うようにすると、容易に車室内撮影用リアカメラ102の角度を変更できで便利である。
これらの構成は、振動による望まれない回転を防止するのに有利である。
図18は、図17の車室内撮影用リアカメラ102を、撮影機器101Rに取り付けた場合の回転防止構造周辺の拡大図を図示している。
図18には、図17のカメラの回転防止構造1402を車室内撮影用リアカメラ側の回転防止構造1501として図示し、更に、それと係合する撮影機器101R側の回転防止構造1502として図示している。
この構造は、車室内撮影用リアカメラ102を任意の回動位置に容易に保持するのに適している。
図19(a)の取付状態から、車室内撮影用リアカメラ102を一定以上の力でカチカチと回転させると、図19(b)の状態となる。
撮影機器101Rと車室内撮影用リアカメラ102が、同一の外径を有する円筒上のハウジングを有する構成であると、外見上の一体感が向上し、外観的に好ましい。
なお、車室内撮影用リアカメラ102を撮影機器101Rに外付けする構成で説明したが、図19を予め一体に整形され、レンズの方向を変更可能な1つの機器として構成することもできる。
また上記の通り、車内用カメラはフロント/リアのどちらのカメラにも接続可能であり、接続したカメラを検出することで、前方からの車内画像、後方からの車内画像に合わせて画像調整を設定される構成であるとよい。
特に、車室内撮影用リアカメラ102はIPSによる処理や圧縮処理を施したデータを出力するものであると有利であるが、RAWデータをそのまま出力するものであってもよい。
また、車室内撮影用リアカメラ102の画角を、撮影機器101Rの車両後方向けカメラの画角よりも、狭く選択する構成とするとよい。このような構成では、車室内の様子をより良好に撮影することができる。
そのような構成では、ユーザは、追加するカメラの総数や撮影方向、画角や撮影方式等のカメラの諸元に応じて、撮影範囲、撮影目的、制御機能に関する所望の拡張を容易に実現することができる。
図20(a)は、デジタルカメラ型ドライブレコーダである車両の後方を撮影する撮影機器101Rが、車両内に設置され、ケーブル1703により電源やフロントカメラに接続されている状態を示している。ケーブル1703は1本で、電力の供受給及びデータの送受信の役割を担う構成とするとよく、そのような構成では、配線を簡潔にすることが可能となり有利である。
なお、図20では、ケーブル1703のピンプラグ1707は、ケーブル1703の外径よりも大きく記載されているが、これは単に見やすさのためであり、ピンプラグ1707の外径はケーブル1703の外径よりも小さくても構わない。
車室内撮影用リアカメラ102は、ケーブル1703を介してフロントカメラからの映像データを受け取り、受け取ったフロントカメラからの映像データ及び車室内撮影用リアカメラ102自体が撮影した映像データの双方を、撮影機器101Rへ送る構成であるとよい。上述の通りケーブル1703は、撮影機器101R及び車室内撮影用リアカメラ102への給電にも利用可能な構成であるとなおよい。
フロントカメラ及び車室内撮影用リアカメラ102がRAWデータをそのまま送信する構成では、更に、撮影機器101Rが、それらのRAWデータに対して、ISPによる処理や圧縮処理を行う構成であるとよい。
記録媒体をフロント及びリアの双方に設けた構成では、記録媒体が両方に分かれていることにより、大事故時に、例え一方のカメラが破損したとしても、取り残しを防ぐことができる。
記録媒体がフロント+リアの2つになっている場合、互いの映像の時刻を合せる機能を持つと良い。
記録媒体がフロント+リアの2つになっている場合、イベントトリガを両方で検知すると良い。またこの構成では更に、イベントトリガはOR、ANDなどの条件で決定、設計する構成であるとよい。
図21の実施例では、別の装置に2つ以上のカメラの映像を伝送することが可能となる。別の装置とは、図21の実施例では例えばデジカメ型ドライブレコーダである撮影機器101Rである。撮影機器101Rには、二股の分岐ケーブル1804を介して、2つの車室内撮影用リアカメラ102が接続されている。
車室内撮影用リアカメラ102はそれぞれ不図示の位置固定手段で車両の所望の位置に、特に車両の後方領域に、取り付けられている。
撮影機器1801は、更に別のピンジャックを有していてもよく、そのような構成では2つの分岐ケーブルを用いて、更に2つの追加のカメラを接続することも可能である。
また、分岐ケーブルは、二股に限らず三股以上に分岐していてもよい。
また、第1の追加カメラ1802aは、ケーブル1803からの電力供給をパススルーすることができ、第2の追加カメラ1802b及び、撮影機器101Rに、分岐ケーブル1804を介して電力を提供する構成であるとよい。
上記の構成では、IRフィルタを自動で挿入/非挿入するレンズを使用する構成であるとよりよい。
例えばカメラの回転と連動して、カメラが後ろを向いたら、投光器が機械的に遮蔽又は電気的に遮断する構成であるとよい。
この構成により、一方では、車内の撮影に必要な光量を確保することが可能であり、他方では、車外の撮影時には、投光器の光を車外から確認することができない構成が達成される。
自動車の後退時に発生する事故に対する安全対策の更なる強化が求められている。これに関連して、車両10のリア側から車両10の後方を2カメラで撮影し、距離を得る情報処理システムの用途として、以下のようにしてもよい。以下の構成は、例えば、上述した、撮影機器101Rと、車室内撮影用リアカメラ102との2カメラ(以下では、「後方側を撮影するカメラ」などと称することがある。)で車両後方を撮影して、後方車両などの後方の物体までの距離を測定する情報処理システムに適用できる。
また、当該機器に取付可能な前記少なくとも3つの取付具と当該機器とが梱包材の中に同梱された状態で出荷される構成とするとよい。
カメラと当該機器と当該少なくとも3つの取付具が同梱された状態とするとよい。
いずれのカメラの映像あるいは合成した映像である合成映像が表示されている状態でも音声認識またはワンタッチで、カメラの映像としては後方を撮影するカメラの映像を1画面内に表示し、他のカメラの映像は当該1画面内には表示しない状態へ遷移させる機能を備えるとよい。
前記遷移の前の状態を記憶しておき、一定時間経過したら、当該記憶された前記遷移前のカメラの選択状態へ戻る機能を備えるとよい。
ただし、このタイミングでは、バック開始が検出されてから画面に車両後方の映像が表示された状態となるケースが多いので、バックしようとしたときの状態の確認には使えないケースが出てくる。
運転者が車両を後退させる指示は、音声認識で入力するようにするとよい。ボタン押下の検出とするようにしてもよい。
ハザードランプの点灯を検出するようにしてもよい。運転者のギヤ操作を検出するようにしてもよい。
特にこれらのいずれかと「停車状態である」ことの検出が両方成立したときに、少なくとも車両のリア側から車両の後方を撮影範囲とする映像を前記ディスプレイに表示させた状態にする機能を備えるとよい。
運転者のギヤ操作の検出は、(リアから)車室内向けのカメラで撮影した映像内での運転者のギヤの操作の検出等で行うとよい。
ハザードランプの操作ボタン、ギヤ操作レバー等は、車両の左右中央部に設けられている車両が多く、リア側から車室内を撮影するカメラによって良好に状態が取得できる。
カメラの映像としては、前方を撮影するカメラ、後方を撮影するカメラ、側方を撮影するカメラのいずれかとするとよいが、特に側方を撮影領域に含むカメラとするとよく、特に下向きに設置した半天球カメラの周辺部の映像の流れる方向の変化を用いるとよく、特に円周方向に流れる映像の方向の転換を検知する構成とするとよい。
情報処理システムは、1台のカメラから車両の後方を撮影する映像が取得されているときには単眼カメラによる距離推定によって車両後方の障害物までの距離を推定し、2台のカメラから車両の後方を撮影する映像が取得されているときにはステレオカメラによる距離推定によって車両後方の障害物までの距離を推定するように切り替える切替機能を備えるとよい。
この切替は予め設定画面や機器に備えるスイッチ等で設定しておき、この設定状態に応じて切り替えるようにしてもよいが、入力される映像の状態、機器の設置状態によって、自動的に切替を行う機能を備えるとするとよい。
情報処理システムは、自動切り替えするか、手動設定するかを選択しておく、機能を備えるとよい。
(1)車の構造物の領域(座席、ピラー等)、(2)車の外の領域(例えば窓越しに見えている領域)、(3)車の中の人や荷物のように移動可能なものの領域
情報処理システムは、車両内の人を検知する機能を備え、人がいないと判定されたときの映像を保持しておき、保持した映像の差分から(1)(2)の領域を求めるとよい。
特にカメラの映像以外から車両内の人を検知する機能を備え、これに基づいてこの処理を行うとよい。
情報処理システムは、車室内を撮影するカメラの映像を、予め学習した学習モデルを用いて推論させセグメンテーション結果を得て、上記(1)から(3)の領域を求める機能を備えるとよい。
情報処理システムは、セグメンテーションではない物体検出機能を備え、人や物が車外のものか車内のものかを弁別する機能を備え、車内か車外かによって警報を行うか否か、または、警報の態様(例えば警報の内容やレベル等)を変える機能を備えるとよい。
情報処理システムは、バック時には0から数メートル範囲で精度よく算出するように検出範囲のレンジを設定する一方、前進時には数メートルから数十メートル範囲を精度よく算出するように検出範囲のレンジを設定する等、そのレンジを変更する機能を備えるとよい。
幼稚園・養護学校送迎バス。お迎えの先生は同乗しているが、何か事故やトラブルがあったときに、運転手、先生、子供たちの動きが確認できる。幼稚園児がバスに取り残されてしまうことの事故の防止に寄与することが期待できる。
観光バス、ホテル送迎バス、電車内など、人を運ぶ車両への装着。
飛行機内。操縦室から客室の様子が分からない可能性がある。その場合、キャビン、貨物室に装着したカメラの映像を、コクピットや、ギャレー(例えばCAエリア)で映像を確認できると、トラブルや、事件を事前防止で役に立つと考えられる。これらは監視カメラ類に近い用途である。
撮影機器101Fは、例えば、以下の構成とするとよい。
<a-1.撮影機器101Fの外観構成>
図24は、撮影機器101Fの外観構成の一例を示す図である。図24(a)は、撮影機器101Fを前方側の右斜め上方向から見た図である。図24(b)は、撮影機器101Fを後方側の右斜め上方向から見た図である。撮影機器101Fは、筐体1010を有する。筐体1010は、上下方向よりも左右方向に長く、かつ厚みは比較的小さい直方体状である。筐体1010は、車両に取り付けられたときに上方を向く上面1011と、第2の側面1012と、第1の側面1013と、第1の側面1013の反対側に位置する第3の側面1014と、第2の側面1012の反対側に位置する第4の側面1015と、を有する。
図25は、ブラケット600の構成を示す図である。図25(a)は、ブラケット600を前方側の右斜め上方向から見た図である。図25(b)は、ブラケット600を側面側から見た図である。図25(c)は、ブラケット600を前方側の右斜め下方向から見た図である。ブラケット600は、撮影機器101Fを車両に取り付ける取付部材の一例である。
図26は、撮影機器101Fの電気的構成を示すブロック図である。制御部5511は、撮影機器101Fの各部を制御する。制御部5511は、例えば、プロセッサ5511A、及びメモリ5511Bを含むコンピュータである。プロセッサ5511Aは、例えば、CPU(Central Processing Unit)、MPU(Micro Processing Unit)、GPU(Graphics Processing
Unit)、ASIC(Application-Specific Integrated Circuit)、及びFPGA(Field Programmable Gate Array)等を有する。メモリ5511Bは、例えば、RAM(Random
Access Memory)、及びROM(Read Only Memory)等を有する主記憶装置である。プロセッサ5511Aは、メモリ5511BのROMから読み出したプログラムをRAMに一時的に記憶させる。メモリ5511BのRAMは、プロセッサ55511Aに作業領域を提供する。プロセッサ5511Aは、プログラムの実行中に生成されるデータをRAMに一時的に記憶させながら演算処理を行うことにより、各種の制御を行う制御部5511は、さらに、時刻を計る計時部5511Cを備える。計時部5511Cは、例えばリアルタイムクロックである。計時部5511Cは、プロセッサ5511Aのマザーボードに実装されていていてもよいし、プロセッサ5511Aに外付けされてもよい。
撮影機器101Fは、録画機能として、以下の1つまたは2つ以上の機能を有するとよい。録画機能は、撮影機器101Fが撮影した画像を、所定のファイル形式の映像データとして記録(つまり、録画)する機能である。映像データは、動画形式の映像データとするとよく、例えばMPEG(Moving Picture Experts Group)形式(例えば、MPEG2、MPEG4)であるが、AVI、MOV、WMV等である。
常時録画機能(常時記録機能ともいう。)は、撮影機器101Fの動作中は、撮影機器101Fのカメラ5515、並びに撮影機器101Rのカメラ402及び車室内撮影用リアカメラ102の一部又は全部により撮影された画像を継続して(つまり、常時)記録する機能である。制御部5511は、常時録画機能を実行しているときには、車両のエンジンの始動から停止までに撮像した映像データを記憶させる。
イベント録画機能(イベント記録機能ともいう。)は、特定のイベントが発生したことに応じて、撮影機器101Fのカメラ5515、並びに撮影機器101Rのカメラ402及び車室内撮影用リアカメラ102の一部又は全部により撮影された画像を記録する機能である。イベントは、画像の記録を行う条件(つまり、トリガー)となる事象であり、例えば、車両の走行中におけるユーザの急ハンドル、急ブレーキ等の操作時、車両の他の物体との衝突時等とするとよい。制御部5511は、イベントが発生したことを、例えば、センサ部5517の加速度センサによる計測値に基づいて、判定する。具体的には、制御部5511は、加速度センサの計測値が所定の閾値以上となった場合又は所定の時間的変化を示した場合に、イベントが発生したと判定する。イベントの発生の判定条件はこれに限られない。制御部5511は、車両情報に基づいて、例えば車速や操舵状態等の車両の状態が所定の条件を満たした場合に、イベントが発生したと判定してもよい。制御部5511は、カメラ5515、カメラ402、及び車室内撮影用リアカメラ102の少なくともいずれかにより撮影された画像を解析して、イベントの発生を判定してもよい。制御部5511は、例えば、車両又は他車両の危険運転(例えば煽り運転、接近、又は異常接近)を検知した場合に、イベントが発生したと判定してもよい。制御部5511は、イベント録画ボタン5522が操作された場合にも、イベントが発生したと判定する。
駐車監視機能は、車両の駐車中に、撮影機器101Fのカメラ5515、並びに撮影機器101Rのカメラ402及び車室内撮影用リアカメラ102の一部又は全部により撮影された画像を記録する機能である。駐車監視機能は、駐車中の車両の内部又は車両の周辺の外部を監視するための機能である。制御部5511は、車両からの電力の供給を受けない状態では、外付けバッテリからの電力の供給を受けて、記憶媒体5500に画像を記録するとよい。車両の駐車中であるか否かについて、制御部5511は、例えば、アクセサリ電源がオフされたこと、エンジンがオフされたこと、外付けバッテリからの電源供給が開始されたこと、車速が0km/h又は所定速度以下であること、及び位置情報取得部5520が取得した位置情報が所定の位置情報(例えば、自宅や勤務先、駐車場の位置情報)であること、の1つ又は複数に基づいて判定するとよい。これに限られず、制御部5511は、既に説明したような、車室内撮影用リアカメラ102により撮影された画像を解析する方法で、駐車中であるか否かを判定してもよい。
図28は、撮影機器101Fのカメラ5515、並びに撮影機器101Rのカメラ402、及び車室内撮影用リアカメラ102で撮影された画像を再生するためのビュアーの画面の一例を示す図である。このビュアーは、上述した、パソコン用あるいはスマホ、タブレット等の情報処理装置用のビュアープログラムにより実現されるとよいが、撮影機器101Fでの画像の表示に使用されるビュアープログラムにより実現されてもよい。図29~図31は、ビュアーの画面に含まれる各表示要素を説明する図である。図29において丸印で囲んだ数字と、図30及び図31の表に示す「No.」の欄の数字とが対応している。ビュアーの画面に含まれる各表示要素は、図30及び図31の表に示す表示名の表示要素で、図30及び図31で説明されている機能を発揮する表示要素である。なお、図30及び図31の「フロントカメラ」はカメラ5515に対応し、「リア後方カメラ」はカメラ402に対応し、「リア室内カメラ」は車室内撮影用リアカメラ102に対応する。
図33は、車室内撮影用リアカメラ102の撮影画像の図11とは別の例を示す図である。図33に示すように、車室内撮影用リアカメラ102によると、車両後方から車両前方に向かって見た場合の左右の状況を広角に撮影、記録できることが見て取れる。また、領域T4、T5に示すように、車両の左右の状況、より具体的には、車幅方向における外側に位置する側道や隣車線等の周囲の状況を撮影、記録できることが見て取れる。また、領域T6に示すように、搭乗者の顔が写らない、又は写りにくいプライバシーに配慮した撮影が可能である。
撮影機器101Fは、前方車接近警告機能を有するとよい。前方車接近警告機能は、車両の走行中、前方車両(つまり、先行車)と接近した場合に、警告する機能である。前方車接近警告機能は、例えば、運転者による前方車両に対する意図しない煽り運転や、前方車両への衝突を回避するための機能である。前方車両との接近の検知は、例えば、制御部5511がカメラ5515により撮影された画像を解析して検知する方法や、レーザー測距センサ等のセンサ類を用いて検知する方法で行われるとよい。警告は、警報や報知等と読み替えられてもよく、音、音声、表示、発光その他の人間(例えば、運転者)が知覚可能な方法により行われるとよい。
撮影機器101Fは、後方車接近記録・警告機能を有するとよい。後方車接近記録・警告機能は、車両の走行中、後方車両(つまり、後続車)と接近した場合に、警告する機能である。後方車接近記録・警告機能は、例えば、後方車両による煽り運転(車間距離不保持)等の危険運転を検知して、少なくともカメラ402の撮影画像を記録するとともに警告する機能である。後方車両との接近の検知は、例えば、制御部5511がカメラ402により撮影された画像を解析して検知する方法や、レーザー測距センサ等のセンサ類を用いて検知する方法で行われるとよい。警告は、警報や報知等と読み替えられてもよく、音、音声(例えば、「後方危険運転を検知しました!」というメッセージの出力)、表示、発光その他の人間(例えば、運転者)が知覚可能な方法により行われるとよい。
なお、上述の実施例は少なくとも特許請求の範囲に記載の構成を開示している。
〔構成1〕
本情報処理システムは、
車両後方から車両前方に向かって撮影した車室内の映像データを処理するとよい。
このようにすれば、車両後方から車両前方に向かって撮影した車室内の映像データを処理することができる。例えば、従来の車両前方から車両後方に向かって撮影した車室内の映像データでは、死角に位置しており、処理対象とすることが不可能であった或いは困難であった対象、要素、イベント等を、車室内を従来とは異なる方向から撮影することにより、すなわち、車両後方から車両前方に向かって撮影することによって、良好に検知、識別、認識、判定等の処理を行うことが可能となるので、ユーザは、それらの処理に基づいて新たに提供される機能を利用することができる。
〔構成2〕
本情報処理システムは、
車両後方から車両前方に向かって撮影した車室内の映像データと、車両後方から車両後方外部を撮影した車外の映像データと、を処理するとよい。
このようにすれば、車両後方から車両前方に向かって撮影した車室内の映像データと、車両後方から車両後方外部を撮影した車外の映像データと、を処理することができる。例えば、従来の車両前方から車両後方に向かって撮影した車室内の映像データでは、死角に位置しており、処理対象とすることが不可能であった或いは困難であった対象、要素、イベント等を、車室内を従来とは異なる方向から撮影することにより、すなわち、車両後方から車両前方に向かって撮影することによって、良好に検知、識別、認識、判定等の処理を行うことが可能となるので、ユーザは、それらの処理に基づいて新たに提供される機能を利用することができる。
〔構成3〕
本発明に係る情報処理システムは、
前記車室内の映像データを解析し、解析の結果に基づき状況を判定する制御部を、有するようにするとよい。
このようにすれば、制御部が、従来とは異なる方向から撮影された車室内の映像データを解析することで、様々な状況について新たに或いは従来と比べてより正確に判定処理を行うことが可能となり、ユーザは新たにより正確な判定に基づく新たな機能を利用することができる。
〔構成4〕
本発明に係る情報処理システムは、
前記制御部が、前記車室内の映像データに基づき前記車室内の人物の有無を判定し、前記人物に対してフィルタをかけた映像データを作成し、出力するようにするとよい。
このようにすれば、車内を車両後方から車両前方に向かって撮影することで、人の顔が撮影される機会自体が減少していることに加え、更に、撮影された人物にフィルタをかけることで従来よりも車内の人物のプライバシーに配慮しながら行動を撮影、記録することができる。これによりユーザは、例えばバスやタクシー等の利用者が感じる、自身の映像が記録されることに対する抵抗感を、低減させることができる。
〔構成5〕
本発明に係る情報処理システムは、
前記制御部が、前記車室内の映像データに基づき当該映像データに写った前記車両の外部の対象の状態を判定し、前記対象の状態に関する情報を出力するようにするとよい。
このようにすれば、制御部は、例えば、方向指示器を出したときに、サイドに車や人、障害物がいる状況や、車内に人がいない状態で駐車している自車両に不自然に接近する者がいる状況や、そのような者が車内を覗き込んでいるような状況や、エンジン始動時、徐行時、走行時等に車両の周囲に、人、特に子供が存在する、接近する或いは遊んでいるような状況や、車両の後方で側方からの煽りを受けているような状況等について、判定することができる。また、制御部は、それらの状況の判定結果に応じて、適切な通知や警告を、ドライバー等に出力することができるので、ユーザは車両や車両周辺の異常や危険にいち早く気が付き、それに対応することができる。
〔構成6〕
本発明に係る情報処理システムは、
前記制御部が、前記車室内の映像データに基づき前記車両の天井の設置物の異常を判定し、前記異常に関する情報を出力するようにするとよい。
このようにすれば、制御部は、例えば、ルームランプの点灯状態及び車内の人の有無や、ネットが荷物の入れ過ぎによりたわんでいないか、左右の留め具の固定等が外れていないか、プロジェクタの向きや状態、プロジェクタの映像の位置や状態、プロジェクタと後部座席の乗客の位置関係等が適切であるか、フリップダウンモニタの開閉状態や、映像が出ているか否かの起動状態が適切であるか、等を判定することができる。また、制御部は、それらの状況の判定結果に応じて、適切な通知や警告を、ドライバー等に出力することができるので、ユーザは容易に車両を適切な状態に維持することができる、また、車両の異常にいち早く気がつくことができる。
〔構成7〕
本発明に係る情報処理システムは、
前記制御部が、前記車室内の映像データに基づき前記車両の荷物の状態を判定し、前記荷物の状態に関する情報を出力するようにするとよい。
このようにすれば、制御部は、例えば、運転手席の後ろに置かれた荷物の状態、荷台や座席と荷物の位置関係、推定される荷物の重心の位置、複数の荷物の重心位置の位置関係、車両の速度や加速度及びそれらの変化に関連した荷物の位置の変化、荷物が荷台や座席から落下する危険性の高さ、積み上げられた荷物が崩れる危険性の高さ、荷台や座席上での荷物の滑り具合、荷物の崩れと後方から撮影した車内の窓越しに撮影された他車両による煽りや接触の関連性、等を判定することができる。また、制御部は、荷物の状態の判定結果に応じて、適切な通知や警告を、ドライバー等に出力することができる。それによりドライバーは、荷物の荷崩れ等を心配せずに運転に集中することができる。
〔構成8〕
本発明に係る情報処理システムは、
前記制御部が、前記車室内の映像データに基づき車両に配置された表示部の状態を判定し、前記表示部の状態に関する情報を出力するようにするとよい。
このようにすれば、表示部は、例えば座席背面に設けられたモニタ、天井に設けられたモニタの状態、運転席と助手席の間の前方のセンター付近に設置されたセンターモニタの表示内容や操作の有無、表示部に対して行われた具体的な操作の内容、映像記録時の車両が自動運転中であるか、手動運転中であるか、等の状態を判定することができる。また、制御部は、それらの状況の判定結果に応じて、適切な通知や警告を、ドライバー等に出力することができる。またユーザは、ドライバーの適切な運転操作中に事故等に巻き込まれた場合に、事故が端末の操作時に発生したものではないこと、事故が端末の誤操作によるものではないこと、事故が自動運転中に起きたものであるか手動運転中に起きたものであるか、等についての、客観的証拠を提供することができる。
〔構成9〕
本発明に係る情報処理システムは、
前記制御部が、前記映像データに基づき人の頭部を判定し、前記映像データ内で前記頭部が占める割合に関する情報を出力するようにするとよい。
このようにすれば、表示部は、例えば映像の画面内に頭部が写っているか、写っている頭部の画面内に占める割合がどの程度であるか、そのような事態が想定される設置状態にあるか、等を判定することができる。また、制御部は、それらの状況の判定結果に応じて、適切な通知や警告を、ドライバー等に出力することができる。それにより、ユーザは、後部座席に人が座ったとき、その人の後頭部が画面全体にずっと映っているような映像データばかりが記録されることを回避できる。
〔構成10〕
本発明に係る情報処理システムは、
前記制御部が、前記映像データに基づき前記車両が駐車状態にあるかを判定し、前記車両が前記駐車状態にある場合、駐車監視モードへの切り替え命令を出力するようにするとよい。
このようにすれば、制御部は、人が車内にいるか、人が車内からいなくなったか、車両が駐車状態であるか、等を判定することができる。制御部は、車両が駐車状態であると判定した場合、撮影モードを駐車監視モードに切り替える命令を出力する。それにより、車両が駐車状態にある場合、制御部は、例えば車両のフロントガラス、リアガラス、サイドの窓ガラスの領域内から不審な接近者を判別するための処理に、演算能力を優先的に割り当てることができるので、ユーザは、より効率的な情報処理システムを使用することができる。
〔構成11〕
本発明に係る情報処理システムは、
前記制御部が、前記映像データに基づき車内の人物の状態を判定し、前記車内の人物の状態に関する情報を出力するようにするとよい。
このようにすれば、制御部は、車内の人物の状態、特に車両後方の人物の状態を、従来よりも高い精度で判定することができる。また、ユーザは、人物の状況の判定結果に応じて、適切な通知や警告を受け取ることができる。
〔構成12〕
本発明に係る情報処理システムは、
前記制御部が、前記映像データに基づき車内の人物の置き去り状態を判定し、前記置き去り状態に関する情報を出力するようにするとよい。
このようにすれば、制御部は、映像内に人物がいるか、映像内の人物が子供や障碍者であるか、子供や障碍者以外の人物が乗車しているか、車両が駐車状態であるか、子供や障碍者等の置き去りの状態であるか、等を判定する。また、制御部は、置き去りの状況の判定結果に応じて、適切な通知や警告を、ドライバーや車両周囲等に出力することができる。これにより、ユーザは、高精度なリア側からの置き去り防止機能を利用することができる。
〔構成13〕
本発明に係る情報処理システムは、
前記制御部が、前記映像データに基づき車内の人物の居眠り又は睡眠状態を判定し、前記居眠り又は睡眠状態に関する情報を出力するようにするとよい。
このようにすれば、制御部は、映像内に人物がいるか、映像内の人物がドライバーであるか或いは同乗者であるか、ドライバーの頭部が写っているか、頭部の状態が居眠りに関する警告のパターンを示しているか、後部座席の同乗者の顔や頭部が写っているか、顔や頭部の状態が睡眠状態のパターンを示しているか、等を判定する。また、制御部は、置き去りの状況の判定結果に応じて、適切な通知や警告を、ドライバーや車両周囲等に出力することができる。それによりドライバーは、自身の居眠りの兆候を確認や、同乗者の睡眠状態に配慮して運転のきっかけを得ることが容易になる。
〔構成14〕
本発明に係る情報処理システムは、
人検知センサを有し、前記人検知センサによる検知信号を、少なくとも、前記判定を開始するトリガとするか、又は、前記判定に利用するようにするとよい。
このようにすれば、例えば焦電型赤外線センサやサーモセンサを用いることで、映像データをAI処理するよりも低負荷で、子供、障碍者等を識別することができる。常にAIによる処理を実行することは大きな演算負荷を必要とするので、別個の人検出可能なセンサを用いて人の存在を検出し、人検出可能なセンサによる車内での人の検知結果を、映像データに基づく人検知処理を開始するトリガとして利用することが、演算負荷の低減及び高精度の人検知の観点で有利である。更に、例えば人検出可能なセンサの検知範囲を車両の後部領域あるいは後部座席付近に限定することで、運転手と乗客とを、高精度に分けて判別することができる。それによりユーザは、同乗者に起こり得るリスクを低減させることができる。
〔構成15〕
本発明に係る情報処理システムは、
異なる複数の位置で、車両後方から車両前方に向かって前記車室内を撮影するようにするとよい。
このようにすれば、例えば広角カメラにより複数の位置で撮影された映像データを組み合わせることで、ユーザは、車両内外の映像をぐるりと見渡すことができる。
〔構成16〕
本発明に係る情報処理システムは、
前記車両の開閉部の開閉動作をトリガとして、映像の撮影又は記録を開始する、又は、映像の撮影又は記録の設定を変更するようにするとよい。
このようにすれば、ハッチ等の開閉動作をきっかけとして、映像の撮影又は記録の開始、映像の撮影又は記録の設定の変更を行うことで、ユーザは、撮影環境や撮影状況の変化が大きい場合にも、確実に適切な設定で撮影された映像データを獲得することが可能なる。
〔構成17〕
本発明に係る情報処理システムは、
前記車両の開閉部の開閉動作に加え、前記車両の走行状態、前記車両の駆動源の状態、及び前記車両の電源の状態の少なくともいずれかをトリガとして、
映像の撮影又は記録を開始する、又は、
映像の撮影又は記録の設定を変更するとよい。
このようにすると、車両の開閉部の開閉動作に加え、車両の走行状態、車両の駆動源の状態、及び車両の電源の状態という少なくともいずれかの状況に応じた方法で、映像の撮影又は記録を開始し、又は設定を変更できる。
〔構成18〕
本発明に係る情報処理システムは、
前記車両の複数箇所に設けられた収音手段の少なくともいずれかにより収音された音を、撮影した映像とともに記録し、
前記車両の開閉部の開閉動作をトリガとして、記録する音声の設定を変更するとよい。
このようにすると、車両の開閉部の開閉動作をトリガとして、記録する音声の設定を変更することができる。
〔構成19〕
本発明に係る情報処理システムは、
前記車両の開閉部として、前記車両後方に設けられた開口部を開閉する後方開閉部があり、
前記後方開閉部に設けられた撮影機器のカメラが、前記開閉部が開状態である場合、前記車両後方外部を撮影し、前記後方開閉部が閉状態である場合、前記車両後方から車両前方に向けて撮影するとよい。
このようにすると、車両後方に設けられた開口部の開閉状態に応じて撮影方向が変化し、後方開閉部が開状態であるときは車両後方外部を撮影し、閉状態であるときは車両後方から車両前方を撮影するという具合に、開閉状態に応じて適切な方向を撮影することができる。
〔構成20〕
本発明に係る情報処理システムは、
前記後方開閉部は、上方へ開き、
前記撮影機器のカメラは、前記後方開閉部が開状態である場合、前記車両後方外部を下方に向けて撮影し、前記後方開閉部が閉状態である場合、前記車両後方から車両前方に向けて撮影するとよい。
このようにすると、上方へ開く開口部の開閉状態に応じて撮影方向が変化し、後方開閉部が開状態であるときは車両後方外部を下方に向けて撮影し、閉状態であるときは車両後方から車両前方を撮影するという具合に、開閉状態に応じて適切な方向を撮影することができる。
〔構成21〕
本発明に係る情報処理システムは、
前記後方開閉部が閉状態から開状態に変化した場合、前記撮影機器のカメラが撮影した画像の所定の記録を開始させるとよい。
このようにすると、後方開閉部が閉状態から開状態に変化した場合に、撮影機器が撮影した画像の所定の記録を開始させることができる。後方開閉部が閉状態から開状態が変化した場合として、人が乗降する場合が考えられるから、人が存在することで発生する事象を撮影し、確認できるようにすることができる。
〔構成22〕
本発明に係る情報処理システムは、
前記撮影機器は、前記車両の駆動源又は電源がオフされた場合に、外部からの電力の供給を受けて又は内部の電源により動作可能であり、
前記車両の駆動源又は電源がオフされているときに前記後方開閉部が開状態になった場合、前記撮影機器が撮影した画像の所定の記録を開始させるとよい。
このようにすると、後方開閉部が閉状態から開状態に変化した場合に、撮影機器が撮影した画像の所定の記録を行うことができる。後方開閉部が閉状態から開状態に変化した場合には、人の乗降や物の出し入れ等の事象が発生する可能性があると考えられるが、その様子を撮影することができる。
〔構成23〕
本発明に係る情報処理システムは、
前記撮影機器は、指定時間帯内において、当該撮影機器の電源をオンした状態で待機しており、
前記指定時間帯内において、前記後方開閉部が閉状態から開状態に変化した場合、前記所定の記録を開始させるとよい。
このようにすると、後方開閉部が閉状態から開状態に変化した場合に、速やかに撮影機器が撮影した画像の所定の記録を開始させることができ、後方開閉部が開状態に変化したときの状況をより確実に撮影し記録することができる。
〔構成24〕
本発明に係る情報処理システムは、
前記撮影機器は、前記後方開閉部が閉状態で、前記車両の駆動源又は電源がオンされている場合、前記カメラで撮影しており、前記後方開閉部が開状態となった場合には、前記車両の駆動源又は電源がオフされた後も、前記カメラによる撮影を指定時間長だけ延長して、撮影した画像の記録を行うとよい。
このようにすると、車両後方から車両前方に向けた撮影をしており、後方開閉部が閉状態から開状態に変化した場合に、指定時間長だけ延長して撮影した画像を記録するので、車両の駆動源又は電源がオフされた後も、後方開閉部が開状態に変化したときの状況を撮影し記録することができる。
〔構成25〕
本発明に係る情報処理システムは、
前記撮影機器は、前記後方開閉部が開状態となった場合において、前記開口部を介して人の降車があると判定したときは、前記指定時間長だけ延長して撮影した画像の記録を行うとよい。
このようにすると、後カメラで車室内で撮影していた対象を、後方車外方向でも引き続き撮影することができる。
〔構成26〕
本発明に係る情報処理システムは、
前記車室内の映像データと前記車外の映像データとを1つのカメラで撮影するようにするとよい。
このようにすれば、少なくとも、車両後方から前方に向かって撮影した車内の映像と車両後方から車両後方外部の映像を1つの映像データとして撮影することができる。適切な画角や取り付け位置を選択することにより、映像データに、車両直後の映像、車両前方の映像、車両前方及び車両後方の仰角方向の映像等を含ませることも可能となる。それによりユーザは1つの広角カメラを車両後方に設けることで、車両に様々な機能を追加することができる。また、リア側を1つのカメラで実装すると、リア側のカメラを室内側のカメラと後方側のカメラの2つのカメラとする場合に比べて、コストダウン、設置の手間の軽減、小型化が可能となる
〔構成27〕
本発明に係る情報処理システムは、
前記1つのカメラは半天球カメラであるようにするとよい。
このようにすれば、一般的な広角カメラよりもより広範囲の撮影範囲をカバーすることができる。例えば240°以上の画角を有する半球カメラは、車両後方から前方に向かって撮影した車内の映像、車両直後の映像、車両前方の映像のみならず、車両前方及び車両後方の仰角方向の映像等を1つの映像データとして撮影することができるので、ユーザは、映像データから、例えば目的の時点での車両の前方及び後方の信号の状態も確認すること
〔構成28〕
本発明に係る情報処理システムは、
前記車両に人が乗っていると判定した場合に、前記車室内を撮影した画像の画像情報を所定の出力先に出力するとよい。
このようにすると、車両に人が乗っているときの様子を撮影画像から把握しやすくすることができる。車両の車室内において、例えば、トラブルや何らかの事象が発生するのは、車両に人が乗っている状況であることもよくある。車両に人が乗っているときの様子を把握しやすくすることは、そのような事象の発生の有無や発生の状況を確認する上で、有用である。
〔構成29〕
本発明に係る情報処理システムは、
前記車両に人が乗っていると判定した場合には、前記車両の駆動源又は前記車両の電源がオンかオフかに関わらず、前記車室内を撮影した画像の画像情報を前記所定の出力先に出力するとよい。
このようにすると、車両の駆動源又は車両の電源がオンかオフかに関わらず、車両に人が乗っているときの様子を撮影画像から把握しやすくすることができる。例えば、車両に人が乗っている状況であれば、車両の駆動源又は車両の電源がオンかオフかに関わらず、車両の車室内においてトラブルや何らかの事象が発生する可能性はある。そのため、車両の駆動源又は車両の電源がオンかオフかに関わらず、車両に人が乗っているときの様子を把握しやすくすることは、そのような事象の発生の有無や発生の状況を確認する上で、有用である。
〔構成30〕
本発明に係る情報処理システムは、
前記車室内において人がしゃべったと判定した場合に、前記車室内を撮影した画像の画像情報を所定の出力先に出力するとよい。
このようにすると、車室内の人がしゃべったときの様子を撮影画像から把握しやすくすることができる。例えば、車両の車室内において、トラブルや何らかの事象が発生した場合は、それに関することを人がしゃべることがある。人がしゃべったときの車室内の様子を把握しやすくすることは、そのような事象の発生の有無や発生の状況を確認する上で、有用である。
〔構成31〕
本発明に係る情報処理システムは、
前記車両において人が手を伸ばしたと判定した場合に、前記車両の内部を撮影した画像の画像情報を所定の出力先に出力するとよい。
このようにすると、車室内の人が手を伸ばしたときの様子を撮影画像から把握しやすくすることができる。例えば、車両の車室内において、トラブルや何らかの事象が発生した場合は、暴力行為や威嚇行為が行われる可能性があると考えられる。人が腕を伸ばす行為があった場合、殴るなどの行為の発生が疑われる。車室内において人が手を伸ばしたときの車室内の様子を把握しやすくすることは、そのような事象の発生の有無や発生の状況を確認する上で、有用である。
〔構成32〕
本発明に係る情報処理システムは、
前記車室内の映像データを取得する第1のカメラと、前記車外の映像データを取得する第2のカメラを有する撮影機器と、を含むようにするとよい。
このようにすれば、車室内の映像データを取得するカメラと、車外の映像データを取得する撮影機器を、撮影目的等に応じて、それぞれ別々に且つより柔軟に設計することが可能となる。また、ユーザはカメラと撮影機器の位置関係の調整をより柔軟に行うことが可能となる。
〔構成33〕
本発明に係る情報処理システムは、
車両後方から車両前方に向かって車室内を撮影する前記第1のカメラの撮影方向を、車両後部から車両外後方への方向へ変更可能であるようにするとよい。
このようにすれば、車内撮影用のカメラを、後方撮影用のカメラと共に後方車両の正確距離を測定できるカメラとしても利用することができる。ユーザは、本情報処理システムに1つのカメラを追加することで、車室内の映像を解析や判定する機能に加え、車両外の映像を解析や判定する新たな機能を追加することができる。
〔構成34〕
本発明に係る情報処理システムは、
前記第1のカメラの回転により、撮影方向を、車両後部から車室への方向から、車両後部から車両外後方への方向へ変更可能であるようにするとよい。
このようにすれば、ユーザは、簡単且つ迅速な撮影方向の変更作業で、車内撮影用のカメラを、後方撮影用のカメラと共に後方車両の正確距離を測定できるカメラとしても利用することができる。本情報処理システムは、1つのカメラを追加することで、車室内の映像を解析や判定する機能に加え、車両外の映像を解析や判定する新たな機能を提供することができる。
〔構成35〕
本発明に係る情報処理システムは、
前記第1のカメラが前記撮影方向の調整に連動する投光方向を持つ投光器を備え、前記撮影方向の変更に応じて、前記投光器の光を、電気的に遮断または機械的に遮蔽するようにするとよい。
このようにすれば、夜間等の暗い環境下においても明瞭な車室内の映像を撮影することができる一方で、ユーザは、投光器から、車両外の人物が認識できる光が、発せられないことが確実な状態で車両を使用することができる。
〔構成36〕
本発明に係る情報処理システムは、
円筒形状部を有する取付具を含み前記円筒形状部内に前記第1のカメラを挿入することによって、前記第1のカメラを前記撮影機器に取り付け可能であるようにするとよい。
このようにすれば、カメラ及び撮影機器へのカメラの取り付けにいわゆるパイプジョイント方式を採用することが可能となり、ユーザは完結且つ直感的に情報処理システム対して追加のカメラを取り付けることが可能となる。
〔構成37〕
本発明に係る情報処理システムは、
前記円筒形状部内に前記第1のカメラを挿入したまま、前記撮影機器に対する前記第1のカメラの相対位置、又は、前記第1のカメラの撮影方向、を変更可能であるようにするとよい。
このようにすれば、ユーザは完結且つ直感的に情報処理システム対して追加のカメラを取り付けることが可能であるだけでなく、追加のカメラの撮影機器に対する相対位置又は前記第1のカメラの撮影方向を変更することで、ユーザは所望の映像を撮影できるようなカメラの調整を容易に行うことができる。
〔構成38〕
本発明に係る情報処理システムは、
記第1のカメラがピンプラグを有し、前記ピンプラグを前記撮影機器に挿入可能なようにするとよい。
このようにすれば、追加の第1のカメラを既存の撮影機器へ容易に取り付けることが可能となる。既存の撮影機器は一般に、規格化されたピンジャックを有しているので、追加の第1のカメラに対応する規格化されたピンプラグを設けることで、ユーザは様々な撮影機器を本情報処理システムに採用することができる。
〔構成39〕
本発明に係る情報処理システムは、
第3のカメラが撮影した別の映像データを、前記第3のカメラから前記第1のカメラへ、入力可能であり、前記第1のカメラが撮影した像データ、及び、前記第3のカメラが撮影した前記別の映像データを、前記第1のカメラから前記撮影機器へ、出力可能とするとよい。
このようにすれば、第1のカメラは、第1のカメラ自体が撮影した映像データを、撮影機器へ出力することができるのみならず、他の第3のカメラが撮影した別の映像データも同様に、撮影機器へ出力することができるので、ユーザは1本のケーブルを用いた簡潔な取り回しで本システムを導入することができる。
〔構成40〕
上記目的を達成するためのプログラムは、
情報処理システムに上記の各機能を実現させるためのプログラムとするとよい。
このようにすれば、既存の情報処理システムに対して、プログラムの提供を行うことによって、上記機能の提供を行うことができる。
Claims (5)
- 車内に人が置き去りの状態であるか否かを車両の後方から車内を撮影するカメラから取得した画像に基づいて判定し、前記車内に人が置き去りの状態であるときに警告を出力する機能を備えたシステムであって、
前記車内に人が置き去りの状態であるとの判定は、人検知可能なセンサによる車両内での人の検知結果を前記車両の後方から車内を撮影するカメラの画像に基づく人検知を開始するトリガとして利用して行い、
前記人検知可能なセンサの検知範囲を前記車両の後部座席付近としたこと
を特徴とするシステム。 - 前記人検知可能なセンサは、ガラス越しの人は検知しない特性をもつセンサであること
を特徴とする請求項1に記載のシステム。 - チャイルドシートからはみ出た位置に子供の頭部を認識した場合に警告を出力する機能を備えたこと
を特徴とする請求項1または2に記載のシステム。 - 前記車内での子供の立ち上がりを認識した場合に警告を出力する機能を備えたこと
を特徴とする請求項1から3のいずれかに記載のシステム。 - 請求項1から4のいずれかの機能をコンピュータに実現させるためのプログラム。
Applications Claiming Priority (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021109726 | 2021-06-30 | ||
JP2021109726 | 2021-06-30 | ||
JP2021162386 | 2021-09-30 | ||
JP2021162386 | 2021-09-30 | ||
JP2021196968A JP2023007334A (ja) | 2021-06-30 | 2021-12-03 | 情報処理システム及びプログラム等 |
JP2022166652A JP7240781B2 (ja) | 2021-06-30 | 2022-10-18 | 情報処理システム及びプログラム等 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022166652A Division JP7240781B2 (ja) | 2021-06-30 | 2022-10-18 | 情報処理システム及びプログラム等 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023078159A JP2023078159A (ja) | 2023-06-06 |
JP7403196B2 true JP7403196B2 (ja) | 2023-12-22 |
Family
ID=85106865
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021196968A Pending JP2023007334A (ja) | 2021-06-30 | 2021-12-03 | 情報処理システム及びプログラム等 |
JP2022166652A Active JP7240781B2 (ja) | 2021-06-30 | 2022-10-18 | 情報処理システム及びプログラム等 |
JP2023028069A Active JP7403196B2 (ja) | 2021-06-30 | 2023-02-27 | 情報処理システム及びプログラム等 |
Family Applications Before (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021196968A Pending JP2023007334A (ja) | 2021-06-30 | 2021-12-03 | 情報処理システム及びプログラム等 |
JP2022166652A Active JP7240781B2 (ja) | 2021-06-30 | 2022-10-18 | 情報処理システム及びプログラム等 |
Country Status (1)
Country | Link |
---|---|
JP (3) | JP2023007334A (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117334066A (zh) * | 2023-09-20 | 2024-01-02 | 广州亿胜鑫网络科技有限公司 | 基于车辆数据的风险分析方法、系统、终端及存储介质 |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002281486A (ja) | 2001-03-16 | 2002-09-27 | Dd Marketing:Kk | 画像取得システム |
JP2003138817A (ja) | 2001-10-31 | 2003-05-14 | Denso Corp | 車両のキーレスエントリーシステム、個人識別方法及び個人識別システム |
JP2008260474A (ja) | 2007-04-13 | 2008-10-30 | Denso Corp | 車両用撮影装置 |
JP2014199546A (ja) | 2013-03-29 | 2014-10-23 | 富士通株式会社 | 運転支援装置及び運転支援方法 |
JP2017007453A (ja) | 2015-06-19 | 2017-01-12 | 株式会社東海理化電機製作所 | 動体検知警告装置 |
US20170054949A1 (en) | 2015-08-19 | 2017-02-23 | Faraday&Future Inc. | In-vehicle camera system |
JP2018169942A (ja) | 2017-03-30 | 2018-11-01 | 株式会社日本総合研究所 | 見守り送迎システムにおける車両管理サーバ、車載端末、見守り方法、及びプログラム |
JP2019123354A (ja) | 2018-01-16 | 2019-07-25 | 株式会社デンソー | 乗員検知装置 |
JP2019168815A (ja) | 2018-03-22 | 2019-10-03 | 東芝メモリ株式会社 | 情報処理装置、情報処理方法、及び情報処理プログラム |
JP2019205078A (ja) | 2018-05-24 | 2019-11-28 | 株式会社ユピテル | システム及びプログラム等 |
JP2020087218A (ja) | 2018-11-29 | 2020-06-04 | トヨタ自動車株式会社 | 車両及び乗客輸送システム |
JP2020157938A (ja) | 2019-03-27 | 2020-10-01 | 三菱電機株式会社 | 車載監視制御装置 |
JP2021005402A (ja) | 2020-09-15 | 2021-01-14 | 株式会社ユピテル | 車載機器 |
JP2021066275A (ja) | 2019-10-18 | 2021-04-30 | 株式会社デンソー | 車両制御装置 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020201108A (ja) | 2019-06-10 | 2020-12-17 | 株式会社ミツバ | 車両用警報装置 |
-
2021
- 2021-12-03 JP JP2021196968A patent/JP2023007334A/ja active Pending
-
2022
- 2022-10-18 JP JP2022166652A patent/JP7240781B2/ja active Active
-
2023
- 2023-02-27 JP JP2023028069A patent/JP7403196B2/ja active Active
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002281486A (ja) | 2001-03-16 | 2002-09-27 | Dd Marketing:Kk | 画像取得システム |
JP2003138817A (ja) | 2001-10-31 | 2003-05-14 | Denso Corp | 車両のキーレスエントリーシステム、個人識別方法及び個人識別システム |
JP2008260474A (ja) | 2007-04-13 | 2008-10-30 | Denso Corp | 車両用撮影装置 |
JP2014199546A (ja) | 2013-03-29 | 2014-10-23 | 富士通株式会社 | 運転支援装置及び運転支援方法 |
JP2017007453A (ja) | 2015-06-19 | 2017-01-12 | 株式会社東海理化電機製作所 | 動体検知警告装置 |
US20170054949A1 (en) | 2015-08-19 | 2017-02-23 | Faraday&Future Inc. | In-vehicle camera system |
JP2018169942A (ja) | 2017-03-30 | 2018-11-01 | 株式会社日本総合研究所 | 見守り送迎システムにおける車両管理サーバ、車載端末、見守り方法、及びプログラム |
JP2019123354A (ja) | 2018-01-16 | 2019-07-25 | 株式会社デンソー | 乗員検知装置 |
JP2019168815A (ja) | 2018-03-22 | 2019-10-03 | 東芝メモリ株式会社 | 情報処理装置、情報処理方法、及び情報処理プログラム |
JP2019205078A (ja) | 2018-05-24 | 2019-11-28 | 株式会社ユピテル | システム及びプログラム等 |
JP2020087218A (ja) | 2018-11-29 | 2020-06-04 | トヨタ自動車株式会社 | 車両及び乗客輸送システム |
JP2020157938A (ja) | 2019-03-27 | 2020-10-01 | 三菱電機株式会社 | 車載監視制御装置 |
JP2021066275A (ja) | 2019-10-18 | 2021-04-30 | 株式会社デンソー | 車両制御装置 |
JP2021005402A (ja) | 2020-09-15 | 2021-01-14 | 株式会社ユピテル | 車載機器 |
Also Published As
Publication number | Publication date |
---|---|
JP2023009057A (ja) | 2023-01-19 |
JP7240781B2 (ja) | 2023-03-16 |
JP2023078159A (ja) | 2023-06-06 |
JP2023007334A (ja) | 2023-01-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20180154908A1 (en) | Multi-purpose vehicle smart monitoring system and method | |
US7378949B2 (en) | Vehicle safety system and vehicle having the same | |
US9460601B2 (en) | Driver distraction and drowsiness warning and sleepiness reduction for accident avoidance | |
JP2018196066A (ja) | ドライブレコーダー、ドライブレコーダー用表示装置及びプログラム | |
US20150286882A1 (en) | Device, system and method for vehicle safety sensing and alerting | |
FR2821229A1 (fr) | Enregistreurs video pour vehicule | |
JP7403196B2 (ja) | 情報処理システム及びプログラム等 | |
KR101513115B1 (ko) | 알에프아이디 태그를 이용한 차량운행안전시스템 | |
US10346689B2 (en) | Apparatus and method for connecting a mobile device camera | |
US20190152392A1 (en) | Vehicle mounted collision avoidance systems and related methods | |
JP7281794B2 (ja) | システム等 | |
JP2008120142A (ja) | 自動車用情報表示システム | |
TW201328340A (zh) | 乘客攔車提示系統及方法 | |
JP2023036872A (ja) | システム及びプログラム | |
WO2010127473A1 (zh) | 一种带电子影音记录器的车内后视镜 | |
KR101580567B1 (ko) | 이벤트 영상 촬영 녹화 장치, 이벤트 영상 제공 방법 | |
TWM528917U (zh) | 車用警示裝置 | |
US20200275022A1 (en) | Automotive driving recorder | |
WO2022064774A1 (ja) | 画像処理装置、及び画像処理プログラム | |
CN208585171U (zh) | 一种流媒体后视镜系统及汽车 | |
JP2024033135A (ja) | 撮影装置、システム、及びプログラム等 | |
JP2024068040A (ja) | システム等 | |
KR20090037107A (ko) | 승합차용 영상장치 | |
JP2023125811A (ja) | 情報処理システム及びプログラム等 | |
TWM606225U (zh) | 車用影像記錄模組 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230307 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20230307 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230606 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230807 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231107 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231205 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7403196 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |