JP4287181B2 - イメージ表示方法 - Google Patents

イメージ表示方法 Download PDF

Info

Publication number
JP4287181B2
JP4287181B2 JP2003108794A JP2003108794A JP4287181B2 JP 4287181 B2 JP4287181 B2 JP 4287181B2 JP 2003108794 A JP2003108794 A JP 2003108794A JP 2003108794 A JP2003108794 A JP 2003108794A JP 4287181 B2 JP4287181 B2 JP 4287181B2
Authority
JP
Japan
Prior art keywords
vehicle
image
data
service center
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003108794A
Other languages
English (en)
Other versions
JP2004029001A (ja
JP2004029001A5 (ja
Inventor
智久 小檜山
万紀子 苗村
洋一 新谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Publication of JP2004029001A publication Critical patent/JP2004029001A/ja
Publication of JP2004029001A5 publication Critical patent/JP2004029001A5/ja
Application granted granted Critical
Publication of JP4287181B2 publication Critical patent/JP4287181B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/20Monitoring the location of vehicles belonging to a group, e.g. fleet of vehicles, countable or determined number of vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3647Guidance involving output of stored or live camera images or video streams

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Traffic Control Systems (AREA)
  • Telephonic Communication Services (AREA)
  • Instructional Devices (AREA)
  • Navigation (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、車両カメラによるビデオイメージのキャプチャ(捕捉)、そのイメージを記憶すること、および、そのイメージを使用することに関する。
【0002】
【従来の技術】
車両ドライバーの安心感および安全性に加えて、交通量および天候のような運転ルート伝いの状況に関する情報をドライバーに提供することは有益である。いつでも、どこでも、どんなドライバーに対しても正確な情報をもたらすと共に配給するために、大容量の初期データを収集することが必要とされる。
【0003】
データの各ユニットが特定場所および特定地点での将来の交通量と天候状況とを表示するので、多くの場所にデータを提供する正確なサービスが大量のデータを処理しなければならない。データが、適時でない場合には、殆ど役に立たない。時事的報道と、できるだけ広範囲な地理的報道とを確実なものにするために、初期データを収集する包括的な検知システム(comprehensive sensing system)が必要になる。
【0004】
安全運転は長い間の主要な関心事である一方、その必要性は、解決しようとする従来技術の試みにも関わらず、増大しているように思われる。
【0005】
【発明が解決しようとする課題】
それ故に、その報道と、ナビゲーション(走行指示)および安全性に対するイメージモニタの効率とを増大する必要性が長い間感じられている。更なる必要性は、そのような監視のコストを低減することである。これら2つの必要性は、相反する複数の解決策を伴っているように見え、各解決策は、一方の必要性を犠牲にして他方の必要性を助けているように見える。
【0006】
車両搭載カメラは、従来技術で示されるように、様々な目的のイメージデータをキャプチャするが、そのような従来技術は、上述されたような必要性を十分に満足しなかった。
【0007】
安全性および交通事故:Bagueに対して2001年6月12日付けで付与された米国特許第6,246,933 B1号には車両搭載デジタルビデオ/オーディオカメラシステムが開示されており、そのシステムは、操作パラメータ、ビジュアル条件、およびオーディオ条件を感知、記憶、および更新するための複数のセンサを有し;自動車を伴った交通事故が再現可能なようにデータが読まれる。異なる公知システムは3次元イメージを処理し、衝突を与えるような他のデータは車両のドライバーに警告を出す。Dukach等によって2002年1月24日付けで出願された米国特許出願2002/0009978 A1号は、ドライバーにより送られた緊急信号において現在起こっていることを記録するのを助けると共に、犯罪原因を決定するために、移動体ユニットのカメラからのイメージを提供する。
【0008】
天候モニタ:Doerfelに対して2001年3月27日付けで付与された米国特許第6,208,938 B1号には、空港のような局地的な地域で、独立の高解像度デジタルカメラおよびレーザ距離測定器を備えた天候モニタが開示されている。
【0009】
誘導案内:Hahn等に対して2000年5月23日付けで付与された米国特許第6,067,111号には、車両の前方に対してのイメージを獲得するために、車両頭部に搭載されたビデオカメラが開示されている。Takano等に対して1998年12月15日付けで付与された米国特許第5,850,254号は、車両内部にビデオカメラを搭載し、車両誘導する際にカメラ振動に対する補正を使って、車両の前方領域を見てドライバーを補助している。
【0010】
背景記録:Gorr等に対して1999年10月5日付けで付与された米国特許第5,961,571号は、車両が予め確立されたルートに滞在する限り、車両に関しての背景の連続的な全景的眺望を表示する選択的なイメージデータだけを記憶している。
【0011】
舗装道路検査:Powellに対して1990年9月18日付けで付与された米国特許第4,958,306号は、舗装道路検査用の隆起輪郭または表面疲労度を決定するイメージを使用している。
【0012】
対象認識:Shimoura等に対して1997年6月10日付けで付与された米国特許第5,638,116号は、イメージを対象認識システムに入力、すなわち、道路痕跡を認識する。Takano等に対して1998年12月15日付で付与された米国特許第5,850,254号では、車両に固定された車両基準マークが、連続的なイメージに比較されるように、イメージ取込領域内に存在する。
【0013】
マップ生成:Helmann等に対して1999年9月7日付けで付与された米国特許第5,948,042号では、試験車両から獲得されたイメージデータが夜間に中心位置に送信され、そこにおいて、データを使って既存のデジタルロードマップを更新し、車両を交通誘導して目的地に案内する際にそのマップを使う。
【0014】
Satoshi等によって出願された特願平9-188728号であり、1999年2月2日付けで公開された特開平11-31295号公報には、情報をコントロールセンターに無線送信する車両カメラとGPSが開示され、それは、位置情報に基づいてマップ上で包括するために、交通量、交通制御、および天候を認識する。
【0015】
ナビゲーション:Nojima Akihikoにより出願されて1999年7月30日付けで発行された特開平11-205782号の要約書によれば、外部車両イメージおよび内部車両イメージがステーションに送られるので、共有イメージに基づいてルート案内のような様々な対話が実行可能になる。Ohmura等によって2001年12月20日付けで出願された米国特許出願第2001/0052861 A1号は、自動車の現在位置の周囲での領域におけるマップイメージを、ドライバーに見える車載イメージユニットに送る車載ナビゲーションユニットと、パーソナルコンピュータ上の復元をも可能にするデータフォーマットとを有している。出願番号H10-1337であり、1999年7月30日付けで発行された特開平11-205782号公報には、車両からの転送イメージがナビゲーションシステムとサービスステーションとの間で共有されている。
【0016】
Toshiba Corp.のHashimoto Satoshiにより出願された特開平11-31295号公報の「道路情報管理システムおよび道路情報端末装置」によれば、道路情報管理センターが、固定された位置ウォッチング装置と移動体ウォッチング装置とからの無線送信された画像情報および位置情報を受け取って記憶する。道路情報管理センターは、記憶された画像情報および位置情報を分析することによって道路状況を表す情報を作成する。移動体画像情報は、運転中および駐車中に、宅配サービス会社、タクシー会社、および搬送会社のような多くの商用車によって取り出される。現存する多くの商用車は、多くの固定観測地点を使用するシステムと比較して、情報を収集するための低価格システムを備えている。マップ情報は、ユーザの移動端末の液晶画面に表示される。移動端末のユーザは一般大衆または企業などであっても良い。ユーザは、表示マップを参照して所望の道路区画の道路情報をリクエストする。移動端末は表示リクエストを車載装置に送る。車載装置は、リクエストに対応するマップ情報をメモリから読み出し、それを移動端末にダウンロードする。
【0017】
交通モニタリング:1992年11月17日付けでSumnerに対して発行された米国特許第5,164,904号は、中心位置から車両ドライバーにリアルタイムの交通混雑データ(文章、音声、およびマップ表示)を提供する。その中心位置では、情報源の範囲からの情報が蓄積されて、道路の各区画に対する単一混雑レベルデータ値にまとめられる。
【0018】
広告:2002年1月24日付けで出願されたDukach等の米国特許出願番号2002/0009978 A1は、大衆への広告を表示するための掲示板として、商用車の外面にビデオイメージを利用している。さらに、見物人の興味を引くために、見物人または周囲の生の画像(スチール写真またはビデオ)が表示される。
【0019】
天候および交通:2002年1月24日付けで出願されたDukach等の米国特許出願番号2002/0009978 A1は、広告に関係すると共に多くの選択肢および態様を論じている一方、移動商用車からの交通ビデオイメージおよび天候ビデオイメージをキャプチャし、それらを中心位置に送信する。移動体ユニットは、中心システムを通して間接的にその当時の画像を取り出して、聴衆の興味を発展するためにおそらく車両の外部に表示されるだろう中心ユニットに、特定位置の自己表示リクエスト(show-me request)をすることができる。車両識別、時間、場所、および車両速度に関して中心位置でイメージを識別しても良い。イメージが交通データベース内に記憶されても良く、その交通データベースは、システムの移動体ユニットのドライバーが様々な時間および場所で最も効果的なルートを発見するのを可能とし、聴衆をウェブサイトに引き付けるのに使用される中心システムで販売可能であり、または、そのシステムの屋外画面上に表示可能であるメディアコンテンツを提供する。視覚確認システムが、時間および場所に関係する天候状況とデータベース内の記録状況とを見積もる。その時間および場所では、そのイメージが記録され、さらに天候の視覚的イメージが、このデータベース内で記憶可能であり、そして、システムの移動体ユニットのドライバーを助けるために利用可能であり、中心システムで販売または認可可能である。タクシーのために、センターシステムは、場所、時間、現在の交通情報、および、同じような時間帯の交通履歴を考慮して、目的地への最善ルートの1つまたはそれ以上を計算することができる。それから、センターシステムは、ドライバーへの表示のために、そのようなルートの1つまたはそれ以上をタクシーに送信する。移動体ユニットは、局所的な天候に関する情報を獲得し、それをセンターシステムにアップロードし、それから、その当時に屋外画面に表示している広大な地理的領域に渡っての天候に関する情報をセンターシステムから受け取る。
【0020】
治安モニタリング:2001年7月17日付けでPetersonに対して発行された米国特許第6,262,764 B1号は、警察車両の周囲およびクリップボードの上に配置されたカメラからのイメージを記録するために密閉ボールト内にVCRを有し、警察署との無線通信を提供する。
【0021】
車両カメラ:2001年9月21日付けで公開されたOkamato Satoruの特開2001-257920 号における要約書によれば、車両搭載カメラは、GPSシステムで決定されるような位置情報をもとに、予め記憶した位置で所望の角度から画像を取得できるようにプログラム可能である。
【0022】
本発明は、セキュリティー(安全確保)およびセイフティー(安全性)のみならず、ナビゲーション用のイメージモニタリングの適用範囲と効率とを増大する。さらなる要求は、そのようなモニタリングのコストを減少することである。
【0023】
本発明の一部として、発明者が従来技術を分析して、車両ナビゲーション、安全確保、緊急性、および安全性に関する問題点と、これらの問題点に関係する原因とを決定し、以下の態様で実施されるように問題点に解決策を提供した。
【0024】
【課題を解決するための手段】
初期イメージデータを集めることの1つの従来技術的アプローチは、道路に沿って様々な場所に固定式感知設備を取付けることである。このアプローチを使うと、最初の取付けとメンテナンスコストとが、国内を横断する全ての道路に及ぶために莫大になる。電気さえ利用できない場所および道路がある。交通量が極端に少ない道路にそのような設備を配置することはコストの点で効果的でない。
【0025】
他の従来技術的アプローチは、車両搬送データセンサを有すること、および、キャプチャされた初期データを中心位置に送信することである。従って、国内を横断する地面固定式感知設備のコストは不要になる。しかしながら、車両は、厳格に適用範囲を制限する特定目的ルートの場合には、通常商用車である。多くの車両を伴う場合には、適用範囲での僅かな利得に対して、費やすコストが上昇し、伴われる車両台数を増大させる動機がない。さらに、データ収集車両の台数が増大するにつれ、収集されたデータ量が増大する。データ量が莫大になり、中心位置への送信の帯域幅を圧迫する。
【0026】
初期データを受信する従来技術の中心位置では、データが天候および交通量に関して分析され、組み合わされ、要約される。そのようなシステムを使って通常発見されることは、分析結果または要約が全く古く、その状況が既に変更され、受け取ったドライバーが、分析を行ったデータが如何に古いかを知りえず、および、ドライバーが、そのデータをキャプチャした位置を知りえないことである。すなわち、ドライバーに送信された従来技術の天候および交通状況のデータと分析とが信頼できない。
【0027】
Satoshiの公報が必要としていることは、ユーザに送られる全ての情報が、中心位置で分析され、処理され、および、記憶されなければならないことである。これは、中心位置での大きな記憶装置および処理を必要としている。必然的に、そのデータは、結果として重要性を失ったように要約され、また、広い間隔を置いて取得されることからその有効性を減少し、精度から生じる損失で平均化されている。さらに、処理量は時々システムをオーバーロードし、データを陳腐化している。
【0028】
本態様は、リクエストされた情報の効率的かつ最新視覚的な表示を可能にし、それによって音声および文章表示を補足できる。
【0029】
本発明によって提供される1つの解決策は、ビデオカメラおよびマイクロホンを含めて車両が適切なセンサを運搬すること、および、通信手段が、運転中に初期環境データをキャプチャし、データを必要とする場所に、または、必要とされるまでデータを安全に記憶する場所にデータを送信することである。
【0030】
この発明によれば、国内を横断する値段の高い地面固定式感知設備を必要としない。
【0031】
その態様によれば、車両は、1つまたはそれ以上のデジタルカメラ、様々なセンサ、コンピュータ、ユーザインタフェース、中心位置との広帯域無線データ通信、および、大きな最新ビデオファイルにおけるピアツーピア転送のために他の車両との直接的または間接的な広帯域無線データ通信が装備されている。
【0032】
カメラは、たとえば、車両が曲がる時に、車両が所定目的物を検知した時に、または、そうすることが望ましいとドライバーおよび/または乗客が考えた時に、運転中の半マイル毎に対して、あるイベントの発生の時点で道路前面の様子をキャプチャする。1つまたはそれ以上のサービスセンターは、キャプチャされてデジタルカメラから受信されたデータを記憶し、そのデータに基づいて様々な新しいサービスを提供する。ドライバーは、同じルートを走行する他の車両上のカメラでキャプチャされたイメージにアクセスすることによって、目的地までずっと交通状況をチェックできる。各車両システムには2台以上のカメラがあるので、各車両は前方、後方、および側方の様子をキャプチャする。また、カメラは、車両の駐車中とリクエスト時にイメージをキャプチャする。
【0033】
イメージがキャプチャされると、関連する情報が論理的または物理的にそのイメージに添付される。そのような情報は、データと、イメージの取り出された時間、イメージを取り出した位置、および、イメージを取り出した車両所有者のプロフィール(たとえば、所有者ID)などとを含んでいる。イメージと添付された情報とを含めて、1パケットの情報は、初期データパケットと呼ばれる。初期データパケットは、車両内に一時的または永久的に記憶され、そして、永久的に記憶するためにサービスセンターに送信され、または、広帯域無線データ通信を使って他のドライバーに再送信される。
【0034】
イメージと、関連する情報とを含めたデータを使って、たとえば、リクエストしている車両が1つの位置に接近する前に現在の交通状況および道路状況を知るので、リクエスト者がその位置の周囲のルートとその位置へのルートとの状況を評価できる。運転ルートに沿って目立った標識、建物、および風景のようなナビゲーション情報がデータの一部分である。サービスセンターはデータを重視し、記憶し、分析する。この整理されたデータは、中央サービスセンターで使用されて、現在の交通状況を見積もり、ドライバーが利用可能なように処理を行う;たとえば、そのデータを分析して各道路の交通量に関する統計上の情報を引き出す。サービスセンターからリクエストされるように、ユーザは、正確なデータを、または、必要に応じて要約された情報を得る。たとえば、ドライバーは、最近の10分間のみで取り出されたイメージにアクセスし、それを、計画された運転ルートに沿ってハイウェイのマイル数ポストにより地理的に分類することができる。
【0035】
そのイメージは、各ドライバー用の運転記録の保存と、次回の運転の計画とに役立つ。
【0036】
その態様は、スタンドアローンの新しい世代型ナビゲーションシステムとして機能し、または、既存システムを高める。
【0037】
ドライバーなどは、運転前に、または、車両内に着席中に車両コンピュータシステムを通して、インターネットに接続されたPCを介してサービスセンターのインターネットウェブサイトにアクセスしても良い。サービスセンターは、電波で送信し、または、他の車両が最近またはリアルタイムのイメージをその位置の近くから送信するように取り決めている。
【0038】
イメージアイコンは、記憶されたイメージが取り出された場合には、地図上にある。ドライバーは、点およびクリックによって最も適切なアイコンを選択する。イメージは、そのイメージをキャプチャした車両の速度および方向と共に、リクエスト者に表示される;同時に、関連するデータ、たとえば温度が表示される。最近のイメージと、関連する情報とを提供することにより、ドライバーは、直感的に道路状況および天候状況を知覚して評価できる。
【0039】
データを地域的、全国的、および地球的に分配する目的で、イメージを取り替える2つの方法がある。1つの方法は、サービスセンターの記憶装置に由来する。他の方法は、データの停滞を引き起こす遅延を避けるために、および、記憶装置とサービスセンター上の処理負荷とを少なくするために、直接または間接的通信によって他の車両内の記憶装置に由来する。ドライバーまたは他のリクエスト者は、車両間のピアツーピア通信を介して他の車両内に存在するイメージと関連情報とを得る。サービスセンターの記憶装置からデータを受け取ることに対する1つの代替手段として、または、サービスセンターが、リクエストするドライバーに所望の情報を提供できない場合に、または、リクエスト者の選択肢として、ドライバーは、他の車両からの所望のデータを捜し求めるように、自己の車両システムまたはサービスセンターにさらに命令することができる。データが他の車両内に記憶されていることが発見された時に、ピアツーピア機能を使って、他の車両からリクエスト者にサービスセンターを介して直接的または間接的に送信される。
【0040】
いったんピアツーピア機能が行使されると、車両システムまたはサービスセンターは、この態様が装備された全車両または限定車両にリクエストを送る。また、そのリクエストは、位置範囲(特定位置からイメージをキャプチャした距離)を制限しても良いし、または、キャプチャ範囲の時間(イメージの時間幅、すなわち、イメージキャプチャとリクエスト時間との間の経過時間)を制限しても良い。その範囲は自動的に設定され(たとえば、その範囲は、データ量が少ない場合、または、データ量が最初に設定した範囲で有益とならない場合には、拡大され)、リクエスト者によって代金を支払われたサービスに従って設定され、または、リクエスト者の選択肢として設定される。他の車両は、記憶装置内に要求されたデータを有する時に、リクエストしている車両にデータを送信する。その場合には、そのデータが、サービスセンターでの記憶装置から得られたデータの表示と同様な方法で表示され、または、リクエストの目的に依存して異なって表示されている。
【0041】
データの共有を容易にすると共に標準化するために、ウェブサービス技術を使ってデータが記憶および提供されることは最も好ましい。たとえば、送信は、全て公知技術を使って、IEEE 802.11a/b規格、データ通信サービス(たとえば携帯電話)、サービスプロバイダーの広帯域無線LAN、または、位置ホスト無線ユニットまたはプライベート無線ユニットを使う。ウェブサービス技術を使うことによって、データがウェブブラウザーを介してアクセスおよび提供され、そして、さらなる処理のために公知のブラウザーソフトウェアによって処理される。
【0042】
本発明におけるさらに他の態様、特徴、および利点は、本発明を実行するため発明者によって熟慮されたベストモード(最良形態)を含めて、多くの特定の態様および実施手段を単に例示することより、以下の詳細な説明から容易に明らかになる。また、本発明は他の態様および異なった態様を可能にし、本発明の趣旨および特許請求の範囲から全て逸脱することなく、その幾つかの詳細が様々な自明の点で変更可能である。従って、添付図面と本明細書の記述とは、本質的に実例と見なされ、限定されていないものと見なされる。
【0043】
本発明は、添付図面の図の中で、例として、および、限定しないものとして例示され、同一参照番号は類似要素に関連する。
【0044】
【発明の実施の形態】
システム、アーキテクチャ、およびビジネス方式は、新しいナビゲーションシステムとして、または、従来技術システムの増進として機能する。
【0045】
図1では、複数の車両(VEHICLEおよびOTHER VEHICLES)は、たとえば、無線周波数帯域に渡って、車両はそれぞれ、WIRELESS LAN PROVIDER(無線LANプロバイダ)との無線LAN通信を行い、WIRELESS LAN PROVIDER(無線LANプロバイダ)を介して互いに通信しても良いし、および、CELL PHONE COMPANY(携帯電話会社)との無線携帯電話通信を行い、CELL PHONE COMPANY(携帯電話会社)を介して互いに通信しても良い。この無線通信は受信および送信を含めて2方式であり、その2方式は公知技術に従っても良い。
【0046】
CELL PHONE COMPANY(携帯電話会社)とWIRELESS LAN PROVIDER(無線LANプロバイダ)とは、インターネットに接続されて示されるような他の構成要素との2方式通信のみならず、インターネットに習慣的に接続される他のリソースとの2方式通信のために、インターネットに接続されている。また、家庭用PCを有するドライバー、または、ラップトップコンピュータを備えたレンタル車両(rented/borrowed vehicle)内のドライバーであるCLUB MEMBERS(クラブメンバー)は、インターネットに接続され、インターネットを介してSERVICE CENTER(サービスセンター)との通信、または、自分自身の車両または他のメンバー車両との通信をしても良い。図示された車両の何台か所有することに加えて、CLUB MEMBERS(クラブメンバー)は、使用料金を支払ってメンバーパスワードを使うことによりSERVICE CENTER(サービスセンター)のウェブページを介して接続する一般大衆の一部である。その態様システムの管理者であるSERVICE CENTER(サービスセンター)は、インターネットに接続されている。インターネット接続は、光ケーブル、無線ケーブル、および人工衛星を含めて、何らかの公知技術に従っている。
【0047】
図1のシステムは、携帯電話サービスエリアと全く同様に、重なり合ったサービスエリアまたは隣接するサービスエリアで、国内の至る所に繰り返されている。
【0048】
車両のそれぞれはCOMPUTER(コンピュータ)を設けられ、そのCOMPUTER(コンピュータ)は、RAM(図示しないが本来備わっている)、CPU(図示しないが本来備わっている)、バス、STORAGE(ストレージ、記憶装置)(大規模記憶装置用のRAIDまたは不揮発性メモリ)、WIRELESS LAN(無線LAN)接続、CELL PHONE MODEM(携帯電話モデム)、SECURITY BUTTON(セキュリティーボタン)、GPS、CAMERAS(カメラ)、TEMPERATURE SENSOR(温度センサ)、SHOCK SENSOR(衝撃センサ)、および、VELOCITY SENSOR(速度センサ)を有している。WIRELESS LAN(無線LAN)、GPS、およびCELL PHONE MODEM(携帯電話モデム)は、本来の装備としてさえ、一般的に車両内に設けられている。車両の速度メータは、VELOCITY SENSOR(速度センサ)の機能を提供する。エアーバック配置システムは、衝撃センサを使うと共にSHOCK SENSOR (衝撃センサ)として機能する。標準エンジン制御は、環境温度である吸気温度を決定するための温度センサを必要とし、そのような構成要素がTEMPERATURE SENSOR(温度センサ)として機能する。SECURITY BUTTON(セキュリティーボタン)は、ドライバーおよび前部座席乗員の容易に届く範囲内での単純なボタンであり、その単純なボタンは、一般慣習におけるパニックボタンと全く同様に、緊急状況を示すために押される。
【0049】
図1の構成要素はCOMPUTER(コンピュータ)に接続されている。そのCOMPUTER(コンピュータ)は汎用コンピュータであり、汎用コンピュータは、汎用操作システムと、この中で開示された方法を実行するための実施の形態における特定目的用のソフトウェアとによって、特に、図面のフローチャートとその説明とに関して動作される。従って、COMPUTER(コンピュータ)は特定目的用のコンピュータである。
【0050】
CAMERAS(カメラ)が、おのおののメンバー車両に装着される二台以上のビデオカメラからなることは好適である。カメラは一般的に異なる方向に、たとえば、前方、後方、右方、および左方にそれぞれ向けられている。SERVICE CENTER(サービスセンター)からの命令、または、ジョイスティックなどによって車両内で、CAMERAS(カメラ)が水平方向および垂直方向に関して調節される。
【0051】
メンバーはCAMERAS(カメラ)を選択的に起動し、その動きを制御する。一般的なデジタルカメラでの基準である様々な調節が、CAMERAS にキャプチャされたイメージの特質を保証している。しかしながら、目的やこのシステムを使う環境によって固有の付加的な特徴がある:たとえば、車両振動、車両速度、道路起伏、および、キャプチャされるイメージに関しての車両速度を考慮するシャッター速度制御と;極端な逆光のような環境状況を考慮し、日光および極端な暗闇に直面する露光制御と;暗闇以外の或る状況に、たとえば、破壊からの危険に遭遇した時に使用可能なフラッシュライトと;目標物奥行を最大にするための焦点制御と;解像度と;光感度などが挙げられる。
【0052】
図2は、この実施の形態による車両システムの一部の動作方法を開示している。
【0053】
図2のステップ200:VEHICLE(車両)が道路を走行中に、または、VEHICLE(車両)が駐車中に、イメージが図1のCAMERAS(カメラ)によってキャプチャされ、VEHICLE(車両)が、図1で示されるように、主要データに関連するイメージを有して、または、主要データに関するイメージを有さずに、SERVICE CENTER(サービススセンター)に主要データを送る。SERVICE CENTER(サービスセンター)は主要データを再検討し、対応するイメージが記憶装置(サービスステーションまたは他の車両)内に既に存在するか否かを決定し;現在受信されている主要データが、新しいイメージ、または、さらに最新のイメージを伴うことを示す場合には、処理がステップ205に移動する。そうでない場合には、処理はステップ210に移動する。
【0054】
図2のステップ205:サービスセンターは、主要データを、または、その主要データを表示するイメージアイコンを、車両に送り、図6,図10および図12で示されるマップをアップデートする。そのマップは、地図形状のルートに沿ってイメージアイコン(ベクトル、すなわち矢印)を伴い、主要データをキャプチャした位置を示す。主要データまたはベクトルを車両間で送って、車両が自己のマップをアップデートすることと同様に、アップデートされたマップが、サービスセンターによって車両に送られても良い。
【0055】
図6,図10および図12では、イメージアイコンがマップ上で表示されて位置、速度、キャプチャの方向、および、温度のような他のデータを示す。イメージアイコンは、イメージが利用可能であること、および、イメージがキャプチャされた場合とを示す。イメージアイコンは点滅して自己の存在を強調する。矢印は、幾何学上でのベクトルと同様に、速度および方向を表す。たとえば、イメージを提供しようとする車両、または、記憶されたイメージを既に提供した車両(イメージ車両)が南に時速30マイルで走行している時に、ベクトルは南に向かう矢印として表示され、その矢印は時速30マイルを示す他の矢印に関して比例する長さを有している。単一の表示アイコン内では同時に矢印がイメージ車両の位置、方向、および速度を直感的に示すので、ユーザは容易に選択できる。
【0056】
図2のステップ210:活動中のカメラを備える車両は、連続的なイメージをキャプチャおよび記憶する(実際には、イメージは有限周波数で、たとえば、映画鑑賞中における人間の目のフリッカ率(flicker rate)より大きく、または、スライドショウのようなスロウ率(slower rate)であるが、好適には周期的に取り出されるだろう)。これらのイメージは、ある一定の時間で、たとえば、30分間で車両内に記憶される。新しいイメージフレームがキャプチャされると、最も古いフレーム(たとえば、30分前にキャプチャされたフレーム)が捨てられる。システムが、広い用途要求を満たすように仕組まれ、それによってイメージに関係する様々なデータをキャプチャする。他のデータが、特定の道程に対して各イメージと一緒に、または、1グループのイメージと一緒に入力される。または、他のデータが、任意のイメージから独立して記憶される。
【0057】
ステップ210では、イメージを表示するデータが、カメラから車両コンピュータ(図1のCOMPUTER)に送られる。車両コンピュータは、画像のデータパッケージと、関連する他のデータとを生成する。データパッケージまたはデータパケットは、イメージ;車両のGPS座標、または、車両位置に関する他の情報(たとえば、ナビゲーションシステムから検索される街路名および都市名)と;イメージがキャプチャされた時間と;目標物確認システムを使って引き出し可能なイメージ内の目標物名、たとえば、すぐ近くの建物、興味ある地点、および、ランドマーク(目印)と;イメージがキャプチャされたデータと;イメージがキャプチャされた期間と;イメージがキャプチャされた時における車両速度と;イメージがキャプチャされた時における車両方向と;イメージがキャプチャされた時におけるカメラの三次元方向と;車両周囲の環境の温度と;車両周囲の環境の湿度と;車両周囲の環境の気圧と;たとえば湿った、氷で覆われた、雪の積もった、および、でこぼこしたような道路状況と;たとえば雨、晴れ、日のよく照る、または、曇ったような天候状況と;他のセンサデータと;ドライバー、乗員、または車両のプロフィールとを含んでいる。
【0058】
図2のステップ210では、図1のCAMERAS(カメラ)が、あるイベント(たとえば、図2で後に言及するイベント、ステップ220およびステップ225)の発生時に使用するための静止イメージと動作イメージとをキャプチャする。ステップ230,ステップ240、およびステップ250の例より、さらに詳細なイベント例の一覧は次の通りである:最後のイメージを取り出してから指定時間期間が経過した時、たとえば30秒後(ステップ230);最後のイメージを取り出してから車両が指定距離を進んだ時、たとえば1マイルの4分の1の後(ステップ230);設定された時間期間内に、設定された角度より大きく車両が回転する時、たとえば、ハイウェイ上で合流する曲がり角、または、交差点で(ステップ230);目的地またはドライバーの目標に関係する標識または建物のような目標物認識を介して、ある通常環境の目標物が検知された時(ステップ230);道路の近くで特定位置に設定された目標物または送信器/再送信器のように、イメージおよびデータのキャプチャを稼動する目的で取付けられたある目標物または信号が検出される時(ステップ260);ある画像を取り出すように命令するサービスセンターからの信号を送信する時(ステップ240);車両のドライバー、乗客、または他の乗員が、イメージを取り出すように命令する時(ステップ260);ある画像を取り出すように命令する他の車両から信号が送信される時(ステップ240);センサシステムが、車両運転により車両または乗員にとっての危険を検出する時、たとえば、衝突時にまたは破壊のために、極度のブレーキング、加速、減速、急激なステアリング変更、または、車体への異常な衝撃を検出する時(ステップ250);ある危険な状況が車両の外部から検知される時、たとえば、道路上のちょうど前方の相対的に遅い対象物、または、任意の角度から車両経路にやって来る早い対象物から検知される時(ステップ250);車両への未知または望まないアクセス、または、車両への試みられたアクセスが、たとえば、キーを使用せずに施錠されたドアを開ける試み、キーを使用せずに車両を始動しようとする試み、または、車両周囲のエリアの侵入が検知された時(ステップ250)。
【0059】
図2におけるステップ210の強化として、上述のイベントの発生を決定するためのセンサを提供することに加えて、車両の乗員、所有者、または乗客以外の人に役立つデータを感知する複数のセンサ1〜N(図1のSENSORS)がある。この環境センサは、車両速度、車両方向、車両位置、および、環境温度を検出する。生じた環境データは、車両コンピュータに送られる。センサは車両に組み込まれている。センサのコストはリーズナブル(相応)であり、センサ用技術は市場で利用可能である。
【0060】
図2のステップ215:車両GPSは車両の位置を自動的に決定し、イメージと一緒に、または、イメージと一緒でなく、車両位置をサービスセンターに定期的に送信する。
【0061】
図2のステップ220:車両コンピュータは、ステップ230、ステップ240、ステップ250およびステップ260におけるイベントの発生有無を調べる。1つのイベントも検出されない時に、処理は、車両コンピュータのためにステップ205に戻る(ステップ200がサービスセンターのコンピュータによって実行される)。1つのイベントが検出されると、処理はステップ225に進む。
【0062】
図2のステップ225:イベントが認識され、それから、処理が、対応するイベントによってさらに選択されたステップ、たとえば、ステップ230,ステップ240,ステップ250、およびステップ260のうちの1つに進む。
【0063】
図2のステップ230:他人にとって一般的に興味あるイメージをキャプチャしたイベントの発生時に、このステップに到達する。そのイベントは自動的に誘発されて、たとえば、最後のそのようなイベントから一定分後に、または曲がり角を曲がる時に、または、ある距離を走行時に発生する;その他にも、前記ステップ210の説明で述べたような状況でイベントが発生する。それから、データが車両記憶装置に記憶される。記憶されたデータは、他の場所で述べたように、イメージ、時間、位置、速度、方向、および温度などを含む。
【0064】
図2のステップ235:主要データ(たとえば、イメージを含まないデータ)が、車両によってサービスセンターまで無線送信される。このイメージはこの時にサービスセンターに送信されなくても良い。主要データは、ステップ200でサービスセンターにより評価されるデータを含んでいる。
【0065】
図2のステップ270:ドライバーは動作モードを選択し、その動作モードでは、イベントの発生がディスプレイ上で示され、または、イベントのイメージが表示され、または、ディスプレイがステップ230およびステップ235のイベントにより変更されない。ステップ270の後に、処理は、車両に対してステップ205に戻る。
【0066】
図2のステップ240:他の場所で説明されるように、サービスセンター(ピアツーピア)を介して直接的または間接的に1つまたはそれ以上の記憶イメージまたは将来イメージを他の車両と共有すること、または、記憶イメージまたは未来イメージの1つをサービスセンターなどと共有することの命令またはリクエストを受け取った車両のイベント発生時に、このステップに達する。イメージ共有リクエストまたはイメージ共有命令が分析される。それから、主要データであって良いし、または、最新イメージ用の単なる位置および方向であっても良いイメージIDとイメージの目的地とが引き出される。将来イメージのリクエストのために、車両コンピュータが車両速度に従ってイメージキャプチャ周波数またはシャッター速度などを変更し、焦点および被写界深度のような他のカメラパラメータを変更する。シャッターと他のカメラ制御信号とは、車両コンピュータからカメラに送信される。
【0067】
図2のステップ245:イメージIDを使って車両記憶装置やそのデータベースからイメージを検索する。それから、1つまたは複数のイメージが、リクエストまたは命令に従って、目的地に送信される。
【0068】
図2のステップ270:ドライバーが動作モードを選択しても良く、その動作モードでは、イベントの発生がディスプレイ上で示され、または、イベントのイメージが表示され、または、ディスプレイがステップ240およびステップ245のイベントによって変更されない。ステップ270の後に、処理は、車両のためにステップ205に戻される。
【0069】
図2のステップ250:緊急イベントの発生時に、たとえば車両が自己車両またはすぐ近くの車両を伴った事故または接近した事故を検出した時に、または、自己車両用の緊急信号または自己車両の位置エリアでの全車両用の緊急信号を受信した時に、このステップに達する。なお、緊急イベントなどの例は、他の場合でもっと詳細に説明する。ステップ210からのイメージデータ履歴が即座に永久的に記憶される。そして、より好ましくは、その時間から次の一定期間またはリクエスト期間の間の将来イメージ履歴が付加および記憶される。将来イメージのリクエストに対して、車両コンピュータは、車両速度に従ってイメージキャプチャ周波数またはシャッター速度などを変更し、焦点または被写界深度のような他のカメラパラメータを変更する。シャッターおよび他のカメラ制御信号は、車両コンピュータからカメラに送信される。
【0070】
図2のステップ250:イメージデータがイメージデータ履歴用にキャプチャされている間に、または、緊急イベントの発生を検出した時に、または、イベントの発生が検出された後に永久的に記憶された時に、それぞれのイメージフレームが透かしを入れられてイメージを確保し、キャプチャ後にイメージがみだりに変更されなかったという合法的な証明を提供するので、裁判上での証拠などとしてその後に信頼性を保証するためにイメージは不正にいじられないようにできている。緊急イベント信号が車両内で生成された時に、たとえば、車両が事故に巻き込まれた時に、車両は、自己の近くの他の車両に緊急イベント信号を無線送信する。また、他の車両またはサービスセンターから受信されたイベント信号が、すぐ近くの車両に送信されてイベント信号の受信を保証しても良い。さらに、州ハイウェイパトロールまたは地域警察のような独立の権力委任機関が緊急要請を行い、そして、特に、エリア内の事故または犯罪に言及した場所に、その権力委任機関がその緊急要請を直接的に車両に送っても良いし、または、サービスセンターを介してその緊急要請を送っても良い。また、車両のドライバーが、たとえば緊急ボタンの起動によって、緊急イベントを発生させても良い。
【0071】
図2のステップ255:イメージデータ履歴(主要データ、透かしを入れられたイメージ、および、緊急モード識別)が、サービスセンター、および、本来の緊急イベント信号を発生させた他の車両、および、本来の緊急イベント信号を発生させた権力委任機関に送信される。
【0072】
図2のステップ270:ドライバーが動作モードを選択しても良く、その動作モードでは、緊急イベントの発生がディスプレイに表示され、または、イベントのイメージが表示され、または、ディスプレイがステップ250およびステップ255のイベントによって変更されない。緊急がエリア内でおそらく発生し、それに応じて順応すべくようにドライバーへの警告として、点滅するディスプレイを視覚的に使って、および/または、ディスプレイ上での警報メッセージおよび緊急メッセージを音声的に使って、緊急イベントの発生により即時の警告が誘発されても良い。ステップ270の後に、処理が車両のためにステップ205に戻る。
【0073】
図2のステップ260:車両のドライバーまたは他の乗員は、たとえばイメージID、イメージベクトル、または他のイメージアイコンの上でクリックまたはダブルクリックすることにより、車両内に表示されたマップ上に、たとえば図6のマップ上にイメージリクエストのイベントを生成しても良いし;GPS座標などの位置を入力してイベントを生成しても良いし;または、現在位置で音声、カーソル、またはボタン起動命令などによってイメージのキャプチャリクエストを可能にする車両ドライバーまたは他の乗員がボタンを起動してイベントを生成しても良い。
【0074】
図2のステップ260:車両の内部または外部から、センサからの情報と命令とが車両コンピュータに送られ、そこでは、その情報および命令がイメージキャプチャ周波数を決定するために処理される。車両コンピュータは、車両速度に従ってイメージキャプチャ周波数またはシャッター速度などを変更し、焦点および被写界深度のような他のカメラパラメータを変更する。シャッターおよび他のカメラ制御信号が車両コンピュータからカメラに送られる。
【0075】
図2のステップ260:ユーザが、目の前のイメージを使って特定位置のシチュエーション(状況)をクリックしたい時に、最初にサービスセンターのウェブサイトに行き、次に住所、街路名、ハイウェイ番号、都市または町、GPS座標、ランドマーク、興味ある地点、および、郵便番号のような位置情報に入る。また、車両システムは、マウス、トラックボール、および、PCラップトップ用またはダッシュボード内ディスプレイ用のライトペンのようなポインティングデバイスによって入力を受け入れ、それにより、ユーザが、表示されたマップ上に、たとえば図6,図10および図12におけるマップ地図上に、所望の位置またはイメージアイコンを指す。サービスセンターでの記憶装置または他の車両上での記憶装置内で利用可能なイメージが、ディスプレイまたは画面上に点滅光および矢印(イメージアイコン)として表示される。目的地に到着するための最適な方法をサーチする際に、旅行者は、ナビゲーションシステムを使って、提案されたルート上で利用可能なイメージを表示しても良い。
【0076】
図2のステップ265:車両は、その車両IDおよびリクエストイメージIDをサービスセンターまたは他の車両に直接的または間接的に送信する(ピアツーピア)。このピアツーピア送信は、他の車両に対するステップ240のイベントになるだろう。次に、通常通りに、車両はそのイメージを受信する。
【0077】
無線LAN(ピアツーピア送信)によって車両間の直接情報交換を行うことは、瞬時に変化する状況では、たとえば交通渋滞では有効である。ドライバーが交通渋滞の原因を、および、交通渋滞がどのくらい継続するのかを知りたい場合には、ドライバーは、道路上の前方を走る他の車両からイメージをリクエストし、利用可能なイメージを他の車両から直接的に受信、または、サービスセンターを介して受信する。
【0078】
図2のステップ270:イベントのイメージが表示される。ステップ270の後に、処理が車両のためにステップ205に戻る。
【0079】
サービスセンターで実行されるステップ200を除いて、車両は、図2の方法を実行する。
【0080】
サービスセンターは、サービスセンターで記憶されたイメージのディレクトリーと、サービスセンターで記憶されたイメージと、自動車で記憶されたイメージのディレクトリーと、イメージまたは位置に関連するデータと、イメージまたはデータの一方に関連する位置情報とを含むデータベースを管理する。イメージおよびデータの統計的な分析が実行および記憶される。
【0081】
情報リクエストに応答して、たとえば、図2のステップ260およびステップ265から、データベースにアクセスすることによってサービスセンターが最も適切なイメージ、または、移動体イメージ位置およびデータを検索する。サービスセンターと異なる位置に記憶されたイメージに対して、サービスセンターは、そのようなイメージの公開をリクエストし、他の車両への送信のための車両に、すなわち、図2のステップ240およびステップ245のピアツーピア送信のための車両に、目的地情報を提供する。リクエストされた車両の所有者がその公開を許可しない場合には、サービスセンターに利用可能な選択肢は、大衆に利用可能な他の当面あまり関連しないイメージを公開することである。こうして、大衆に公開された情報は何らかのプライベート情報またはパーソナル情報をも有さないので、大衆はイメージのパーソナルな起源を検出できない。
【0082】
サービスセンターは、画像イメージを使っての特定な道路または他の位置における現在の交通状況と;イメージを使っての特定な道路または他の位置での未解決な事故および建築サイトと;イメージを使っての特定な道路を取り巻く天候と;日によってまたは時間によって特定な道路または他の位置における混雑統計と;重大なイベントに関する入手イメージ、たとえば、車両破壊の発生時や車両盗難の発生時における事故でのイメージと;サービスセンターのウェブサイト上で出版された全データの統計資料へのアクセスと;ピアツーピアイメージ送信に対してディスプレイ視聴者(ビューア)とデータ所有者との間での仲裁とを含めて、分析のデータおよび結果を顧客またはメンバーに提供する。
【0083】
図3は、サービスセンターの立場からこの実施の形態における方法の一部を説明する。
【0084】
図3のステップ310:言及されたように、緊急のリクエストまたは命令が、たとえば、車両または当局から起こることもある。緊急のリクエストまたは命令の受信時に、サービスセンターは、そのリクエストまたは命令に関連するエリア内の車両の全部または選択された数台からのイメージ履歴を求めてリクエストを発信する。そのリクエストまたは命令の受信時に、各車両はそれを、図2のステップ220、ステップ225、ステップ250、ステップ255、およびステップ270に従って処理する。
【0085】
図3のステップ320:サービスセンターは、図2のステップ220、ステップ225、ステップ230、ステップ235、ステップ240、ステップ245、ステップ250、およびステップ255に従って車両が送信する何らかの環境データ(たとえば、イメージを具備したまたは具備しない主要データ)を、その車両から受信する。ステップ260およびステップ265に関してのサービスセンターの機能は、図2のステップ200およびステップ205についての検討から明らかである。さらに、ステップ320の詳細が図4に関して説明される。
【0086】
図3のステップ330:サービスセンターにとって役立つ1つまたはそれ以上のイメージを受信データが含む時に、その処理はステップ340に進み、さもなければステップ360に直接進む。サービスセンターは、その位置からのデータを殆ど持たない時に、および、図4に関する検討から明らかな他の理由のために、受信されたイメージに興味をもっても良い。
【0087】
図3のステップ340:主要データを使って受信されたイメージが識別され、その識別はディレクトリーの中で利用され、イメージが記憶される。
【0088】
図3のステップ350:サービスセンターにとって興味がない時にまたは発端の車両がイメージを記憶する時に、および、図4に関する検討から明らかな他の理由のために、受信されたイメージが廃棄される。
【0089】
図3のステップ360:必要とされる時にイメージおよび主要データが検索されるような公知の方法で、サービスセンターのデータベースが管理される。
【0090】
図3のステップ370:イメージから引き出された主要データおよび情報が検索および処理されて、公知な方法で、たとえば、天候状況および予報についての統計的なデータおよび他のデータを生成する。
【0091】
図3のステップ380:サービスセンターでの記憶装置内に、または、サービスセンターで指示されるような他の車両での記憶装置内に存在しないイメージ、または、記憶装置内に存在したとしても最新でないイメージ、または、ステップ370のために必要とされるイメージに対しての車両からのリクエストに応答して、サービスセンターは、1つまたはそれ以上の車両からのイメージを(たとえば、位置、方向、および角度によって)リクエストする。そのようなリクエストは、それぞれの車両によって受信され、図2のステップ240およびステップ245のイベントとして取り扱われる。
【0092】
図3のステップ390:リクエスト(たとえば、図2のステップ260およびステップ265に従って生成および送信されたリクエスト)を受信すると、サービスセンターは、公知の方法、たとえばディレクトリーを使って、受信されたリクエストと主要データとの適合点、たとえば特定の位置またはエリアに関しての適合点の所在位置を突き止める際に、データベースをサーチする。そのような適合点が発見された場合には、イメージがリクエスト者に送信される。そのような適合点が発見されなかった場合には、そのようなイメージのキャプチャまたは検索のために1つまたはそれ以上の車両にリクエストがなされる。そのキャプチャまたは検索は、車両の立場でステップ240およびステップ245のイベントである。それから、処理がステップ310に戻る。
【0093】
データを管理する実施の形態の方法における範囲内で一時的中止機能が、図3のステップ320のためのさらなる処理の詳細として、図4に示されている。
【0094】
図4のステップ400:主要データ、イメージ、および他のデータを含めて、環境データが、サービスセンターによって車両から受信される。そのデータは、図2のステップ235、ステップ245、およびステップ255のうちの1つに従って送信されたものである。無線送信によって複数の車両から送信されるデータは、サービスセンターで受信される。データのコンテンツは、上記で検討され、車両および乗客についての車両内の車両環境と、車両外での車両環境とに関する情報に一般的に関連する。データは、サービスセンターでちょうど受信されたという点で、最新である。また、データが、カメラを含めて車両の環境データ収集センサでちょうどキャプチャされたという点で、車両の立場から最新であることは最も好適であるが、必ずしもそうであるとは限らない。
【0095】
図4のステップ410:サービスセンターは、主要データから識別されるような環境データの発端位置を決定する。たとえば、公知の方法でパケットのヘッダーから、または、正確な位置GPS座標を有する領域を提供することから、または、GPS座標に基づいてまたは上述の物体認識などに基づいて車両コンピュータで決定されたエリアを示すコードから、車両の位置が識別される。このステップは他の目的に、たとえば、データベースを指示する際に役立つ。
【0096】
図4のステップ420は、データベース内の情報、たとえばディレクトリーを使って、サービスセンターは、イメージ量を決定し、または、位置エリア用の記憶装置の中での最新の他のデータを決定し、そのエリアに対してイメージ密度を含んだデータ密度の表示を計算する。1つのタイプのイメージ密度、たとえば、北向きを眺めるデータに対して、サービスセンターのコンピュータは、異なる位置エリアごとに最新のデータ量に関するデータ密度の表示を生成する。最近受信されたイメージを含めて、同一エリアに対して他の車両から受信されるそのようなイメージ数は、密度として決定される。そのキャプチャから測定されるような時間期間を除いて、ある時期のイメージは、他のイメージが記憶装置内で最も新しい間に、廃棄されることもある。記憶装置内のイメージは、イメージを再生かつ表示するのに使用可能なサービスセンターでの記憶装置内に存在するデータ、または、イメージをキャプチャした車両のメモリの記憶装置内で、イメージを再生かつ表示するのに使用可能なデータに関係する。たとえば、ステップ440の後に実行されるように、ステップ420を移動できる。
【0097】
図4のステップ430:サービスセンターは、エリア用のしきい値画像または他のデータ密度値を記憶装置から計算かつ検索する。ソフトウェアを生成して、サービスセンターで使用されている汎用コンピュータから特殊用途コンピュータを作る際に、プログラマーによって設定され、および/または、システム変更の要求としてサービスセンターでのコンピュータのオペレータによって選択的に設定されるデータ密度しきい値が設けられ、それによって、設定量またはそれ以下になるように制限する。そのような方法で、個々のしきい値は、各エリア毎に、多数のイメージおよび他のデータタイプのそれぞれに対して設定される。そのエリアは変更されることもある。たとえば、1つのエリアが、特定のハイウェイに沿っても良いし、または、国の市、都会、田舎または国さえも1つの区間に沿っても良い。複数のエリアは、おそらく、データのタイプにより異なり、たとえば温度に関して広範囲な田舎により異なり、かつ、イメージ用のハイウェイと市内の交差点とに沿って異なっていただろう。このステップは、ステップ450内で必要とされるまで、記憶装置内の設定を変更、または、値を維持しても良い。
【0098】
図4のステップ440:データがエリアにとって有効または最新である時間期間は、主要データ内のキャプチャ時間と比較される。古くなるようにイメージデータが決定されると、廃棄フラッグがステップ460内で設定され、処理が図3のステップ330を介してステップ350に進む。古くならないようにイメージデータが決定されると、その処理がステップ450に進む。必ずではないけれども、データを受信する際に一時停止の必要性が、それぞれ別個のデータの受信時に検討されず、それにより僅かな計算機能力および計算遅延を必要とする。それ故に、時間期間が設定され、選択的に変更される。たとえば、ある自動適応装置を使って、時間期間はイメージに対して5分、および、温度に対して30分であっても良いし、たとえば、温度が氷点に近い場合には、その期間は減少される。時間期間が、受信され続けたデータのタイプに対して終了する場合には、処理が図3のステップ320からステップ330に進む。さらに計算時間を節約するためには、ステップ420およびステップ430を進めてステップ440の後かつステップ450の前に生じさせても良い。
【0099】
図4のステップ450:ステップ420に由来するデータ密度は、ステップ430で提供されるしきい値と比較される。生成されたデータ密度がデータ密度しきい値を越えると、処理はステップ460に進み、もしそうでなければ、図3のステップ330を介してステップ340に進む。図5のステップ500に従って、以下の方法のうち指定された1つによって、または、以下の方法のうち選択された1つによって、現在のデータ密度が制限される。制限する方法は、たとえば図5のステップ510、ステップ520およびステップ530でそれぞれ説明されるように、変更しても良い。
【0100】
図4のステップ460:上述されたように、ステップ460はステップ440またはステップ450の何れか一方から到達される。ステップ460は、図5でさらに詳細に示される。
【0101】
図5のステップ500:図4のステップ440およびステップ450の記述の中で説明された状況に従って、廃棄フラッグが設定される。
【0102】
図5のステップ510:ステップ510からの3つの経路は、現在のデータ密度を制限する3つの異なった選択可能な典型方法を提供する。たとえば、ステップ520、ステップ530およびステップ540のうち1つだけを含めることによって、または、セットアップ時またはプログラミング中にステップ520、ステップ530およびステップ540のうち幾つかをディセーブル(割込を抑制)することによって、または、サービスセンターでのオペレータの管理下でハードウェアまたはソフトウェアの切り替えによって、または、信号が送信されることになっている車両システムのタイプに自動的に従うことによって、ステップ510で選択された経路が選択されても良い。
【0103】
図5のステップ520:図2のステップ235をイネーブル(可能に)するためのイネーブル用送信信号が、高密度のエリア内の車両のうち何台かのみに送信される。イネーブル用送信信号は位置エリアまたは時間を含めても良く、その位置エリア内ではイネーブル用送信信号は有効であり、その時間内ではイネーブル用送信信号は有効である。
【0104】
図5のステップ530:サービスセンターは、高密度エリアからイメージデータを廃棄し、および、信号を車両に送信したりまたは送信しなかったりする。その後に、処理が図3のステップ320からステップ330に進む。ステップ400〜ステップ460は、同一車両からの同一パケット内で受信される様々なタイプのデータのために繰り返しても良い。
【0105】
図5のステップ540:図2のステップ235を一時停止する一時停止送信信号が、高密度のエリア内の車両のうち選択された何台かにまたは全部に送信される。一時停止送信信号が位置エリアまたは時間を含めても良く、その位置エリア内では一時停止送信信号が有効であり、その時間内では一時停止送信信号は有効である。
【0106】
それにより、図3、図4および図5によれば、データは、必要に応じて、そのデータをキャプチャした車両から、図3のステップ235に従って選択的に計算される。サービスセンターから必要とされる位置エリアのために、サービスセンターによって生成される一時停止信号(ステップ520のイネーブル信号、ステップ530の廃棄信号、または、ステップ540の一時停止信号)が存在しない時に、データが他と共有される。一時停止信号がサービスセンターで生成され、そして、サービスセンター(ステップ530)で使用され、または、同一の道路または近くの道路(たとえば1つのエリア)上で選択された車両(ステップ520およびステップ540)に送信され、にぎやかな道路上で適当な台数の車両だけがサービスセンターにデータを送信するように、または、ピアツーピアでイメージを送信するようにする。サービスセンターは、同一エリアからあまりにも多すぎるデータを受信すると、一時停止信号を生成する。たとえば、サービスセンターおよび車両GPS位置センサからの信号内の許容位置範囲で、自動的に決定されるように、車両がにぎやかな道路またはエリアを去る時に、車両コンピュータは一時停止を解除しても良い。あるいはその代わりに、単にステップ540の一時停止信号の短縮である再開信号を一時停止車両に送信することにより、サービスセンターは一時停止を解除する。同様に、再開信号が、ステップ520のイネーブル信号の全車両への一般的な放送であっても良い。一時停止が解除されると、車両はステップ235に従ってデータの送信を再開するだろう。システムがセットアップされて、特にプライベートな理由のために、ユーザが自己車両からのデータ送信を選択的にイネーブルおよびディセーブルにしても良い。
【0107】
図14は、緊急を感知する車両に関する、または、緊急を宣言してイベントのビデオ履歴をキャプチャする車両の乗員に関する本実施の形態の方法の一部におけるフローチャートである。
【0108】
図14のステップ20:たとえば、図2のステップ220、ステップ225およびステップ250に関して記述されたように、車両(A)は緊急イベントを感知する。緊急イベントは、車両(A)の乗員によって感知されても良い。または、緊急イベントは、車両(A)のセンサのうち1つ、たとえば、急ブレーキ用のセンサ(ABSを配備したセンサ)、エアバック展開用のセンサ、および、車両(A)内に入ろうとする侵入者用のセンサの1つによって感知されても良い。その急ブレーキ用のセンサ、エアバック展開用のセンサ、および、侵入者用のセンサは、車両(A)が思いがけない事故に会ったこと、ちょうど事故を避けたこと、および、どこか故障したことを示す。
【0109】
図14のステップ21:緊急の感知は、たとえば、車両(A)の乗員によって行われたのではなく、車両センサ自体によって行われたものか。この車両(A)のコンピュータシステムにおける質問および決定が「Yes(はい)」の結果に達すると、処理はステップ23に進み、そうでない場合にはステップ22に進む。
【0110】
図14のステップ22:乗員が、感知された乗員ES命令を確認するか、または、車両(A)の外部で始まった、たとえば他の車両(B)のサービスセンター(SC)から始まったES命令を受信するかに関して、車両(A)のコンピュータシステムが質問する。「Yes(はい)」が質問結果である場合には、車両(A)の乗員によって入力されるように、処理がステップ24に進み、そうでない場合には処理が終了する。さらなる向上として、たとえば、駐車またはエンジンオフの時の待機モードで車両コンピュータに指示されるように、車両が無人の場合には、確認フラッグを設定した後に、処理が自動的にステップ24に進む。処理はステップ28まで継続し、そして、車両の乗員が通知されるまで、および、ステップ28を実行するように処理が進むために車両の乗員が確認フラッグを明確にするように選択するまで、その処理は停止する。
【0111】
図14のステップ23:車両(A)のコンピュータシステムは緊急信号(ES)を生成する。
【0112】
図14のステップ24:それから、車両(A)は現在のビデオ履歴を、たとえば、キャプチャされた次のビデオイメージを使ってその現在のビデオ履歴の上書きを防止すること(上書き禁止フラッグを設定すること)によって、永久的に記憶する。
【0113】
図14のステップ25:車両(A)は、(携帯電話システムのような)無線WANでサービスセンター(SC)に受け取り通知(ACK)を送ってサービスセンターに緊急を知らせる。ACKは、車両(A)の識別、車両(A)の位置、現在データ、現在時間、および、緊急の種類のような主要データを含む。サービスセンターは道路当局または道路サービスに緊急を知らせ、たとえば、警察に通報して緊急サービスをリクエストしても良い。このサービスは緊急の重大度に依存しても良い。また、サービスセンターは、緊急時の当面エリア内での他の車両に、ステップ21で言及されるようなサービスセンター(SC)の命令を伴ったイベントを目撃するよう命令しても良い。
【0114】
図14のステップ26:車両(A)は、無線LANで他の車両(B)に緊急信号を送信し、緊急信号の有効性を制限する。たとえば、緊急イベント時の当面エリア内に存在する他の車両(B)によってのみ受信されるように、信号が低電力で送信される。ESは、車両(A)の識別、車両(A)の位置、データ、時間、緊急の種類、および、キャプチャイメージ命令のような主要データを含む。
【0115】
図14のステップ27:それから、車両(A)は、ステップ24における現在のビデオ履歴の継続として、さしあたって将来のビデオ履歴を永久的に記憶するように処理する。将来のビデオ履歴は、ステップ24から開始するタイマーによって制御され、緊急の重大度に従ってコンピュータシステムにより指定または自動的に選択された時間期間の間、継続する。
【0116】
図14のステップ28:車両(A)は、ビデオ履歴(現在のビデオ履歴とその継続(さしあたって将来のビデオ履歴)とを含めて)を、(携帯電話システムのような)無線WANでサービスセンターに送信する。ビデオ履歴は、その識別用の主要データと;イメージと;温度、車両内外からの音響記録、および天候要因のような他の環境データとを含む。
【0117】
図14のステップ29:サービスセンター(SC)は、ステップ28でサービスセンターに送られたビデオ履歴を受信しかつ永久に記憶する。記憶装置は索引付けられ、主要データに従って緊急サービスのディレクトリーに入力される。
【0118】
図14のステップ30:サービスセンターは、ビデオ履歴が受信されて良好な順番で記憶されたことを決定した後に、受け取り通知(ACK)を元の車両(A)に送信し、そしてまた、何らかの道路当局または道路サービスの配備を確認する。受け取り通知は車両(A)で表示される。その受け取り通知を受信するまで、車両(A)は繰り返しサービスセンターに送信する。
【0119】
図14のステップ31:よくある管理のように、インデックス、ディレクトリーなどを確立および維持することにより、受信されたビデオ履歴用のデータベースをサービスセンターが管理する。そして、サービスセンターは、個人のプライバシーを破ることなく、他人の適法な要求に従って情報を分配する。
【0120】
図14のステップ32:車両(B)は、ステップ26内で送信された緊急信号ESを受信する。それは、車両(B)が車両(A)と一緒に無線LANの範囲内にいるからである。
【0121】
図14のステップ34:車両(B)のコンピュータシステムは、そのカメラが作動しているか、または、機能しているかを判断する。カメラが作動している場合には処理はステップ35に進み、カメラが作動していない場合には処理はステップ36に進む。
【0122】
図14のステップ35:車両(B)のコンピュータシステムが、その現在のビデオ履歴を、たとえば、キャプチャされた次のビデオイメージを使って現在のビデオ履歴の上書きを防止すること(上書き禁止フラッグを設定すること)によって、記憶する。
【0123】
図14のステップ36:車両(B)のコンピュータシステムは、無線LANで車両(A)に受け取り通知(ACK)を送信して、イメージデータをキャプチャしていることを車両(A)に知らせる。ACKは、車両(B)の識別、車両(B)の位置、データ、および時間ような主要データを含む。
【0124】
図14のステップ37:それから、車両(B)のコンピュータシステムは、ステップ35における現在のビデオ履歴の継続として、さしあたり将来のビデオ履歴を永久的に記憶するように進む。将来のビデオ履歴は、ステップ35から開始するタイマーにより制御され、緊急の重大度に従ってコンピュータシステムにより指定または自動的に選択される時間期間の間、継続する。
【0125】
図14のステップ38:車両(B)のコンピュータシステムは、ビデオ履歴(現在のビデオ履歴と、その継続(さしあたり将来のビデオ履歴)とを含めて)を(携帯電話のような)無線WANでサービスセンターに送信する。ビデオ履歴は、リクエスト者としての車両(A)の識別と、データの源としての車両(B)の識別と、イメージと、他の環境データとのために主要データを含む。他の環境データは、温度、車両の内外からの音響記録、および、天候要因のようなものである。
【0126】
図14のステップ39:サービスセンター(SC)は、ステップ38でサービスセンターに送信されたビデオ履歴を受信しかつ永久に記憶する。記憶装置は索引付けされ、主要データに従って緊急サービスのディレクトリー内に入力される。
【0127】
図14のステップ40:ビデオ履歴が受信され、良好な順序で記憶されたことを決定した後に、サービスセンター(SC)は元の車両(B)に受け取り通知(ACK)を送信する。受け取り通知は、車両(B)で表示される。その受け取り通知を受信するまで、車両(B)は繰り返しサービスセンターに送信する。
【0128】
図14のステップ31:よくある管理のように、インデックス、ディレクトリーなどを確立して維持することによって、サービスセンターは、受信されたビデオ履歴用のデータベースを管理する。そして、サービスセンターは、個人のプライバシーを破ることなく、他人の法的な要求に従って情報を分配する。
【0129】
図15は、イベントのビデオ履歴をキャプチャするために、他の車両(A)に端を発する緊急を感知する車両(B)に関する、または、非常事態の車両(1)に関して観測されたことに基づいて緊急を宣言する車両(B)の乗員に関する実施の形態における方法の一部のフローチャートである。
【0130】
図15のステップ40:車両(A)は、図2に関して議論されたタイプの緊急イベント、すなわちステップ220、ステップ225、ステップ260、およびステップ265を有する。
【0131】
図15のステップ41:車両(B)は、車両の感知が、たとえば、車両(B)の乗員によって行われるのではなく、車両センサ自体に端を発するかどうかを決定する。車両(B)のコンピュータシステムの質問および決定が「Yes(はい)」の結果に達する場合には、処理はステップ43に進み、そうでない場合にはステップ42に進む。
【0132】
図15のステップ42:乗員が、感知された乗員ESの命令を確認するか否かに関して、車両(B)のコンピュータシステムが質問する。「Yes(はい)」が質問の結果である場合には、車両(B)の乗員によって入らされるように、処理はステップ43に進み、そうでない場合には処理は終了する。さらなる強化として、車両が無人である場合には、たとえば、駐車またはエンジンオフ時の待機モードで車両のコンピュータシステムに指示されるように、確認フラッグを設定した後に処理がステップ43に自動的に進む。そして、処理がステップ47まで継続し、車両の乗員が通知されるまで、かつ、処理が進んでステップ47を実行するため確認フラッグを明確にするように車両の乗員が選ぶまで、その処理は停止する。
【0133】
図15のステップ43:車両(B)のコンピュータシステムは、そのカメラが作動しているか、または、機能しているかを判断する。そのカメラが作動している場合には処理がステップ44に進み、カメラが作動していない場合には処理がステップ45に進む。
【0134】
図15のステップ44:車両(B)のコンピュータシステムはその現在のビデオ履歴を、たとえば、キャプチャされた次のビデオ履歴を使って現在のビデオ履歴の上書きを防止すること(上書き禁止フラッグを設定すること)によって、記憶される。
【0135】
図15のステップ45:車両(B)は(携帯電話システムのような)無線WANでサービスセンター(SC)に受け取り通知(ACK)を送信して、車両(A)に伴った緊急状態をサービスセンターに知らせる。ACKは、車両光学認識装置で知らされまたは知覚された場合には車両(A)の識別、車両(B)の位置、データ、時間、緊急状態の種類のような主要データを含む。車両(A)または他の車両がまだサービスセンターに知らせていない場合には、サービスセンターが道路当局または道路サービスに緊急を知らせ、たとえば、警察に知らせて救急車をリクエストしても良い。このサービスは緊急の重要度に依存しても良い。また、サービスセンターは、緊急状態の当面エリア内での他の車両に、そのイベントを目撃するよう命令しても良い。そのイベントは、図14のステップ21内で言及されるようなサービスセンター(SC)命令を伴っている。
【0136】
図15のステップ46:それから、車両(B)が、ステップ44における現在のビデオ履歴の継続として、さしあたり将来のビデオ履歴を永久的に記憶するように処理する。将来のビデオ履歴は、ステップ35から始まるタイマーを使って制御され、および、緊急の重要度に従ってコンピュータシステムにより指定または自動的に選択される時間期間の間、継続する。
【0137】
図15のステップ47:車両(B)のコンピュータシステムは、ビデオ履歴(現在のビデオ履歴と、その継続(さしあたり将来のビデオ履歴)とを含めて)を(携帯電話システムのような)無線WANでサービスセンターに送信する。ビデオ履歴は、緊急状態の車両としての車両(A)の識別と、データの源としての車両(B)の識別と、イメージと、他の環境データとのための主要データを含む。他の環境データは、温度、車両内外からの音響記録、および、天候要因のようなものである。
【0138】
図15のステップ48:サービスセンター(SC)は、ステップ47内に送信されたビデオ履歴を受信して永久的に記憶する。記憶装置は索引を付けられ、主要データに従って緊急サービスディレクトリー内に入らされる。
【0139】
図15のステップ49:サービスセンター(SC)は、ビデオ履歴が受信されて良好な順序で記憶されたことを決定した後に、元の車両(B)に受け取り通知(ACK)を送信する。受け取り通知は車両(B)で表示される。その受け取り通知を受信するまで、車両(B)は繰り返しサービスセンターに送信する。
【0140】
図15のステップ50:よくある管理のように、インデックス、ディレクトリーなどを確立して維持することにより、受信されたビデオ履歴のためにデータベースをサービスセンター(SC)が管理する。そして、サービスセンターは、個人のプライバシーを破ることなく、他人の法的な要求に従って情報を分配する。
【0141】
実施の形態によって提供されるサービスに対する顧客が、非メンバーまたはメンバーとして分類されても良い。
【0142】
非メンバーは、サービスセンターのウェブサイトの公開ページにアクセスして、イメージを含めてマップディスプレイ上でデータのうち利用できるものを調べることができる。ある情報は、一般大衆の間で興味を生み出すために、自由に閲覧またはダウンロードすることもでき、そして一方、他の情報は、一回ごとの手数料に対して利用可能である。
【0143】
メンバーは、交通情報サービス、データセンターへの任意情報検索などのような会社ウェブ系サービスへの十分なアクセスを有する。メンバーは会費を支払い、自己の車両に装置を組み込んで、その装置で可能とされる多くのサービスを、たとえば、サービスセンターへの無線通信、および、ローカル車両間で直接的に分配される情報を得る。メンバーは、インターネット上で、または、サービスセンターとの直接的な無線通信によって、潜在的に興味あるイメージをスキャンでき、それにより、イメージを記憶しても、または、ディレクトリー利用できるものを抜き出しても良し、および、リクエストしている車両に直接的にイメージを送信するように、または、サービスセンターを介してイメージを送信するように他の車両コンピュータに命令しても良い。サービスセンターを介してまたはサービスセンターにデータを送る際の寄与度に従って、メンバーは、メンバー会費を割り引くために利用されるポイントを与えられる。メンバーの個人情報およびデータはサービスセンターによって厳重に保存され、持ち主によって許可されない場合には訂正不可能である。
【0144】
イメージを含めたデータパックと関連情報とを使って、特定エリアへの接近前に現在の交通状況および道路状況を知り、ドライバーがそのルートを評価できるようにしている。また、データパケットは、走行ルートに沿って目立った標識、建物、および眺望のようなナビゲーション情報を提供する。たとえば、最近の10分間で他の車両により関心ある位置でキャパチャされたデータが、関心ある各ハイウェイのルートに沿って総マイル数まで記憶される。このように構成されたデータは、ドライバーにとって利用可能であり、そして、関心ある位置に到着する前にそこでの現在の道路状況にアクセスするために利用される。また、サービスセンターまたは車両コンピュータは、エリアと、関心ある各道路の交通とに関する統計的情報を引き出す。
【0145】
データは有益である:一緒に運転していないが、どちらかと言えば、同一時刻または異なる時刻で同じルートに関して異なる車両で運転している家族および他人と通信すること;駐車した車両を離れてチェックすること;インターネットおよびウェブサイトを有する人によってアクセスされるようにウェブサイト上で公開するため:ドライバーが自己の経験に基づいて運転を計画または思い出すための記録として、道路および素晴らしい眺望の名前をユーザに思い出させること;持ち主に対する事故、または、データのキャプチャによって同時発生的に出会わされた他の車両に対する事故の重大な証明として:目的地への最適な方法を選択すること。他の車両から目の前のイメージを使って、所望の位置での現在の天候を知ること;一台またはそれ以上の車両によって事故現場または犯罪現場でキャプチャされ、その事故または犯罪の原因の証拠としてその時に使用されることもあるイメージを獲得すること;道路固定カメラおよび道路固定センサの下部構造を構築することによってよりむしろ、複数の車両間で分配されることによって、遙かにコスト効率的な方法でイメージを獲得すること;個々人、様々なメディア配給者、政府当局、および企業に対して、特にニュース源としての交通状況および天候状況に関しての販売のため。
【0146】
本発明は、多くの実施の形態および実例に関して記載されたが、そのように限定されず、添付された請求項の範囲に入る様々な明白な変形および等価物を含む。
【0147】
【発明の効果】
本発明は、セキュリティー(安全確保)およびセイフティー(安全性)のみならず、ナビゲーション用のイメージモニタリングの適用範囲と効率とを増大する。そのようなモニタリングのコストを減少する。
【図面の簡単な説明】
【図1】本発明を実施するための総合システム装置における一実施の形態を示す概略図である。
【図2】異なるイベントの発生時に、図1の総合システムにおける他の構成要素と相互作用する1台の車両によって実行されるような一実施の形態の方法を示すフローチャートである。
【図3】図1の総合システムにおける他の構成要素と相互作用する機能的に同様なサービスセンターの1つの動作方法を示すフローチャートである。
【図4】図3のステップ320をさらに詳細に示す図である。
【図5】図4のステップ450をさらに詳細に示す図である。
【図6】図2の方法を実行する車両コンピュータまたは車両ラップトップ用のコンピュータ画面ディスプレイを概略的に描写する図、さらに詳細には、図2のステップ205における典型的なマップ表示と図8のステップ803における典型的な表示とを示す図である。
【図7】図2の方法を実行する車両コンピュータまたは車両ラップトップ用のコンピュータ画面ディスプレイを概略的に描写する図、さらに詳細には、図2のステップ260およびステップ265からのデータを使ってステップ270の典型的なイメージ表示と、図8のステップ808およびステップ810における典型的なイメージ表示とを示す図である。
【図8】特定位置で取り出されたイメージをリクエストする車両を使って、図2のステップ260、ステップ265、およびステップ270で提供されるものよりもっと詳細に、システム動作のための一実施の形態における方法を示すフローチャートである。
【図9】キャプチャされたイメージの記憶装置を管理する際に、特に、イメージフラッグに関して、総合システムの動作、すなわち図2のステップ230およびステップ235を含んだ動作を示すフローチャートである。
【図10】マップ上で1つの位置を選択するように位置決めされたカーソルを使って、図6による現実のマップ表示がどのように見えるかを示す図である。
【図11】図10で選択された位置から取り出されたように、図7による現実のマップ表示がどのように見えるかを示す図である。
【図12】図10と類似するが、ハイウェイに沿ってさらに位置決めされたカーソルを伴ったマップ表示を示す図である。
【図13】図11と類似するが、図12の位置を選択するための現実のマップ表示を示す図である。
【図14】緊急事態を感知した車両に関する、または、緊急事態を宣言してイベントのビデオ履歴をキャプチャした車両の乗員に関する一実施の形態における方法の一部を示すフローチャートである。
【図15】他の車両に端を発する緊急事態を感知した車両に関する、または、緊急事態を宣言してイベントのビデオ履歴をキャプチャした車両の乗員に関する一実施の形態における方法の一部を示すフローチャートである。
【符号の説明】
CAMERA カメラ
COMPUTER コンピュータ
OTHER VEHICLE 他の車両
SERVICE CENTER サービスセンター
SHOCK SENSOR 衝撃センサ
TEMPERATURE SENSOR 温度センサ
VEHICLE 車両
VELOCITY SENSOR 速度センサ
WIRELESS LAN 無線LAN

Claims (4)

  1. イメージをキャプチャして表示する方法であって、
    第1移動体ユニットに搭載されたカメラを使用して、複数の異なる位置における複数のイメージをキャプチャする第1工程と、
    前記イメージのそれぞれがキャプチャされた位置情報を取得する第2工程と、
    キャプチャされた前記イメージと前記位置情報を記憶する第3工程と、
    キャプチャされた前記イメージの関連情報を、第2移動体ユニットの要求により、前記第1移動体ユニットから前記第2移動体ユニットへ送信する第4工程と、
    前記第1移動体ユニットから送信された前記イメージを、ドライバー又は乗員のために前記第2移動体ユニットのディスプレイ上に表示する第5工程と、を有し、
    前記第4工程は、サービスセンターを介さずにピアツーピア無線通信により、キャプチャされた前記イメージの関連情報が、前記第1移動体ユニットから前記第2移動体ユニットへ送信されることを特徴とするイメージ表示方法。
  2. 請求項1記載のイメージ表示方法において、
    前記イメージのそれぞれがキャプチャされた時の前記カメラの方向情報を記憶する工程をさらに有することを特徴とするイメージ表示方法。
  3. 請求項1記載のイメージ表示方法において、
    前記イメージのそれぞれがキャプチャされた時の前記第1移動体ユニットの速度情報を記憶する工程をさらに有することを特徴とするイメージ表示方法。
  4. 請求項1記載のイメージ表示方法において、
    記憶した前記イメージの少なくとも1つは、前記サービスセンターに向けて送信され、前記イメージに対して前記サービスセンターと異なる目的地を確認することを特徴とするイメージ表示方法。
JP2003108794A 2002-05-07 2003-04-14 イメージ表示方法 Expired - Fee Related JP4287181B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US10/141,452 US20030210806A1 (en) 2002-05-07 2002-05-07 Navigational information service with image capturing and sharing

Publications (3)

Publication Number Publication Date
JP2004029001A JP2004029001A (ja) 2004-01-29
JP2004029001A5 JP2004029001A5 (ja) 2005-12-08
JP4287181B2 true JP4287181B2 (ja) 2009-07-01

Family

ID=29399666

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003108794A Expired - Fee Related JP4287181B2 (ja) 2002-05-07 2003-04-14 イメージ表示方法

Country Status (2)

Country Link
US (1) US20030210806A1 (ja)
JP (1) JP4287181B2 (ja)

Families Citing this family (98)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030212567A1 (en) * 2002-05-07 2003-11-13 Hitachi Ltd. Witness information service with image capturing and sharing
US7653485B2 (en) * 2004-03-31 2010-01-26 Pioneer Corporation Route guidance system and method
DE602004025297D1 (de) * 2004-07-13 2010-03-11 Panasonic Corp Mobil-objektverwaltungssystem, mobiles endgerät und verarbeitungsvorrichtung
US8207964B1 (en) 2008-02-22 2012-06-26 Meadow William D Methods and apparatus for generating three-dimensional image data models
US7929800B2 (en) 2007-02-06 2011-04-19 Meadow William D Methods and apparatus for generating a continuum of image data
US8081214B2 (en) 2004-10-12 2011-12-20 Enforcement Video, Llc Method of and system for mobile surveillance and event recording
US7760713B2 (en) * 2004-10-15 2010-07-20 Tran Bao Q Camera-phone barcode scanning support
US8150617B2 (en) 2004-10-25 2012-04-03 A9.Com, Inc. System and method for displaying location-specific images on a mobile device
US9188454B2 (en) * 2005-03-22 2015-11-17 Invention Science Fund I, Llc Map-based guide system and method
US9702713B2 (en) 2005-01-31 2017-07-11 Searete Llc Map-based guide system and method
EP1874041A4 (en) * 2005-04-15 2009-07-29 Nikon Corp PICTURE DEVICE AND DRIVE RECORDING SYSTEM
US20060241864A1 (en) * 2005-04-22 2006-10-26 Outland Research, Llc Method and apparatus for point-and-send data transfer within an ubiquitous computing environment
US7917148B2 (en) 2005-09-23 2011-03-29 Outland Research, Llc Social musical media rating system and method for localized establishments
GB0523513D0 (en) * 2005-11-18 2005-12-28 Applied Generics Ltd Efficient location and tracking of mobile subscribers
GB2445659A (en) * 2005-11-18 2008-07-16 Applied Generics Ltd Navigation device including audio and/or visual traffic information
GB0523512D0 (en) * 2005-11-18 2005-12-28 Applied Generics Ltd Enhancing traffic and navigation information with visual and audio data
US20070179750A1 (en) * 2006-01-31 2007-08-02 Digital Cyclone, Inc. Information partner network
JP4729440B2 (ja) * 2006-06-07 2011-07-20 日立オートモティブシステムズ株式会社 通信システム、通信端末および情報処理装置
US7512487B1 (en) * 2006-11-02 2009-03-31 Google Inc. Adaptive and personalized navigation system
US9665597B2 (en) * 2006-12-05 2017-05-30 Qualcomm Incorporated Method and system for processing images using time and location filters
JP2010515899A (ja) * 2007-01-10 2010-05-13 トムトム インターナショナル ベスローテン フエンノートシャップ 高速オプションアクセスのためのナビゲーション装置及び方法
US20080167801A1 (en) * 2007-01-10 2008-07-10 Pieter Geelen Navigation device and method for establishing and using profiles
US8144920B2 (en) * 2007-03-15 2012-03-27 Microsoft Corporation Automated location estimation using image analysis
US9726485B2 (en) * 2007-04-22 2017-08-08 Ilookabout Inc. Method of obtaining geographically related images using a vehicle
AU2008243692A1 (en) * 2007-04-26 2008-11-06 Vinertech Pty Ltd Collection methods and devices
ES2693975T3 (es) * 2007-12-20 2018-12-17 Telefonaktiebolaget Lm Ericsson (Publ) Provisión de servicios telemáticos por medio de una red de telefonía móvil
CN106027681B (zh) * 2007-12-20 2020-02-07 艾利森电话股份有限公司 经由移动网络提供通信信息服务
US20090177987A1 (en) * 2008-01-04 2009-07-09 Prasantha Jayakody Efficient display of objects of interest to a user through a graphical user interface
WO2009102480A2 (en) 2008-02-15 2009-08-20 Enforcement Video, Llc System and method for multi-resolution storage of images
US8345098B2 (en) * 2008-03-17 2013-01-01 International Business Machines Corporation Displayed view modification in a vehicle-to-vehicle network
US8400507B2 (en) * 2008-03-17 2013-03-19 International Business Machines Corporation Scene selection in a vehicle-to-vehicle network
US9123241B2 (en) 2008-03-17 2015-09-01 International Business Machines Corporation Guided video feed selection in a vehicle-to-vehicle network
US9043483B2 (en) * 2008-03-17 2015-05-26 International Business Machines Corporation View selection in a vehicle-to-vehicle network
TW200948081A (en) * 2008-05-05 2009-11-16 Flexmedia Electronics Corp Method and apparatus for processing trip informations and dynamic data streams, and controller thereof
US8144232B2 (en) * 2008-07-03 2012-03-27 Sony Ericsson Mobile Communications Ab Camera system and method for picture sharing using geotagged pictures
US8712362B2 (en) 2008-07-26 2014-04-29 Enforcement Video, Llc Method and system of extending battery life of a wireless microphone unit
US8781968B1 (en) * 2008-08-25 2014-07-15 Sprint Communications Company L.P. Dynamic display based on estimated viewers
US20100077361A1 (en) * 2008-09-24 2010-03-25 Andrew Watkins Method of displaying multiple points of interest on a personal navigation device
WO2010040403A1 (en) * 2008-10-08 2010-04-15 Tomtom International B.V. Improvements relating to navigation apparatus used in-vehicle
US20110106439A1 (en) * 2009-11-04 2011-05-05 In-Tai Huang Method of displaying multiple points of interest on a personal navigation device
TWI416073B (zh) 2009-11-16 2013-11-21 Ind Tech Res Inst 移動攝影機對路景影像的處理方法及系統
JP5430363B2 (ja) * 2009-11-17 2014-02-26 株式会社 ミックウェア 地図情報表示装置、地図情報表示方法、及びプログラム
US8886389B2 (en) * 2010-11-11 2014-11-11 General Motors Llc Method of providing directions to a vehicle service facility
TWI426239B (zh) * 2009-12-28 2014-02-11 Mitac Int Corp 於個人導航裝置上顯示複數個興趣點之方法與相關裝置
US20110225074A1 (en) * 2010-03-12 2011-09-15 Microsoft Corporation System and method for providing information as a service via web services
CN102192751A (zh) * 2010-03-19 2011-09-21 神达电脑股份有限公司 在个人导航装置上显示多个兴趣点的方法与相关装置
US8660782B2 (en) 2010-03-31 2014-02-25 Denso International America, Inc. Method of displaying traffic information and displaying traffic camera view for vehicle systems
US20110292230A1 (en) 2010-05-28 2011-12-01 Winters Dustin L Method for managing privacy of digital images
US8780741B2 (en) * 2010-06-21 2014-07-15 International Business Machines Corporation On-demand information retrieval using wireless communication devices
WO2012002005A1 (ja) * 2010-06-29 2012-01-05 富士通テン株式会社 情報配信装置
JP5611717B2 (ja) * 2010-08-16 2014-10-22 株式会社サージュ カーシェアリングシステムにおける車両管理システム、車両管理方法、プログラムおよびコンピューター読み取り可能な記録媒体
US8571722B2 (en) * 2010-10-22 2013-10-29 Toyota Motor Engineering & Manufacturing North America, Inc. Method for safely parking vehicle near obstacles
US8581997B2 (en) 2010-10-28 2013-11-12 Intellectual Ventures Fund 83 Llc System for locating nearby picture hotspots
DE102010061860A1 (de) * 2010-11-24 2012-05-24 Robert Bosch Gmbh Navigationsvorrichtung
JP2012198645A (ja) * 2011-03-18 2012-10-18 Fujitsu Ltd 情報収集方法および情報収集プログラム
JP2012216102A (ja) * 2011-04-01 2012-11-08 Hitachi Kokusai Electric Inc 画像蓄積システム
DE102011084084A1 (de) * 2011-10-06 2013-04-11 Robert Bosch Gmbh Anzeigeverfahren und Anzeigesystem für ein Fahrzeug
JP5669767B2 (ja) * 2011-12-13 2015-02-18 トヨタ自動車株式会社 情報提供装置
DE102012014115A1 (de) 2012-07-17 2013-01-17 Daimler Ag Verfahren zur Unterstützung eines Fahrers beim Führen eines Fahrzeugs
JP6102117B2 (ja) * 2012-08-08 2017-03-29 ソニー株式会社 移動体、システム、プログラム、および情報処理装置
DE102013005828A1 (de) * 2013-04-04 2014-10-09 Man Truck & Bus Ag Anordnung zur Warnung vor und/oder zur Berücksichtigung von nutzfahrzeugrelevanten Fahreinschränkungen
WO2015047080A1 (en) * 2013-09-24 2015-04-02 Data Mining Innovators B.V. A geographic based location system arranged for providing, via a web-based portal, management information of geographic data and non-geographic data generated by a plurality of wireless communication devices, and a related method
EP3069328A2 (en) * 2013-11-11 2016-09-21 Yandex Europe AG Location service(s) management for mobile device(s)
US9403482B2 (en) 2013-11-22 2016-08-02 At&T Intellectual Property I, L.P. Enhanced view for connected cars
SE539156C2 (sv) * 2014-02-18 2017-04-18 Scania Cv Ab Kartuppbyggnad i ett fordon
US9861178B1 (en) 2014-10-23 2018-01-09 WatchGuard, Inc. Method and system of securing wearable equipment
JP6554280B2 (ja) * 2014-11-28 2019-07-31 株式会社デンソーテン データ処理装置、画像処理方法、及び、プログラム
US9660744B1 (en) 2015-01-13 2017-05-23 Enforcement Video, Llc Systems and methods for adaptive frequency synchronization
US9602761B1 (en) 2015-01-22 2017-03-21 Enforcement Video, Llc Systems and methods for intelligently recording a live media stream
JP6486744B2 (ja) * 2015-03-25 2019-03-20 株式会社日本総合研究所 地域監視サーバ、提供端末及びそのシステム
KR102063895B1 (ko) * 2015-04-20 2020-01-08 삼성전자주식회사 서버, 사용자 단말 장치 및 그 제어 방법
CN105139576A (zh) * 2015-07-09 2015-12-09 小米科技有限责任公司 路况提示方法及装置
CN105222802A (zh) * 2015-09-22 2016-01-06 小米科技有限责任公司 导航、导航视频生成方法及装置
CN105222773B (zh) * 2015-09-29 2018-09-21 小米科技有限责任公司 导航方法及装置
CN105243838B (zh) * 2015-11-09 2018-05-04 北京奇虎科技有限公司 车辆行驶安全监控方法和装置、系统
US20170205247A1 (en) * 2016-01-19 2017-07-20 Honeywell International Inc. Traffic visualization system
US10250433B1 (en) 2016-03-25 2019-04-02 WatchGuard, Inc. Method and system for peer-to-peer operation of multiple recording devices
US10341605B1 (en) 2016-04-07 2019-07-02 WatchGuard, Inc. Systems and methods for multiple-resolution storage of media streams
RU2663692C2 (ru) * 2016-05-12 2018-08-08 Общество с ограниченной ответственностью "Ситиликс" Способ и система определения текущей и рекомендуемой полосы движения автотранспортного средства
CN106296416A (zh) * 2016-08-19 2017-01-04 深圳市永兴元科技有限公司 车险理赔方法和装置
DE102016216522A1 (de) 2016-09-01 2018-03-01 Robert Bosch Gmbh Verfahren zum Bereitstellen wenigstens einer Information über einen Unfall zwischen mindestens zwei Verkehrsteilnehmern
KR20190127716A (ko) * 2017-02-09 2019-11-13 솔파이스 리서치, 아이엔씨. 디지털, 물리적, 시간 또는 공간적 발견 서비스를 이용한 공유 합성 현실 체험 시스템 및 방법
JP6825500B2 (ja) * 2017-06-30 2021-02-03 株式会社Jvcケンウッド ドライブレコーダ運用システム、ドライブレコーダ、運用方法および運用プログラム
US10599161B2 (en) * 2017-08-08 2020-03-24 Skydio, Inc. Image space motion planning of an autonomous vehicle
EP3652721A1 (en) 2017-09-04 2020-05-20 NNG Software Developing and Commercial LLC A method and apparatus for collecting and using sensor data from a vehicle
US10883839B2 (en) * 2018-07-31 2021-01-05 Here Global B.V. Method and system for geo-spatial matching of sensor data to stationary objects
USD891453S1 (en) * 2018-09-07 2020-07-28 7hugs Labs SAS Display screen with transitional graphical user interface
US10852727B2 (en) * 2018-11-26 2020-12-01 GM Global Technology Operations LLC System and method for control of an autonomous vehicle
USD898759S1 (en) * 2019-01-04 2020-10-13 Apple Inc. Display screen or portion thereof with animated graphical user interface
WO2020159245A1 (ko) * 2019-01-31 2020-08-06 엘지전자 주식회사 차량 간 영상 공유 방법
US11604069B2 (en) 2019-05-14 2023-03-14 Lyft, Inc. Localizing transportation requests utilizing an image based transportation request interface
USD903705S1 (en) 2019-06-01 2020-12-01 Apple Inc. Display screen or portion thereof with animated graphical user interface
JP6795064B1 (ja) * 2019-08-27 2020-12-02 トヨタ自動車株式会社 表示処理装置、表示処理方法、プログラム
WO2021136147A1 (zh) * 2019-12-31 2021-07-08 北京骑胜科技有限公司 一种共享设备的预设区域定位方法和系统
US20210372809A1 (en) * 2020-06-02 2021-12-02 Toyota Motor Engineering & Manufacturing North America, Inc. Travel route observation and comparison system for a vehicle
US11823564B1 (en) * 2020-09-11 2023-11-21 Lytx, Inc. Adaptive data collection based on fleet-wide intelligence
US12033192B2 (en) 2020-10-30 2024-07-09 Toyota Motor North America, Inc. Transport use determination
WO2023129781A1 (en) * 2021-12-29 2023-07-06 Gentex Corporation Vehicle trip review system

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4958306A (en) * 1988-01-06 1990-09-18 Pacific Northwest Research & Development, Inc. Pavement inspection apparatus
US5164904A (en) * 1990-07-26 1992-11-17 Farradyne Systems, Inc. In-vehicle traffic congestion information system
US5638116A (en) * 1993-09-08 1997-06-10 Sumitomo Electric Industries, Ltd. Object recognition apparatus and method
JP3287117B2 (ja) * 1994-07-05 2002-05-27 株式会社日立製作所 撮像装置を用いた車両用の環境認識装置
US6037977A (en) * 1994-12-23 2000-03-14 Peterson; Roger Vehicle surveillance system incorporating remote video and data input
US5961571A (en) * 1994-12-27 1999-10-05 Siemens Corporated Research, Inc Method and apparatus for automatically tracking the location of vehicles
DE19525291C1 (de) * 1995-07-03 1996-12-19 Mannesmann Ag Verfahren und Vorrichtung zur Aktualisierung von digitalen Straßenkarten
DE19615240A1 (de) * 1996-04-18 1997-10-23 Daimler Benz Ag Anordnung zur optischen Erfassung des Fahrbahnverlaufs
US6085152A (en) * 1997-09-19 2000-07-04 Cambridge Management Advanced Systems Corporation Apparatus and method for monitoring and reporting weather conditions
US6480121B1 (en) * 1998-09-25 2002-11-12 William Reimann Comprehensive information and service providing system
US6246933B1 (en) * 1999-11-04 2001-06-12 BAGUé ADOLFO VAEZA Traffic accident data recorder and traffic accident reproduction system and method
US6522889B1 (en) * 1999-12-23 2003-02-18 Nokia Corporation Method and apparatus for providing precise location information through a communications network
US6420977B1 (en) * 2000-04-21 2002-07-16 Bbnt Solutions Llc Video-monitoring safety systems and methods
US6850209B2 (en) * 2000-12-29 2005-02-01 Vert, Inc. Apparatuses, methods, and computer programs for displaying information on vehicles
US20030212567A1 (en) * 2002-05-07 2003-11-13 Hitachi Ltd. Witness information service with image capturing and sharing

Also Published As

Publication number Publication date
US20030210806A1 (en) 2003-11-13
JP2004029001A (ja) 2004-01-29

Similar Documents

Publication Publication Date Title
JP4287181B2 (ja) イメージ表示方法
US20030212567A1 (en) Witness information service with image capturing and sharing
US11009364B2 (en) Vehicular communications network and methods of use and manufacture thereof
CN108417087B (zh) 一种车辆安全通行系统及方法
AU2017382448B2 (en) Method and system for providing interactive parking management via artificial intelligence analytic (AIA) services using cloud network
US8744764B2 (en) Roadway travel data exchange network
US6606033B1 (en) Information system
US6804602B2 (en) Incident-aware vehicular sensors for intelligent transportation systems
US11051146B2 (en) Information processing apparatus and information processing program
US20070061155A1 (en) Universal Vehicle Communication & Management System
US20100207787A1 (en) System and method for alerting drivers to road conditions
US20130027556A1 (en) System and method for security zone checking
WO2008154476A1 (en) Methods and systems for automated traffic reporting
CN104424797A (zh) 车载监控管理系统
CN116412854A (zh) 基于5g车联网的路面信息数据采集系统
JP2004287500A (ja) 道路情報提供システムおよびその方法
WO2008151372A1 (en) Traffic monitoring systems
EP1684250A2 (en) Information system
JP2013020518A (ja) 待ち合わせ場所提示装置及び待ち合わせ場所提示方法
JP2000341673A (ja) 動画像情報伝送システム
WO2024194930A1 (ja) 道路付属物設置支援装置、道路付属物設置支援方法、プログラム
KR20120023918A (ko) 카메라를 이용한 양방향 통신용 텔레메틱스 시스템
TW200532511A (en) Method for obtaining traffic information using billing information of mobile terminal
CN118243123A (zh) 一种基于智慧灯杆的道路信息导航地图系统
JP2001118190A (ja) 交通渋滞通知装置

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20051020

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20051020

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080415

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080613

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090303

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090326

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120403

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120403

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130403

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140403

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees