JP7424787B2 - 画像送信要求内容を受信情報によって選定可能な画像データ取得方法、プログラム及び方法 - Google Patents
画像送信要求内容を受信情報によって選定可能な画像データ取得方法、プログラム及び方法 Download PDFInfo
- Publication number
- JP7424787B2 JP7424787B2 JP2019183606A JP2019183606A JP7424787B2 JP 7424787 B2 JP7424787 B2 JP 7424787B2 JP 2019183606 A JP2019183606 A JP 2019183606A JP 2019183606 A JP2019183606 A JP 2019183606A JP 7424787 B2 JP7424787 B2 JP 7424787B2
- Authority
- JP
- Japan
- Prior art keywords
- image data
- transmission request
- image
- information
- client
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000005540 biological transmission Effects 0.000 title claims description 431
- 238000000034 method Methods 0.000 title claims description 49
- 238000012545 processing Methods 0.000 claims description 64
- 230000008859 change Effects 0.000 claims description 26
- 238000001514 detection method Methods 0.000 claims description 23
- 230000008569 process Effects 0.000 claims description 19
- 238000013459 approach Methods 0.000 claims description 7
- 238000010586 diagram Methods 0.000 description 33
- 238000010276 construction Methods 0.000 description 31
- 230000006399 behavior Effects 0.000 description 22
- 238000004891 communication Methods 0.000 description 20
- 230000033001 locomotion Effects 0.000 description 12
- 230000006870 function Effects 0.000 description 7
- 238000000605 extraction Methods 0.000 description 6
- 238000012986 modification Methods 0.000 description 6
- 230000004048 modification Effects 0.000 description 6
- 230000004044 response Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 4
- 238000012706 support-vector machine Methods 0.000 description 4
- 230000010365 information processing Effects 0.000 description 3
- 238000011176 pooling Methods 0.000 description 3
- 238000013139 quantization Methods 0.000 description 3
- 230000008054 signal transmission Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000003466 anti-cipated effect Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005206 flow analysis Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000002250 progressing effect Effects 0.000 description 1
- 238000007637 random forest analysis Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Traffic Control Systems (AREA)
Description
当該クライアントから受信する画像データに基づいて生成され得る生成情報毎に、当該目的画像データを取得するための画像送信要求内容が、当該生成情報に予め対応付けられており、
当該クライアントから受信した画像データに対し識別器を用いた画像認識処理を施すことによって生成された生成情報に対応付けられた画像送信要求内容を選定する送信要求内容選定手段と、
選定された画像送信要求内容が画像データの送信を要求する内容である場合に、該画像送信要求内容に合った画像送信要求を、該画像送信要求内容に合ったクライアントへ送信し、該クライアントから受信した画像データに対し当該画像認識処理を施すことによって生成された生成情報から、当該所定の現象又は事象が該画像データに含まれなくなったと判断した場合、当該目的画像データを取得するための更なる画像送信要求の送信を取り止める送受信制御手段と
を有する画像データ取得サーバが提供される。
上記のサーバは、受信した画像データに対し識別器を用いた画像認識処理を施し、当該画像認識処理の結果である識別対象情報であって、当該目的画像データの取得に係る画像送信要求内容が予め対応付けられた識別対象情報を生成可能であり、
当該移動体の所定の挙動に相当する識別対象情報である識別対象情報Aに予め対応付けられた画像送信要求内容Aは、当該所定の挙動の全体又は主要部分を含む画像データ群を取得可能となるように、足りていない画像データを送信させることが可能な送信要求内容となっており、
当該クライアントから受信した画像データに対する対象識別処理の結果として識別対象情報Aが生成された場合に、画像送信要求内容Aを選定する送信要求内容選定手段と、
選定された画像送信要求内容Aに合った画像送信要求を、識別対象情報Aに係る画像データの送信元であるクライアントへ送信し、該クライアントから受信した画像データに対し当該画像認識処理を施すことにより得られた識別対象情報から、当該所定の挙動が該画像データにおいて認識されなくなったと判断した場合、当該目的画像データを取得するための更なる画像送信要求の送信を取り止める送受信制御手段と
を有する画像データ取得サーバが提供される。
上記のサーバは、受信した画像データに対し対象識別処理を実施し、当該対象識別処理の結果である識別対象情報であって、当該目的画像データの取得に係る画像送信要求内容が予め対応付けられた識別対象情報を生成可能であり、
当該移動体の通行エリア内外におけるある発生範囲であって、当該通行エリアの伸長方向に沿って伸長した範囲である発生範囲に渡る所定の事象に相当する識別対象情報である識別対象情報Bに予め対応付けられた画像送信要求内容Bは、当該所定の事象に係る発生範囲における伸長した方向についての端に係る画像データであって、未だ取得していない画像データを取得可能となるように、該未だ取得していない画像データを送信させることが可能な画像送信要求内容となっており、
当該クライアントから受信した画像データに対する対象識別処理の結果として識別対象情報Bが生成された場合に、画像送信要求内容Bを選定する送信要求内容選定手段と、
選定された画像送信要求内容Bに合った画像送信要求を、当該未だ取得していない画像データを送信し得る可能性のあるクライアントへ送信し、要求した画像データを受信して、当該目的画像データを取得する送受信制御手段と
を有する画像データ取得サーバが提供される。
上記のサーバは、受信した画像データに対し対象識別処理を実施し、当該対象識別処理の結果である識別対象情報であって、当該目的画像データの取得に係る画像送信要求内容が予め対応付けられた識別対象情報を生成可能であり、
当該移動体の通行エリア内外におけるある発生範囲に渡る移動体列又は移動体列をなす移動体に相当する識別対象情報である識別対象情報Bに予め対応付けられた画像送信要求内容Bは、当該移動体列の端をなす移動体に係る画像データであって、未だ取得していない画像データを取得可能となるように、該未だ取得していない画像データを送信させることが可能な画像送信要求内容となっており、
当該クライアントから受信した画像データに対する対象識別処理の結果として識別対象情報Bが生成された場合に、画像送信要求内容Bを選定する送信要求内容選定手段と、
選定された画像送信要求内容Bに合った画像送信要求を、当該未だ取得していない画像データを送信し得る可能性のあるクライアントへ送信し、要求した画像データを受信して、当該目的画像データを取得する送受信制御手段と
を有する画像データ取得サーバが提供される。
当該クライアントは自らの位置に係る情報を前記サーバへ送信可能であり、
上記のサーバは、受信した画像データに対し対象識別処理を実施し、当該対象識別処理の結果である識別対象情報であって、当該目的画像データの取得に係る画像送信要求内容が予め対応付けられた識別対象情報を生成可能であり、
当該移動体の通行エリア内外における所定の事物に相当する識別対象情報である識別対象情報Cに予め対応付けられた画像送信要求内容Cは、更なる画像データの送信を停止させる内容となっており、
当該クライアントから受信した画像データに対する対象識別処理の結果として識別対象情報Cが生成された場合に、画像送信要求内容Cを選定する送信要求内容選定手段と、
選定された画像送信要求内容Cに合った画像送信停止要求を、識別対象情報Cに係る画像データの送信元であるクライアント、及び識別対象情報Cに係る位置から所定位置範囲内にあるクライアントへ送信する送受信制御手段と
を有する画像データ取得サーバが提供される。
また、この本発明による画像データ取得サーバにおいて、画像送信要求内容Cは、識別対象情報Cが出力されてから所定時間が経過するまでの間、更なる画像データの送信を停止させる内容となっており、前記送受信制御手段は、当該画像送信停止要求を、当該所定時間が経過するまでの間、識別対象情報Cに係る画像データの送信元であるクライアント、及び識別対象情報Cに係る位置から所定位置範囲内にあるクライアントへ送信することことも好ましい。
上記のサーバは、受信した画像データに対し対象識別処理を実施し、当該対象識別処理の結果である識別対象情報であって、当該目的画像データの取得に係る画像送信要求内容が予め対応付けられた識別対象情報を生成可能であり、
当該移動体の通行エリア内外における所定の事物に相当する識別対象情報である識別対象情報Cに予め対応付けられた画像送信要求内容Cは、識別対象情報Cが出力されてから所定時間が経過するまでの間、更なる画像データの送信を停止させる内容となっており、
当該クライアントから受信した画像データに対する対象識別処理の結果として識別対象情報Cが生成された場合に、画像送信要求内容Cを選定する送信要求内容選定手段と、
選定された画像送信要求内容Cに合った画像送信停止要求を、当該所定時間が経過するまでの間、識別対象情報Cに係る画像データの送信元であるクライアントへ送信する送受信制御手段と
を有する画像データ取得サーバが提供される。
上記のサーバは、当該クライアントから受信する画像データの生成元の状態に係る状態情報であって、当該目的画像データの取得に係る画像送信要求内容が予め対応付けられた状態情報を受信可能であり、
所定条件を満たす当該移動体の状態変化に係る状態情報である状態情報Dに予め対応付けられた画像送信要求内容Dは、所定の挙動の全体又は主要部分を含む画像データ群を取得可能となるように、当該画像データの生成元に係る移動体に対し近接する又は所定の位置関係にある移動体に係るクライアントへ画像データの送信を要求する内容となっており、
当該クライアントから画像データとともに状態情報Dを受信した場合に、画像送信要求内容Dを選定する送信要求内容選定手段と、
選定された画像送信要求内容Dに合った画像送信要求を、当該画像データの生成元に係る移動体に対し近接する又は所定の位置関係にある移動体に係るクライアントへ送信する送受信制御手段と
を有する画像データ取得サーバが提供される。
上記のサーバは、当該目的画像データの取得に係る画像送信要求内容が予め対応付けられた符号化パラメータ情報を、当該クライアントに抽出させ送信させることなく、受信した画像データから抽出可能であり、
所定条件を満たす状況変化のあることを示す符号化パラメータ情報Eに予め対応付けられた画像送信要求内容Eは、当該所定条件を満たす状況変化の全体又は主要部分を含む画像データ群を取得可能となるように、足りていない画像データを送信させることが可能な送信要求内容となっており、
当該クライアントから受信した画像データから符号化パラメータ情報Eが抽出された場合に、画像送信要求内容Eを選定する送信要求内容選定手段と、
選定された画像送信要求内容Eに合った画像送信要求を、符号化パラメータ情報Eが抽出された画像データと合わせて受信された位置情報であって該画像データの送信元の位置情報に係る位置からみて所定の距離範囲内の位置に存在するクライアントへ送信し、当該所定条件を満たす状況変化のあることを示す符号化パラメータ情報Eの抽出される画像データの取得が完了したと判断した場合、当該目的画像データを取得するための更なる画像送信要求の送信を取り止める送受信制御手段と
を有する画像データ取得サーバが提供される。
当該クライアントから受信する画像データに基づいて生成され得る生成情報毎に、当該目的画像データを取得するための画像送信要求内容が、当該生成情報に予め対応付けられており、
当該クライアントから受信した画像データに対し識別器を用いた画像認識処理を施すことによって生成された生成情報に対応付けられた画像送信要求内容を選定する送信要求内容選定手段と、
選定された画像送信要求内容が画像データの送信を要求する内容である場合に、該画像送信要求内容に合った画像送信要求を、該画像送信要求内容に合ったクライアントへ送信し、該クライアントから受信した画像データに対し当該画像認識処理を施すことによって生成された生成情報から、当該所定の現象又は事象が該画像データに含まれなくなったと判断した場合、当該目的画像データを取得するための更なる画像送信要求の送信を取り止める送受信制御手段と
してコンピュータを機能させる画像データ取得プログラムが提供される。
当該クライアントから受信する画像データに基づいて生成され得る生成情報毎に、当該目的画像データを取得するための画像送信要求内容が、当該生成情報に予め対応付けられており、
当該クライアントから受信した画像データに対し識別器を用いた画像認識処理を施すことによって生成された生成情報に対応付けられた画像送信要求内容を選定するステップと、
選定された画像送信要求内容が画像データの送信を要求する内容である場合に、該画像送信要求内容に合った画像送信要求を、該画像送信要求内容に合ったクライアントへ送信し、該クライアントから受信した画像データに対し当該画像認識処理を施すことによって生成された生成情報から、当該所定の現象又は事象が該画像データに含まれなくなったと判断した場合、当該目的画像データを取得するための更なる画像送信要求の送信を取り止めるステップと
を有する画像データ取得方法が提供される。
図1は、本発明による画像データ取得サーバ及びクライアントを備えた画像データ取得システムの一実施形態を説明するための模式図及び機能ブロック図である。
(a)移動可能なクライアントである少なくとも1つの端末20と、
(b)端末20から画像データを取得可能なサーバであるクラウドサーバ1と
を有し、クラウドサーバ1において、端末20から取得された画像データを含む、取得すべき所望の目的画像データが収集・生成されるのである。
(A)端末20から受信する画像データに基づいて生成され得る「生成情報」毎に、及び/又は、受信する画像データの生成元の状態に係る「状態情報」であってこの画像データとともに受信し得る「状態情報」毎に、目的画像データを取得するための「画像送信要求内容」が、当該「生成情報」及び/又は当該「状態情報」に予め対応付けられて保存されている送信要求内容保存部103と、
(B)端末20から受信した画像データに基づいて生成された「生成情報」、及び/又は、端末20から画像データとともに受信した「状態情報」に対応付けられた「画像送信要求内容」を選定する送信要求内容選定部114と、
(C)選定された「画像送信要求内容」が画像データの送信を要求する内容である場合に、この「画像送信要求内容」に合った画像送信要求を、この「画像送信要求内容」に合ったクライアントへ送信し、要求した画像データを受信して、目的画像データを取得する送受信制御部111と
を有することを特徴としている。
(a)端末20から受信した画像データに対して対象識別部112が対象識別処理を実施した結果である識別対象情報、例えば「(工事現場の)ロードコーン(列)」、「(所定エリア入場又は通過待ちの)自動車(列)」や、「自動車2の所定の挙動(例えば右折や左折)」
を採用することができ、または、この「生成情報」として
(b)(画像データがMPEG(Moving Picture Experts Group)等で圧縮符号化されて伝送される場合において)端末20から受信した圧縮画像データから抽出された、所定条件を満たす符号化パラメータ情報、例えば所定条件を満たす動きベクトルの情報
を設定することも可能である。
(c)端末20から画像データとともに受信した、所定条件を満たす自動車2の状態変化に係る情報、例えば所定程度以上の制動(急ブレーキ)の実施に係るCAN(Controller Area Network)制動情報
を採用してもよい。
図1に示した機能ブロック図によれば、クラウドサーバ1は、通信インタフェース101と、受信画像データベース(DB)102と、送信要求内容保存部103と、目的画像DB104と、プロセッサ・メモリとを有する。ここで、このプロセッサ・メモリは、本発明による画像データ取得プログラムの一実施形態を保存しており、また、コンピュータ機能を有していて、この画像データ取得プログラムを実行することによって、画像データ取得処理を実施する。
(a)目的画像データが「工事現場」の1フレーム画像データである場合に使用される、識別対象を「ロードコーン(列)」として学習を行った識別器と、
(b)目的画像データが「自動車列」の画像データ群(映像データ)である場合に使用される、識別対象を「(所定エリア入場又は通過待ちの)自動車(列)」として学習を行った識別器と
を備えており、1つの態様として、受信した画像データをこれらの識別器の各々に入力し、各々から識別結果を得て識別対象情報を生成することも好ましい。また勿論、目的画像データが他の識別対象に係るものである場合、当該識別対象を学習した識別器が準備され、例えば上記の識別器と並行して対象識別処理を実施させてもよい。
(a)画像データを入力してこれらの特徴に係る特徴情報を出力する第1NNとしての複数の畳み込み層部(Convolutional Layers)と、
(b)複数の畳み込み層部から出力された特徴情報を取りまとめて入力し、クラスに係る情報を出力する第2NNとしての全結合層部(Fully-Connected Layers)と
を含む識別器を構成し、時系列の複数の画像データ(画像データ群)を1つずつ個々の畳み込み部へ入力して畳み込み部全体で当該画像データ群の特徴情報を生成し、この特徴情報を全結合層部へ入力して、識別結果(クラス,例えば「右折」や「左折」)を取得してもよい。
(a)順方向予測(インター)の動きベクトルの大きさ及び向き、
(b)画面内予測(イントラ)の符号量、及び
(c)量子化ステップのサイズ
のうちの少なくとも1つとすることができる。
(a)順方向予測の動きベクトルが、所定以上の大きさであり、且つ消失点(画像内地平線上の収束点)の方向を基準として所定以上の傾き角に相当する向きを有する、
(b)画面内予測の符号量が、所定以上である、及び
(c)量子化ステップのサイズが、所定以下である
との条件のうちの少なくとも1つを採用することが可能である。
(a)端末20から受信した画像データに基づいて生成された「生成情報」、及び
(b)端末20から受信した画像データとともに受信した「状態情報」
のいずれか一方又は両方に対応付けられた「画像送信要求内容」を検索し、この後の画像データ取得のための画像送信要求内容に決定するのである。
同じく図1に示した機能ブロック図によれば、端末20は、通信インタフェース201と、測位部202と、カメラ203と、通信インタフェース204と、ディスプレイ(DP)205と、プロセッサ・メモリとを有する。ここで、このプロセッサ・メモリは、本発明に係る画像データ提供プログラムの一実施形態を保存しており、また、コンピュータ機能を有していて、この画像データ提供プログラムを実行することによって、画像データ提供処理を実施する。
図2は、本発明による画像データ取得方法の一実施形態を説明するための模式図及びシーケンス図である。
(S101)端末20Aは、(カメラ203で)生成された画像データから「交差点標識」を検出する。
(S102,S103)端末20Aは、ステップS101での検出結果を受けて、画像データ送信開始を決定し、検出時点を含む所定時間範囲の画像データをクラウドサーバ1へ送信する。
(S106)端末20Aは、継続して(時系列をなす)画像データをクラウドサーバ1へ送信する。
(S109)端末20Aは、画像送信停止要求を受けて画像データ送信終了を決定する。
(S110)クラウドサーバ1は、目的画像データとしての「右折」画像を目的画像DB104(図1)に保存し管理する。
(S201)端末20Bは、(カメラ203で)生成された画像データから「自動車列」を検出する。
(S202,S203)端末20Bは、ステップS201での検出結果を受けて、画像データ送信開始を決定し、検出時点を含む所定時間範囲の画像データをクラウドサーバ1へ送信する。
(S206)端末20Bは、要求された画像データをクラウドサーバ1へ送信する。
(S208’)端末20Bは、要求された画像データをクラウドサーバ1へ送信する。
ここで、上記ステップS207’~S208’は、クラウドサーバ1が(次のステップS209’でのように)「列後尾」を認識するまで繰り返すことができる。
(S211’)端末20Bは、画像送信停止要求を受けて画像データ送信終了を決定する。
(S212’)クラウドサーバ1は、目的画像データとしての「自動車列」画像又は「列後尾」画像を目的画像DB104(図1)に保存し管理する。
(S301)端末20Cは、(カメラ203で)生成された画像データから「工事現場(ロードコーン列)」を検出する。
(S302,S303)端末20Cは、ステップS301での検出結果を受けて、画像データ送信開始を決定し、検出時点の画像データ、又は当該検出時点を含む所定時間範囲の画像データをクラウドサーバ1へ送信する。
(S306)端末20Cは、受信した画像送信停止要求に従い、検出結果「工事現場」に係る画像データのクラウドサーバ1への送信を終了する。
(S307)クラウドサーバ1は、目的画像データとしての「工事現場」画像を目的画像DB104(図1)に保存し管理する。
(a)自動車2Dが急ブレーキ動作を行った際に(カメラ203で)生成された画像データと、
(b)当該急ブレーキ動作に係る自動車2DのCAN情報(急ブレーキCAN情報)と、
(c)自動車2D(端末20D)の位置情報と
を端末20Dから受信する。
(S401)端末20Dは、自動車2Dの急ブレーキ動作を検出する(自動車2DのCANから急ブレーキに係る情報を取得し急ブレーキCAN情報を生成する)。
(S402,S403)端末20Dは、ステップS401での急ブレーキ検出結果を受けて、画像データ送信開始を決定し、
(a)急ブレーキ検出時点を含む所定時間範囲の画像データと、
(b)生成した急ブレーキCAN情報と、
(c)自動車2D(端末20D)の位置情報と
をクラウドサーバ1へ送信する。
(S405)クラウドサーバ1は、選定した画像送信要求内容Dにおける画像送信要求先として、自動車2Dから所定距離範囲内の位置に存在する自動車2E及び2Fに搭載された端末20E及び20Fを決定する。
ここで本実施形態において、クラウドサーバ1は、自動車2E及び2Fに搭載された端末20E及び20Fからも、その位置情報を常時取得しているものとする。
(a)端末20Dへは、前方カメラ203に係る画像データを(継続して)送信することを要求する画像送信継続要求を送信し、
(b)端末20Eへは、後方カメラ203に係る画像データを送信することを要求する画像送信要求を送信し、
(c)端末20Fへは、前方カメラ203に係る画像データを送信することを要求する画像送信要求を送信する
ことができる。
(S409,S410)クラウドサーバ1は、受信した画像データを確認し、目的画像データである「急ブレーキ」時の周辺状況を含む映像データの取得が完了したと判断し、当該映像データを保存し管理するとともに、画像送信停止要求を端末20D、20E及び20Fへ送信する。
(S411)端末20D、20E及び20Fは、画像送信停止要求を受けて画像データ送信終了を決定する。
(a)自動車2Gの端末20Gにおいて、目の前を自動車2Hが通過した際に(カメラ203で)生成された映像データ(画像データ群)と、
(b)自動車2G(端末20G)の位置情報と
を端末20Gから受信する。
(S501)端末20Gは、(カメラ203で)生成された画像データから(前方を横切った自動車2Hに相当する)「自動車」を検出する。
(S502,S503)端末20Gは、ステップS501での検出結果を受けて、画像データ送信開始を決定し、
(a)MPEGによる圧縮画像データと、
(b)自動車2G(端末20G)の位置情報と
をクラウドサーバ1へ送信する。
(S505)クラウドサーバ1は、選定した画像送信要求内容Eにおける画像送信要求先として、自動車2Gから所定距離範囲内の位置に存在する自動車2H及び2Iに搭載された端末20H及び20Iを決定する。
(a)端末20Gへは、前方カメラ203に係る画像データを(継続して)送信することを要求する画像送信継続要求を送信し、
(b)端末20Hへは、後方カメラ203に係る画像データを送信することを要求する画像送信要求を送信し、
(c)端末20Iへは、後方カメラ203に係る画像データを送信することを要求する画像送信要求を送信する
ことが好ましい。
(S509,S510)クラウドサーバ1は、受信した画像データを確認し、目的画像データである「所定条件を満たす状況変化」時の周辺状況を含む映像データの取得が完了したと判断し、当該映像データを保存し管理するとともに、画像送信停止要求を端末20G、20H及び20Iへ送信する。
(S411)端末20G、20H及び20Iは、画像送信停止要求を受けて画像データ送信終了を決定する。
101、201、204 通信インタフェース
102 受信画像データベース(DB)
103 送信要求内容保存部
104 目的画像DB
111 送受信制御部
112 対象識別部
113 符号化パラメータ抽出部
114 送信要求内容選定部
115 画像処理部
2、2A、2B、2C、2D、2E、2F、2G、2H、2I 自動車
20、20A、20B、20C、20D、20E、20F、20G、20H、20I 端末(クライアント)
202 測位部
203 カメラ
205 ディスプレイ(DP)
211 送受信制御部
212 位置情報取得部
213 映像生成部
214 対象検出部
215 送信画像選択部
216 提示情報生成部
Claims (14)
- 移動可能な複数のクライアントから、所定の現象又は事象に係る目的画像データの少なくとも一部を取得可能なサーバであって、
当該クライアントから受信する画像データに基づいて生成され得る生成情報毎に、当該目的画像データを取得するための画像送信要求内容が、当該生成情報に予め対応付けられており、
当該クライアントから受信した画像データに対し識別器を用いた画像認識処理を施すことによって生成された生成情報に対応付けられた画像送信要求内容を選定する送信要求内容選定手段と、
選定された画像送信要求内容が画像データの送信を要求する内容である場合に、該画像送信要求内容に合った画像送信要求を、該画像送信要求内容に合ったクライアントへ送信し、該クライアントから受信した画像データに対し当該画像認識処理を施すことによって生成された生成情報から、当該所定の現象又は事象が該画像データに含まれなくなったと判断した場合、当該目的画像データを取得するための更なる画像送信要求の送信を取り止める送受信制御手段と
を有することを特徴とする画像データ取得サーバ。 - 移動体とともに移動可能な複数のクライアントから、所定の目的画像データの少なくとも一部を取得可能なサーバであって、
前記サーバは、受信した画像データに対し識別器を用いた画像認識処理を施し、当該画像認識処理の結果である識別対象情報であって、当該目的画像データの取得に係る画像送信要求内容が予め対応付けられた識別対象情報を生成可能であり、
当該移動体の所定の挙動に相当する識別対象情報である識別対象情報Aに予め対応付けられた画像送信要求内容Aは、当該所定の挙動の全体又は主要部分を含む画像データ群を取得可能となるように、足りていない画像データを送信させることが可能な送信要求内容となっており、
当該クライアントから受信した画像データに対する対象識別処理の結果として識別対象情報Aが生成された場合に、画像送信要求内容Aを選定する送信要求内容選定手段と、
選定された画像送信要求内容Aに合った画像送信要求を、識別対象情報Aに係る画像データの送信元であるクライアントへ送信し、該クライアントから受信した画像データに対し当該画像認識処理を施すことにより得られた識別対象情報から、当該所定の挙動が該画像データにおいて認識されなくなったと判断した場合、当該目的画像データを取得するための更なる画像送信要求の送信を取り止める送受信制御手段と
を有することを特徴とする画像データ取得サーバ。 - 当該所定の挙動に相当する識別対象情報Aは、右折、左折、他の移動体との間で生じる接近、他の移動体との間で生じる割り込み、他の移動体との間で生じる追い越し、及び急な横方向の変化のうちの少なくとも1つであることを特徴とする請求項2に記載の画像データ取得サーバ。
- 移動体とともに移動可能なクライアントから、所定の目的画像データの少なくとも一部を取得可能なサーバであって、
前記サーバは、受信した画像データに対し対象識別処理を実施し、当該対象識別処理の結果である識別対象情報であって、当該目的画像データの取得に係る画像送信要求内容が予め対応付けられた識別対象情報を生成可能であり、
当該移動体の通行エリア内外におけるある発生範囲であって、当該通行エリアの伸長方向に沿って伸長した範囲である発生範囲に渡る所定の事象に相当する識別対象情報である識別対象情報Bに予め対応付けられた画像送信要求内容Bは、当該所定の事象に係る発生範囲における伸長した方向についての端に係る画像データであって、未だ取得していない画像データを取得可能となるように、該未だ取得していない画像データを送信させることが可能な画像送信要求内容となっており、
当該クライアントから受信した画像データに対する対象識別処理の結果として識別対象情報Bが生成された場合に、画像送信要求内容Bを選定する送信要求内容選定手段と、
選定された画像送信要求内容Bに合った画像送信要求を、当該未だ取得していない画像データを送信し得る可能性のあるクライアントへ送信し、要求した画像データを受信して、当該目的画像データを取得する送受信制御手段と
を有することを特徴とする画像データ取得サーバ。 - 移動体とともに移動可能なクライアントから、所定の目的画像データの少なくとも一部を取得可能なサーバであって、
前記サーバは、受信した画像データに対し対象識別処理を実施し、当該対象識別処理の結果である識別対象情報であって、当該目的画像データの取得に係る画像送信要求内容が予め対応付けられた識別対象情報を生成可能であり、
当該移動体の通行エリア内外におけるある発生範囲に渡る移動体列又は移動体列をなす移動体に相当する識別対象情報である識別対象情報Bに予め対応付けられた画像送信要求内容Bは、当該移動体列の端をなす移動体に係る画像データであって、未だ取得していない画像データを取得可能となるように、該未だ取得していない画像データを送信させることが可能な画像送信要求内容となっており、
当該クライアントから受信した画像データに対する対象識別処理の結果として識別対象情報Bが生成された場合に、画像送信要求内容Bを選定する送信要求内容選定手段と、
選定された画像送信要求内容Bに合った画像送信要求を、当該未だ取得していない画像データを送信し得る可能性のあるクライアントへ送信し、要求した画像データを受信して、当該目的画像データを取得する送受信制御手段と
を有することを特徴とする画像データ取得サーバ。 - 移動体とともに移動可能なクライアントから、所定の目的画像データの少なくとも一部を取得可能なサーバであって、
当該クライアントは自らの位置に係る情報を前記サーバへ送信可能であり、
前記サーバは、受信した画像データに対し対象識別処理を実施し、当該対象識別処理の結果である識別対象情報であって、当該目的画像データの取得に係る画像送信要求内容が予め対応付けられた識別対象情報を生成可能であり、
当該移動体の通行エリア内外における所定の事物に相当する識別対象情報である識別対象情報Cに予め対応付けられた画像送信要求内容Cは、更なる画像データの送信を停止させる内容となっており、
当該クライアントから受信した画像データに対する対象識別処理の結果として識別対象情報Cが生成された場合に、画像送信要求内容Cを選定する送信要求内容選定手段と、
選定された画像送信要求内容Cに合った画像送信停止要求を、識別対象情報Cに係る画像データの送信元であるクライアント、及び識別対象情報Cに係る位置から所定位置範囲内にあるクライアントへ送信する送受信制御手段と
を有することを特徴とする画像データ取得サーバ。 - 画像送信要求内容Cは、識別対象情報Cが出力されてから所定時間が経過するまでの間、更なる画像データの送信を停止させる内容となっており、前記送受信制御手段は、当該画像送信停止要求を、当該所定時間が経過するまでの間、識別対象情報Cに係る画像データの送信元であるクライアント、及び識別対象情報Cに係る位置から所定位置範囲内にあるクライアントへ送信することを特徴とする請求項6に記載の画像データ取得サーバ。
- 移動体とともに移動可能なクライアントから、所定の目的画像データの少なくとも一部を取得可能なサーバであって、
前記サーバは、受信した画像データに対し対象識別処理を実施し、当該対象識別処理の結果である識別対象情報であって、当該目的画像データの取得に係る画像送信要求内容が予め対応付けられた識別対象情報を生成可能であり、
当該移動体の通行エリア内外における所定の事物に相当する識別対象情報である識別対象情報Cに予め対応付けられた画像送信要求内容Cは、識別対象情報Cが出力されてから所定時間が経過するまでの間、更なる画像データの送信を停止させる内容となっており、
当該クライアントから受信した画像データに対する対象識別処理の結果として識別対象情報Cが生成された場合に、画像送信要求内容Cを選定する送信要求内容選定手段と、
選定された画像送信要求内容Cに合った画像送信停止要求を、当該所定時間が経過するまでの間、識別対象情報Cに係る画像データの送信元であるクライアントへ送信する送受信制御手段と
を有することを特徴とする画像データ取得サーバ。 - 移動体とともに移動可能なクライアントから、所定の目的画像データの少なくとも一部を取得可能なサーバであって、
前記サーバは、当該クライアントから受信する画像データの生成元の状態に係る状態情報であって、当該目的画像データの取得に係る画像送信要求内容が予め対応付けられた状態情報を受信可能であり、
所定条件を満たす当該移動体の状態変化に係る状態情報である状態情報Dに予め対応付けられた画像送信要求内容Dは、所定の挙動の全体又は主要部分を含む画像データ群を取得可能となるように、当該画像データの生成元に係る移動体に対し近接する又は所定の位置関係にある移動体に係るクライアントへ画像データの送信を要求する内容となっており、
当該クライアントから画像データとともに状態情報Dを受信した場合に、画像送信要求内容Dを選定する送信要求内容選定手段と、
選定された画像送信要求内容Dに合った画像送信要求を、当該画像データの生成元に係る移動体に対し近接する又は所定の位置関係にある移動体に係るクライアントへ送信する送受信制御手段と
を有することを特徴とする画像データ取得サーバ。 - 当該状態情報Dは、当該移動体における所定条件を満たす制動実施に係る制動情報であることを特徴とする請求項9に記載の画像データ取得サーバ。
- 移動体とともに移動可能であって自らの位置情報を送信可能であり、画像データを符号化して送信可能な複数のクライアントから、所定の目的画像データの少なくとも一部を取得可能なサーバであって、
前記サーバは、当該目的画像データの取得に係る画像送信要求内容が予め対応付けられた符号化パラメータ情報を、当該クライアントに抽出させ送信させることなく、受信した画像データから抽出可能であり、
所定条件を満たす状況変化のあることを示す符号化パラメータ情報Eに予め対応付けられた画像送信要求内容Eは、当該所定条件を満たす状況変化の全体又は主要部分を含む画像データ群を取得可能となるように、足りていない画像データを送信させることが可能な送信要求内容となっており、
当該クライアントから受信した画像データから符号化パラメータ情報Eが抽出された場合に、画像送信要求内容Eを選定する送信要求内容選定手段と、
選定された画像送信要求内容Eに合った画像送信要求を、符号化パラメータ情報Eが抽出された画像データと合わせて受信された位置情報であって該画像データの送信元の位置情報に係る位置からみて所定の距離範囲内の位置に存在するクライアントへ送信し、当該所定条件を満たす状況変化のあることを示す符号化パラメータ情報Eの抽出される画像データの取得が完了したと判断した場合、当該目的画像データを取得するための更なる画像送信要求の送信を取り止める送受信制御手段と
を有することを特徴とする画像データ取得サーバ。 - 当該クライアントは、生成した画像データに対し対象検出処理を実施し、所定の対象が検出された際に、当該画像データの前記サーバへの送信を開始することを特徴とする請求項1から11のいずれか1項に記載の画像データ取得サーバ。
- 移動可能な複数のクライアントから、所定の現象又は事象に係る目的画像データの少なくとも一部を取得可能なサーバに搭載されたコンピュータを機能させるプログラムであって、
当該クライアントから受信する画像データに基づいて生成され得る生成情報毎に、当該目的画像データを取得するための画像送信要求内容が、当該生成情報に予め対応付けられており、
当該クライアントから受信した画像データに対し識別器を用いた画像認識処理を施すことによって生成された生成情報に対応付けられた画像送信要求内容を選定する送信要求内容選定手段と、
選定された画像送信要求内容が画像データの送信を要求する内容である場合に、該画像送信要求内容に合った画像送信要求を、該画像送信要求内容に合ったクライアントへ送信し、該クライアントから受信した画像データに対し当該画像認識処理を施すことによって生成された生成情報から、当該所定の現象又は事象が該画像データに含まれなくなったと判断した場合、当該目的画像データを取得するための更なる画像送信要求の送信を取り止める送受信制御手段と
してコンピュータを機能させることを特徴とする画像データ取得プログラム。 - 移動可能な複数のクライアントから、所定の現象又は事象に係る目的画像データの少なくとも一部を取得可能なサーバに搭載されたコンピュータによって実施される方法であって、
当該クライアントから受信する画像データに基づいて生成され得る生成情報毎に、当該目的画像データを取得するための画像送信要求内容が、当該生成情報に予め対応付けられており、
当該クライアントから受信した画像データに対し識別器を用いた画像認識処理を施すことによって生成された生成情報に対応付けられた画像送信要求内容を選定するステップと、
選定された画像送信要求内容が画像データの送信を要求する内容である場合に、該画像送信要求内容に合った画像送信要求を、該画像送信要求内容に合ったクライアントへ送信し、該クライアントから受信した画像データに対し当該画像認識処理を施すことによって生成された生成情報から、当該所定の現象又は事象が該画像データに含まれなくなったと判断した場合、当該目的画像データを取得するための更なる画像送信要求の送信を取り止めるステップと
を有することを特徴とする画像データ取得方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019183606A JP7424787B2 (ja) | 2019-10-04 | 2019-10-04 | 画像送信要求内容を受信情報によって選定可能な画像データ取得方法、プログラム及び方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019183606A JP7424787B2 (ja) | 2019-10-04 | 2019-10-04 | 画像送信要求内容を受信情報によって選定可能な画像データ取得方法、プログラム及び方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021060713A JP2021060713A (ja) | 2021-04-15 |
JP7424787B2 true JP7424787B2 (ja) | 2024-01-30 |
Family
ID=75380156
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019183606A Active JP7424787B2 (ja) | 2019-10-04 | 2019-10-04 | 画像送信要求内容を受信情報によって選定可能な画像データ取得方法、プログラム及び方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7424787B2 (ja) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000331279A (ja) | 1999-05-25 | 2000-11-30 | Oki Electric Ind Co Ltd | 広域監視装置 |
JP2005184070A (ja) | 2003-12-16 | 2005-07-07 | Matsushita Electric Ind Co Ltd | 監視システム |
JP2007233864A (ja) | 2006-03-02 | 2007-09-13 | Denso Corp | 死角支援情報報知装置及びプログラム |
JP2018133072A (ja) | 2017-02-16 | 2018-08-23 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 情報処理装置およびプログラム |
JP2018173688A (ja) | 2017-03-31 | 2018-11-08 | パナソニックIpマネジメント株式会社 | 路側機 |
-
2019
- 2019-10-04 JP JP2019183606A patent/JP7424787B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000331279A (ja) | 1999-05-25 | 2000-11-30 | Oki Electric Ind Co Ltd | 広域監視装置 |
JP2005184070A (ja) | 2003-12-16 | 2005-07-07 | Matsushita Electric Ind Co Ltd | 監視システム |
JP2007233864A (ja) | 2006-03-02 | 2007-09-13 | Denso Corp | 死角支援情報報知装置及びプログラム |
JP2018133072A (ja) | 2017-02-16 | 2018-08-23 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 情報処理装置およびプログラム |
JP2018173688A (ja) | 2017-03-31 | 2018-11-08 | パナソニックIpマネジメント株式会社 | 路側機 |
Also Published As
Publication number | Publication date |
---|---|
JP2021060713A (ja) | 2021-04-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102618662B1 (ko) | 자율 주행을 위한 3차원 특징 예측 | |
JP7467485B2 (ja) | 時系列要素からの機械学習のためのグラウンドトゥルースの生成 | |
CN113008263B (zh) | 数据生成方法及数据生成装置 | |
CN111148967B (zh) | 三维数据制作方法、客户端装置以及服务器 | |
US20190370581A1 (en) | Method and apparatus for providing automatic mirror setting via inward facing cameras | |
KR102613792B1 (ko) | 촬상 장치, 화상 처리 장치 및 화상 처리 방법 | |
JP6486744B2 (ja) | 地域監視サーバ、提供端末及びそのシステム | |
US20190369634A1 (en) | Detection of traffic dynamics and road changes in autonomous driving | |
CN106781666A (zh) | 一种目标车位的控制方法及系统 | |
WO2019151427A1 (ja) | 情報送信方法及びクライアント装置 | |
KR102685934B1 (ko) | 정보 처리 장치, 이동체, 제어 시스템, 정보 처리 방법 및 프로그램 | |
US20200201325A1 (en) | Systems and methods for prioritizing data processing | |
JP6944138B2 (ja) | 画像処理装置および画像処理方法 | |
JPWO2020054240A1 (ja) | 情報処理装置及び情報処理方法、撮像装置、移動体装置、並びにコンピュータプログラム | |
JP2022191249A (ja) | 通信制御方法、通信装置、及びプログラム | |
JP7424787B2 (ja) | 画像送信要求内容を受信情報によって選定可能な画像データ取得方法、プログラム及び方法 | |
WO2021084420A1 (en) | Vehicle control in geographical control zones | |
DE112020001581T5 (de) | Informationsverarbeitungsvorrichtung, informationsverarbeitungsverfahren und programm | |
JP7533601B2 (ja) | 情報処理装置、情報処理システム、情報処理方法 | |
US20230343106A1 (en) | Information processing apparatus, image transmission system, and information processing method | |
JP7143263B2 (ja) | 符号化パラメータを用いて対象識別位置を決定する対象識別方法、装置及びプログラム | |
CN111275006A (zh) | 信息交互方法、装置、系统、移动设备与电子设备 | |
JP2021043773A (ja) | 符号化パラメータ特徴量を利用した対象識別方法、装置及びプログラム | |
JP7163257B2 (ja) | 移動可能な画像生成元の画像を用いて多視点画像を生成する方法、装置及びプログラム | |
US20230095186A1 (en) | Information processing device, information processing system, and information processing method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220331 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230221 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230306 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230407 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230808 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230908 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231221 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240118 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7424787 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |