JP2021158576A - 着脱可能デバイスおよびその制御方法、プログラム - Google Patents
着脱可能デバイスおよびその制御方法、プログラム Download PDFInfo
- Publication number
- JP2021158576A JP2021158576A JP2020058305A JP2020058305A JP2021158576A JP 2021158576 A JP2021158576 A JP 2021158576A JP 2020058305 A JP2020058305 A JP 2020058305A JP 2020058305 A JP2020058305 A JP 2020058305A JP 2021158576 A JP2021158576 A JP 2021158576A
- Authority
- JP
- Japan
- Prior art keywords
- data
- processing result
- command
- read
- processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 135
- 238000012545 processing Methods 0.000 claims abstract description 333
- 238000004458 analytical method Methods 0.000 claims abstract description 73
- 230000008569 process Effects 0.000 claims description 108
- 230000004044 response Effects 0.000 claims description 26
- 230000006870 function Effects 0.000 description 51
- 238000010191 image analysis Methods 0.000 description 43
- 238000004891 communication Methods 0.000 description 40
- 238000003384 imaging method Methods 0.000 description 24
- 238000012546 transfer Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 6
- 238000005192 partition Methods 0.000 description 6
- 238000001514 detection method Methods 0.000 description 5
- 238000010801 machine learning Methods 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000012937 correction Methods 0.000 description 3
- 230000002093 peripheral effect Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000003780 insertion Methods 0.000 description 2
- 230000037431 insertion Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000000873 masking effect Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012805 post-processing Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/21—Intermediate information storage
- H04N1/2104—Intermediate information storage for one or a few pictures
- H04N1/2158—Intermediate information storage for one or a few pictures using a detachable storage unit
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
- H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/617—Upgrading or updating of programs or applications for camera control
Abstract
Description
電子機器に着脱可能な、記憶部を有する着脱可能デバイスであって、
前記電子機器から解析のために入力されたデータを解析する解析手段と、
前記解析手段により得られた処理結果を、複数の部分データに分割し、アドレスが連続しないように前記記憶部の複数の領域に格納する格納手段と、
前記電子機器からのリードコマンドに含まれているパラメータに基づいて、前記リードコマンドが前記処理結果を読み出すコマンドであるか否かを判断する判断手段と、
前記リードコマンドが前記処理結果を読み出す要求であると判断された場合に、前記複数の部分データを前記記憶部の前記複数の領域から読み出し、前記処理結果に構成して出力する出力手段と、を備える。
以下、着脱可能なデバイスを装着する電子機器として撮像装置を用いた例を説明する。
<システム構成>
図1に、本実施形態の画像解析システムの構成例を示す。以下では、一例として、このシステムが特定人物追跡システムである場合について説明する。ただし、これに限られず、画像を解析して所定の情報出力を行う任意のシステムに、以下の議論を適用することができる。本システムは、撮像装置110a〜110dと、ネットワーク120と、入出力装置130とを含んで構成される。なお、撮像装置110a〜110dは、それぞれ、例えば撮像した画像を記録可能なデバイスを着脱可能なスロットを有し、そのスロットに着脱可能デバイス100a〜100dが挿入されることにより、着脱可能デバイス100a〜100dと接続される。なお、以下では、着脱可能デバイス100a〜100dを「着脱可能デバイス100」と表記し、撮像装置110a〜110dを「撮像装置110」と表記する。なお、以下では、画像という用語は、映像、動画、静止画を総称するものとする。
(撮像装置の構成)
続いて、撮像装置110の構成について説明する。図2は、撮像装置110のハードウェア構成例を示す図である。撮像装置110は、そのハードウェア構成として、例えば、撮像部201、画像処理部202、演算処理部203、配信部204、SD I/F部205を含む。なお、I/Fは、インタフェースの略語である。
図4に、着脱可能デバイス100のハードウェア構成例を示す。着脱可能デバイス100は、一例として、I/F部401、FPGA402、SDコントローラ403、及び、記憶部404を含んで構成される。着脱可能デバイス100は、撮像装置110が有するSD I/F部205の着脱ソケットに挿抜できる形状で、すなわちSD規格に則った形状で成形されるものとする。
続いて、システム内で実行される処理の流れの例について説明する。なお、以下の各処理のうち撮像装置110が実行する処理は、例えば、演算処理部203内のプロセッサがメモリ等に記憶されたプログラムを実行することによって実現される。ただし、これは一例に過ぎず、後述の処理の一部又は全部が、専用のハードウェアによって実現されてもよい。また、着脱可能デバイス100や入出力装置130が実行する処理についても、各装置におけるプロセッサがメモリ等に記憶されたプログラムを実行することによって実現されてもよいし、処理の一部又は全部を、専用のハードウェアによって実現してもよい。
図6に、システムで実行される画像解析処理の一連の流れを概略的に示す。本処理では、まず、ユーザによって、撮像装置110に着脱可能デバイス100が装着される(S601)。撮像装置110は、着脱可能デバイス100の初期化シーケンスを実行する(S602)。この初期化シーケンスでは、撮像装置110と着脱可能デバイス100との間で所定のコマンドが送受信されることにより、撮像装置110が、着脱可能デバイス100を使用可能な状態となる。その後、撮像装置110は、着脱可能デバイス100が実行可能な処理を把握し、ローカルで実行可能な(撮像装置110単体で又は撮像装置110と着脱可能デバイス100の組み合わせで実行可能な)処理を把握する(S603)。なお、着脱可能デバイス100は、任意の処理を実行可能なように構成されうるが、撮像装置110側で実行されるべき処理と無関係な処理については考慮されなくてもよい。一例において、撮像装置110は、例えば入出力装置130から事前に取得した実行されうる処理のリストを保持しておいてもよい。この場合、撮像装置110は、着脱可能デバイス100が実行可能な処理を示す情報を着脱可能デバイス100から取得した際に、その処理がリストに含まれているか否かによって、実行されうる処理のみを把握することができる。
・着脱可能デバイスのインタフェース構成
ここで、撮像装置110と着脱可能デバイス100との通信について説明する。撮像装置110の演算処理部203と着脱可能デバイス100のSDコントローラ403は、撮像装置110のSD I/F部205のデバイス挿入用ソケットを介し、電源ライン、GNDライン、クロックライン、コマンドライン、データラインで接続される。なお、クロックライン、コマンドライン、及び、データラインは、FPGA402を経由する形で接続されるものとする。クロックラインでは、演算処理部203から出力される同期用のクロックが通信される。コマンドラインでは、演算処理部203からSDコントローラ403への動作要求用に発行するコマンド、コマンドに対するSDコントローラ403から演算処理部203へのレスポンスが通信される。データラインでは、演算処理部203からの書き込みデータ、着脱可能デバイス100からの読み出しデータが通信される。また、演算処理部203は、SD I/F部205のデバイス挿入用ソケットのデバイスディテクト信号のHighとLowを判別することにより、着脱可能デバイス100が挿入されているか否かを認識することができる。
演算処理部203は、SDコントローラ403に対して電源供給後にコマンドライン上でコマンドを発行する。そして、演算処理部203は、SDコントローラ403からのレスポンスと、SDカードとしてのデバイス情報を示す出力データを受信したことに応じて、データの通信用の電圧、通信速度(クロック周波数)等の設定を行う。
図7に、コマンドライン上で通信されるコマンドとレスポンスの構成例を示す。これらのコマンドとレスポンスはSD規格に従う構成を有する。演算処理部203からSDコントローラ403に対して発行されるコマンド701は、コマンドナンバー部704と、コマンド引数部705と、誤り訂正用データ部706とを含んで構成される。コマンドナンバー部704には、コマンドの種別を示す値が記述される。例えば、コマンドナンバー部704に値「23」が格納されている場合、そのコマンドがデータブロック数を指定するブロック数指定コマンドであることが示される。また、コマンドナンバー部704に値「25」が格納されている場合、そのコマンドがマルチライトコマンドであることが示され、コマンドナンバー部704に値「12」が格納されている場合、そのコマンドがデータ転送停止コマンドであることが示される。コマンド引数部705では、コマンドの種別に応じて転送データブロック数、メモリの書き込み・読み出しアドレス等の情報が指定される。また、コマンドの最初のビットには、コマンドの開始位置を示すコマンドスタートビット702が付加され、コマンドの最後のビットにはコマンドの終了を示すコマンドエンドビット707が付加される。また、コマンドスタートビット702の後ろに、撮像装置110から着脱可能デバイス100に対して出力された信号であることを示すディレクションビット703も付加される。
次に、演算処理部203と着脱可能デバイス100とのデータの送受信の方法を説明する。上述したように、SD I/F部205では、データの書き込み及び読み出し共にブロック単位でデータの転送が行われる。ブロックは、例えば、記憶部404におけるデータの書き込みおよび読みだしの単位であり、例えば512BYTEのサイズを有する。
本実施形態の着脱可能デバイス100は、記憶部404の特定のアドレスAに、自装置が有する処理機能の情報を格納する。撮像装置110の演算処理部203は、このアドレスAに対してマルチリードコマンド又はシングルリードコマンドを発行することにより、着脱可能デバイス100が有する処理機能の情報を確認することができる。ここでの処理機能の情報は、処理機能を保有しているか否か、処理が実行された場合に完了するまでの所要時間、処理結果のデータサイズ、処理結果が格納されるアドレス情報を含む。図8に、この処理機能の情報の一例を示す。処理機能保有フラグ801は、着脱可能デバイス100が画像解析処理機能を有していることを示している。撮像装置110は、処理機能保有フラグ801を確認することにより、着脱可能デバイス100が画像解析処理機能を有しているか否かを判定する。処理機能分類802は、着脱可能デバイス100が有している解析処理を示す。入力データサイズ803及び処理データ数804は、各々の処理機能のデータの入力仕様に関する情報を示す。また、推定処理時間805は、データ入力から処理結果出力までに掛かる時間を示し、処理結果データ数806は処理結果のデータ数を示す。また、処理結果格納アドレス807は、記憶部404のどこに処理結果が格納されるかを示す。演算処理部203は、図8に示すような記憶部404のアドレスAのデータを読み出すことにより、図9に示すような処理機能テーブルを取得することができる。なお、本明細書においてデータ数とは、データの量(データのサイズ)に対応するブロック数である。
次に着脱可能デバイス100上での画像解析処理の処理結果を着脱可能デバイス100の記憶部404に分散して格納する方法に関して図10と図11を用いて説明する。図10は、着脱可能デバイス100によるデータの格納処理を説明するフローチャートである。図11は、着脱可能デバイス100による画像データと解析処理結果の格納を説明する図である。
第1実施形態では、処理結果の読み出し要求ではないリードコマンドによって部分データが格納されている領域が読み出された場合に、部分データはそのまま出力される。第2実施形態では、処理結果の読み出し要求ではないリードコマンドによって部分データが格納されている領域が読み出された場合に、部分データをマスクして出力する。以下、処理結果をマスクして出力する処理について、図13を用いて説明する。なお、全体の構成と処理結果のデータの分割格納に関しては第1実施形態で説明したとおりである。また、図13において、第1実施形態(図12)と同様の処理には同一のステップ番号を付してある。
第3実施形態では、画像解析処理の処理結果を記憶部404の1つのセルで保持できるデータ量(1ブロックのデータ量)よりも小さいデータに分割して保存することにより、処理結果の保護を強固にする。全体の構成、処理は第1実施形態(図10、図12)と同様である。以下では、主として第1実施形態と異なる部分を説明する。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
Claims (16)
- 電子機器に着脱可能な、記憶部を有する着脱可能デバイスであって、
前記電子機器から解析のために入力されたデータを解析する解析手段と、
前記解析手段により得られた処理結果を、複数の部分データに分割し、アドレスが連続しないように前記記憶部の複数の領域に格納する格納手段と、
前記電子機器からのリードコマンドに含まれているパラメータに基づいて、前記リードコマンドが前記処理結果を読み出すコマンドであるか否かを判断する判断手段と、
前記リードコマンドが前記処理結果を読み出す要求であると判断された場合に、前記複数の部分データを前記記憶部の前記複数の領域から読み出し、前記処理結果に構成して出力する出力手段と、を備えることを特徴とする着脱可能デバイス。 - 前記格納手段は、前記電子機器から前記記憶部への保存のために入力されたデータを、前記記憶部のアドレスが連続する領域に格納することを特徴とする請求項1に記載の着脱可能デバイス。
- 前記判断手段は、前記リードコマンドに含まれている、読み出しのアドレスとデータのサイズを指定するパラメータに基づいて前記リードコマンドが前記処理結果を読み出すコマンドであるか否かを判断することを特徴とする請求項1または2に記載の着脱可能デバイス。
- 前記判断手段により、前記処理結果を読み出す要求でないと判断された場合に、前記記憶部の、前記リードコマンドにより指定されたアドレスから前記リードコマンドにより指定されたサイズのデータを読み出して出力することを特徴とする請求項1乃至3のいずれか1項に記載の着脱可能デバイス。
- 前記判断手段は、前記リードコマンドにより指定されるアドレスが前記処理結果を格納するアドレスであり、前記リードコマンドにより指定されるデータのサイズが前記処理結果のデータのサイズに対応している場合、前記リードコマンドが前記処理結果を読み出す要求であると判断することを特徴とする請求項1乃至4のいずれか1項に記載の着脱可能デバイス。
- 前記解析手段により得られる前記処理結果を格納するアドレスと前記処理結果のデータのサイズが前記記憶部の所定のアドレスに格納されていることを特徴とする請求項1乃至5のいずれか1項に記載の着脱可能デバイス。
- 前記格納手段は、前記データを解析するための前記電子機器からのコマンドに応じて、前記複数の部分データを前記記憶部の前記複数の領域に格納するために複数回のライトコマンドを発行することを特徴とする請求項1乃至6のいずれか1項に記載の着脱可能デバイス。
- 前記格納手段は、前記データを格納するための前記電子機器からのコマンドに応じて、前記記憶部へ前記データを格納するためのライトコマンドを1回のみ発行することを特徴とする請求項1乃至7のいずれか1項に記載の着脱可能デバイス。
- 前記出力手段は、前記電子機器からのリードコマンドが前記処理結果を読み出すことを要求するコマンドであると判断された場合に、前記記憶部の前記複数の領域から前記複数の部分データを読み出すための複数のリードコマンドを発行することを特徴とする請求項1乃至8のいずれか1項に記載の着脱可能デバイス。
- 前記解析手段は、解析のために入力されたデータを複数の分割領域に分割して解析処理を行い、
前記格納手段は、前記複数の分割領域に対応する複数の処理結果を前記複数の部分データとして格納することを特徴とする請求項1乃至9のいずれか1項に記載の着脱可能デバイス。 - 前記処理結果を読み出す要求ではないと判断された前記電子機器からのリードコマンドが前記部分データを格納している領域からのデータの読み出しを指定している場合、前記出力手段は、前記部分データとは無関係な値を出力することを特徴とする請求項1乃至10のいずれか1項に記載の着脱可能デバイス。
- 前記無関係な値は、ランダム値または固定値であることを特徴とする請求項11に記載の着脱可能デバイス。
- 前記格納手段は、前記処理結果を、前記記憶部におけるデータの読み出し及び書き込みの単位であるブロックよりも小さいサイズの複数のデータへ分割し、前記分割された複数のデータの各々に所定値またはランダム値を付加して1ブロックのサイズのデータを生成し、これを用いて前記部分データを生成することを特徴とする請求項1乃至10のいずれか1項に記載の着脱可能デバイス。
- 前記出力手段は、前記リードコマンドが前記処理結果を読み出す要求であると判断された場合に、前記記憶部から読み出された前記ブロックから部分データを抽出して結合することで前記処理結果を構成することを特徴とする請求項13に記載の着脱可能デバイス。
- 電子機器に着脱可能な、記憶部を有する着脱可能デバイスの制御方法であって、
前記電子機器から解析のために入力されたデータを解析する解析工程と、
前記解析工程により得られた処理結果を、複数の部分データに分割し、アドレスが連続しないように前記記憶部の複数の領域に格納する格納工程と、
前記電子機器からのリードコマンドに含まれているパラメータに基づいて、前記リードコマンドが前記処理結果を読み出すコマンドであるか否かを判断する判断工程と、
前記リードコマンドが前記処理結果を読み出す要求であると判断された場合に、前記複数の部分データを前記記憶部の前記複数の領域から読み出し、前記処理結果に構成して出力する出力工程と、を備えることを特徴とする着脱可能デバイスの制御方法。 - コンピュータを、請求項1乃至14のいずれか1項に記載された着脱可能デバイスの各手段として機能させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020058305A JP2021158576A (ja) | 2020-03-27 | 2020-03-27 | 着脱可能デバイスおよびその制御方法、プログラム |
US17/211,573 US11363160B2 (en) | 2020-03-27 | 2021-03-24 | Detachable device, control method thereof, and storage medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020058305A JP2021158576A (ja) | 2020-03-27 | 2020-03-27 | 着脱可能デバイスおよびその制御方法、プログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2021158576A true JP2021158576A (ja) | 2021-10-07 |
Family
ID=77856645
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020058305A Pending JP2021158576A (ja) | 2020-03-27 | 2020-03-27 | 着脱可能デバイスおよびその制御方法、プログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US11363160B2 (ja) |
JP (1) | JP2021158576A (ja) |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4877000B2 (ja) | 2007-03-26 | 2012-02-15 | 株式会社日立製作所 | 無線通信方法、無線移動機および無線基地局収容装置 |
JP2010282429A (ja) * | 2009-06-04 | 2010-12-16 | Canon Inc | 画像処理装置及びその制御方法 |
-
2020
- 2020-03-27 JP JP2020058305A patent/JP2021158576A/ja active Pending
-
2021
- 2021-03-24 US US17/211,573 patent/US11363160B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US11363160B2 (en) | 2022-06-14 |
US20210306509A1 (en) | 2021-09-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112752018B (zh) | 图像捕获装置、控制方法及计算机可读存储介质 | |
US11570350B2 (en) | Device, control method, and storage medium | |
US11825194B2 (en) | Image capturing apparatus and method for controlling the same, and non-transitory computer-readable storage medium | |
US20210274079A1 (en) | Image capturing apparatus, device, control method, and computer-readable storage medium | |
US11729515B2 (en) | Imaging apparatus, information processing method, and recording medium for determining whether an image analysis of a predetermined image is complete | |
JP2021136666A (ja) | 撮像装置、デバイス、制御方法、およびプログラム | |
JP2021048573A (ja) | 撮像装置、制御方法及びプログラム | |
JP7361551B2 (ja) | デバイス、制御方法、及びプログラム | |
JP2021158576A (ja) | 着脱可能デバイスおよびその制御方法、プログラム | |
JP7417455B2 (ja) | 電子機器及びその制御方法、プログラム | |
JP2021048575A (ja) | デバイス、撮像装置、制御方法及びプログラム | |
EP4221244A1 (en) | Image capturing apparatus, control method of image capturing apparatus, and computer program | |
EP4221245A1 (en) | Image capturing apparatus, attachable device, control method thereof, and computer program | |
JP2021072611A (ja) | 撮像装置、制御方法、及び、プログラム | |
EP4027218B1 (en) | Detachable electrical device and control method thereof | |
US11985412B2 (en) | Detachable device and control method thereof | |
JP7325281B2 (ja) | 撮像装置、制御方法及びプログラム | |
US11843847B2 (en) | Device, information processing apparatus, control method therefor, and computer-readable storage medium | |
JP2022072874A (ja) | 撮像装置、及び、その制御方法、及び、プログラム | |
JP2022039941A (ja) | 情報処理装置、制御方法、及び、プログラム | |
JP2021136663A (ja) | デバイス、通信装置、方法、およびプログラム | |
JP2022167153A (ja) | 情報処理装置およびその制御方法 | |
JP2022164050A (ja) | 情報処理装置およびその制御方法 | |
JP2023028994A (ja) | 演算装置、撮像装置、制御方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20210103 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210113 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230308 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20240130 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240304 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240411 |