JP2023180871A - 記録装置、記録装置の制御方法、プログラム - Google Patents
記録装置、記録装置の制御方法、プログラム Download PDFInfo
- Publication number
- JP2023180871A JP2023180871A JP2022094525A JP2022094525A JP2023180871A JP 2023180871 A JP2023180871 A JP 2023180871A JP 2022094525 A JP2022094525 A JP 2022094525A JP 2022094525 A JP2022094525 A JP 2022094525A JP 2023180871 A JP2023180871 A JP 2023180871A
- Authority
- JP
- Japan
- Prior art keywords
- industry
- annotation information
- information
- subject
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 31
- 238000005259 measurement Methods 0.000 claims abstract description 21
- 238000001514 detection method Methods 0.000 claims abstract description 17
- 238000001454 recorded image Methods 0.000 claims 2
- 238000012545 processing Methods 0.000 description 68
- 230000008569 process Effects 0.000 description 16
- 238000003384 imaging method Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 238000004364 calculation method Methods 0.000 description 7
- 238000006243 chemical reaction Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 238000011161 development Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 238000013461 design Methods 0.000 description 4
- 210000002569 neuron Anatomy 0.000 description 4
- 230000015572 biosynthetic process Effects 0.000 description 3
- 238000003786 synthesis reaction Methods 0.000 description 3
- 101150053844 APP1 gene Proteins 0.000 description 2
- 101100189105 Homo sapiens PABPC4 gene Proteins 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 2
- 102100039424 Polyadenylate-binding protein 4 Human genes 0.000 description 2
- 239000000654 additive Substances 0.000 description 2
- 230000000996 additive effect Effects 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 230000004888 barrier function Effects 0.000 description 2
- 239000003550 marker Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000000717 retained effect Effects 0.000 description 2
- 241000282472 Canis lupus familiaris Species 0.000 description 1
- 241000282326 Felis catus Species 0.000 description 1
- WHXSMMKQMYFTQS-UHFFFAOYSA-N Lithium Chemical compound [Li] WHXSMMKQMYFTQS-UHFFFAOYSA-N 0.000 description 1
- 229910005580 NiCd Inorganic materials 0.000 description 1
- 229910005813 NiMH Inorganic materials 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 229910052744 lithium Inorganic materials 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000001681 protective effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 238000009966 trimming Methods 0.000 description 1
Images
Abstract
【課題】 被写体に適した単位をアノテーション情報に記録すること。
【解決手段】 画像から被写体を検出する検出手段と、画像から広さなどを共通単位で計測する計測手段と、ユーザーが記録する業界の分野を選択する選択手段と、前記検出手段から出力された被写体情報と、計測手段から出力された計測結果と、選択手段で選択された業界情報とをまとめて、数値と単位を決定する判断手段と、前記の判断手段から出力された数値および単位と、計測結果と、業界情報とをまとめてアノテーション情報に記録する記録手段と、を有し、前記記録手段は、標準アノテーション情報には共通単位で記録し、業界用のアノテーション情報には業界に応じた単位で記録する、ことを特徴とする。
【選択図】 図4
【解決手段】 画像から被写体を検出する検出手段と、画像から広さなどを共通単位で計測する計測手段と、ユーザーが記録する業界の分野を選択する選択手段と、前記検出手段から出力された被写体情報と、計測手段から出力された計測結果と、選択手段で選択された業界情報とをまとめて、数値と単位を決定する判断手段と、前記の判断手段から出力された数値および単位と、計測結果と、業界情報とをまとめてアノテーション情報に記録する記録手段と、を有し、前記記録手段は、標準アノテーション情報には共通単位で記録し、業界用のアノテーション情報には業界に応じた単位で記録する、ことを特徴とする。
【選択図】 図4
Description
本発明は、デジタルカメラなどで撮像された画像を処理する記録装置に関するものである。
従来、ある被写体を撮影したとき、被写体に関するデータは画像とは別のデータで保存されていた。例えば、被写体が部屋であるとき、その部屋の広さが被写体に関するデータにあたる。だが、時間の経過とともにどの画像がどのデータであったかわからなくなってしまう。これを解決するには、画像に直接データを紐づけさせるアノテーション情報が有効である。例えば、特許文献1では、実在の対象とそれに関する情報とを対応付けて、対象同士の位置関係を記録・保管する方法が開示されている。
しかしながら、上述の特許文献1に開示された従来技術では、被写体が「何か」を判別しないため、アノテーション情報に記録される単位及び数値が被写体に適したものになっていない場合がある。また、ユーザーや使用する業界によって同じ被写体であっても使用する単位が異なる場合がある。
本発明は上記問題点を鑑みてなされたものであり、被写体に適した単位をアノテーション情報に記録することを目的とする。
上記目的を達成するために、本発明の画像処理装置は、画像から被写体を検出する検出手段と、画像から広さや長さを共通単位で計測する計測手段と、ユーザーが記録する業界の分野を選択する選択手段と、前記検出手段から出力された被写体情報と、計測手段から出力された計測結果と、選択手段で選択された業界情報とをまとめて、数値と単位を決定する判断手段と、前記の判断手段から出力された数値および単位と、計測結果と、業界情報とをまとめてアノテーション情報に記録する記録手段と、を有し、標準アノテーション情報には共通単位で記録し、業界用のアノテーション情報には業界に応じた単位で記録する、ことを特徴とする。
本発明によれば、アノテーション情報に記録される被写体の数値とその単位が適切なものとなる。加えて、アノテーション情報の修正時に単位変換とそれに伴う数値変換の手間を省ける。
以下、添付図面を参照して実施形態を詳しく説明する。なお、以下の実施形態は特許請求の範囲に係る発明を限定するものではない。実施形態には複数の特徴が記載されているが、これらの複数の特徴の全てが発明に必須のものとは限らず、また、複数の特徴は任意に組み合わせられてもよい。さらに、添付図面においては、同一若しくは同様の構成に同一の参照番号を付し、重複した説明は省略する。
また、以下の説明では、推論モデルを使用し、被写体分類を行う画像出力装置として、デジタルカメラを例示するが、本発明の画像出力装置がデジタルカメラに限られないことは言うまでもない。本発明の画像出力装置は、記録装置に記録されている画像を読み出して表示装置に表示する画像出力装置であればいかなる機器であってもよく、例えば、スマートフォン、タブレットPCなどであってもよい。
図1は、本発明の実施形態にかかるデジタルカメラ100の構成例を示すブロック図である。
バリア10は、デジタルカメラ100の撮影レンズ11を含む撮像部を覆う事により、撮像部の汚れや破損を防止する保護部材であり、バリア制御部43により動作が制御される。撮影レンズ11は、光学像を撮像素子13の撮像面に結像させる。シャッター12は、絞り機能を備える。撮像素子13は、例えば、CCDやCMOSセンサ等で構成され、シャッター12を介して撮影レンズ11により撮像面上に結像された光学像を電気信号に変換する。
A/D変換器15は、撮像素子13から出力されたアナログの画像信号をデジタルの画像信号に変換する。A/D変換器15で変換されたデジタルの画像信号は、所謂RAW画像データとして、メモリ25に書き込まれる。併せて、撮影時の情報を基に各RAW画像データに対応する現像パラメータが生成され、メモリ25に書き込まれる。現像パラメータは、露光設定、ホワイトバランス、色空間、コントラストなど、JPEG方式などを記録するための画像処理で使用する各種パラメータから構成される。
タイミング発生器14は、メモリ制御部22及びシステム制御部50により制御され、撮像素子13、A/D変換器15、D/A変換器21にクロック信号や制御信号を供給する。
画像処理部20は、A/D変換器15からのデータ或いはメモリ制御部22からのデータに対して所定の画素補間処理、色変換処理、補正処理、リサイズ処理、画像合成処理などの各種画像処理を行う。また、画像処理部20は、撮像して得られた画像データを用いて所定の画像処理や演算処理を行い、得られた演算結果をシステム制御部50に提供する。システム制御部50は、提供された演算結果に基づいて露光制御部40および焦点制御部41を制御することにより、AF(オートフォーカス)処理、AE(自動露出)処理、EF(フラッシュプリ発光)処理を実現する。
また、画像処理部20は、撮像して得られた画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてAWB(オートホワイトバランス)処理も行う。さらに、画像処理部20は、メモリ25に格納された画像データを読み込んで圧縮処理或いは伸長処理を行う。ここではJPEG方式やMPEG-4 AVCまたはHEVC(High Efficiency Video Coding)、非圧縮のRAWデータに対する可逆圧縮などを行う。そして、画像処理部20は、処理を終えた画像データをメモリ25に書き込む。
また、画像処理部20は、撮像して得られた画像データを用いて所定の演算処理を行い、各種画像データの編集処理を行う。具体的には、画像データの周囲にある不要な部分を非表示にすることで画像の表示範囲やサイズを調整するトリミング処理、画像データや画面の表示要素などを拡大や縮小して大きさを変更するリサイズ処理を行うことができる。更に、非圧縮のRAWデータに対する可逆圧縮など、圧縮処理或いは伸長処理を行ったデータに対して色変換などの画像処理を加え、JPEG方式に変換して画像データを作成するRAW現像を行うことができる。また、MPEG-4などの動画フォーマットの指定フレームを切り出してJPEG方式に変換して保存する動画切り出し処理を行うことができる。
また、画像処理部20は、複数の画像データを合成する合成処理回路を備える。本実施形態では、単純な加算合成あるいは加算平均合成だけでなく、合成対象の画像データの各領域において最も明るいまたは暗い値を持つ画像を選択して、それらを合成して1枚の画像データを生成する比較明合成処理、比較暗合成処理が可能である。
また、画像処理部20は、表示用の画像データと共に、表示部23に表示するメニューや任意の文字等のOSD(On-Screen Display)を重畳させる処理等も行う。
さらに、画像処理部20では、入力された画像データや撮影時の撮像素子13などから得られる被写体との距離情報などを利用して、画像データ内に存在する被写体を検出して、その被写体領域を検出する被写体検出処理を行う。検出できる情報として、画像内における位置、大きさといった領域や傾き、確からしさなどの検出情報を得ることができる。
メモリ制御部22は、A/D変換器15、タイミング発生器14、画像処理部20、画像表示メモリ24、D/A変換器21、メモリ25を制御する。A/D変換器15により生成されたRAW画像データは、画像処理部20、メモリ制御部22を介して、或いは、直接メモリ制御部22を介して、画像表示メモリ24或いはメモリ25に書き込まれる。
画像表示メモリ24に書き込まれた表示用の画像データは、D/A変換器21を介してTFT LCDなどにより構成される表示部23に表示される。表示部23を用いて撮像して得られた画像データを逐次表示すれば、ライブ画像を表示する電子ファインダ機能を実現することが可能である。
メモリ25は、所定枚数の静止画像や所定時間の動画像を格納するのに十分な記憶量を備え、撮影した静止画像や動画像を格納する。また、メモリ25はシステム制御部50の作業領域としても使用することが可能である。
露光制御部40は、絞り機能を備えるシャッター12を制御する。また、露光制御部40は、フラッシュ44と連動することによりフラッシュ調光機能も有する。焦点制御部41は、システム制御部50からの指示に基づいて撮影レンズ11に含まれる不図示のフォーカスレンズを駆動することで、焦点調節を行う。ズーム制御部42は、撮影レンズ11に含まれる不図示のズームレンズを駆動することで、ズーミングを制御する。フラッシュ44は、AF補助光の投光機能、フラッシュ調光機能を有する。
システム制御部50は、デジタルカメラ100全体を制御する。不揮発性メモリ51は、電気的に消去・記録可能な不揮発性メモリであり、例えばEEPROM等が用いられる。なお、不揮発性メモリ51には、プログラムだけでなく、地図情報等も記録されている。
シャッタースイッチ61(SW1)は、シャッターボタン60の操作途中でONとなり、AF処理、AE処理、AWB処理、EF処理などの動作開始を指示する。シャッタースイッチ62(SW2)は、シャッターボタン60の操作完了でONとなり、露光処理、現像処理、記録処理を含む一連の撮影動作の開始を指示する。露光処理では、撮像素子13から読み出された信号を、A/D変換器15、メモリ制御部22を介して、RAW画像データとしてメモリ25に書き込む。現像処理では、画像処理部20やメモリ制御部22での演算を用いて、メモリ25に書き込まれたRAW画像データを現像し、画像データとしてメモリ25に書き込む。記録処理では、メモリ25から画像データを読み出し、画像処理部20により圧縮を行い、圧縮した画像データをメモリ25に格納した後にカードコントローラ90を介して外部記録媒体91に書き込む。
操作部63は、各種ボタンやタッチパネルなどの操作部材を備える。例えば、電源ボタン、メニューボタン、撮影モード/再生モード/その他特殊撮影モードの切替えを行うモード切替えスイッチ、十字キー、セットボタン、マクロボタン、マルチ画面再生改ページボタンを含む。また、例えば、フラッシュ設定ボタン、単写/連写/セルフタイマー切り替えボタン、メニュー移動+(プラス)ボタン、メニュー移動-(マイナス)ボタン、撮影画質選択ボタン、露出補正ボタン、日付/時間設定ボタンなどを含む。
メタデータ生成・解析部70は、外部記録媒体91に画像データを記録する際に、撮影時の情報を基に、画像データに添付するExif(Exchangeable image file format)規格などの様々なメタデータを生成する。また、メタデータ生成・解析部70は、外部記録媒体91に記録されている画像データを読み込んだ際に、画像データに付与されているメタデータの解析を行う。メタデータとしては、例えば、撮影時の撮影時設定情報、画像データに関する画像データ情報、画像データに含まれる被写体の特徴情報などが挙げられる。また、動画像データを記録する際には、メタデータ生成・解析部70は、各フレームについてメタデータを生成し、付与することもできる。
電源80は、アルカリ電池やリチウム電池等の一次電池、NiCd電池、NiMH電池、Li電池等の二次電池、ACアダプター等からなる。電源制御部81は、電源80から供給される電力をデジタルカメラ100の各部に供給する。
カードコントローラ90は、メモリカード等の外部記録媒体91とデータの送受信を行う。外部記録媒体91は、例えばメモリカードで構成され、デジタルカメラ100が撮影した画像(静止画、動画)を記録する。
推論エンジン73は、推論モデル記録部72に記録された推論モデルを用いて、システム制御部50を介して入力された画像データに対して推論を行う。推論モデルには、外部装置101などの外部から通信部71を通じて入力し、推論モデル記録部72に記録されたものや、学習部74によって再学習を行って得られた推論モデルを使用することができる。なお、推論モデルは、外部からの更新や学習部74によって再学習を行って更新された場合に、それぞれの推論モデルが識別できるように、推論モデル記録部72などで管理バージョンを保持していることとする。また、推論エンジン73は、ニューラルネットワーク・デザイン73aを有する。
ニューラルネットワーク・デザイン73aは、入力層と出力層の間に中間層(ニューロン)が配置されている。入力層にはシステム制御部50から画像データが入力される。中間層としては、何層かのニューロンが配置されている。ニューロンの層の数は設計上適宜決められ、また各層におけるニューロンの数も設計上適宜決められる。中間層は、推論モデル記録部72に記録された推論モデルに基づいて、重み付けがなされる。出力層には、入力層に入力された画像データに応じたアノテーション情報が出力される。
本実施形態では、画像に含まれる被写体がどのようなものであるかの分類を推論する推論モデルを想定する。様々な被写体の画像データと、その分類(例えば、犬、猫などの動物の分類や、人、動物、植物、建物など被写体分類など)結果を教師データとして、深層学習により生成された推論モデルを利用する。
学習部74は、システム制御部50等から依頼を受けて、推論モデルの再学習を行う。学習部74は、教師データ記録部74aを有し、教師データ記録部74aは、推論エンジン73への教師データに関する情報を記録する。学習部74は教師データ記録部74aに記録されている教師データを用いて、推論エンジン73を再学習させ、推論モデル記録部72を用いて、推論エンジン73を更新することができる。
通信部71は、送信および受信を行うための通信回路を有する。通信回路は、具体的にはWi-FiやBluetooth(登録商標)などの無線通信でも良いし、イーサネットやUSBなどの有線通信でも良い。
本実施形態での画像から被写体の長さや広さを計測する計測処理について説明する。深度センサ75を用いて、撮像時に被写体の深度情報(奥行き情報)を計測する。撮像された画像の各画素に深度情報として深度値が対応付けられている。各画素が有する深度値は、カメラの視点から被写体までの距離を示す情報であり、深度値はメートル等の物理的単位で直接的に表現されたものでもよいし、カメラの視点から被写体までの距離が0~1の範囲で正規化表現されたものでもよい。設定された解像度の値をもとに、1ピクセルあたりの長さを算出する。そして、撮像後の画像を入力に、画像処理部20にて画像の2値化などの処理を行い、被写体のエッジを検出する。抽出された被写体のエッジから、エッジ間のピクセル数をカウントして、事前に算出した1ピクセルあたりの長さをもとに、被写体の長さを計測する。なお、推論エンジン73を用いて、被写体の推論とともに計測処理を行ってもよい。また、深度値の取得原理は限定せず、被写体の視差画像に基づく三角測量法により被写体までの距離を計測するステレオカメラであってもよい。あるいは、被写体にレーザー光を照射して、その反射光が検出されるまでの時間に基づいて被写体の距離を測定するTOF(Time Of Flight)方式のカメラであってもよい。もちろん、その他の方法により被写体までの距離を計測してもよい。
次に、図2~図5を用いて、本実施形態におけるデジタルカメラ100の画像にアノテーション情報を記録するまでの処理について説明する。
図2は本実施例を説明する全体フローチャートの一例である。
図3(a)~(d)は、本実施形態における撮影処理と被写体情報取得手段S201の内部処理を示すもので、処理パターンの一例である。
図4は、本実施形態において記録される画像ファイルの記録内容の概要である。
図5(a)、(b)は、本実施形態におけるデジタルカメラの画像とアノテーション情報の表示方法の一例を表す図である。図5(a)は、被写体が和室であるとき、図5(b)は、被写体が洋室であるとき、の画像とアノテーション情報を示す。
デジタルカメラ100はユーザーによるシャッターボタン60の押下操作に応答し、シャッタースイッチ61(SW1)及びシャッタースイッチ62(SW2)がONとなったとき、撮影処理と被写体情報取得手段(S201)を実施する。S201内の詳細処理フローを、図3(a)を用いて説明する。なお、図3(b)、(c)、(d)は図3(a)の処理順序を変更したものであり、処理順序はこれに限定しない。
システム制御部50Aは、ユーザーが操作部63でメニュー画面を表示して、業界/分野情報を設定すると、メモリ25に業界/分野情報を記録する(S301)。
次に、デジタルカメラ100は、ユーザーによるシャッターボタン60の押下操作に応答する。すなわち、シャッタースイッチ61(SW1)及びシャッタースイッチ62(SW2)がONとなって撮影開始指示がある場合(S302:Yes)は、撮影処理を開始する(S303)。
撮影処理(S303)では、焦点制御部41や露光制御部40を用いて、AF(オートフォーカス)処理、AE(自動露出)処理を行ったうえで、撮像素子13からA/D変換機15を介して出力される画像信号をメモリ25に保存する。この時、同時に震度センサ75で計測した深度値も画像信号とともにメモリ25に保存する。さらに、メモリ25に保存した画像信号に対して、ユーザーの設定に合わせて、画像処理部20に含まれる圧縮処理でJPEG形式やMPEG-4 HEVC形式で圧縮した画像データを作成する。
次に、メモリ25に保存された画像信号に対して、画像処理部20により被写体検出処理を行い、画像に含まれる被写体の検出情報を取得する(S304)。
次に、メモリ25に保存された画像信号に対して、画像処理部20により被写体検出処理を行い、画像に含まれる被写体の検出情報を取得する(S304)。
次に、メモリ25に保存された画像信号に対して、推論エンジン73を用いて被写体推論処理を行う。メモリ25に保存された画像信号データとS304で取得した被写体検出情報から画像データ内に含まれる被写体領域を特定し、被写体領域に含まれる被写体の分類結果を出力する(S305)。推論時に、推論結果以外に推論途中の動作上のデバッグ所法、ログなど推論処理に関連する情報を出力しても構わない。
次に、S303で計測された深度値、S304で取得した被写体検出情報、S305で取得した推論結果を入力に、計算部76において被写体の高さ、長さ、広さなどを計測する(S306)。なお、計測の際は共通単位で数値を算出する。
次に、デジタルカメラ100は、ユーザーによるシャッターボタン60の押下操作に応答する。すなわち、シャッタースイッチ61(SW1)及びシャッタースイッチ62(SW2)がONとなって撮影指示が継続されている場合(S307:No)は、撮影処理を開始する(S303)。その後、シャッタースイッチ62(SW2)がOFFとなって撮影指示が継続されていない場合(S307:Yes)は、撮影処理を終了する(S201終了)。
次に、S304で取得した被写体検出情報、S306で取得した被写体計測情報、S301で取得した業界/分野情報に基づき、判断部77にて業界用アノテーション情報に記録する単位を判断し、単位に合わせて被写体計測結果の数値を変換する(S202)。その際、標準アノテーションの記録用に共通単位での数値も保持する。なお、もしS301でユーザーが業界/分野情報を設定しなかった場合は、標準アノテーション情報の記録用に共通単位での数値のみ保持する。
次に、メモリ25に保存された画像信号データと、S202で算出された標準アノテーション情報と業界用アノテーション情報のそれぞれの数値および単位を、外部記録媒体91に記録する(S203)。ここで記録される画像ファイルは、図4に示すような形式で記録される。
本実施形態で記録される画像サイズファイル400は、少なくとも以下の4領域から構成される。すなわち、Exif規格に従ったメタデータを記憶する領域401、圧縮された画像データを記録する画像データ領域408、アノテーション情報を記録する標準アノテーション情報409、業界用アノテーション情報410である。業界用アノテーション情報410は、業界ごとに必ず1つアノテーション情報が存在する。画像ファイル400は、例えば、ユーザーからJPEG形式での記録が指示されていれば、S303で作成された画像データをJPEG形式で画像データ領域408に記録し、Exifデータ401はAPP1マーカーなどに記録されている。また、標準アノテーション情報409や業界用アノテーション情報410はAPP1マーカーなどに記録されている。また、ユーザーからHEIF(High Efficiency Image File Format)形式での記録が指示された場合、HEIFファイル形式で記録される。そして、Exifデータ401やアノテーション情報410は、MetaデータBoxなどに記録される。また、RAW形式での記録が指示された場合も同様に、Exifデータ401や標準アノテーション情報409や業界用アノテーション情報410は、MetaデータBoxなどの所定の領域に記録される。
被写体検出情報(S304で取得)は、メタデータ生成・解析部70を用いて、Exifデータ401に含まれる製造メーカー固有のメタデータが原則非公開の形式で記載できるMarkerNote405内に記録される。また、S305で取得した推論結果である被写体の分類結果と、推論モデル記録部72で保持している現在の推論モデルの管理バージョンやデバッグ情報などがあれば、それらを推論モデル管理情報407としてMerkerNote405内に記録する。
推論結果(S305で取得)は、標準アノテーション情報409や業界用アノテーション情報410に記録される。標準アノテーション情報409や業界用アノテーション情報410は、アノテーションリンク情報格納タグ402内の標準アノテーション情報link403や業界用アノテーション情報link404で示す位置に記録される。本実施例では、アノテーション情報はXMLやJSONなどのテキスト形式で記載することを想定している。
本実施形態で記録された画像サイズファイル400は、図5(a)~(d)のように表示される。画像データ領域408にて保存されたJPEG形式の画像データは、和室の画像500と洋室の画像503のように表示される。標準アノテーション情報409は図5(a)の501または図5(c)の504のように、内部に保持した被写体情報とその被写体の計測情報を標準単位(今回の例はm2)で表示される。業界用アノテーション情報410は、図5(b)の502または図5(d)の505のように内部に保持した被写体情報とその被写体の計測情報を業界用単位(今回の例は、和室は畳、洋室はm2)で表示される。表示するアノテーション情報はS301のユーザー操作によって決定する。これにより、業界用アノテーション情報に記録される被写体の数値とその単位が業界に合った適切なものとなる。なお、図5(a)~(d)のような表示形式はあくまで一例であり、表示場所や表示方法はこれに限定しない。
次に、図6を用いて、本実施形態における記録されたアノテーション情報を修正する時の処理について説明する。
図6はユーザーがアノテーション情報を修正するフローチャートの一例である。
デジタルカメラ100は、図5(a)や(b)のような再生画面においてユーザーによる操作部63に応答し、ユーザーが選択した座標に被写体がある場合(S601:Yes)は、既に設定済の業界/分野情報を確認する(S602)。
S601で選択された座標情報に該当する被写体検出情報とS602で取得した業界/分野情報をもとに、画像ファイル400に保存されている該当の業界のアノテーション情報内の被写体情報(数値および単位)を表示する(S603)。例えば、S602で取得した業界/分野情報が標準アノテーション情報の場合、標準アノテーション情報409の被写体情報を共通単位と数値で表示する。また、S602で取得した業界/分野情報が業界用アノテーション情報の場合、業界用アノテーション情報410の被写体情報を業界単位と数値で表示する。
次に、ユーザーによる操作部63に応答し、ユーザーによる数値の修正が完了した場合(S604:Yes)、表示中でない他方のアノテーション情報の数値を、該当のアノテーション情報に保存されている単位に合わせて数値変換を行う。例えば、標準アノテーション情報409が表示されており、ユーザーによって被写体Aの数値情報が修正された時、業界用アノテーション情報410の被写体Aの数値情報が業界単位に合わせて修正される。また、業界用アノテーション情報が複数ある場合は、すべての業界用アノテーション情報に対して同様の処理が実行される。これにより、アノテーション情報の修正時に単位変換とそれに伴う数値変換の手間を省ける。なお、図6の処理順序はこれに限定しない。
以上、本発明の好ましい実施例について説明したが、本発明はこれらの実施例に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。
(その他の実施例)
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
Claims (9)
- 画像から被写体を検出する検出手段と、
画像から広さや長さを共通単位で計測する計測手段と、
業界の分野を選択する選択手段と、
前記検出手段から出力された被写体情報と、
計測手段から出力された計測結果と、選択手段で選択された業界に関する情報とをまとめて、数値と単位を決定する判断手段と、
前記の判断手段から出力された数値および単位と、計測結果と、業界に関する情報とをまとめてアノテーション情報に記録する記録手段と、を有し、
標準アノテーション情報には共通単位と数値を記録し、業界用のアノテーション情報には業界に応じた単位と数値を記録する記録装置。 - 記録された画像の被写体に紐づけられた標準アノテーション情報と業界用アノテーション情報を表示することを特徴とする請求項1に記載の記録装置。
- ユーザーが業界用のアノテーション情報として記録をする際に被写体を判別して、適した単位を表示することを特徴とする請求項1に記載の記録装置。
- ユーザーが標準アノテーション情報または業界用アノテーション情報の数値を修正した際に、他方のアノテーション情報にて使用している単位に合わせて数値変換して、他方のアノテーション情報に記録することを特徴とする請求項1に記載の記録装置。
- 記録装置の制御方法であって、
画像から被写体を検出する検出ステップと、
画像から広さや長さを共通単位で計測する計測ステップと、
業界の分野を選択する選択ステップと、
前記検出ステップで検出された被写体に関する被写体情報と、計測手段から出力された計測結果と、選択手段で選択された業界に関する情報とをまとめて、数値と単位を決定する判断ステップと、
前記の判断ステップで出力された数値および単位と、計測結果と、業界に関する情報とをまとめてアノテーション情報に記録する記録ステップと、を有し、
標準アノテーション情報には共通単位と数値を記録し、業界用のアノテーション情報には業界に応じた単位と数値を記録する記録装置の制御方法。 - 記録された画像の被写体に紐づけられた標準アノテーション情報と業界用アノテーション情報を表示することを特徴とする請求項5に記載の記録装置の制御方法。
- ユーザーが業界用のアノテーション情報として記録をする際に被写体を判別して、適した単位を表示することを特徴とする請求項1に記載の記録装置の制御方法。
- ユーザーが標準アノテーション情報または業界用アノテーション情報の数値を修正した際に、他方のアノテーション情報にて使用している単位に合わせて数値変換して、他方のアノテーション情報に記録することを特徴とする請求項1に記載の記録装置の制御方法。
- コンピュータを請求項1乃至5のいずれか1項に記載の記録装置の各手段として機能させるための、コンピュータが読み取り可能なプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022094525A JP2023180871A (ja) | 2022-06-10 | 2022-06-10 | 記録装置、記録装置の制御方法、プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022094525A JP2023180871A (ja) | 2022-06-10 | 2022-06-10 | 記録装置、記録装置の制御方法、プログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2023180871A true JP2023180871A (ja) | 2023-12-21 |
Family
ID=89307059
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022094525A Pending JP2023180871A (ja) | 2022-06-10 | 2022-06-10 | 記録装置、記録装置の制御方法、プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2023180871A (ja) |
-
2022
- 2022-06-10 JP JP2022094525A patent/JP2023180871A/ja active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5164327B2 (ja) | 撮影装置及びプログラム | |
CN101325658B (zh) | 成像设备和成像方法 | |
US9251765B2 (en) | Image processing device, image processing method, and program for generating composite image | |
CN101573971B (zh) | 图像记录装置和图像记录方法 | |
JP2011198251A (ja) | 検査情報処理装置、方法およびプログラム | |
CN105282429A (zh) | 摄像装置和摄像装置的控制方法 | |
JP4692849B2 (ja) | 立体画像記録装置および立体画像記録方法 | |
CN103533216A (zh) | 摄影装置以及图像处理方法 | |
CN104956657A (zh) | 摄像装置、图像处理方法、图像处理程序和记录介质 | |
JP6141137B2 (ja) | 遠隔操作装置およびその制御方法、撮像装置およびその制御方法、システム、並びにプログラム | |
CN103685928A (zh) | 图像处理装置以及图像处理方法 | |
JP5131367B2 (ja) | 撮影装置及びプログラム | |
JP6178590B2 (ja) | 画像処理装置及び画像処理方法、プログラム、並びに記憶媒体 | |
JP6049425B2 (ja) | 撮像装置、画像処理装置、及び制御方法 | |
JP2012160950A (ja) | 画像処理装置、撮像装置および表示装置 | |
JP2023180871A (ja) | 記録装置、記録装置の制御方法、プログラム | |
JP4887840B2 (ja) | 撮影装置及びプログラム | |
US20230196508A1 (en) | Image processing apparatus, image capturing apparatus, image processing method, and storage medium | |
JP2023118057A (ja) | 画像処置装置及び画像処理方法、撮像装置、プログラム、記憶媒体 | |
CN113615156A (zh) | 图像处理设备、图像处理方法、计算机程序和存储介质 | |
JP2023174104A (ja) | 画像処理装置、画像処理装置の制御方法、及びプログラム | |
US20230260299A1 (en) | Image processing apparatus, image processing method, image capturing apparatus, and storage medium | |
JP2024012965A (ja) | 画像処理装置及びその制御方法並びにプログラム | |
US20230196708A1 (en) | Image processing apparatus and method for controlling the same, and non-transitory computer-readable storage medium | |
JP2023173960A (ja) | 画像処理装置、画像処理装置の制御方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20231213 |