JP2011135380A - Image capturing apparatus, image sharing method, and image sharing program - Google Patents

Image capturing apparatus, image sharing method, and image sharing program Download PDF

Info

Publication number
JP2011135380A
JP2011135380A JP2009293477A JP2009293477A JP2011135380A JP 2011135380 A JP2011135380 A JP 2011135380A JP 2009293477 A JP2009293477 A JP 2009293477A JP 2009293477 A JP2009293477 A JP 2009293477A JP 2011135380 A JP2011135380 A JP 2011135380A
Authority
JP
Japan
Prior art keywords
feature amount
information
imaging
imaging device
angle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2009293477A
Other languages
Japanese (ja)
Inventor
Takeshi Matsuo
壮 松尾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung R&D Institute Japan Co Ltd
Original Assignee
Samsung Yokohama Research Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Yokohama Research Institute filed Critical Samsung Yokohama Research Institute
Priority to JP2009293477A priority Critical patent/JP2011135380A/en
Publication of JP2011135380A publication Critical patent/JP2011135380A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Studio Devices (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To share image data of the same objective irrespective of compatibility of feature value extracted from image data among a plurality of image capturing apparatuses permitting transmission and reception of data. <P>SOLUTION: The image capturing apparatus includes a communicator for transmitting and receiving data to and from the other image capturing apparatuses, an imaging angle decision information measuring means for measuring imaging position, direction, and angle of the imager and recording these measuring data to a storing means as the imaging angle decision information, a feature value extractor for extracting feature value from the image data obtained with the imager and recording this feature value into the storing means as the feature value information, and a compatibility determining means for determining compatibility of imaging angle decision information and feature value information with the other image capturing apparatuses communicatable by the communicator and storing the result of decision for compatibility information to the storing means as the compatibility information together with the identification information of the other image capturing apparatus. When an image of the desired objective has been picked up with the imager, the communicator transmits any of the imaging angle decision information, feature value information, and image data to the other image capturing apparatus that is now in the condition for making communication. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、撮像装置、画像共有方法および画像共有プログラムに関する。   The present invention relates to an imaging apparatus, an image sharing method, and an image sharing program.

ある被写体を撮影する場合、撮影者は必ずしも撮影に適した位置から被写体を撮影できるとは限らない。例えば、ある被写体を複数の撮影者が同時に撮影する場合、撮影者の位置によっては、所望するような撮影画像を得ることができないといった状況が想定される。このような場合でも、撮像装置間で画像データを共有することにより、撮影に適した位置で撮影を行えなかった撮像装置にも、より撮影に適した位置で撮影された画像データを共有させることが可能な技術が、例えば特許文献1に開示されている。   When photographing a certain subject, the photographer cannot always photograph the subject from a position suitable for photographing. For example, when a plurality of photographers photograph a certain subject at the same time, a situation may be assumed in which a desired photographed image cannot be obtained depending on the position of the photographer. Even in such a case, by sharing the image data between the imaging devices, the imaging device that has not been able to shoot at a position suitable for shooting can also share the image data captured at a more suitable position for shooting. For example, Japanese Patent Application Laid-Open No. H10-228707 discloses a technique that can perform the above-described process.

特許文献1に記載された技術は、撮像装置間で画像データから抽出した特徴量を送受信し、自己機器が撮影している被写体の特徴量と比較することにより、同一の特徴量を有する画像データを保存するという技術である。これにより、他の撮像装置で撮影された画像データから抽出された特徴量が、自己の撮像装置で撮影している被写体の特徴量と一致する場合のみ、他の撮像装置で撮影された画像データを保存することができる。その結果、他の撮像装置で撮影された同一被写体の画像を撮像装置換で共有することができるという特徴がある。   The technique described in Patent Document 1 transmits and receives feature amounts extracted from image data between imaging devices, and compares them with feature amounts of a subject photographed by the self device, thereby obtaining image data having the same feature amount. Is a technology to save. As a result, only when the feature amount extracted from the image data captured by the other imaging device matches the feature amount of the subject captured by the own imaging device, the image data captured by the other imaging device. Can be saved. As a result, an image of the same subject photographed by another imaging device can be shared by the imaging device.

特開2009−094574号公報JP 2009-094574 A

しかし、上記特許文献1の技術を利用する場合、画像データの特徴量を送受信して特徴量の比較により被写体の同一性を判断する必要がある。したがって、他の撮像装置と自己の撮像装置との間で、特徴量のデータ形式が互換性を有していることが大前提となる。近年のデジタルカメラの技術進歩や、画像解析技術の向上により、撮像装置に備えられる特徴量抽出機能は、撮像装置間で大きく異なっていることが想定される。また、特徴量の抽出方法や特徴量のデータ形式等は、撮像装置の製造メーカやグレード等に応じて様々であり、必ずしも撮像装置間で互換性を有しているとは限らない。したがって、上記特許文献1の技術では、特徴量のデータ形式に互換性がない場合、撮像装置間での画像共有を実現できないといった問題がある。   However, when using the technique disclosed in Patent Document 1, it is necessary to determine the identity of a subject by transmitting and receiving feature amounts of image data and comparing the feature amounts. Therefore, it is a major premise that the data format of the feature amount is compatible between the other imaging device and the own imaging device. Due to recent technological advances in digital cameras and improvements in image analysis technology, it is assumed that the feature quantity extraction functions provided in the imaging devices are greatly different between the imaging devices. Further, the feature quantity extraction method, the feature quantity data format, and the like vary depending on the manufacturer and grade of the imaging apparatus, and the imaging apparatuses are not necessarily compatible. Therefore, the technique disclosed in Patent Document 1 has a problem in that image sharing between imaging devices cannot be realized if the data format of the feature amount is not compatible.

また、同一の被写体を撮影しているからといって必ずしも画像データから抽出した特徴量が一致するとは限らない。例えば、ある1の被写体を前から撮影した画像と、後ろから撮影した画像とでは、特徴量が大きく異なる可能性もある。すなわち、撮影アングルの違いにより、同一の被写体でも特徴量が大きく異なるため、特徴量のみに基づいて被写体の同一性を判断することは難しいという問題もある。   Also, just because the same subject is photographed, the feature values extracted from the image data do not always match. For example, there is a possibility that the feature amount differs greatly between an image obtained by photographing a certain subject from the front and an image obtained from the rear. That is, there is a problem in that it is difficult to determine the identity of a subject based only on the feature amount because the feature amount varies greatly even for the same subject due to a difference in shooting angle.

このような問題点に対し、上記特許文献1の技術では、1の撮像装置がある被写体を複数の撮影位置から撮影し、これらの画像の特徴量を同一の被写体と定義することにより、複数の撮像装置間で上記撮影アングルの違いによる問題点を解消しようとしている。例えば、ある1台の撮像装置により同一被写体を前後左右から撮影し、これらの撮影画像から抽出した特徴量が同一の被写体であると定義することにより、様々なアングルで撮影している複数の撮像装置間で特徴量に基づく被写体の同一性を判断している。しかし、必ずしも1の撮像装置で同一被写体を複数の撮影位置から撮影できるとは限らない。これは撮影者が多くなればなるほど困難であり、撮影者が多い場合でも画像データの共有を可能とするという本来の目的を達成することができないという問題がある。   With respect to such a problem, in the technique of the above-mentioned Patent Document 1, a subject with one imaging device is photographed from a plurality of photographing positions, and a feature amount of these images is defined as the same subject. We are trying to solve the problem caused by the difference in shooting angle between imaging devices. For example, a single imaging device captures the same subject from the front, back, left, and right, and defines that the feature amount extracted from these captured images is the same subject, so that a plurality of images captured at various angles are captured. The identity of the subject based on the feature amount is determined between the devices. However, it is not always possible to photograph the same subject from a plurality of photographing positions with one imaging device. This is more difficult as the number of photographers increases, and there is a problem that the original purpose of enabling image data sharing cannot be achieved even when there are many photographers.

そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、データを送受信可能な複数の撮像装置間において、画像データから抽出される特徴量の互換性の有無に関わらず、同一被写体の画像データを共有することが可能な、新規かつ改良された撮像装置、画像共有方法および画像共有プログラムを提供することにある。   Therefore, the present invention has been made in view of the above problems, and an object of the present invention is to provide compatibility of feature amounts extracted from image data between a plurality of imaging devices capable of transmitting and receiving data. It is an object of the present invention to provide a new and improved imaging device, image sharing method, and image sharing program that can share image data of the same subject regardless of presence or absence.

上記課題を解決するために、本発明のある観点によれば、所定の被写体を撮像する撮像部と、ネットワークを介して他の撮像装置と所定のデータを送受信する通信部と、前記撮像部による撮像位置、撮像方向および画角を計測し画角判断情報として記憶部に記録する画角判断情報計測部と、前記撮像部により撮像される画像データから特徴量を抽出し特徴量情報として前記記憶部に記録する特徴量抽出部と、前記通信部により通信可能な少なくとも1以上の他の撮像装置との前記画角判断情報および前記特徴量情報に関する互換性を判断し、該他の撮像装置の識別情報とともに互換性の判断結果を互換性情報として前記記憶部に記録する互換性判断部と、を備え、前記撮像部により所定の被写体が撮像された場合、前記互換性情報に基づいて、前記画角判断情報、前記特徴量情報、または前記撮像部により撮像された画像データのいずれかを前記通信部が現在通信可能な他の撮像装置へ送信することを特徴とする撮像装置が提供される。   In order to solve the above problems, according to an aspect of the present invention, an imaging unit that images a predetermined subject, a communication unit that transmits and receives predetermined data to and from another imaging device via a network, and the imaging unit An angle-of-view determination information measuring unit that measures an imaging position, an imaging direction, and an angle of view and records the angle as image angle determination information in a storage unit; and a feature amount extracted from image data captured by the imaging unit and stored as feature amount information Determining the compatibility of the angle-of-view determination information and the feature amount information between the feature amount extraction unit to be recorded in the unit and at least one or more other imaging devices communicable by the communication unit, A compatibility determination unit that records the determination result of compatibility together with the identification information in the storage unit as compatibility information, and when a predetermined subject is imaged by the imaging unit, based on the compatibility information An imaging device is provided, wherein the communication unit transmits any of the angle-of-view determination information, the feature amount information, or image data captured by the imaging unit to another imaging device with which the communication unit can currently communicate. The

係る構成により、撮像装置は、撮像部により、所定の被写体を撮像することができる。また、撮像装置は、通信部により、ネットワークを介して他の撮像装置と所定のデータを送受信することができる。また、撮像装置は、画角判断情報計測部により、撮像部の撮像位置、撮像方向および画角を計測し画角判断情報として記憶部に記録することができる。また、撮像装置は、特徴量抽出部により、撮像部によって撮像される画像データから特徴量を抽出し特徴量情報として記憶部に記録することができる。また、撮像装置は、互換性判断部により、通信部により通信可能な少なくとも1以上の他の撮像装置との画角判断情報および特徴量情報に関する互換性を判断し、該他の撮像装置の識別情報とともに互換性の判断結果を互換性情報として記憶部に記録することができる。また、撮像装置は、撮像部により所定の被写体が撮像された場合、互換性情報に基づいて、画角判断情報、特徴量情報、または撮像部により撮像された画像データのいずれかを通信部が現在通信可能な他の撮像装置へ送信することができる。この結果、撮像装置は、データを送受信可能な複数の他の撮像装置へ、画像データから抽出される特徴量の互換性の有無に関わらず、同一被写体の画像データを提供することが可能となる。   With this configuration, the imaging apparatus can capture an image of a predetermined subject using the imaging unit. In addition, the imaging device can transmit and receive predetermined data to and from other imaging devices via the network by the communication unit. In addition, the imaging apparatus can measure the imaging position, imaging direction, and angle of view of the imaging unit by the angle-of-view determination information measurement unit, and record them in the storage unit as angle-of-view determination information. In addition, the imaging apparatus can extract the feature amount from the image data captured by the imaging unit and record the feature amount information in the storage unit by the feature amount extraction unit. In addition, the imaging device determines compatibility with respect to angle-of-view determination information and feature amount information with at least one or more other imaging devices communicable by the communication unit by the compatibility determination unit, and identifies the other imaging device. The compatibility determination result together with the information can be recorded in the storage unit as compatibility information. In the imaging device, when a predetermined subject is imaged by the imaging unit, the communication unit transmits any of the angle-of-view determination information, the feature amount information, or the image data captured by the imaging unit based on the compatibility information. It can be transmitted to other imaging devices that are currently communicable. As a result, the imaging apparatus can provide image data of the same subject to a plurality of other imaging apparatuses capable of transmitting and receiving data regardless of the compatibility of feature amounts extracted from the image data. .

また、前記通信部は、前記撮像部により所定の被写体が撮像された場合、前記互換性情報に基づいて、該通信部が現在通信可能な他の撮像装置との前記画角判断情報および前記特徴量情報に関する互換性の有無を判断してもよい。前記画角判断情報および前記特徴量情報のいずれにも互換性がない第1の互換性パターンの場合、前記撮像部により撮像された画像データを該他の撮像装置へ送信してもよい。前記画角判断情報の互換性はあるが前記特徴量情報の互換性がない第2の互換性パターンの場合、前記画角判断情報計測部により計測された前記画角判断情報を該他の撮像装置へ送信してもよい。前記画角判断情報および前記特徴量情報のいずれにも互換性がある第3の互換性パターン場合、前記画角判断情報計測部により計測された前記画角判断情報を該他の撮像装置へ送信してもよい。前記画角判断情報の互換性はないが前記特徴量情報の互換性がある第4の互換性パターンの場合、前記特徴量抽出部により前記画像データから抽出された前記特徴量情報を該他の撮像装置へ送信してもよい。   In addition, when the predetermined subject is imaged by the imaging unit, the communication unit, based on the compatibility information, the angle-of-view determination information with the other imaging device with which the communication unit can currently communicate, and the feature It may be determined whether or not there is compatibility regarding the quantity information. In the case of the first compatibility pattern in which neither the angle-of-view determination information nor the feature amount information is compatible, the image data captured by the imaging unit may be transmitted to the other imaging device. In the case of the second compatibility pattern in which the angle-of-view determination information is compatible but the feature amount information is not compatible, the angle-of-view determination information measured by the angle-of-view determination information measurement unit is used for the other imaging. You may transmit to an apparatus. In the case of the third compatibility pattern in which both the angle of view determination information and the feature amount information are compatible, the angle of view determination information measured by the angle of view determination information measuring unit is transmitted to the other imaging device. May be. In the case of the fourth compatibility pattern in which the angle of view determination information is not compatible but the feature amount information is compatible, the feature amount information extracted from the image data by the feature amount extraction unit You may transmit to an imaging device.

また、複数の撮像装置の前記互換性情報を比較することにより、該複数の撮像装置が同一の撮像エリアを撮像対象としているか否かを判断する画角判断部と、複数の画像データから抽出された前記特徴量情報を比較することにより、該複数の画像データに同一の被写体が存在するか否かを判断する特徴量判断部と、をさらに備えてもよい。この場合、前記通信部により他の撮像装置から所定のデータを受信した場合、前記画角判断部および前記特徴量判断部の判断結果に応じて該他の撮像装置で撮像された画像データを前記記憶部に記録してもよい。   Further, by comparing the compatibility information of a plurality of imaging devices, an angle of view determination unit that determines whether or not the plurality of imaging devices target the same imaging area, and extracted from the plurality of image data. The image processing apparatus may further include a feature amount determination unit that determines whether the same subject exists in the plurality of image data by comparing the feature amount information. In this case, when the predetermined data is received from the other imaging device by the communication unit, the image data captured by the other imaging device according to the determination results of the angle of view determination unit and the feature amount determination unit is You may record in a memory | storage part.

また、前記第1の互換性パターンの他の撮像装置から画像データを受信した場合、前記特徴量抽出部は、該他の撮像装置から受信した画像データから特徴量情報を抽出し、前記特徴量判断部は、前記特徴量抽出部により自己の撮像装置の画像データから抽出された特徴量情報と、該他の撮像装置から受信した画像データから抽出された前記特徴量情報とを比較して同一被写体が撮像されているか否かを判断し、同一被写体が撮像されていると判断された場合にのみ、前記記憶部に該他の撮像装置から受信した画像データを記録してもよい。   Further, when image data is received from another imaging device of the first compatibility pattern, the feature amount extraction unit extracts feature amount information from the image data received from the other imaging device, and the feature amount The determination unit compares the feature amount information extracted from the image data of its own imaging device by the feature amount extraction unit with the feature amount information extracted from the image data received from the other imaging device. It may be determined whether or not a subject has been imaged, and image data received from the other imaging device may be recorded in the storage unit only when it is determined that the same subject has been imaged.

また、前記第2の互換性パターンの他の撮像装置から画角判断情報を受信した場合、前記画角判断部は、前記画角判断情報計測部により計測された自己の撮像装置の画角判断情報と、該他の撮像装置から受信した前記画角判断情報とを比較して撮像対象エリアが同一か否かを判断し、撮像対象エリアが同一である場合にのみ、該他の撮像装置へ画像データの送信を要求し、前記画像データの送信要求に応じて該他の撮像装置から画像データを受信した場合、前記特徴量抽出部は、該他の撮像装置から受信した画像データから特徴量情報を抽出し、前記特徴量判断部は、前記特徴量抽出部により自己の撮像装置の画像データから抽出された特徴量情報と、該他の撮像装置から受信した画像データから抽出された前記特徴量情報とを比較して同一被写体が撮像されているか否かを判断し、同一被写体が撮像されていると判断された場合にのみ、前記記憶部に該他の撮像装置から受信した画像データを記録してもよい。   Further, when the angle-of-view determination information is received from another imaging device of the second compatibility pattern, the angle-of-view determination unit determines the angle of view of its own imaging device measured by the angle-of-view determination information measurement unit. The information and the angle-of-view determination information received from the other imaging device are compared to determine whether or not the imaging target area is the same, and only when the imaging target area is the same, to the other imaging device When requesting transmission of image data and receiving image data from the other imaging device in response to the transmission request of the image data, the feature amount extraction unit extracts a feature amount from the image data received from the other imaging device. Information is extracted, and the feature amount determination unit extracts the feature amount information extracted from the image data of its own imaging device by the feature amount extraction unit and the feature data extracted from the image data received from the other imaging device. Compared with quantity information Utsushitai it is determined whether being imaged, the same object only if it is determined to have been captured, the image data received from the other imaging device in the storage unit may be recorded.

また、前記第3の互換性パターンの他の撮像装置から画角判断情報を受信した場合、前記画角判断部は、前記画角判断情報計測部により計測された自己の撮像装置の画角判断情報と、該他の撮像装置から受信した前記画角判断情報とを比較して撮像対象エリアが同一か否かを判断し、撮像対象エリアが同一である場合にのみ、該他の撮像装置へ特徴量情報の送信を要求し、前記特徴量情報の送信要求に応じて該他の撮像装置から特徴量情報を受信した場合、前記特徴量判断部は、前記特徴量抽出部により自己の撮像装置の画像データから抽出された特徴量情報と、該他の撮像装置から受信した前記特徴量情報とを比較して同一被写体が撮像されているか否かを判断し、同一被写体が撮像されていると判断された場合にのみ、該他の撮像装置へ画像データの送信を要求し、前記画像データの送信要求に応じて該他の撮像装置から画像データを受信した場合、該画像データを前記記憶部に記録してもよい。   In addition, when the angle of view determination information is received from another imaging device of the third compatibility pattern, the angle of view determination unit determines the angle of view of its own imaging device measured by the angle of view determination information measurement unit. The information and the angle-of-view determination information received from the other imaging device are compared to determine whether or not the imaging target area is the same, and only when the imaging target area is the same, to the other imaging device When the feature amount information is requested to be transmitted and the feature amount information is received from the other imaging device in response to the feature amount information transmission request, the feature amount determination unit uses the feature amount extraction unit to detect the feature amount information. If the same subject is imaged by comparing the feature amount information extracted from the image data of the image and the feature amount information received from the other imaging device to determine whether or not the same subject is imaged. Only when it is judged, to the other imaging device Requesting transmission of the image data, when receiving the image data from the other image pickup apparatus in response to the transmission request of the image data, it may be recording the image data in the storage unit.

また、前記第4の互換性パターンの他の撮像装置から特徴量情報を受信した場合、前記特徴量判断部は、前記特徴量抽出部により自己の撮像装置の画像データから抽出された特徴量情報と、該他の撮像装置から受信した前記特徴量情報とを比較して同一被写体が撮像されているか否かを判断し、同一被写体が撮像されていると判断された場合にのみ、該他の撮像装置へ画像データの送信を要求し、前記画像データの送信要求に応じて該他の撮像装置から画像データを受信した場合、該画像データを前記記憶部に記録してもよい。   When the feature amount information is received from another imaging device of the fourth compatibility pattern, the feature amount determination unit extracts the feature amount information extracted from the image data of the own imaging device by the feature amount extraction unit. Are compared with the feature amount information received from the other imaging device to determine whether or not the same subject is being imaged, and only when it is determined that the same subject is being imaged When the image data transmission is requested to the image capturing apparatus and the image data is received from the other image capturing apparatus in response to the image data transmission request, the image data may be recorded in the storage unit.

また、前記画角判断情報に基づいて前記特徴量情報を補正する特徴量補正部をさらに備えてもよい。この場合、前記第2の互換性パターンの他の撮像装置から画像データを受信した場合、前記特徴量補正部は、前記画角判断情報計測部により計測された自己の撮像装置の前記画角判断情報と、該他の撮像装置から受信した前記画角判断情報とに基づいて、前記特徴量抽出部により自己の撮像装置の画像データから抽出された前記特徴量情報および該他の撮像装置から受信した画像データから抽出された前記特徴量情報のいずれか一方または両方を補正し、前記特徴量判断部は、前記特徴量補正部によって補正された前記特徴量情報に基づいて被写体の同一性を判断してもよい。   In addition, a feature amount correction unit that corrects the feature amount information based on the angle of view determination information may be further provided. In this case, when image data is received from another imaging device of the second compatibility pattern, the feature amount correction unit determines the angle of view of its own imaging device measured by the angle of view determination information measurement unit. Based on the information and the angle-of-view determination information received from the other imaging device, the feature amount information extracted from the image data of the own imaging device by the feature amount extraction unit and received from the other imaging device One or both of the feature amount information extracted from the image data obtained is corrected, and the feature amount determination unit determines the identity of the subject based on the feature amount information corrected by the feature amount correction unit. May be.

また、前記第3の互換性パターンの他の撮像装置から特徴量情報を受信した場合、前記特徴量補正部は、前記画角判断情報計測部により計測された自己の撮像装置の前記画角判断情報と、該他の撮像装置から受信した前記画角判断情報とに基づいて、前記特徴量抽出部により自己の撮像装置の画像データから抽出された特徴量情報および該他の撮像装置から受信した特徴量情報のいずれか一方または両方を補正し、前記特徴量判断部は、前記特徴量補正部によって補正された前記特徴量情報に基づいて被写体の同一性を判断してもよい。   In addition, when the feature amount information is received from another imaging device of the third compatibility pattern, the feature amount correction unit determines the angle of view of its own imaging device measured by the angle of view determination information measurement unit. Based on the information and the angle-of-view determination information received from the other imaging device, the feature amount information extracted from the image data of the own imaging device by the feature amount extraction unit and received from the other imaging device Either or both of the feature amount information may be corrected, and the feature amount determination unit may determine the identity of the subject based on the feature amount information corrected by the feature amount correction unit.

また、前記特徴量判断部により同一被写体でないと判断された2つの特徴量情報を、ユーザからの指示に応じて、該2つの特徴量情報が同一被写体または非同一被写体から抽出された特徴量であると定義する被写体同一性情報を前記記憶部に記録する被写体同一性設定部をさらに備え、前記特徴量判断部は、前記被写体同一性情報に基づいて被写体の同一性を判断してもよい。   Further, the two feature amount information determined by the feature amount determination unit as not being the same subject is the feature amount extracted from the same subject or the non-identical subject according to the instruction from the user. The image processing apparatus may further include a subject identity setting unit that records subject identity information defined as being in the storage unit, and the feature amount determination unit may determine subject identity based on the subject identity information.

また、前記通信部は、通信可能な他の1以上の撮像装置を検出した場合、自己の撮像装置の識別番号と、前記画角判断情報計測部により計測される画角判断情報のフォーマット情報と、前記特徴量抽出部により抽出される特徴量情報のフォーマット情報とを、該他の撮像装置へ送信してもよい。   In addition, when the communication unit detects one or more other imaging devices that can communicate with each other, the identification number of the imaging device of itself and the format information of the angle-of-view determination information measured by the angle-of-view determination information measurement unit, The format information of the feature amount information extracted by the feature amount extraction unit may be transmitted to the other imaging device.

また、上記課題を解決するために、本発明の別の観点によれば、撮像部により所定の被写体を撮像する撮像ステップと、前記撮像部による撮像位置、撮像方向および画角を計測し画角判断情報として記憶部に記録する画角判断情報計測ステップと、前記撮像部によって撮像される画像データから特徴量を抽出し特徴量情報として前記記憶部に記録する特徴量抽出ステップと、通信部により通信可能な少なくとも1以上の他の撮像装置との前記画角判断情報および前記特徴量情報に関する互換性を判断する互換性判断ステップと、前記互換性判断ステップによる判断結果に基づいて、前記画角判断情報、前記特徴量情報、または前記撮像ステップにより撮像された画像データのいずれかを前記通信部が現在通信可能な他の撮像装置へ送信する画像データ送信ステップと、を含む画像データ共有方法が提供される。   In order to solve the above problem, according to another aspect of the present invention, an imaging step of imaging a predetermined subject by an imaging unit, an imaging position, an imaging direction, and an angle of view by the imaging unit are measured and an angle of view is measured. An angle-of-view determination information measurement step recorded in the storage unit as determination information, a feature amount extraction step for extracting a feature amount from image data captured by the imaging unit and recording it as feature amount information in the storage unit, and a communication unit A compatibility determination step for determining compatibility with respect to at least one or more other imaging devices capable of communication and compatibility with respect to the feature amount information, and based on a determination result of the compatibility determination step, the angle of view An image in which any one of the judgment information, the feature amount information, or the image data captured in the imaging step is transmitted to another imaging device with which the communication unit can currently communicate. A data transmission step, the image data sharing method comprising is provided.

また、上記課題を解決するために、本発明の別の観点によれば、撮像部により所定の被写体を撮像する撮像ステップと、前記撮像部による撮像位置、撮像方向および画角を計測し画角判断情報として記憶部に記録する画角判断情報計測ステップと、前記撮像部によって撮像される画像データから特徴量を抽出し特徴量情報として前記記憶部に記録する特徴量抽出ステップと、通信部により通信可能な少なくとも1以上の他の撮像装置との前記画角判断情報および前記特徴量情報に関する互換性を判断する互換性判断ステップと、前記互換性判断ステップによる判断結果に基づいて、前記画角判断情報、前記特徴量情報、または前記撮像ステップにより撮像された画像データのいずれかを前記通信部が現在通信可能な他の撮像装置へ送信する画像データ送信ステップと、をコンピュータに実行させる画像データ共有プログラムが提供される。   In order to solve the above problem, according to another aspect of the present invention, an imaging step of imaging a predetermined subject by an imaging unit, an imaging position, an imaging direction, and an angle of view by the imaging unit are measured and an angle of view is measured. An angle-of-view determination information measurement step recorded in the storage unit as determination information, a feature amount extraction step for extracting a feature amount from image data captured by the imaging unit and recording it as feature amount information in the storage unit, and a communication unit A compatibility determination step for determining compatibility with respect to at least one or more other imaging devices capable of communication and compatibility with respect to the feature amount information, and based on a determination result of the compatibility determination step, the angle of view An image in which any one of the judgment information, the feature amount information, or the image data captured in the imaging step is transmitted to another imaging device with which the communication unit can currently communicate. Image data sharing program for executing a data transmission step, to the computer is provided.

以上説明したように本発明によれば、データを送受信可能な複数の撮像装置間において、画像データから抽出される特徴量の互換性の有無に関わらず、同一被写体の画像データを共有することが可能である。   As described above, according to the present invention, image data of the same subject can be shared between a plurality of imaging devices capable of transmitting and receiving data regardless of the compatibility of feature amounts extracted from image data. Is possible.

本発明の第1実施形態に係る撮像装置100の機能構成の一例を示すブロック図である。1 is a block diagram illustrating an example of a functional configuration of an imaging apparatus 100 according to a first embodiment of the present invention. 同実施形態において、撮像装置100が他の通信可能な撮像装置を検出した際の処理の流れの一例を示すフロー図である。FIG. 10 is a flowchart illustrating an example of a processing flow when the imaging apparatus 100 detects another communicable imaging apparatus in the embodiment. 同実施形態において、記憶部112に記録される互換性情報のデータベースの一例を示す説明図である。4 is an explanatory diagram illustrating an example of a database of compatibility information recorded in a storage unit 112 in the embodiment. FIG. 同実施形態において、撮像装置100が画像データを撮像した際の処理の流れの一例を示すフロー図である。FIG. 3 is a flowchart illustrating an example of a processing flow when the imaging apparatus 100 captures image data in the embodiment. 同実施形態において、撮像装置100が他の通信可能な撮像装置から所定のデータを受信した際の処理の流れの一例を示すフロー図である。FIG. 6 is a flowchart illustrating an example of a processing flow when the imaging apparatus 100 receives predetermined data from another communicable imaging apparatus in the embodiment. 同実施形態において、撮像装置100が互換性パターン1の他の撮像装置から画像データを受信した際の処理の流れの一例を示すフロー図である。4 is a flowchart illustrating an example of a processing flow when the imaging apparatus 100 receives image data from another imaging apparatus of the compatibility pattern 1 in the embodiment. FIG. 同実施形態において、撮像装置100が互換性パターン2の他の撮像装置から画角判断情報を受信した際の処理の流れの一例を示すフロー図である。5 is a flowchart illustrating an example of a processing flow when the imaging apparatus 100 receives angle of view determination information from another imaging apparatus of the compatibility pattern 2 in the embodiment. FIG. 同実施形態において、撮像装置100が互換性パターン3の他の撮像装置から画角判断情報を受信した際の処理の流れの一例を示すフロー図である。5 is a flowchart illustrating an example of a processing flow when the imaging apparatus 100 receives angle of view determination information from another imaging apparatus of the compatibility pattern 3 in the embodiment. FIG. 同実施形態において、撮像装置100が互換性パターン4の他の撮像装置から特徴量情報を受信した際の処理の流れの一例を示すフロー図である。4 is a flowchart illustrating an example of a processing flow when the imaging apparatus 100 receives feature amount information from another imaging apparatus of the compatibility pattern 4 in the embodiment. FIG. 本発明の第2実施形態に係る撮像装置400の機能構成の一例を示すブロック図である。It is a block diagram which shows an example of a function structure of the imaging device 400 which concerns on 2nd Embodiment of this invention. 同実施形態において、被写体同一性判断処理の概念を示す説明図である。4 is an explanatory diagram illustrating a concept of subject identity determination processing in the embodiment. FIG. 同実施形態において、撮像装置400が互換性パターン1の他の撮像装置から画像データを受信した際の処理の流れの一例を示すフロー図である。4 is a flowchart illustrating an example of a processing flow when the imaging apparatus 400 receives image data from another imaging apparatus of the compatibility pattern 1 in the embodiment. FIG. 同実施形態において、撮像装置400が互換性パターン2の他の撮像装置から画角判断情報を受信した際の処理の流れの一例を示すフロー図である。5 is a flowchart illustrating an example of a processing flow when the imaging apparatus 400 receives angle of view determination information from another imaging apparatus of the compatibility pattern 2 in the embodiment. FIG. 同実施形態において、撮像装置400が互換性パターン3の他の撮像装置から画角判断情報を受信した際の処理の流れの一例を示すフロー図である。FIG. 10 is a flowchart showing an example of a processing flow when the imaging apparatus 400 receives angle of view determination information from another imaging apparatus of the compatibility pattern 3 in the same embodiment. 同実施形態において、撮像装置400が互換性パターン4の他の撮像装置から特徴量情報を受信した際の処理の流れの一例を示すフロー図である。4 is a flowchart illustrating an example of a processing flow when the imaging apparatus 400 receives feature amount information from another imaging apparatus of the compatibility pattern 4 in the embodiment. FIG. 本発明の第3実施形態に係る撮像装置600の機能構成の一例を示すブロック図である。It is a block diagram which shows an example of a function structure of the imaging device 600 which concerns on 3rd Embodiment of this invention. 同実施形態において、特徴量の補正処理の概念を示す説明図である。FIG. 6 is an explanatory diagram showing a concept of feature amount correction processing in the embodiment. 同実施形態において、撮像装置600が互換性パターン2の他の撮像装置から画角判断情報を受信した際の処理の流れの一例を示すフロー図である。6 is a flowchart illustrating an example of a processing flow when the imaging apparatus 600 receives angle-of-view determination information from another imaging apparatus of the compatibility pattern 2 in the embodiment. FIG. 同実施形態において、撮像装置600が互換性パターン3の他の撮像装置から画角判断情報を受信した際の処理の流れの一例を示すフロー図である。FIG. 10 is a flowchart showing an example of a processing flow when the imaging apparatus 600 receives angle-of-view determination information from another imaging apparatus of the compatibility pattern 3 in the embodiment. 同一の被写体を複数の撮像装置で撮像する概念を示す説明図である。It is explanatory drawing which shows the concept which images the same to-be-photographed object with several imaging device.

以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。   Exemplary embodiments of the present invention will be described below in detail with reference to the accompanying drawings. In addition, in this specification and drawing, about the component which has the substantially same function structure, duplication description is abbreviate | omitted by attaching | subjecting the same code | symbol.

本発明の実施形態に係る撮像装置の各種実施形態を以下の順序で説明する。
1.本発明の概略
2.第1実施形態に係る撮像装置100
2−1.撮像装置100の機能構成
2−2.撮像装置100による処理の流れ
2−2−1.通信可能な他の撮像装置を検出した際の処理の流れ
2−2−2.画像データを撮像した際の処理の流れ
2−2−3.通信可能な他の撮像装置からデータを受信した際の流れ
3.第2実施形態に係る撮像装置400
3−1.撮像装置400の機能構成
3−2.撮像装置400による処理の流れ
4.第3実施形態に係る撮像装置600
4−1.撮像装置600の機能構成
4−2.撮像装置600による処理の流れ
5.まとめ
Various embodiments of an imaging apparatus according to embodiments of the present invention will be described in the following order.
1. 1. Outline of the present invention Imaging device 100 according to the first embodiment
2-1. Functional configuration of imaging apparatus 100 2-2. Flow of processing by imaging apparatus 100 2-2-1. Flow of processing when another imaging device capable of communication is detected 2-2-2. Flow of processing when image data is captured 2-2-3. 2. Flow when data is received from another communicable imaging device Imaging device 400 according to the second embodiment
3-1. Functional configuration of imaging apparatus 400 3-2. 3. Flow of processing by imaging apparatus 400 Imaging device 600 according to the third embodiment
4-1. Functional configuration of imaging apparatus 600 4-2. 4. Flow of processing by imaging apparatus 600 Summary

(1.本発明の概略)
まず、本発明の概略について、従来技術と比較しながら説明する。上述したように、ある被写体を複数の撮影者が複数の撮像装置により撮影する場合、撮影位置に応じて撮影される被写体の画像は異なる。また、撮影者は必ずしも撮影に適した位置から被写体を撮影できるとは限らないため、所望するような被写体の画像データを得ることができない場合もある。このような問題点について、図20を例に以下説明する。
(1. Outline of the present invention)
First, the outline of the present invention will be described in comparison with the prior art. As described above, when a plurality of photographers photograph a certain subject using a plurality of imaging devices, the images of the subject that are photographed differ depending on the photographing position. In addition, since the photographer cannot always photograph the subject from a position suitable for photographing, there are cases where the desired image data of the subject cannot be obtained. Such a problem will be described below with reference to FIG.

図20は、同一の被写体20を複数の撮影者が撮影している概念を示す説明図である。図20の例では、複数の撮影者が、撮像装置10、11、12、13、15、16、17、18および19の9台で同一の被写体20を撮影している。また、撮像装置14のみが別の被写体30を撮影している。   FIG. 20 is an explanatory diagram showing a concept in which a plurality of photographers are photographing the same subject 20. In the example of FIG. 20, a plurality of photographers photograph the same subject 20 with nine imaging devices 10, 11, 12, 13, 15, 16, 17, 18 and 19. In addition, only the imaging device 14 captures another subject 30.

図20の例では、一般的に撮像装置10は被写体20を撮影するのに適した位置だが、例えば、撮像装置18や19等は被写体20を撮影するのに適した位置とはいえない。このような場合、撮像装置18や19の撮影者は所望する被写体20の画像データを取得することができなくなってしまうという問題がある。   In the example of FIG. 20, the imaging device 10 is generally a position suitable for photographing the subject 20, but for example, the imaging devices 18, 19, etc. are not suitable positions for photographing the subject 20. In such a case, there is a problem that the photographer of the imaging device 18 or 19 cannot acquire the desired image data of the subject 20.

ここで、上述した特許文献1に記載された技術を利用することにより、このような問題を解決することもできる。特許文献1に記載された技術では、例えば、撮像装置10で撮影した画像データから被写体20の特徴量を抽出し、撮像装置18へ送信する。それを受けて撮像装置18は、受信した特徴量と自己の撮像装置18で撮影した被写体20の特徴量とを比較し、一致する場合には、撮像装置10で撮影した画像データを取得して保存する。これにより、撮像装置18の撮影者も被写体20を撮影するのに適した位置から撮影された画像データを取得することができる。   Here, such a problem can also be solved by using the technique described in Patent Document 1 described above. In the technique described in Patent Literature 1, for example, the feature amount of the subject 20 is extracted from image data captured by the imaging device 10 and transmitted to the imaging device 18. In response to this, the imaging device 18 compares the received feature quantity with the feature quantity of the subject 20 photographed by the imaging apparatus 18 of its own, and if they match, acquires the image data photographed by the imaging apparatus 10. save. Thereby, the photographer of the imaging device 18 can also acquire the image data photographed from a position suitable for photographing the subject 20.

このように、特徴量の一致を条件として画像データを共有保存することにより、不必要な画像データを共有しなくてもよいというメリットがある。例えば、図20の例では、別の被写体30を撮影している撮像装置14から受信した特徴量は大きく異なるため、撮像装置18は撮像装置14で撮影された被写体30の画像データを保存しなくてもよい。   In this way, there is an advantage that unnecessary image data need not be shared by sharing and saving image data on condition that the feature amounts match. For example, in the example of FIG. 20, the feature amounts received from the imaging device 14 that is capturing another subject 30 are significantly different, so the imaging device 18 does not store the image data of the subject 30 captured by the imaging device 14. May be.

しかしながら、特許文献1に記載された技術は、複数の撮像装置間において、画像データから抽出する特徴量の互換性があることが大前提となるという問題がある。例えば、図20に示す例では、撮像装置18は、撮像装置10で撮影された特徴量を受信しても、自己の撮像装置18が備える特徴量抽出機能により画像データから抽出した特徴量と互換性がない場合、受信した特徴量との比較を行うことができない。   However, the technique described in Patent Document 1 has a problem that it is a major premise that there is compatibility of feature amounts extracted from image data among a plurality of imaging devices. For example, in the example illustrated in FIG. 20, the imaging device 18 is compatible with the feature amount extracted from the image data by the feature amount extraction function included in the imaging device 18 even if the feature amount captured by the imaging device 10 is received. If there is no match, the received feature value cannot be compared.

近年のデジタルカメラの技術進歩や、画像解析技術の向上により、撮像装置に備えられる特徴量抽出機能は、撮像装置間で大きく異なっていることが想定される。また、特徴量の抽出方法や特徴量のデータ形式等は、撮像装置の製造メーカやグレード等に応じて様々であり、必ずしも撮像装置間で互換性を有しているとは限らない。したがって、上記特許文献1の技術では、特徴量に関するデータ形式に互換性がない場合、撮像装置間での画像共有を実現できないといった問題がある。図20に示す例でも、撮像装置10〜19のすべての撮像装置間において、特徴量に関するデータ形式の互換性があることは現実的ではない。   Due to recent technological advances in digital cameras and improvements in image analysis technology, it is assumed that the feature quantity extraction functions provided in the imaging devices are greatly different between the imaging devices. Further, the feature quantity extraction method, the feature quantity data format, and the like vary depending on the manufacturer and grade of the imaging apparatus, and the imaging apparatuses are not necessarily compatible. Therefore, the technique disclosed in Patent Document 1 has a problem in that image sharing between imaging devices cannot be realized if the data format related to the feature amount is not compatible. Also in the example illustrated in FIG. 20, it is not realistic that all of the imaging devices 10 to 19 have compatibility in data format regarding the feature amount.

また、同一の被写体を撮影しているからといって必ずしも画像データから抽出した特徴量が一致するとは限らない。図20の例では、被写体20を正面から撮影している撮像装置10によって撮影された画像の特徴量は、斜めから撮影している撮像装置17によって撮影された画像の特徴量と大きく異なる可能性もある。すなわち、同一の被写体20を撮影した画像データから抽出した特徴量であっても、撮影アングルの違いにより特徴量が大きく異なるため、特徴量のみに基づいて被写体20の同一性を判断すると被写体の同一性判断の精度が悪くなるという問題もある。   Also, just because the same subject is photographed, the feature values extracted from the image data do not always match. In the example of FIG. 20, the feature amount of the image captured by the imaging device 10 capturing the subject 20 from the front may be significantly different from the feature amount of the image captured by the imaging device 17 capturing from an oblique direction. There is also. That is, even if the feature amount is extracted from the image data obtained by photographing the same subject 20, the feature amount is greatly different due to the difference in the photographing angle. There is also a problem that the accuracy of sex determination is degraded.

このような問題点に対し、特許文献1の技術では、1の撮像装置がある被写体を複数の撮影位置から撮影し、これらの画像の特徴量を同一の被写体と定義することにより、複数の撮像装置間で上記撮影アングルの違いによる問題点を解消しようとしている。図20に示す例では、撮像装置10が被写体20を様々なアングルであらかじめ撮影し、これらの撮影画像から抽出した特徴量をすべて同一の被写体20であると定義しておく。この定義情報を利用することにより、撮像装置17で撮影された被写体20の画像データの特徴量と、現在の撮像装置10の位置から撮影された被写体20の画像データの特徴量とが異なる場合であっても、同一の被写体20を撮影している画像であると判断することができる。   With respect to such a problem, the technique of Patent Document 1 captures a plurality of imaging by photographing a subject with one imaging device from a plurality of photographing positions and defining the feature amount of these images as the same subject. We are trying to solve the problem caused by the difference in shooting angle between devices. In the example illustrated in FIG. 20, the imaging apparatus 10 captures the subject 20 in advance at various angles, and the feature amounts extracted from these captured images are all defined as the same subject 20. By using this definition information, the feature amount of the image data of the subject 20 photographed by the imaging device 17 and the feature amount of the image data of the subject 20 photographed from the current position of the imaging device 10 are different. Even if it exists, it can be determined that the images are the same subject 20 photographed.

しかし、必ずしも1の撮像装置で同一被写体を複数の撮影位置から撮影できるとは限らない。これは撮影者が多くなればなるほど困難であり、撮影者が多い場合にも画像共有を可能とするという本来の目的を達成することができないという問題がある。図20の例では、撮像装置10を有する撮影者は、被写体20の正面のみならず、左右背後といった様々なアングルであらかじめ被写体20を撮影し、これらの画像データから抽出した特徴量が同一被写体であることを設定しなければならない。図20に示す例を見ても、撮像装置10の撮影者がそのような撮影・設定をあらかじめ行うことは現実的ではない。   However, it is not always possible to photograph the same subject from a plurality of photographing positions with one imaging device. This is more difficult as the number of photographers increases, and there is a problem that the original purpose of enabling image sharing even when there are many photographers cannot be achieved. In the example of FIG. 20, a photographer who has the imaging device 10 captures the subject 20 in advance at various angles such as not only the front of the subject 20 but also the left and right sides, and the feature amounts extracted from these image data are the same subject. Must be set to be. Even if the example shown in FIG. 20 is seen, it is not realistic that the photographer of the imaging apparatus 10 performs such shooting / setting in advance.

本発明の実施形態に係る撮像装置は、このような問題点を解決することができ、データを送受信可能な複数の撮像装置間において、画像データから抽出可能な特徴量の互換性の有無に関わらず、同一被写体の画像データを提供・共有することが可能である。   The imaging apparatus according to the embodiment of the present invention can solve such a problem, regardless of whether or not the feature amounts that can be extracted from the image data are compatible among a plurality of imaging apparatuses capable of transmitting and receiving data. It is possible to provide and share image data of the same subject.

具体的には、本発明の実施形態に係る撮像装置は、通信可能な他の撮像装置を初めて検出した場合、撮像装置の識別情報、撮像装置の撮像位置・撮像方向・画角に関する情報(以下、画角判断情報という)のフォーマット情報、特徴量情報のフォーマット情報等を送受信する。これらの情報を受信した撮像装置は、自己の撮像装置との画角判断情報および特徴量情報に関する互換性の有無を確認し、撮像装置の識別情報と共に互換性情報として保存する。   Specifically, when an imaging apparatus according to an embodiment of the present invention detects another imaging apparatus that can communicate for the first time, the identification information of the imaging apparatus, information about the imaging position, imaging direction, and angle of view of the imaging apparatus (hereinafter referred to as the imaging apparatus) Format information), format information of feature amount information, and the like. The image capturing apparatus that has received these pieces of information checks whether or not there is compatibility regarding the angle of view determination information and the feature amount information with the image capturing apparatus of its own, and stores the compatibility information together with the identification information of the image capturing apparatus.

ここで、画角判断情報および特徴量情報の互換性の有無のパターンは4つに分類される。1つ目は、画角判断情報および特徴量情報のいずれにも互換性がない互換性パターン1である。また、2つ目は、画角判断情報には互換性があるが特徴量情報には互換性がない互換性パターン2である。また、3つ目は、画角判断情報および特徴量情報のいずれにも互換性がある互換性パターン4である。また、4つ目は、画角判断情報には互換性がないが特徴量情報には互換性がある互換性パターン4である。本実施形態に係る撮像装置は、これらの4つの互換性パターンに応じて、送信するデータを変化させたり、受信したデータの処理を変化させたりすることにより、他の撮像装置で撮像された同一被写体の画像データを適切に共有することを特徴の1つとしている。   Here, the compatibility patterns of the angle-of-view determination information and the feature amount information are classified into four patterns. The first is a compatibility pattern 1 in which neither the angle of view determination information nor the feature amount information is compatible. The second is a compatibility pattern 2 in which the view angle determination information is compatible but the feature amount information is not compatible. The third is a compatibility pattern 4 in which both the angle-of-view determination information and the feature amount information are compatible. The fourth is a compatibility pattern 4 in which the angle of view determination information is not compatible but the feature amount information is compatible. The imaging device according to the present embodiment changes the data to be transmitted or changes the processing of the received data according to these four compatibility patterns, so that the same imaged by another imaging device is obtained. One of the features is that the image data of the subject is appropriately shared.

具体的には、所定の被写体を撮像した場合、現在通信可能な他の撮像装置との互換性パターンに応じて、画角判断情報、特徴量情報または画像データのいずれかを送信する。また、これらのデータを受信した撮像装置は、送信元の撮像装置との互換性パターンに応じて被写体の同一性判断処理を変化させる。このように互換性パターンに応じて送信処理や被写体の同一性判断処理を変化させることにより、特徴量情報の互換性を有していない撮像装置間でもより適切な画像データの共有を実現することができる。   Specifically, when a predetermined subject is imaged, any one of angle-of-view determination information, feature amount information, or image data is transmitted according to a compatibility pattern with another imaging device that can currently communicate. In addition, the imaging apparatus that has received these data changes the subject identity determination process according to the compatibility pattern with the transmission source imaging apparatus. As described above, by changing the transmission process and the subject identity determination process according to the compatibility pattern, it is possible to more appropriately share image data even between imaging apparatuses that do not have compatibility of feature amount information. Can do.

また、本実施形態に係る撮像装置は、特徴量情報のみならず撮像位置・撮像方向・画角に関する情報を含む画角判断情報も撮像装置間で送受信する。画角判断情報を受信した撮像装置は、自己の撮像装置の画角判断情報と比較することにより、送信元の撮像装置と自己の撮像装置との撮像アングル等の位置関係を認識することができる。したがって、例えば、両者の位置関係に基づいて、送信元の撮像装置で撮影された画像データの特徴量情報や自己の撮像装置の撮像対象の特徴量情報を補正した上で特徴量比較することにより、より正確に被写体の同一性を判断することができる。この結果、同一被写体を異なるアングルで撮像している撮像装置間においても、より正確な同一被写体の画像データの共有を実現することができる。   In addition, the imaging apparatus according to the present embodiment transmits and receives not only feature amount information but also angle-of-view determination information including information on the imaging position, imaging direction, and angle of view between the imaging apparatuses. The imaging device that has received the angle-of-view determination information can recognize the positional relationship such as the imaging angle between the transmission source imaging device and the imaging device of its own by comparing with the angle-of-view determination information of its own imaging device. . Therefore, for example, based on the positional relationship between the two, by correcting the feature amount information of the image data captured by the transmission source imaging device or the feature amount information of the imaging target of the own imaging device, and comparing the feature amount Thus, the identity of the subject can be determined more accurately. As a result, it is possible to realize more accurate sharing of image data of the same subject even between imaging devices that capture the same subject at different angles.

以上説明したような特徴を有する本発明の各種実施形態に係る撮像装置について以下に詳細に説明する。   The imaging apparatus according to various embodiments of the present invention having the characteristics as described above will be described in detail below.

(2.第1実施形態に係る撮像装置100)
(2−1.撮像装置100の機能構成)
まず、本発明の第1実施形態に係る撮像装置100の機能構成について説明する。図1は、第1実施形態に係る撮像装置100の機能構成の一例を示すブロック図である。
(2. Imaging device 100 according to the first embodiment)
(2-1. Functional Configuration of Imaging Device 100)
First, the functional configuration of the imaging apparatus 100 according to the first embodiment of the present invention will be described. FIG. 1 is a block diagram illustrating an example of a functional configuration of the imaging apparatus 100 according to the first embodiment.

図1に示すように、撮像装置100は主に、操作入力部102と、表示制御部104と、撮像部106と、特徴量抽出部108と、画角判断情報計測部110と、通信部112と、互換性判断部114と、画角判断部116と、特徴量判断部118と、記憶部120と、制御部122とを含んで構成される。なお、図1に示した機能構成は、本実施形態を説明する上での一例であり、撮像、通信、情報処理等に必要とされる各種機能部を追加的に備えることも当然に可能である。以下、撮像装置100を構成するこれらの機能構成部の詳細について説明する。   As shown in FIG. 1, the imaging apparatus 100 mainly includes an operation input unit 102, a display control unit 104, an imaging unit 106, a feature amount extraction unit 108, an angle-of-view determination information measurement unit 110, and a communication unit 112. A compatibility determination unit 114, an angle of view determination unit 116, a feature amount determination unit 118, a storage unit 120, and a control unit 122. Note that the functional configuration shown in FIG. 1 is an example for describing the present embodiment, and it is naturally possible to additionally include various functional units required for imaging, communication, information processing, and the like. is there. Hereinafter, details of these functional components constituting the imaging device 100 will be described.

(操作入力部102)
操作入力部102は、例えば、タッチパネル、ボタン、スイッチ、レバー、ダイヤルなどの操作部を含んで構成される。ユーザは、これらの操作部を操作することにより、撮像装置100に対して処理動作(モード変更、アスペクト比設定、画質調整、撮像動作、ズーム・フォーカス・絞り・シャッタースピード変更、再生動作など)を指示することができる。操作入力部102は、操作部を介してユーザから受け付けた指示情報を制御部122へ伝送する。これを受けて、制御部122は、操作入力部102から伝送された指示情報に基づいて、撮像装置100が備える各機能構成部を制御し、ユーザが所望する各種機能を実行する。
(Operation input unit 102)
The operation input unit 102 includes, for example, operation units such as a touch panel, buttons, switches, levers, and dials. By operating these operation units, the user performs processing operations (mode change, aspect ratio setting, image quality adjustment, image capturing operation, zoom / focus / aperture / shutter speed change, playback operation, etc.) on the image capturing apparatus 100. Can be directed. The operation input unit 102 transmits instruction information received from the user via the operation unit to the control unit 122. In response to this, the control unit 122 controls each functional component included in the imaging apparatus 100 based on the instruction information transmitted from the operation input unit 102, and executes various functions desired by the user.

(表示制御部104)
表示制御部104は、例えば、撮像装置100上に備えられるLCD(Liquid Crystal Display;液晶ディスプレイ)や有機EL(ElectroLuminescence display)ディスプレイなどからなる表示装置(以下、ディスプレイという)の表示を制御する。表示制御部104は、操作入力部102から入力されたユーザの指示や、ROM(Read Only Memory)などに格納されている設定情報などに基づく制御部122からの指示に応じてディスプレイへの表示を制御する。表示制御部104は、例えば、メニュー画面表示、詳細設定画面表示、画像編集画面表示、撮像画面表示、メッセージ表示など、ディスプレイへの種々の表示を制御する。
(Display control unit 104)
The display control unit 104 controls the display of a display device (hereinafter referred to as a display) such as an LCD (Liquid Crystal Display) or an organic EL (ElectroLuminescence display) display provided on the imaging device 100, for example. The display control unit 104 displays on the display in accordance with a user instruction input from the operation input unit 102 or an instruction from the control unit 122 based on setting information stored in a ROM (Read Only Memory) or the like. Control. The display control unit 104 controls various displays on the display, such as menu screen display, detailed setting screen display, image editing screen display, imaging screen display, and message display.

例えば、ユーザが操作入力部102を介してメニュー画面の表示を指示した場合、表示制御部104は、所定のメニュー画面をディスプレイに表示させる。この結果、ユーザは、ディスプレイに表示されたメニュー画面を見ながら、初期設定、撮像モードの選択、画質設定、画像サイズ設定、アスペクト比設定、表示設定、画像編集などの種々の設定に関する操作を行うことができる。このようなユーザの操作に応じて、表示制御部104は、ディスプレイに表示させるメニュー画面を適宜変更する。   For example, when the user instructs display of the menu screen via the operation input unit 102, the display control unit 104 displays a predetermined menu screen on the display. As a result, the user performs operations related to various settings such as initial settings, imaging mode selection, image quality settings, image size settings, aspect ratio settings, display settings, and image editing while viewing the menu screen displayed on the display. be able to. In response to such user operation, the display control unit 104 appropriately changes the menu screen to be displayed on the display.

(撮像部106)
撮像部106は、被写体を撮像して画像信号を生成する。撮像部106は、被写体からの入射光を光学像として集光させるレンズ群などからなる光学系、当該光学系により撮像面に集光された光学像を光電変換する撮像素子、およびこれらの駆動機構などからなる。撮像部106は、例えば、カメラ制御部(図示せず)などを備え、制御部122からの指示に基づいて、撮像部106の各部の動作を制御する。例えば、撮像時には、操作入力部102に対するユーザ操作に応じて、適切なズーム、フォーカス等で被写体が撮像されるように、撮像部106の駆動機構を制御して、ズームレンズ、フォーカスレンズなどを駆動させる。
(Imaging unit 106)
The imaging unit 106 images a subject and generates an image signal. The imaging unit 106 includes an optical system including a lens group that collects incident light from a subject as an optical image, an imaging element that photoelectrically converts an optical image collected on an imaging surface by the optical system, and a driving mechanism thereof. Etc. The imaging unit 106 includes, for example, a camera control unit (not shown) and the like, and controls the operation of each unit of the imaging unit 106 based on an instruction from the control unit 122. For example, during imaging, the drive mechanism of the imaging unit 106 is controlled to drive the zoom lens, focus lens, and the like so that the subject is imaged with appropriate zoom, focus, and the like according to a user operation on the operation input unit 102. Let

撮像レンズは、例えば、被写体を結像するためのものであり、ズーム機能を実現するためのズームレンズや、被写体に合焦させるためのフォーカスレンズなどから構成される。撮像素子は、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)などから構成される。撮像素子は、撮像レンズにより結像された被写体像を電気信号に変換して、アナログの画像データを生成する。その後、撮像素子から出力された画像データは、ゲイン調整やA/D(Analogue/Digital)変換等の所定の処理が施された後、後述する記憶部120に記録される。   The imaging lens is for imaging a subject, for example, and includes a zoom lens for realizing a zoom function, a focus lens for focusing on the subject, and the like. The imaging device is configured by a CCD (Charge Coupled Device), a CMOS (Complementary Metal Oxide Semiconductor), or the like. The imaging element converts the subject image formed by the imaging lens into an electrical signal and generates analog image data. Thereafter, the image data output from the image sensor is subjected to predetermined processing such as gain adjustment and A / D (Analogue / Digital) conversion, and then recorded in the storage unit 120 described later.

(特徴量抽出部108)
特徴量抽出部108は、撮像部106によって撮像された画像データや記憶部120に記憶されている画像データから被写体の特徴量を抽出する。特徴量抽出部108は、例えば、ハイパスフィルタ等を用いて被写体の高コントラスト部(エッジ部)を抽出することにより被写体の形状を特定したり、色の分布、表面の模様(テクスチャ構造)等を抽出したりする。また、特徴量抽出部108は、例えば、テンプレート画像の比較による顔検出機能等により画像データに写っている被写体の顔情報等を抽出してもよい。
(Feature Extraction Unit 108)
The feature amount extraction unit 108 extracts the feature amount of the subject from the image data captured by the imaging unit 106 and the image data stored in the storage unit 120. The feature quantity extraction unit 108 specifies the shape of the subject by extracting a high contrast portion (edge portion) of the subject using a high-pass filter or the like, and determines the color distribution, surface pattern (texture structure), and the like. Or extract. In addition, the feature amount extraction unit 108 may extract face information of a subject in the image data, for example, by a face detection function based on comparison of template images.

近年のデジタルカメラ等の撮像装置では、顔検出や被写体特定に関する種々の機能が搭載され、製造メーカやグレードに応じて様々である。したがって、撮像装置間で特徴量の抽出方法が異なったり、抽出される特徴量のデータ形式が異なったりしていることが多い。   2. Description of the Related Art Recent imaging devices such as digital cameras are equipped with various functions relating to face detection and subject identification, and vary depending on the manufacturer and grade. Therefore, there are many cases in which the feature amount extraction method differs between the imaging devices, and the data format of the extracted feature amount is different.

ここで、本実施形態に係る撮像装置100が備える特徴量抽出方法は特定の技術に限定されるものではない。むしろ、他の撮像装置に備えられる特徴量抽出方法と異なっていたり、他の撮像装置で抽出された特徴量のデータ形式と異なっていたりする場合でも、画像データの提供・共有を実現することができることが本実施形態に係る撮像装置100の特徴の1つである。   Here, the feature amount extraction method included in the imaging apparatus 100 according to the present embodiment is not limited to a specific technique. Rather, it is possible to realize provision and sharing of image data even when the feature amount extraction method is different from that of other imaging devices or when the feature amount data format extracted by other imaging devices is different. One of the features of the imaging apparatus 100 according to the present embodiment is that it can be performed.

特徴量抽出部108によって抽出された特徴量は、所定のデータ形式に変換された後、後述する記憶部120に記録される。なお、上述したように、特徴量抽出部108によって抽出された特徴量のデータ形式は特定の形式に限定されるものではない。   The feature amount extracted by the feature amount extraction unit 108 is converted into a predetermined data format and then recorded in the storage unit 120 described later. As described above, the data format of the feature quantity extracted by the feature quantity extraction unit 108 is not limited to a specific format.

(画角判断情報計測部110)
画角判断情報計測部110は、撮像装置100の現在の画角判断情報を計測する。ここで、「画角判断情報」とは、撮像装置100の現在の位置、撮像方向、画角(視野角)に関する情報を含むデータである。画角判断情報計測部110は、例えば、GPS(Global Positioning System)機能を搭載することにより、撮像装置100の緯度、経度、標高等を取得して位置情報を計測することができる。また、画角判断情報計測部110は、例えば、電子コンパス等により撮像部106の光学系の光軸の方向を取得して撮像方向に関する情報を計測することができる。また、画角判断情報計測部110は、例えば、撮像部106の光学センサの種類、レンズの焦点距離、フレームサイズ等に基づいて、撮像装置100の現在の画角を計測することができる。なお、本発明は画角判断情報の抽出技術に関するものではないため、画角判断情報計測部110による画角判断情報の計測方法は特定の方法に限定されるものではなく、種々の方法により撮像装置100の位置、撮像方向、画角を計測してもよい。
(View angle determination information measurement unit 110)
The angle-of-view determination information measurement unit 110 measures current angle-of-view determination information of the imaging apparatus 100. Here, the “viewing angle determination information” is data including information on the current position of the imaging apparatus 100, the imaging direction, and the viewing angle (viewing angle). The angle-of-view determination information measuring unit 110 can measure the position information by acquiring the latitude, longitude, altitude, and the like of the imaging apparatus 100 by mounting a GPS (Global Positioning System) function, for example. In addition, the angle-of-view determination information measurement unit 110 can measure the information regarding the imaging direction by acquiring the direction of the optical axis of the optical system of the imaging unit 106 using, for example, an electronic compass. Further, the angle-of-view determination information measurement unit 110 can measure the current angle of view of the imaging apparatus 100 based on, for example, the type of the optical sensor of the imaging unit 106, the focal length of the lens, the frame size, and the like. Note that, since the present invention is not related to a technique for extracting angle-of-view determination information, the method of measuring angle-of-view determination information by the angle-of-view determination information measurement unit 110 is not limited to a specific method, and imaging is performed by various methods. The position, imaging direction, and angle of view of the apparatus 100 may be measured.

画角判断情報計測部110によって計測された画角判断情報は、所定のデータ形式に変換された後、後述する記憶部120に記録される。なお、上述したように、画角判断情報計測部110によって計測された画角判断情報のデータ形式は特定の形式に限定されるものではない。   The angle-of-view determination information measured by the angle-of-view determination information measurement unit 110 is converted into a predetermined data format and then recorded in the storage unit 120 described later. As described above, the data format of the angle-of-view determination information measured by the angle-of-view determination information measurement unit 110 is not limited to a specific format.

(通信部112)
通信部112は、例えば無線LAN(Local Area Network)等のネットワークを介して他の撮像装置と所定のデータの送受信を行う。例えば、図1に示した例では、撮像装置100は、他の通信可能な撮像装置50、60および70と通信部112により、画角判断情報、特徴量情報および画像データ等の各種データの送受信を行う。
(Communication unit 112)
The communication unit 112 transmits / receives predetermined data to / from other imaging devices via a network such as a wireless LAN (Local Area Network). For example, in the example illustrated in FIG. 1, the imaging apparatus 100 transmits and receives various types of data such as angle-of-view determination information, feature amount information, and image data using the other imaging apparatuses 50, 60, and 70 that can communicate with the communication unit 112. I do.

通信部112は、制御部122からの指示に応じて、撮像部106によって撮像された画像データや、特徴量抽出部108によって抽出された特徴量情報や、画角判断情報計測部110によって計測された画角判断情報や、撮像装置100の識別情報等を他の撮像装置へ送信する。また、撮像装置100は、通信部112により他の撮像装置から同様に画像データ、特徴量情報、画角判断情報および撮像装置の識別情報等を取得する。なお、通信部112による各種データの送受信の流れの詳細については、後述する処理フローにおいて説明する。   The communication unit 112 is measured by the image data captured by the imaging unit 106, the feature amount information extracted by the feature amount extraction unit 108, and the angle-of-view determination information measurement unit 110 in accordance with an instruction from the control unit 122. The angle-of-view determination information, the identification information of the imaging device 100, and the like are transmitted to another imaging device. In addition, the image capturing apparatus 100 acquires image data, feature amount information, angle of view determination information, identification information of the image capturing apparatus, and the like from other image capturing apparatuses through the communication unit 112. Note that details of the flow of transmission and reception of various data by the communication unit 112 will be described in a processing flow described later.

(互換性判断部114)
互換性判断部114は、他の撮像装置から受信した各種データが自己の撮像装置100のデータ形式と互換性を有しているか否かを判断する。具体的には、互換性判断部114は、他の撮像装置から受信した特徴量情報のデータ形式が、自己の撮像装置100の特徴量抽出部108によって抽出される特徴量のデータ形式と互換性を有しているか否かを判断する。また、互換性判断部114は、他の撮像装置から受信した画角判断情報のデータ形式が、自己の撮像装置100の画角判断情報計測部110によって計測される画角判断情報のデータ形式と一致しているか否かを判断する。
(Compatibility determination unit 114)
The compatibility determination unit 114 determines whether or not various types of data received from other imaging devices are compatible with the data format of its own imaging device 100. Specifically, the compatibility determination unit 114 is compatible with the data format of the feature amount extracted by the feature amount extraction unit 108 of its own imaging device 100 so that the data format of the feature amount information received from the other imaging device is compatible. It is determined whether or not it has. In addition, the compatibility determination unit 114 determines that the data format of the angle-of-view determination information received from another imaging device is the data format of the angle-of-view determination information measured by the angle-of-view determination information measurement unit 110 of its own imaging device 100. Determine whether they match.

また、互換性判断部114は、他の撮像装置との画角判断情報および特徴量情報に関する互換性の有無を、該撮像装置の識別情報とともに互換性情報として後述する記憶部120に記録する。これにより撮像装置100は、他の通信可能な撮像装置との間の特徴量情報および画角判断情報の互換性に関する情報をデータベースとして蓄積することができる。なお、互換性判断部114による特徴量情報および画角判断情報の互換性判断処理の流れの詳細については、図2の処理フローを参照に後述する。   In addition, the compatibility determination unit 114 records the presence / absence of compatibility with respect to the angle of view determination information and the feature amount information with other imaging devices in the storage unit 120 described later as compatibility information together with the identification information of the imaging device. Thereby, the imaging device 100 can accumulate | store the information regarding the compatibility of the feature-value information and angle-of-view judgment information between other imaging devices which can communicate as a database. Details of the compatibility determination processing flow of the feature amount information and the angle-of-view determination information by the compatibility determination unit 114 will be described later with reference to the processing flow of FIG.

(画角判断部116)
画角判断部116は、画角判断情報に基づいて、他の撮像装置と自己の撮像装置100が同一エリアを撮像対象としているか否かを判断する。画角判断部116は、通信部112により取得した他の撮像装置の画角判断情報と、自己の撮像装置100の画角判断情報計測部110によって計測された画角判断情報とを比較することにより、撮像対象エリアの同一性を判断する。なお、撮像対象エリアの同一性判断は、例えば、画角判断情報に含まれる撮像装置の位置、撮像方向、画角等に関する同一性の範囲をあらかじめ設定しておくことにより判断したり、任意に同一性の範囲の閾値を変更したりすることにより判断することができる。もちろん、撮像対象エリアの同一性の判断方法は、撮像装置100のグレード、ユーザによる設定、要求される同一性判断の精度等に応じて異なるものであり、特定の方法に限定されるものではない。
(Field angle determination unit 116)
Based on the angle-of-view determination information, the angle-of-view determination unit 116 determines whether another imaging device and its own imaging device 100 target the same area. The angle-of-view determination unit 116 compares the angle-of-view determination information of another imaging device acquired by the communication unit 112 with the angle-of-view determination information measured by the angle-of-view determination information measurement unit 110 of its own imaging device 100. Thus, the identity of the imaging target area is determined. The identity determination of the imaging target area can be determined by, for example, setting the range of identity relating to the position, imaging direction, angle of view, etc. of the imaging device included in the angle-of-view determination information in advance. This can be determined by changing the threshold value of the identity range. Of course, the method for determining the identity of the imaging target area differs depending on the grade of the imaging device 100, the setting by the user, the accuracy of the required identity determination, and the like, and is not limited to a specific method. .

ここで、他の撮像装置が自己の撮像装置100とはまったく異なる方向やアングルを撮像対象としている場合、同一被写体を撮像している可能性がない。したがって、画角判断部116は画像データの共有にあたり、まず画角判断情報に基づいて撮像対象エリアの同一性を判断する。これにより撮像装置100は、まったく異なる方向やアングルを撮像対象としている撮像装置から画像データを取得しないようにすることができる。   Here, when another imaging device has a direction or angle that is completely different from that of its own imaging device 100, there is no possibility of imaging the same subject. Accordingly, when sharing the image data, the angle-of-view determination unit 116 first determines the identity of the imaging target area based on the angle-of-view determination information. As a result, the imaging apparatus 100 can avoid acquiring image data from an imaging apparatus whose imaging target is a completely different direction or angle.

例えば、図20に示した例で説明すると、撮像装置10に備えられる画角判断部116は、他の撮像装置11、12、13、15、16、17、18および19とは撮像対象エリアが同一であると判断し、撮像装置14とは撮像対象エリアが異なると判断する。これにより、撮像装置10は、まったく異なるエリアを撮像対象としている撮像装置14との無駄な画像データの送受信を回避することができ、消費電力や通信負荷の軽減を図ることもできる。   For example, in the example illustrated in FIG. 20, the angle-of-view determination unit 116 provided in the imaging device 10 has an imaging target area different from those of the other imaging devices 11, 12, 13, 15, 16, 17, 18, and 19. It is determined that they are the same, and it is determined that the imaging target area is different from that of the imaging device 14. Thereby, the imaging device 10 can avoid useless transmission / reception of image data with the imaging device 14 that is an imaging target in a completely different area, and can also reduce power consumption and communication load.

なお、画角判断部116による画角判断情報に基づく撮像対象エリアの同一性の判断処理の流れの詳細については、後述する処理フローにおいて説明する。   Note that details of the flow of the determination process of the identity of the imaging target area based on the angle-of-view determination information by the angle-of-view determination unit 116 will be described in the process flow described later.

(特徴量判断部118)
特徴量判断部118は、特徴量情報に基づいて、他の撮像装置と自己の撮像装置100が同一被写体を撮像対象としているか否かを判断する。特徴量判断部は、通信部112により取得した他の撮像装置で撮像された画像データの特徴量情報と、自己の撮像装置100の特徴量抽出部108によって抽出された特徴量情報とを比較することにより、被写体の同一性を判断する。なお、被写体の同一性判断は、例えば、特徴量情報に含まれる形状や色彩等に関する同一性の範囲をあらかじめ設定しておくことにより判断したり、既知の顔認識技術や画像解析技術等を利用したりすることにより判断したりすることができる。もちろん、被写体の同一性の判断方法は、撮像装置100のグレード、ユーザによる設定、要求される同一性判断の精度等に応じて異なるものであり、特定の方法に限定されるものではない。
(Feature amount determination unit 118)
Based on the feature amount information, the feature amount determination unit 118 determines whether another imaging device and its own imaging device 100 target the same subject as an imaging target. The feature amount determination unit compares the feature amount information of the image data captured by the other imaging device acquired by the communication unit 112 with the feature amount information extracted by the feature amount extraction unit 108 of the own imaging device 100. Thus, the identity of the subject is determined. The identity of the subject can be determined by, for example, setting a range of identity regarding the shape, color, etc. included in the feature amount information in advance, or using a known face recognition technology, image analysis technology, etc. It can be judged by doing. Of course, the method for determining the identity of the subject differs depending on the grade of the imaging apparatus 100, the setting by the user, the accuracy of the required identity determination, and the like, and is not limited to a specific method.

このように、特徴量判断部118が特徴量に基づいて被写体の同一性を判断することにより、同一の被写体が撮像対象となっている画像データのみを撮像装置間で提供・共有することができる。これにより、撮像装置100は、異なる被写体を撮像対象としている他の撮像装置との無駄な画像データの送受信を回避することができ、消費電力や通信負荷の軽減を図ることもできる。   As described above, the feature amount determination unit 118 determines the identity of a subject based on the feature amount, so that only image data in which the same subject is an imaging target can be provided and shared between imaging devices. . As a result, the imaging apparatus 100 can avoid useless transmission / reception of image data with other imaging apparatuses whose imaging targets are different subjects, and can also reduce power consumption and communication load.

なお、特徴量判断部118による画角判断情報に基づく撮像対象エリアの同一性の判断の処理の流れの詳細については、後述する処理フローにおいて説明する。   Note that details of the processing flow for determining the identity of the imaging target area based on the angle-of-view determination information by the feature amount determination unit 118 will be described in the processing flow described later.

(記憶部120)
記憶部120は、種々のデータを記憶可能な記憶領域である。記憶部120は、例えば、HDD等の磁気記憶部デバイス、半導体記憶デバイス、光記憶デバイス、または光磁気記憶デバイス等により構成され、データを保存可能な記憶装置であれば特定の構成に限定されるものではない。
(Storage unit 120)
The storage unit 120 is a storage area that can store various data. The storage unit 120 is configured by, for example, a magnetic storage unit device such as an HDD, a semiconductor storage device, an optical storage device, or a magneto-optical storage device, and is limited to a specific configuration as long as it is a storage device that can store data. It is not a thing.

記憶部120には、例えば、撮像部106によって撮像された画像データ、特徴量抽出部108によって抽出された特徴量情報、画角判断情報計測部110によって計測された画角判断情報、互換性判断部114によって判断された他の撮像装置との互換性情報等が記憶される。もちろん、記憶部120に記憶されるデータはこれらに限定されるものではなく、例えば、制御部122が制御する各種処理に関するプログラム、ユーザによる設定情報等の種々のデータを記憶しておくことも当然に可能である。   In the storage unit 120, for example, image data captured by the imaging unit 106, feature amount information extracted by the feature amount extraction unit 108, field angle determination information measured by the field angle determination information measurement unit 110, compatibility determination Information on compatibility with other imaging devices determined by the unit 114 is stored. Of course, the data stored in the storage unit 120 is not limited to these. For example, various types of data such as programs related to various processes controlled by the control unit 122 and setting information by the user may be stored. Is possible.

(制御部122)
制御部122は、上述した撮像装置100の各種機能構成部を制御する。制御部122は、例えば、ROM(図示せず)などに記録されているプログラムなどに基づいて、上述した各種機能構成部の処理結果やユーザからの指示に応じて、各種機能構成部を制御することができる。例えば、制御部122は、操作入力部102を介したユーザからの指示に応じて、撮像部106に画像データを撮像させたり、撮像部106による画像データの撮像に応じて特徴量抽出部108に特徴量を抽出させたりする。なお、制御部122が各種機能構成部を制御することにより、他の撮像装置と画像データを共有することが可能な本実施形態の特徴的な処理の流れの詳細については、後述する処理フローにおいて説明する。
(Control unit 122)
The control unit 122 controls various functional components of the imaging device 100 described above. The control unit 122 controls various function components according to the processing results of the various function components described above and instructions from the user based on, for example, a program recorded in a ROM (not shown) or the like. be able to. For example, the control unit 122 causes the imaging unit 106 to capture image data in response to an instruction from the user via the operation input unit 102, and causes the feature amount extraction unit 108 to capture image data by the imaging unit 106. The feature amount is extracted. Note that details of the characteristic processing flow of the present embodiment in which image data can be shared with other imaging devices by controlling the various functional components by the control unit 122 will be described later in the processing flow. explain.

以上、本実施形態に係る撮像装置100の画像記録処理に関する機能構成の詳細について図1を参照に説明した。   The details of the functional configuration related to the image recording processing of the imaging apparatus 100 according to the present embodiment have been described above with reference to FIG.

(2−2.撮像装置100による処理の流れ)
次に、上述した機能構成を備える撮像装置100によって行われる本発明の特徴的な処理の流れについて、処理フローを参照に詳細に説明する。
(2-2. Flow of Processing by Imaging Device 100)
Next, a characteristic processing flow of the present invention performed by the imaging apparatus 100 having the above-described functional configuration will be described in detail with reference to a processing flow.

(2−2−1.通信可能な他の撮像装置を検出した際の処理の流れ)
まず、撮像装置100が他の通信可能な撮像装置を検出した際の処理の流れについて説明する。ここで、他の通信可能な撮像装置とは、撮像装置100が通信部112によって所定のデータを送受信可能な撮像装置を意味し、例えば、図1に示す撮像装置50、60または70等である。図2は、撮像装置100が他の通信可能な撮像装置を検出した際の処理の流れの一例を示すフロー図である。
(2-2-1. Flow of processing when another imaging device capable of communication is detected)
First, the flow of processing when the imaging apparatus 100 detects another communicable imaging apparatus will be described. Here, the other communicable imaging device means an imaging device in which the imaging device 100 can transmit and receive predetermined data via the communication unit 112, such as the imaging device 50, 60, or 70 shown in FIG. . FIG. 2 is a flowchart illustrating an example of a processing flow when the imaging apparatus 100 detects another communicable imaging apparatus.

図2に示すように、撮像装置100は、通信可能な他の撮像装置を検出した場合、ステップ130において、他の撮像装置と装置識別情報、画角判断情報および特徴量情報のフォーマット情報の送受信を行う。ここで、「装置識別情報」とは、例えば、撮像装置100の製造番号、通信IPアドレス等の撮像装置100の固有情報を意味するが、特定の情報に限定されるものではない。また、画角判断情報および特徴量情報の「フォーマット情報」とは、画角判断情報および特徴量情報の互換性の有無を判断するために必要なデータの種類や形式に関する情報であり、撮像装置の製造メーカ、種類、グレード等に応じて異なる。   As illustrated in FIG. 2, when the imaging apparatus 100 detects another imaging apparatus that can communicate, in step 130, the apparatus 100 transmits / receives format information of the apparatus identification information, the angle-of-view determination information, and the feature amount information to / from the other imaging apparatus. I do. Here, “apparatus identification information” means unique information of the imaging apparatus 100 such as a manufacturing number and a communication IP address of the imaging apparatus 100, but is not limited to specific information. The “format information” of the angle-of-view determination information and the feature amount information is information regarding the type and format of data necessary to determine whether the angle-of-view determination information and the feature amount information are compatible. Depending on the manufacturer, type, grade, etc.

具体的には、撮像装置100は、自己の撮像装置100の識別情報と、画角判断情報計測部110によって計測される画角判断情報のフォーマット情報と、特徴量抽出部108によって抽出される特徴量情報のフォーマット情報とを通信部112により他の撮像装置へ送信する。また、同様に他の撮像装置から送信された識別情報、画角判断情報、および特徴量情報のフォーマット情報を通信部112により受信する。   Specifically, the imaging apparatus 100 includes identification information of the imaging apparatus 100 of itself, format information of angle-of-view determination information measured by the angle-of-view determination information measurement unit 110, and features extracted by the feature amount extraction unit 108. The format information of the quantity information is transmitted to another imaging device by the communication unit 112. Similarly, the communication unit 112 receives the identification information, the angle-of-view determination information, and the format information of the feature amount information transmitted from another imaging device.

次に、撮像装置100は、ステップ132において、受信したフォーマット情報を自己の撮像装置100のフォーマット情報と比較して、画角判断情報および特徴量情報の互換性の有無を判断する。具体的には、撮像装置100の互換性判断部114は、通信部112により受信した画角判断情報のフォーマット情報と、自己の撮像装置100の画角判断情報計測部110によって計測される画角判断情報のフォーマット情報との互換性の有無を判断する。同様に、互換性判断部114は、通信部112により受信した特徴量情報のフォーマット情報と、自己の撮像装置100の特徴量抽出部108によって抽出される特徴量情報のフォーマット情報との互換性の有無を判断する。   Next, in step 132, the imaging apparatus 100 compares the received format information with the format information of its own imaging apparatus 100, and determines whether the angle of view determination information and the feature amount information are compatible. Specifically, the compatibility determination unit 114 of the imaging device 100 includes the format information of the angle of view determination information received by the communication unit 112 and the angle of view measured by the angle of view determination information measurement unit 110 of its own imaging device 100. It is determined whether or not the determination information is compatible with the format information. Similarly, the compatibility determination unit 114 determines the compatibility between the format information of the feature amount information received by the communication unit 112 and the format information of the feature amount information extracted by the feature amount extraction unit 108 of its own imaging device 100. Judgment is made.

その後、撮像装置100は、ステップ134において、互換性判断部114による画角判断情報および特徴量情報の互換性の有無の判断結果を、ステップ130により受信した装置識別情報と関連付けて、互換性情報として記憶部120に記録する。なお、図2に示した処理により互換性情報が記憶部120に記録されるため、図2に示した処理は、通信可能な他の撮像装置を検出した際に1度だけ行われればよい。したがって、同じ撮像装置をその後検出した際には、図2に示した処理を再度行う必要はない。   Thereafter, in step 134, the imaging apparatus 100 associates the determination result of compatibility between the angle-of-view determination information and the feature amount information by the compatibility determination unit 114 with the apparatus identification information received in step 130, and Is recorded in the storage unit 120. Since the compatibility information is recorded in the storage unit 120 by the process shown in FIG. 2, the process shown in FIG. 2 only needs to be performed once when another communicable imaging device is detected. Therefore, when the same imaging apparatus is subsequently detected, it is not necessary to perform the process shown in FIG. 2 again.

ここで、図3は、記憶部120に記録される互換性情報のデータベースの一例を示す説明図である。図3に示すように、互換性情報には他の通信可能な撮像装置固有の識別情報に関連付けられて、画角判断情報および特徴量情報の互換性の有無に関する情報が含まれている。図3に示す例では、例えば、撮像装置100は、他の通信可能な撮像装置A1とは、画角判断情報および特徴量情報のいずれにも互換性がないことがわかる。同様に、撮像装置100は、他の通信可能な撮像装置A2とは、画角判断情報の互換性はあるが特徴量情報の互換性はないことがわかる。   Here, FIG. 3 is an explanatory diagram showing an example of a database of compatibility information recorded in the storage unit 120. As shown in FIG. 3, the compatibility information includes information related to the presence / absence of compatibility of the angle-of-view determination information and the feature amount information in association with identification information unique to another communicable imaging device. In the example illustrated in FIG. 3, for example, the imaging apparatus 100 is understood to be incompatible with any other communicable imaging apparatus A1 in terms of field angle determination information and feature amount information. Similarly, it can be seen that the imaging apparatus 100 is compatible with the other communicable imaging apparatus A2 but has the compatibility of the feature amount information with the compatibility of the angle of view determination information.

図3からも明らかなように、画角判断情報および特徴量情報の互換性の有無の組み合わせは4種類に分類される。すなわち、1つ目は、画角判断情報の互換性も特徴量情報の互換性もないパターンである(以下、互換性パターン1という)。2つ目は、画角判断情報の互換性はあるが、特徴量情報の互換性はないパターンである(以下、互換性パターン2という)。3つ目は、画角判断情報の互換性も特徴量情報の互換性もあるパターンである(以下、互換性パターン3という)。4つ目は、画角判断情報の互換性はないが、特徴量情報の互換性はあるパターンである(以下、互換性パターン4という)。   As is clear from FIG. 3, the combinations of the presence / absence of compatibility between the angle-of-view determination information and the feature amount information are classified into four types. That is, the first is a pattern in which the angle of view determination information is not compatible and the feature amount information is not compatible (hereinafter referred to as compatibility pattern 1). The second pattern is compatible with the angle of view determination information but not with the feature amount information (hereinafter referred to as compatibility pattern 2). The third type is a pattern having compatibility of angle-of-view determination information and feature amount information (hereinafter referred to as compatibility pattern 3). The fourth is a pattern in which the angle-of-view determination information is not compatible but the feature amount information is compatible (hereinafter referred to as compatibility pattern 4).

本実施形態に係る撮像装置100は、この4つの互換性パターンに応じて実行する処理を変更することにより、他の撮像装置との互換性の有無に応じた画像データの最適な共有を実現することができる。以下、上記4つの互換性パターンにおける各種処理の流れについて説明する。   The imaging apparatus 100 according to the present embodiment realizes optimal sharing of image data according to the presence or absence of compatibility with other imaging apparatuses by changing the processing to be executed according to the four compatibility patterns. be able to. Hereinafter, the flow of various processes in the four compatibility patterns will be described.

(2−2−2.画像データを撮像した際の処理の流れ)
まず、撮像装置100が撮像部106によって所定の画像データを撮像した際の処理の流れについて説明する。図4は、撮像装置100が所定の画像データを撮像した際の処理の流れの一例を示すフロー図である。なお、以下の説明では、画像データの撮像時に、通信可能な1台の他の撮像装置50が検出されている場合を例に説明する。もちろん、複数の他の撮像装置が検出されている場合には、同様の処理が他の撮像装置に対しても行われる。
(2-2-2. Flow of processing when image data is captured)
First, a flow of processing when the imaging apparatus 100 captures predetermined image data by the imaging unit 106 will be described. FIG. 4 is a flowchart illustrating an example of a processing flow when the imaging apparatus 100 captures predetermined image data. In the following description, a case where one other imaging device 50 capable of communication is detected when image data is captured will be described as an example. Of course, when a plurality of other imaging devices are detected, the same processing is performed for the other imaging devices.

図4に示すように、ステップ140で撮像部106により画像データが撮像された場合、ステップ142において、現在通信可能な他の撮像装置50に関する互換性情報を確認する。具体的には、撮像装置100は、図3に示した互換性情報のデータベースに基づいて、撮像装置50との画角判断情報および特徴量情報の互換性の有無に基づいて、互換性パターンを特定する。その後、特定した互換性パターンに基づいて以下の処理を行う。   As shown in FIG. 4, when image data is captured by the imaging unit 106 in step 140, compatibility information regarding another imaging device 50 that can currently communicate is confirmed in step 142. Specifically, the imaging device 100 sets the compatibility pattern based on the compatibility of the angle-of-view determination information and the feature amount information with the imaging device 50 based on the compatibility information database shown in FIG. Identify. Thereafter, the following processing is performed based on the identified compatibility pattern.

まず、ステップ144において、互換性パターン1であると判断された場合、撮像装置100は、ステップ146において、撮像部106によって撮像された画像データを他の撮像装置50へ送信する。他の撮像装置50とは画角判断情報および特徴量判断情報の互換性を有していないため、これらの情報を撮像装置50へ送信しても無駄だからである。この結果、互換性パターン1の場合、他の撮像装置へ互換性のない画角判断情報や特徴量情報を無駄に送信することを回避することができる。   First, when it is determined in step 144 that the compatibility pattern is 1, the imaging apparatus 100 transmits the image data captured by the imaging unit 106 to another imaging apparatus 50 in step 146. This is because, since the angle of view determination information and the feature amount determination information are not compatible with the other imaging devices 50, it is useless to transmit these pieces of information to the imaging device 50. As a result, in the case of the compatibility pattern 1, it is possible to avoid unnecessary transmission of angle-of-view determination information and feature amount information to other imaging apparatuses.

一方、ステップ148において、互換性パターン2であると判断された場合、撮像装置100は、ステップ150において、画角判断情報計測部110によって計測された画角情報を他の撮像装置50へ送信する。これにより、撮像装置50に備えられる画角判断部116は、撮像装置100の撮像対象エリアと、自己の撮像装置50の現在の撮像対象エリアとの同一性を判断することができ、同一である場合のみ画像データの送信を撮像装置100に要求することができる。なお、画角判断情報を受信した際の処理の流れの詳細については、図7の処理フローにおいて後述する。   On the other hand, if it is determined in step 148 that the pattern is the compatibility pattern 2, the imaging apparatus 100 transmits the angle-of-view information measured by the angle-of-view determination information measuring unit 110 to another imaging apparatus 50 in step 150. . Thereby, the angle-of-view determination unit 116 provided in the imaging device 50 can determine the sameness between the imaging target area of the imaging device 100 and the current imaging target area of the imaging device 50 of the imaging device 50, and is the same. Only in such a case, the imaging apparatus 100 can be requested to transmit image data. The details of the processing flow when receiving the angle of view determination information will be described later in the processing flow of FIG.

その後、撮像装置100は、ステップ152において、画角判断情報を送信した撮像装置50から画像データの送信要求を受信した場合、ステップ154において、撮像部106によって撮像された画像データを撮像装置50へ送信する。一方、撮像装置50から画像データの送信要求を受信しなかった場合や、画像データの送信不要通知を受信した場合、画像データを撮像装置50へ送信することなく処理を終了する。この結果、互換性パターン2の場合、異なる被写体を撮像している撮像装置50へ画像データを無駄に送信することを回避することができる。   Thereafter, when the image capturing apparatus 100 receives a request for transmitting image data from the image capturing apparatus 50 that transmitted the angle-of-view determination information in step 152, the image data captured by the image capturing unit 106 is transmitted to the image capturing apparatus 50 in step 154. Send. On the other hand, when the image data transmission request is not received from the imaging device 50 or when the image data transmission unnecessary notification is received, the processing ends without transmitting the image data to the imaging device 50. As a result, in the case of the compatibility pattern 2, it is possible to avoid wasteful transmission of image data to the imaging device 50 that is imaging a different subject.

次に、ステップ156において、互換性パターン3であると判断された場合、撮像装置100は、ステップ158において、ステップ150と同様に画角判断情報計測部110によって計測された画角情報を他の撮像装置50へ送信する。これにより、撮像装置50に備えられる画角判断部116は、撮像装置100の撮像対象エリアと、自己の撮像装置50の現在の撮像対象エリアとの同一性を判断することができ、同一である場合のみ特徴量情報の送信を撮像装置100に要求することができる。なお、画角判断情報を受信した際の処理の流れの詳細については、図8の処理フローにおいて後述する。   Next, when it is determined in step 156 that the pattern is the compatibility pattern 3, in step 158, the imaging apparatus 100 uses the angle-of-view information measured by the angle-of-view determination information measurement unit 110 in the same manner as in step 150. It transmits to the imaging device 50. Thereby, the angle-of-view determination unit 116 provided in the imaging device 50 can determine the sameness between the imaging target area of the imaging device 100 and the current imaging target area of the imaging device 50 of the imaging device 50, and is the same. It is possible to request the imaging apparatus 100 to transmit the feature amount information only in the case. The details of the processing flow when the angle of view determination information is received will be described later in the processing flow of FIG.

その後、撮像装置100は、ステップ160において、画角判断情報を送信した撮像装置50から特徴量情報の送信要求を受信した場合、ステップ162において、特徴量抽出部108によって抽出された特徴量情報を撮像装置50へ送信する。一方、撮像装置50から特徴量情報の送信要求を受信しなかった場合や、特徴量情報の送信不要通知を受信した場合、特徴量情報や画像データを撮像装置50へ送信することなく処理を終了する。この結果、パターン3の場合、異なる被写体を撮像している撮像装置50へ特徴量情報や画像データを無駄に送信することを回避することができる。   Thereafter, when the imaging apparatus 100 receives a feature amount information transmission request from the imaging apparatus 50 that transmitted the angle-of-view determination information in step 160, the imaging apparatus 100 uses the feature amount information extracted by the feature amount extraction unit 108 in step 162. It transmits to the imaging device 50. On the other hand, if a feature quantity information transmission request is not received from the imaging device 50 or if a feature quantity information transmission unnecessary notification is received, the processing ends without transmitting the feature amount information and image data to the imaging device 50. To do. As a result, in the case of pattern 3, it is possible to avoid wasteful transmission of feature amount information and image data to the imaging device 50 that is imaging a different subject.

ステップ162により特徴量情報を受信した撮像装置50に備えられる特徴量判断部118は、受信した特徴量情報に基づいて被写体の同一性を判断することができ、同一である場合のみ画像データの送信を撮像装置100に要求することができる。なお、特徴量情報を受信した際の処理の流れの詳細については、図8の処理フローにおいて後述する。   The feature amount determination unit 118 included in the imaging device 50 that has received the feature amount information in step 162 can determine the identity of the subject based on the received feature amount information, and transmits image data only when they are the same. Can be requested from the imaging apparatus 100. Details of the flow of processing when feature amount information is received will be described later in the processing flow of FIG.

その後、撮像装置100は、ステップ164において、特徴量情報を送信した撮像装置50から画像データの送信要求を受信した場合、ステップ166において、撮像部106によって撮像された画像データを撮像装置50へ送信する。一方、撮像装置50から画像データの送信要求を受信しなかった場合や、画像データの送信不要通知を受信した場合、画像データを撮像装置50へ送信することなく処理を終了する。この結果、互換性パターン3の場合も、異なる被写体を撮像している撮像装置50へ画像データを無駄に送信することを回避することができる。   Thereafter, when the imaging apparatus 100 receives a request for transmitting image data from the imaging apparatus 50 that transmitted the feature amount information in Step 164, the imaging apparatus 100 transmits the image data captured by the imaging unit 106 to the imaging apparatus 50 in Step 166. To do. On the other hand, when the image data transmission request is not received from the imaging device 50 or when the image data transmission unnecessary notification is received, the processing ends without transmitting the image data to the imaging device 50. As a result, even in the case of the compatibility pattern 3, it is possible to avoid wasteful transmission of image data to the imaging device 50 that is imaging a different subject.

次に、互換性パターン4であると判断された場合、撮像装置100は、ステップ168において、ステップ162と同様に特徴量情報を他の撮像装置50へ送信する。その後、撮像装置100は、ステップ170および172において、上記ステップ164および166と同様に、撮像装置50からの画像データ送信要求に応じて画像データを撮像装置50へ送信する。すなわち、撮像装置100は、撮像装置50が同一の被写体を撮像している場合のみ画像データを送信することができる。この結果、パターン4の場合も、異なる被写体を撮像している撮像装置50へ画像データを無駄に送信することを回避することができる。   Next, when it is determined that the pattern is the compatibility pattern 4, the imaging apparatus 100 transmits the feature amount information to the other imaging apparatus 50 in step 168, similarly to step 162. Thereafter, in steps 170 and 172, the imaging apparatus 100 transmits image data to the imaging apparatus 50 in response to an image data transmission request from the imaging apparatus 50 in the same manner as in steps 164 and 166 described above. That is, the imaging apparatus 100 can transmit image data only when the imaging apparatus 50 is imaging the same subject. As a result, also in the case of the pattern 4, it is possible to avoid wasteful transmission of image data to the imaging device 50 that is imaging a different subject.

以上、撮像装置100が所定の画像データを撮像した際に、他の通信可能な撮像装置へデータ送信する処理の流れについて説明した。なお、上記説明では通信可能な他の撮像装置が1台の撮像装置50の場合を例に説明したが、他の通信可能な撮像装置が複数存在する場合、同様のデータ送信処理を各撮像装置に対して行う。すなわち、撮像装置100は、複数の撮像装置に対して、該撮像装置との画角判断情報および特徴量情報の互換性の有無に応じたデータ送信を行う。   The flow of processing for transmitting data to another communicable imaging device when the imaging device 100 captures predetermined image data has been described above. In the above description, the case where the other imaging device capable of communication is one imaging device 50 has been described as an example. However, when there are a plurality of other imaging devices capable of communication, the same data transmission processing is performed for each imaging device. To do. That is, the imaging device 100 transmits data to a plurality of imaging devices according to whether or not the angle-of-view determination information and the feature amount information are compatible with the imaging device.

(2−2−3.通信可能な他の撮像装置からデータを受信した際の流れ)
次に、撮像装置100が他の撮像装置から所定のデータを受信した際の流れについて説明する。上述したように、本実施形態に係る撮像装置100は、互換性パターンに応じたデータ送信を行うため、撮像装置100自体も同様に他の通信可能な撮像装置から互換性パターンに応じて、画角判断情報や特徴量情報や画像データを受信する。以下の説明では、撮像装置100が、他の1つの通信可能な撮像装置50から上記互換性パターンに応じてデータを受信した際の流れを説明する。
(2-2-3. Flow when data is received from another imaging device capable of communication)
Next, a flow when the imaging apparatus 100 receives predetermined data from another imaging apparatus will be described. As described above, since the imaging apparatus 100 according to the present embodiment performs data transmission according to the compatibility pattern, the imaging apparatus 100 itself also receives images from other communicable imaging apparatuses according to the compatibility pattern. Receives angle determination information, feature amount information, and image data. In the following description, a flow when the image capturing apparatus 100 receives data from another one communicable image capturing apparatus 50 according to the compatibility pattern will be described.

図5は、撮像装置100が他の撮像装置50から互換性パターンに応じて、画角判断情報、特徴量情報、または画像データのいずれかを受信した際の処理の流れの一例を示すフロー図である。   FIG. 5 is a flowchart illustrating an example of a processing flow when the imaging apparatus 100 receives any of the angle-of-view determination information, feature amount information, or image data according to the compatibility pattern from the other imaging apparatus 50. It is.

図5に示すように、他の撮像装置50から画角判断情報、特徴量情報、または画像データのいずれかを受信した撮像装置100は、ステップ180において、撮像装置50との互換性パターンを特定する。具体的には、撮像装置100は、記憶部120に記録されている互換性情報に基づいて、データを送信してきた撮像装置50との画角判断情報および特徴量情報の互換性の有無を確認し、上記4つの互換性パターンのいずれに該当するかを判断する。   As illustrated in FIG. 5, the imaging device 100 that has received any of the angle-of-view determination information, the feature amount information, or the image data from another imaging device 50 specifies a compatibility pattern with the imaging device 50 in Step 180. To do. Specifically, the imaging apparatus 100 confirms whether or not the angle of view determination information and the feature amount information are compatible with the imaging apparatus 50 that has transmitted the data, based on the compatibility information recorded in the storage unit 120. Then, it is determined which of the above four compatibility patterns is applicable.

撮像装置100は、特定した互換性パターンに応じて異なる処理を実行する。以下、互換性パターン1と判断された場合の処理の流れを図6、互換性パターン2と判断された場合の処理の流れを図7、互換性パターン3と判断された場合の処理の流れを図8、互換性パターン4と判断された場合の処理の流れを図9を参照に説明する。   The imaging apparatus 100 executes different processes according to the identified compatibility pattern. FIG. 6 shows the flow of processing when it is determined as compatibility pattern 1, FIG. 7 shows the flow of processing when it is determined as compatibility pattern 2, and FIG. 7 shows the flow of processing when it is determined as compatibility pattern 3. FIG. 8 will be described with reference to FIG. 9 when the compatibility pattern 4 is determined.

(互換性パターン1の場合の処理)
図6は、互換性パターン1の他の撮像装置50から画像データを受信した際の撮像装置100による処理の流れの一例を示すフロー図である。
(Processing for compatibility pattern 1)
FIG. 6 is a flowchart illustrating an example of a flow of processing performed by the imaging device 100 when image data is received from another imaging device 50 of the compatibility pattern 1.

図6に示すように、撮像装置100は、ステップ190において、撮像装置50から受信した画像データの特徴量を抽出する。互換性パターン1の撮像装置50からは、図4のステップ146で説明したように、画像データが撮像装置100へ送信されている。したがって、撮像装置100は、特徴量抽出部108の機能を利用して、撮像装置50から受信した画像データから特徴量を抽出することができる。   As illustrated in FIG. 6, the imaging apparatus 100 extracts the feature amount of the image data received from the imaging apparatus 50 in Step 190. Image data is transmitted from the imaging device 50 of the compatibility pattern 1 to the imaging device 100 as described in step 146 of FIG. Therefore, the imaging apparatus 100 can extract feature amounts from the image data received from the imaging apparatus 50 using the function of the feature amount extraction unit 108.

次に、撮像装置100は、ステップ192において、撮像部106が現在撮像対象としている被写体の特徴量を特徴量抽出部108により抽出する。特徴量抽出部108は、例えば、撮像部106の現在の撮像対象エリアの映像をキャプチャして、該画像から特徴量を抽出する。   Next, in step 192, the image capturing apparatus 100 causes the feature amount extraction unit 108 to extract the feature amount of the subject that the image capturing unit 106 currently captures. For example, the feature amount extraction unit 108 captures a video of the current imaging target area of the imaging unit 106 and extracts a feature amount from the image.

その後、撮像装置100は、ステップ194において、受信画像から抽出した特徴量と、自己の撮像装置100の撮像対象から抽出した特徴量とを比較して、被写体の同一性を判断する。具体的には、撮像装置100の特徴量判断部118は、特徴量に含まれる形状や色彩等の情報に基づいて、受信画像に含まれる被写体と、自己の撮像装置100が現在撮像対象としている被写体との同一性を判断する。   Thereafter, in step 194, the imaging device 100 compares the feature amount extracted from the received image with the feature amount extracted from the imaging target of the imaging device 100 of itself, and determines the identity of the subject. Specifically, the feature amount determination unit 118 of the imaging device 100 is based on information such as the shape and color included in the feature amount, and the subject included in the received image and the own imaging device 100 are currently imaged. Judgment of identity with the subject.

ステップ194で被写体が同一であると判断された場合、撮像装置100は、ステップ196において、撮像装置50から受信した画像データを記憶部120に保存する。これにより、撮像装置100は、他の撮像装置50で撮像された同一被写体の画像データを自動で記憶部120に保存することができる。   If it is determined in step 194 that the subject is the same, the imaging apparatus 100 stores the image data received from the imaging apparatus 50 in the storage unit 120 in step 196. Thereby, the imaging apparatus 100 can automatically save the image data of the same subject captured by the other imaging apparatus 50 in the storage unit 120.

一方、ステップ194で被写体が同一でないと判断された場合、撮像装置100は、ステップ198において、撮像装置50から受信した画像データを消去する。これにより、撮像装置100は、他の撮像装置50で撮像された異なる被写体の画像データは保存せず、他の撮像装置50で撮像された同一の被写体の画像データのみを自動で記憶部120に保存することができる。   On the other hand, if it is determined in step 194 that the subject is not the same, the imaging apparatus 100 deletes the image data received from the imaging apparatus 50 in step 198. Thereby, the imaging device 100 does not store image data of different subjects imaged by the other imaging device 50, and automatically stores only image data of the same subject imaged by the other imaging device 50 in the storage unit 120. Can be saved.

このように、互換性パターン1の場合、撮像装置100は、他の撮像装置50から画像データのみを受信する。したがって、自己の撮像装置100に備えられる特徴量抽出部108が受信した画像データおよび自己の撮像装置100の撮像対象から特徴量を抽出すればよい。この結果、撮像装置50との特徴量情報の互換性の有無や、特徴量抽出部108による特徴量抽出方法に関わらず、被写体の同一性を判断することができる。   As described above, in the case of the compatibility pattern 1, the imaging device 100 receives only image data from the other imaging device 50. Therefore, the feature amount may be extracted from the image data received by the feature amount extraction unit 108 included in the own imaging device 100 and the imaging target of the own imaging device 100. As a result, the identity of the subject can be determined regardless of the compatibility of the feature amount information with the imaging device 50 and the feature amount extraction method by the feature amount extraction unit 108.

(互換性パターン2の場合の処理)
次に、互換性パターン2と判断された場合の撮像装置100の処理の流れについて説明する。図7は、互換性パターン2の他の撮像装置50から画角判断情報を受信した際の撮像装置100による処理の流れの一例を示すフロー図である。
(Processing for compatibility pattern 2)
Next, a processing flow of the imaging apparatus 100 when it is determined as the compatibility pattern 2 will be described. FIG. 7 is a flowchart illustrating an example of a flow of processing performed by the imaging apparatus 100 when the angle-of-view determination information is received from another imaging apparatus 50 of the compatibility pattern 2.

図7に示すように、撮像装置100は、ステップ200において、画角判断情報計測部110により撮像装置100の現在の画角判断情報を計測する。なお、互換性パターン2の撮像装置50からは、図4のステップ150で説明したように、画角判断情報が撮像装置100へ送信されている。   As illustrated in FIG. 7, in step 200, the imaging apparatus 100 measures current angle-of-view determination information of the imaging apparatus 100 by the angle-of-view determination information measurement unit 110. Note that the angle-of-view determination information is transmitted from the imaging device 50 of the compatibility pattern 2 to the imaging device 100 as described in step 150 of FIG.

次に、撮像装置100は、ステップ202において、ステップ200により計測した画角判断情報と、撮像装置50から受信した画角判断情報とを比較して、撮像対象エリアの同一性を判断する。具体的には、撮像装置100の画角判断部116は、画角判断情報に含まれる撮像装置100の位置、撮像方向、画角に関する情報に基づいて、撮像装置50から受信した画像データの撮像エリアと、撮像装置100の現在の撮像対象エリアとの同一性を判断する。   Next, in step 202, the imaging apparatus 100 compares the angle of view determination information measured in step 200 with the angle of view determination information received from the imaging apparatus 50 to determine the identity of the imaging target area. Specifically, the angle-of-view determination unit 116 of the imaging device 100 captures image data received from the imaging device 50 based on information on the position, imaging direction, and angle of view of the imaging device 100 included in the angle-of-view determination information. The identity of the area and the current imaging target area of the imaging apparatus 100 is determined.

ステップ202で撮像対象エリアが同一でないと判断された場合、撮像装置100は、画像データの送信を撮像装置50に要求することなく処理を終了する。撮像装置100の撮像対象エリアとは異なるエリアを撮像した画像データに同一被写体が含まれている可能性はないためである。この場合、撮像装置100は、特徴量情報の分析や画像データの送受信を行う必要がない。なお、撮像対象エリアが同一でないと判断された場合、撮像装置100は、撮像装置50に対して特徴量情報や画像データの不要通知を送信してもよい。   If it is determined in step 202 that the imaging target areas are not the same, the imaging apparatus 100 ends the process without requesting the imaging apparatus 50 to transmit image data. This is because there is no possibility that the same subject is included in image data obtained by imaging an area different from the imaging target area of the imaging apparatus 100. In this case, the imaging apparatus 100 does not need to analyze feature amount information or transmit / receive image data. Note that when it is determined that the imaging target areas are not the same, the imaging apparatus 100 may transmit an unnecessary notification of feature amount information or image data to the imaging apparatus 50.

一方、ステップ202で撮像対象エリアが同一であると判断された場合、撮像装置100は、ステップ204において、通信部112により撮像装置50へ画像データの送信を要求する。これを受けて撮像装置50は、図4のステップ152および154で説明したように、画像データを撮像装置100へ送信する。その結果、撮像装置100は、ステップ206において、撮像装置50から画像データを受信することができる。   On the other hand, when it is determined in step 202 that the imaging target areas are the same, the imaging apparatus 100 requests the imaging apparatus 50 to transmit image data through the communication unit 112 in step 204. In response to this, the imaging device 50 transmits the image data to the imaging device 100 as described in steps 152 and 154 of FIG. As a result, the imaging apparatus 100 can receive image data from the imaging apparatus 50 in step 206.

その後、ステップ208〜216において、撮像装置50から受信した画像データから特徴量を抽出し、被写体の同一性の有無に応じて画像データを記憶部120へ保存する。なお、ステップ208〜216の処理は、図6のステップ190〜198と同様であるため詳細は省略する。   Thereafter, in steps 208 to 216, feature amounts are extracted from the image data received from the imaging device 50, and the image data is stored in the storage unit 120 according to the presence or absence of subject identity. The processing in steps 208 to 216 is the same as that in steps 190 to 198 in FIG.

このように、互換性パターン2の場合、撮像装置間で画角判断情報の互換性があるため、撮像装置100は、他の撮像装置50から画角判断情報を最初に受信する。したがって、撮像装置100は、自己の撮像装置100に備えられる画角判断情報計測部110により画角判断情報を計測することにより、撮像対象エリアの同一性を判断することができる。この結果、撮像対象エリアがまったく異なる撮像装置50から特徴量情報や画像データを無駄に受信する必要がなく、同一の撮像対象エリアを撮像している他の撮像装置のみから特徴量情報や画像データを取得することができる。また、上記互換性パターン1の場合と同様に、他の撮像装置50から画像データを受信することにより、撮像装置50との特徴量情報の互換性や、特徴量抽出部108による特徴量抽出方法に関わらず、被写体の同一性を判断することもできる。   As described above, in the case of the compatibility pattern 2, since the angle of view determination information is compatible between the imaging devices, the imaging device 100 first receives the angle of view determination information from the other imaging device 50. Therefore, the imaging device 100 can determine the identity of the imaging target area by measuring the angle-of-view determination information by the angle-of-view determination information measuring unit 110 provided in the imaging device 100 of the imaging device 100. As a result, it is not necessary to wastefully receive feature amount information and image data from the imaging device 50 having completely different imaging target areas, and feature amount information and image data only from other imaging devices that are imaging the same imaging target area. Can be obtained. Similarly to the case of the compatibility pattern 1, by receiving image data from another imaging device 50, the compatibility of the feature amount information with the imaging device 50 and the feature amount extraction method by the feature amount extraction unit 108 Regardless, the identity of the subject can also be determined.

(互換性パターン3の場合の処理)
次に、互換性パターン3と判断された場合の撮像装置100の処理の流れについて説明する。図8は、互換性パターン3の他の撮像装置50から画角判断情報を受信した際の撮像装置100による処理の流れの一例を示すフロー図である。
(Processing for compatibility pattern 3)
Next, a processing flow of the imaging apparatus 100 when it is determined as the compatibility pattern 3 will be described. FIG. 8 is a flowchart illustrating an example of a flow of processing performed by the imaging apparatus 100 when the angle-of-view determination information is received from another imaging apparatus 50 of the compatibility pattern 3.

互換性パターン3の場合、他の撮像装置50からは、図4のステップ158で説明したように、画角判断情報が撮像装置100へ送信されている。したがって、撮像装置100は、ステップ220および222において、撮像対象エリアの同一性を判断する。なお、ステップ220および222の処理は、図7のステップ200および202と同様であるため詳細は省略する。   In the case of the compatibility pattern 3, the angle-of-view determination information is transmitted from the other imaging device 50 to the imaging device 100 as described in step 158 of FIG. Therefore, the imaging apparatus 100 determines the identity of the imaging target area in steps 220 and 222. Note that the processing in steps 220 and 222 is the same as that in steps 200 and 202 in FIG.

ステップ222で撮像対象エリアが同一であると判断された場合、撮像装置100は、ステップ224において、通信部112により撮像装置50へ特徴量情報の送信を要求する。これを受けて撮像装置50は、図4のステップ160および162で説明したように、特徴量情報を撮像装置100へ送信する。その結果、撮像装置100は、ステップ226において、撮像装置50から特徴量情報を受信することができる。   When it is determined in step 222 that the imaging target areas are the same, the imaging device 100 requests the imaging device 50 to transmit feature amount information through the communication unit 112 in step 224. In response to this, the imaging apparatus 50 transmits the feature amount information to the imaging apparatus 100 as described in Steps 160 and 162 in FIG. As a result, the imaging apparatus 100 can receive feature amount information from the imaging apparatus 50 in step 226.

その後、撮像装置100は、ステップ228において、撮像部106が現在撮像対象としている被写体の特徴量を特徴量抽出部108により抽出する。特徴量抽出部108は、例えば、撮像部106の現在の撮像対象エリアの映像をキャプチャして、該画像から特徴量を抽出する。   Thereafter, in step 228, the imaging apparatus 100 causes the feature amount extraction unit 108 to extract the feature amount of the subject that the imaging unit 106 currently captures. For example, the feature amount extraction unit 108 captures a video of the current imaging target area of the imaging unit 106 and extracts a feature amount from the image.

その後、撮像装置100は、ステップ230において、撮像装置50から受信した特徴量と、ステップ228により抽出した特徴量とを比較して、被写体の同一性を判断する。互換性パターン3の場合、撮像装置間に特徴量情報の互換性があるため、撮像装置100の特徴量判断部118は、撮像装置50から受信した特徴量と、自己の撮像装置100の特徴量抽出部108により抽出した特徴量とに基づいて被写体の同一性を判断することができる。   Thereafter, in step 230, the imaging apparatus 100 compares the feature amount received from the imaging device 50 with the feature amount extracted in step 228, and determines the identity of the subject. In the case of the compatibility pattern 3, since the feature amount information is compatible between the imaging devices, the feature amount determination unit 118 of the imaging device 100 and the feature amount of the imaging device 100 of the device itself are received. The identity of the subject can be determined based on the feature amount extracted by the extraction unit 108.

ステップ230で被写体が同一であると判断された場合、撮像装置100は、ステップ232において、通信部112により撮像装置50へ画像データの送信を要求する。これを受けて撮像装置50は、図4のステップ164および166で説明したように、画像データを撮像装置100へ送信する。その結果、撮像装置100は、ステップ234において、撮像装置50から画像データを受信することができる。   When it is determined in step 230 that the subject is the same, the imaging apparatus 100 requests the imaging apparatus 50 to transmit image data through the communication unit 112 in step 232. In response to this, the imaging device 50 transmits the image data to the imaging device 100 as described in Steps 164 and 166 of FIG. As a result, the imaging device 100 can receive image data from the imaging device 50 in step 234.

その後、撮像装置100は、ステップ236において、撮像装置50から受信した画像データを記憶部120に保存する。これにより、撮像装置100は、他の撮像装置50で撮像された同一被写体の画像データを自動で記憶部120に保存することができる。   Thereafter, in step 236, the imaging device 100 stores the image data received from the imaging device 50 in the storage unit 120. Thereby, the imaging apparatus 100 can automatically save the image data of the same subject captured by the other imaging apparatus 50 in the storage unit 120.

一方、ステップ230で被写体が同一でないと判断された場合、撮像装置100は、画像データの送信を撮像装置50に要求することなく処理を終了する。撮像装置50により撮像された画像データには同一の被写体が含まれていないため、画像データを取得する必要がないからである。なお、被写体が同一でないと判断された場合、撮像装置100は、撮像装置50に対して画像データの不要通知を送信してもよい。   On the other hand, when it is determined in step 230 that the subject is not the same, the imaging apparatus 100 ends the process without requesting the imaging apparatus 50 to transmit image data. This is because it is not necessary to acquire image data since the same subject is not included in the image data captured by the imaging device 50. When it is determined that the subjects are not the same, the imaging device 100 may transmit an unnecessary notification of image data to the imaging device 50.

このように、互換性パターン3の場合、撮像装置間で画角判断情報および特徴量情報の互換性があるため、撮像装置100は、他の撮像装置50から画角判断情報を最初に受信する。したがって、撮像装置100は、自己の撮像装置100に備えられる画角判断情報計測部110により画角判断情報を計測することにより、撮像対象エリアの同一性を判断することができる。この結果、撮像対象エリアがまったく異なる撮像装置から特徴量情報や画像データを無駄に受信する必要がなく、同一の撮像対象エリアを撮像している他の撮像装置のみから特徴量情報や画像データを取得することができる。また、撮像対象エリアが同一であると判断された場合のみ特徴量情報を受信して、特徴量判断部118により被写体の同一性を判断することができる。さらに、被写体が同一と判断された場合のみ、他の撮像装置50から画像データを受信することができる。一般に撮像位置、撮像方向、画角に関する情報の送受信は、特徴量抽出処理や画像データ送受信処理などと比べて通信負荷が小さい。したがって、互換性パターン3の場合、画角判断情報の互換性を利用することにより、撮像装置間における同一被写体の画像データの共有を効率よく実現することができる。   As described above, in the case of the compatibility pattern 3, since the angle-of-view determination information and the feature amount information are compatible between the imaging devices, the imaging device 100 first receives the angle-of-view determination information from the other imaging device 50. . Therefore, the imaging device 100 can determine the identity of the imaging target area by measuring the angle-of-view determination information by the angle-of-view determination information measuring unit 110 provided in the imaging device 100 of the imaging device 100. As a result, it is not necessary to wastefully receive feature amount information and image data from an imaging device with completely different imaging target areas, and feature amount information and image data can be received only from other imaging devices that are imaging the same imaging target area. Can be acquired. Further, only when it is determined that the imaging target areas are the same, the feature amount information can be received, and the feature amount determination unit 118 can determine the identity of the subject. Furthermore, image data can be received from another imaging device 50 only when the subject is determined to be the same. In general, transmission / reception of information related to an imaging position, an imaging direction, and an angle of view has a smaller communication load than a feature amount extraction process or an image data transmission / reception process. Therefore, in the case of the compatibility pattern 3, it is possible to efficiently share the image data of the same subject between the imaging devices by using the compatibility of the angle-of-view determination information.

(互換性パターン4の場合の処理)
次に、互換性パターン4と判断された場合の撮像装置100の処理の流れについて説明する。図9は、互換性パターン4の他の撮像装置50から特徴量情報を受信した際の撮像装置100による処理の流れの一例を示すフロー図である。
(Processing for compatibility pattern 4)
Next, a processing flow of the imaging apparatus 100 when it is determined as the compatibility pattern 4 will be described. FIG. 9 is a flowchart illustrating an example of a flow of processing performed by the imaging device 100 when feature amount information is received from another imaging device 50 of the compatibility pattern 4.

互換性パターン4の場合、他の撮像装置50からは、図4のステップ168で説明したように、特徴量情報が撮像装置100へ送信されている。したがって、撮像装置100は、ステップ240〜248において、特徴量情報に基づく被写体の同一性判断結果に応じて撮像装置50から画像データを取得して記憶部120に保存する。なお、ステップ240〜248の処理は、図8のステップ228〜236と同様であるため詳細は省略する。   In the case of the compatibility pattern 4, the feature amount information is transmitted from the other imaging device 50 to the imaging device 100 as described in step 168 of FIG. Therefore, in steps 240 to 248, the imaging apparatus 100 acquires image data from the imaging apparatus 50 according to the subject identity determination result based on the feature amount information and stores the image data in the storage unit 120. Note that the processing in steps 240 to 248 is the same as that in steps 228 to 236 in FIG.

このように、互換性パターン4の場合、撮像装置間において、画角判断情報の互換性はないが、特徴量情報の互換性があるため、他の撮像装置50から特徴量情報を最初に受信して、特徴量判断部118により被写体の同一性を判断することができる。このように、撮像装置間において特徴量情報の互換性がある場合は、特徴量に基づいて適切な画像データのみを他の撮像装置から取得することもできる。   As described above, in the case of the compatibility pattern 4, the angle-of-view determination information is not compatible between the imaging devices, but the feature amount information is compatible. Therefore, the feature amount information is first received from the other imaging device 50. Thus, the feature amount determination unit 118 can determine the identity of the subject. In this way, when the feature amount information is compatible between the imaging devices, only appropriate image data can be acquired from other imaging devices based on the feature amount.

以上説明したように、第1実施形態に係る撮像装置100は、他の通信可能な撮像装置との間における画角判断情報および特徴量情報の互換性の有無に応じて、撮像時のデータ送信処理やデータ受信時の処理を変化させることを特徴の1つとしている。   As described above, the imaging apparatus 100 according to the first embodiment transmits data at the time of imaging according to whether or not the angle-of-view determination information and the feature amount information are compatible with other communication-capable imaging apparatuses. One of the features is that the processing and processing at the time of data reception are changed.

上記互換性パターン1のように、画角判断情報および特徴量情報のいずれにも互換性がない場合には、画像データのみを送受信することにより被写体の同一性を判断することができる。この結果、近年の顔検出技術や画像処理技術の著しい進歩に伴って多種多様な機能が備えられている撮像装置間においても、本実施形態に係る撮像装置100の機能を備えることにより、同一被写体の画像データの効率的な共有を実現することができる。また、送信元の撮像装置の特徴量抽出技術に影響を受けないため、自己の撮像装置100に最新の先進的な特徴量抽出技術を備えられている場合、該技術を利用した特徴量抽出・比較を実現することができる。   When neither the angle-of-view determination information nor the feature amount information is compatible as in the compatibility pattern 1, it is possible to determine the identity of the subject by transmitting / receiving only the image data. As a result, the same subject can be obtained by providing the functions of the image capturing apparatus 100 according to the present embodiment even between image capturing apparatuses having various functions along with significant progress in face detection technology and image processing technology in recent years. Efficient sharing of image data can be realized. In addition, since it is not affected by the feature quantity extraction technology of the source imaging device, when the latest imaging device 100 is equipped with the latest advanced feature quantity extraction technology, feature extraction / A comparison can be realized.

また、上記互換性パターン2および3のように画角判断情報に互換性がある場合、撮像対象エリアの同一性を最初に判断することができる。この結果、本実施形態に係る撮像装置100は、同一のエリアを撮像対象としている撮像装置とのみ画像データの共有を行うことができる。一般に撮像位置、撮像方向、画角に関する情報の送受信は、特徴量抽出処理や画像データ送受信処理などと比べて通信負荷が小さいため、無駄な画像データの送受信による通信負荷の軽減を実現することもできる。   Further, when the angle-of-view determination information is compatible as in the compatibility patterns 2 and 3, it is possible to first determine the identity of the imaging target area. As a result, the imaging apparatus 100 according to the present embodiment can share image data only with an imaging apparatus that captures the same area. In general, transmission / reception of information related to the imaging position, imaging direction, and angle of view has a smaller communication load compared to feature amount extraction processing and image data transmission / reception processing. it can.

また、上記互換性パターン4のように特徴量情報のみに互換性がある場合、既知の特許文献1の技術等と同様に、特徴量に基づいて適切な画像データのみを共有することもできる。   Further, when only the feature amount information is compatible as in the compatibility pattern 4, only appropriate image data can be shared based on the feature amount, as in the known technique of Patent Document 1.

なお、上記説明においては、撮像装置100と、他の通信可能な1つの撮像装置50との間で行われる処理を中心に説明したが、本発明はこれに限定されるものではない。撮像装置100は、複数の他の撮像装置から不定期に画像データ、特徴量情報、画角判断情報、データフォーマット情報等を受信する。したがって、画像データの撮像時には、撮像時に通信可能な他の複数の撮像装置へ画角判断情報、特徴量情報、または画像データのいずれかを送信する。また、他の複数の撮像装置からも同時に、複数の画角判断情報、特徴量情報、および画像データを受信する。   In the above description, the processing performed between the imaging apparatus 100 and one other communicable imaging apparatus 50 has been mainly described, but the present invention is not limited to this. The imaging apparatus 100 receives image data, feature amount information, angle-of-view determination information, data format information, and the like at irregular intervals from a plurality of other imaging apparatuses. Therefore, when image data is captured, any of the angle-of-view determination information, the feature amount information, or the image data is transmitted to a plurality of other imaging apparatuses that can communicate at the time of imaging. In addition, a plurality of angle-of-view determination information, feature amount information, and image data are simultaneously received from a plurality of other imaging devices.

また、上記説明における特徴量抽出部108による特徴量の抽出対象は、必ずしも撮像部106による現在の撮像対象に限定されるものではない。特徴量抽出部108は、例えば、ユーザによってあらかじめ設定された画像データから特徴量を抽出してもよい。これにより、撮像装置100のユーザは常に被写体にレンズを向けていなくても、特徴量判断部118が、他の撮像装置で撮像された画像データの特徴量を、あらかじめ設定した所望する被写体の特徴量と比較することができる。また、特徴量抽出部108は、例えば、直近で撮像した画像データから特徴量を抽出してもよい。すなわち、特徴量抽出部108による特徴量の抽出対象となる画像データは、撮像装置100のグレード、ユーザ設定等によって適宜変更することができ、特定の抽出対象に限定されるものではない。なお、このような場合、上述した画角判断情報の比較には、特徴量の抽出対象となる画像データが撮像された時点の画角判断情報を利用すればよい。   In addition, the feature quantity extraction target by the feature quantity extraction unit 108 in the above description is not necessarily limited to the current imaging target by the imaging unit 106. For example, the feature amount extraction unit 108 may extract feature amounts from image data set in advance by the user. As a result, even if the user of the image capturing apparatus 100 does not always point the lens at the subject, the feature amount determining unit 118 sets the feature amount of the image data captured by another image capturing device to the feature of the desired subject set in advance. Can be compared with the amount. In addition, the feature amount extraction unit 108 may extract a feature amount from, for example, the most recently captured image data. That is, the image data from which the feature amount extraction unit 108 extracts the feature amount can be appropriately changed depending on the grade of the imaging apparatus 100, the user setting, and the like, and is not limited to a specific extraction target. In such a case, the angle-of-view determination information at the time when the image data from which the feature amount is to be extracted may be used for the comparison of the angle-of-view determination information described above.

(3.第2実施形態に係る撮像装置400)
次に、本発明の第2実施形態に係る撮像装置400について説明する。上述したように、第1実施形態に係る撮像装置100は、互換性パターンに応じて異なる処理を行うが、最終的に特徴量情報に基づいて被写体の同一性を判断し、被写体が同一の場合のみ他の撮像装置から取得した画像データを保存する。しかし、同一の被写体を撮像している場合でも、必ずしも画像データから抽出した特徴量が一致するとは限らない。例えば、ある人物を正面から撮像している場合と、背後から撮像している場合とでは撮像される画像データの特徴が大きく異なる。また、周囲の光の影響等によっても画像データの色彩情報が大きく異なることも想定される。
(3. Imaging device 400 according to the second embodiment)
Next, an imaging apparatus 400 according to the second embodiment of the present invention will be described. As described above, the imaging apparatus 100 according to the first embodiment performs different processing depending on the compatibility pattern, but finally determines the identity of the subject based on the feature amount information, and the subject is the same Only store image data acquired from other imaging devices. However, even when the same subject is imaged, the feature amounts extracted from the image data do not always match. For example, the characteristics of image data to be captured differ greatly between when a certain person is captured from the front and when captured from the back. It is also assumed that the color information of the image data varies greatly due to the influence of ambient light and the like.

第2実施形態に係る撮像装置400は、特徴量情報に基づいて被写体が同一でないと判断された場合、被写体の同一性をユーザに判断させることができる。これにより、同一の被写体を撮像しているにも関わらず、画像データの特徴量が大きく異なることにより同一被写体の画像データの適切な共有ができないことを回避することができる。このような特徴を有する本発明の第2実施形態に係る撮像装置400について、以下説明する。   The imaging apparatus 400 according to the second embodiment can cause the user to determine the identity of the subject when it is determined that the subject is not the same based on the feature amount information. Accordingly, it is possible to avoid that the image data of the same subject cannot be appropriately shared due to the fact that the feature amount of the image data is greatly different even though the same subject is captured. An imaging apparatus 400 according to the second embodiment of the present invention having such characteristics will be described below.

(3−1.撮像装置400の機能構成)
まず、撮像装置400の機能構成について説明する。図10は、第2実施形態に係る撮像装置400の機能構成の一例を示すブロック図である。図10に示すように、撮像装置400は、上記第1実施形態に係る撮像装置100が備える機能構成に加えて、被写体同一性設定部402をさらに備えている。
(3-1. Functional Configuration of Imaging Device 400)
First, the functional configuration of the imaging apparatus 400 will be described. FIG. 10 is a block diagram illustrating an example of a functional configuration of the imaging apparatus 400 according to the second embodiment. As illustrated in FIG. 10, the imaging apparatus 400 further includes a subject identity setting unit 402 in addition to the functional configuration included in the imaging apparatus 100 according to the first embodiment.

(被写体同一性設定部402)
被写体同一性設定部402は、特徴量に基づく被写体の同一性をユーザに選択させる機能部である。上述したように、特徴量判断部118は他の撮像装置で撮像された画像データの特徴量と、自己の撮像装置の撮像対象の特徴量とを比較することにより被写体の同一性を判断し、被写体が同一であると判断した場合のみ、他の撮像装置で撮像された画像を保存する。これに対して、第2実施形態に係る撮像装置400では、特徴量判断部118により被写体が同一でないと判断された場合、被写体同一性設定部402によりユーザに被写体の同一性の確認を促すことができる。
(Subject identity setting unit 402)
The subject identity setting unit 402 is a functional unit that allows the user to select subject identity based on a feature amount. As described above, the feature amount determination unit 118 determines the identity of the subject by comparing the feature amount of the image data captured by the other imaging device with the feature amount of the imaging target of the own imaging device, Only when it is determined that the subject is the same, an image captured by another imaging device is stored. On the other hand, in the imaging apparatus 400 according to the second embodiment, when the feature amount determination unit 118 determines that the subject is not the same, the subject identity setting unit 402 prompts the user to confirm the identity of the subject. Can do.

具体的には、特徴量判断部118により被写体が同一でないと判断された場合、被写体同一性設定部402は、例えば、表示制御部104を介して、特徴量に基づく被写体同一性の判断結果をディスプレイに表示させる。これを受けてユーザは、被写体が同一であるか否かを判断し、撮像装置400に判断結果を指示する。例えば、特徴量は異なるが被写体は同一であると判断した場合、操作ボタンやタッチパネル等を利用して被写体が同一であることを撮像装置400に指示する。逆に特徴量判断部118による判断結果が正しく被写体が同一でないと判断した場合、被写体が同一でないことを撮像装置400に指示する。操作入力部102を介してユーザからの指示を受けた被写体同一性設定部402は、ユーザからの指示内容を被写体同一性情報として記憶部120に記録する。ここで、「被写体同一性情報」とは、2以上の特徴量が同一の被写体から抽出されたか否かを定義する情報である。例えば、ユーザから同一被写体であると指示された場合、被写体同一性設定部402は、他の撮像装置で撮像された画像データの特徴量と、自己の撮像装置400の撮像対象の特徴量とが、同一の被写体から抽出された特徴量であると定義する被写体同一性情報を記憶部120に記録する。一方、ユーザから同一被写体でないと指示された場合、被写体同一性設定部402は、他の撮像装置で撮像された画像データの特徴量と、自己の撮像装置400の撮像対象の特徴量とが、同一の被写体から抽出された特徴量でないと定義する被写体同一性情報を記憶部120に記録する。このようにして被写体同一性設定部402によって記録された被写体同一性情報は、以後の特徴量判断部118による被写体の同一性判断に利用される。   Specifically, when the feature amount determination unit 118 determines that the subject is not the same, the subject identity setting unit 402 displays the subject identity determination result based on the feature amount via, for example, the display control unit 104. Display on the display. In response to this, the user determines whether or not the subject is the same, and instructs the imaging device 400 to determine the result. For example, when it is determined that the subject is the same although the feature amounts are different, the imaging device 400 is instructed that the subject is the same using an operation button, a touch panel, or the like. On the contrary, if the determination result by the feature amount determination unit 118 is correct and it is determined that the subjects are not the same, the imaging device 400 is instructed that the subjects are not the same. Upon receiving an instruction from the user via the operation input unit 102, the subject identity setting unit 402 records the instruction content from the user in the storage unit 120 as subject identity information. Here, “subject identity information” is information that defines whether or not two or more feature amounts are extracted from the same subject. For example, when the user instructs that the subject is the same subject, the subject identity setting unit 402 obtains the feature amount of the image data captured by another imaging device and the feature amount of the imaging target of the own imaging device 400. The subject identity information that is defined as the feature amount extracted from the same subject is recorded in the storage unit 120. On the other hand, when it is instructed by the user that the subject is not the same subject, the subject identity setting unit 402 determines that the feature amount of the image data captured by another imaging device and the feature amount of the imaging target of the own imaging device 400 are: Subject identity information that is defined as not a feature amount extracted from the same subject is recorded in the storage unit 120. The subject identity information recorded by the subject identity setting unit 402 in this way is used for the subject identity determination by the feature amount judging unit 118 thereafter.

図11は、本実施形態において、被写体同一性設定部402による処理の概念を示す説明図である。図11の例では、1の被写体40を正面から撮像装置400Aが撮像し、背面から撮像装置400Bが撮像している場面を想定している。   FIG. 11 is an explanatory diagram showing the concept of processing by the subject identity setting unit 402 in the present embodiment. In the example of FIG. 11, a scene is assumed in which the imaging device 400A images one subject 40 from the front and the imaging device 400B images from the back.

同一の被写体40を撮像していても撮像位置が大きく異なるため、撮像装置400Aで撮像された画像データ「IA1」から抽出される特徴量「CA1」と、撮像装置400Bで撮像された画像データ「IB1」から抽出される特徴量「CB1」とは、必ずしも一致するとは限らない。特徴量判断部118によって特徴量「CA1」と特徴量「CB1」とが一致しないため被写体が同一でないと判断された場合、被写体同一性設定部402は、表示制御部104を介して被写体の同一性をユーザに確認させるようなメッセージをディスプレイに表示させる。ディスプレイには、図11に示すように、撮像装置400Aおよび400Bで撮像された画像データ、特徴量のパラメータ、撮像位置、撮像方向、画角、被写体の近似率等を表示させる。もちろんディスプレイに表示させる情報はこれらに限定されない。   Even when the same subject 40 is imaged, the imaging positions are greatly different. Therefore, the feature quantity “CA1” extracted from the image data “IA1” captured by the imaging device 400A and the image data “ The feature quantity “CB1” extracted from “IB1” does not necessarily match. If the feature amount determination unit 118 determines that the subject is not the same because the feature amount “CA1” does not match the feature amount “CB1”, the subject identity setting unit 402 uses the display control unit 104 to identify the same subject. A message that allows the user to confirm the sex is displayed on the display. As shown in FIG. 11, the display displays image data captured by the imaging apparatuses 400 </ b> A and 400 </ b> B, feature parameter, imaging position, imaging direction, angle of view, subject approximation rate, and the like. Of course, the information displayed on the display is not limited to these.

ここで、ユーザが操作ボタンやタッチパネル等を利用して、撮像装置400Aで撮像された画像と撮像装置400Bで撮像された画像が同一被写体であると指示した場合、被写体同一性設定部402は係る情報を記憶部120に記録する。具体的には、特徴量CA1と特徴量CB1とは同一の被写体から抽出された特徴量であることを定義する被写体同一性情報を記憶部120に記録する。   Here, when the user uses an operation button, a touch panel, or the like to instruct that the image captured by the imaging device 400A and the image captured by the imaging device 400B are the same subject, the subject identity setting unit 402 Information is recorded in the storage unit 120. Specifically, subject identity information that defines that the feature amount CA1 and the feature amount CB1 are feature amounts extracted from the same subject is recorded in the storage unit 120.

その後、例えば、撮像装置400Aは、撮像装置400Bから被写体40の次の画像データ「IB2」(特徴量は「CB2」)を受信した場合、記憶部120に記録されている被写体同一性情報を利用する。具体的に説明すると、通常撮像装置400Aの特徴量判断部118は、特徴量「CA1」と特徴量「CB2」とに基づいて被写体の同一性を判断するため、被写体は同一でないと判断される可能性が高い。しかし、撮像装置400Aの特徴量判断部118は、記憶部120に記録されている被写体同一性情報を参照することにより、特徴量「CA1」と「CB1」は同一被写体であることを認識することができる。したがって、特徴量判断部118は、特徴量「CB1」と「CB2」が同一被写体であると判断した場合、特徴量「CA1」と「CB2」も同一被写体であると自動で判断することができる。   Thereafter, for example, when receiving the next image data “IB2” (feature amount is “CB2”) of the subject 40 from the imaging device 400B, the imaging device 400A uses the subject identity information recorded in the storage unit 120. To do. More specifically, the feature amount determination unit 118 of the normal imaging apparatus 400A determines the identity of the subject based on the feature amount “CA1” and the feature amount “CB2”, and thus it is determined that the subjects are not the same. Probability is high. However, the feature amount determination unit 118 of the imaging apparatus 400A recognizes that the feature amounts “CA1” and “CB1” are the same subject by referring to the subject identity information recorded in the storage unit 120. Can do. Therefore, when the feature amount determination unit 118 determines that the feature amounts “CB1” and “CB2” are the same subject, the feature amount determination unit 118 can automatically determine that the feature amounts “CA1” and “CB2” are also the same subject. .

この結果、撮像装置400Aの撮像者が一度被写体の同一性を設定した場合、以後撮像装置400Bから受信した画像データの特徴量が異なっていても、同一被写体の場合は自動で画像データを保存することができる。   As a result, when the photographer of the imaging apparatus 400A once sets the identity of the subject, the image data is automatically saved in the case of the same subject even if the feature amount of the image data received from the imaging device 400B is different thereafter. be able to.

また、図11の例において、ユーザが仮に撮像装置400Aで撮像された画像と撮像装置400Bで撮像された画像が同一被写体でないと指示した場合も、被写体同一性設定部402は係る情報を記憶部120に記録する。具体的には、特徴量CA1と特徴量CB1とは同一の被写体から抽出された特徴量ではないことを定義する被写体同一性情報を記憶部120に記録する。   In the example of FIG. 11, even when the user instructs that the image captured by the imaging device 400A and the image captured by the imaging device 400B are not the same subject, the subject identity setting unit 402 stores the information. Record at 120. Specifically, subject identity information that defines that the feature amount CA1 and the feature amount CB1 are not feature amounts extracted from the same subject is recorded in the storage unit 120.

その後、例えば、撮像装置400Aは、撮像装置400Bから被写体40の次の画像データ「IB3」(特徴量は「CB3」)を受信した場合、記憶部120に記録されている被写体同一性情報を利用する。具体的に説明すると、通常撮像装置400Aの特徴量判断部118は、特徴量「CA1」と特徴量「CB3」とに基づいて被写体の同一性を判断するため、被写体は同一でないと判断される可能性が高い。また、撮像装置400Aの特徴量判断部118は、記憶部120に記録されている被写体同一性情報を参照することにより、特徴量「CA1」と「CB1」は既にユーザによって被写体が同一でないと判断されていることを認識することができる。したがって、特徴量判断部118は、特徴量「CB1」と「CB3」が同一被写体であると判断した場合、特徴量「CA1」と「CB3」も同一被写体でないと自動で判断することができる。   Thereafter, for example, when the imaging device 400A receives the next image data “IB3” (feature amount is “CB3”) of the subject 40 from the imaging device 400B, the imaging device 400A uses the subject identity information recorded in the storage unit 120. To do. More specifically, the feature amount determination unit 118 of the normal imaging device 400A determines the identity of the subject based on the feature amount “CA1” and the feature amount “CB3”, and thus it is determined that the subject is not the same. Probability is high. Further, the feature amount determination unit 118 of the imaging apparatus 400A determines that the feature amounts “CA1” and “CB1” are not already the same by the user by referring to the subject identity information recorded in the storage unit 120. Can be recognized. Therefore, when the feature amount determination unit 118 determines that the feature amounts “CB1” and “CB3” are the same subject, the feature amount determination unit 118 can automatically determine that the feature amounts “CA1” and “CB3” are not the same subject.

この結果、撮像装置400Aの撮像者が一度被写体の非同一性を設定した場合、撮像装置400Aは、以後特徴量「CB3」と類似する特徴量の画像を非同一被写体と自動で判断でき、ユーザ確認を繰り返し行うことを回避することができる。   As a result, when the photographer of the imaging apparatus 400A once sets the nonidentity of the subject, the imaging apparatus 400A can automatically determine an image having a feature quantity similar to the feature quantity “CB3” as a non-identical subject, and the user It is possible to avoid repeated confirmation.

(3−2.撮像装置400による処理の流れ)
次に、被写体同一性設定部402を備える撮像装置400によって行われる本発明の特徴的な処理の流れについて、処理フローを参照に詳細に説明する。
(3-2. Flow of Processing by Imaging Device 400)
Next, the characteristic processing flow of the present invention performed by the imaging apparatus 400 including the subject identity setting unit 402 will be described in detail with reference to the processing flow.

(互換性パターン1の場合の処理)
図12は、互換性パターン1の他の撮像装置50から画像データを受信した際の撮像装置400による処理の流れの一例を示すフロー図であり、実施形態1に係る撮像装置100で説明した図6のフロー図に対応する。以下の説明では図6のフローと異なる処理を中心に説明する。
(Processing for compatibility pattern 1)
FIG. 12 is a flowchart illustrating an example of a flow of processing performed by the imaging device 400 when image data is received from another imaging device 50 of the compatibility pattern 1, and is a diagram described in the imaging device 100 according to the first embodiment. 6 corresponds to the flowchart of FIG. In the following description, the processing different from the flow of FIG. 6 will be mainly described.

図12に示すように、ステップ194において、特徴量判断部118により被写体が同一でないと判断された場合、被写体同一性設定部402は、ステップ410において、ユーザに対する被写体同一性確認処理の必要性を判断する。詳細は後述するが、既にユーザによって自己の撮像装置400の撮像対象とは異なる被写体であると指示された被写体の画像データを再度受信した際に、再度ユーザ確認を行うのはユーザにとって煩わしい。したがって、被写体同一性設定部402は、このような場合、ユーザに対する被写体同一性確認処理を行わない。なお、等ステップの詳細については、以下の被写体同一性確認処理の流れを説明した後に説明する。   As shown in FIG. 12, when the feature amount determination unit 118 determines that the subject is not the same in step 194, the subject identity setting unit 402 determines in step 410 that the user needs to perform subject identity confirmation processing. to decide. Although details will be described later, it is troublesome for the user to perform user confirmation again when image data of a subject that has already been instructed by the user to be a subject different from the subject to be imaged by the imaging apparatus 400 is received again. Therefore, the subject identity setting unit 402 does not perform subject identity confirmation processing for the user in such a case. The details of the equal steps will be described after the following flow of subject identity confirmation processing is described.

ステップ410によりユーザに対する被写体同一性確認処理が必要と判断された場合、被写体同一性設定部402は、ステップ411において、ユーザに対する被写体同一性確認処理を行う。被写体同一性設定部402は、例えば、表示制御部104により、被写体の同一性確認をユーザに促すようなメッセージをディスプレイに表示させる。   If it is determined in step 410 that subject identity confirmation processing for the user is necessary, the subject identity setting unit 402 performs subject identity confirmation processing for the user in step 411. For example, the subject identity setting unit 402 causes the display control unit 104 to display a message that prompts the user to confirm subject identity on the display.

その後、ステップ412において、操作入力部102を介してユーザから被写体が同一であるとの指示を受けた場合、被写体同一性設定部402は、ステップ414において、被写体が同一であると定義する被写体同一性情報を記憶部120に記録する。さらに、ステップ196において、撮像装置50から受信した画像データを記憶部120に保存する。この結果、特徴量判断部118によって被写体が同一でないと判断された場合においても、ユーザが同一被写体と判断した場合には、他の撮像装置50で撮像された画像データを保存することもできる。したがって、例えば、同一の被写体をまったく異なる位置から撮像したため特徴量が大きく異なるような場合においても、本実施形態に係る撮像装置400は、同一被写体の画像データを他の撮像装置から取得することもできる。   Thereafter, when an instruction from the user that the subject is the same is received via the operation input unit 102 in step 412, the subject identity setting unit 402 determines that the subject is the same as that defined in step 414. Sex information is recorded in the storage unit 120. Further, in step 196, the image data received from the imaging device 50 is stored in the storage unit 120. As a result, even when the feature amount determination unit 118 determines that the subject is not the same, if the user determines that the subject is the same, the image data captured by the other imaging device 50 can be stored. Therefore, for example, even when the feature amount is significantly different because the same subject is captured from a completely different position, the imaging device 400 according to the present embodiment may acquire image data of the same subject from another imaging device. it can.

一方、ステップ412において、操作入力部102を介してユーザから被写体が同一でないとの指示を受けた場合、被写体同一性設定部402は、ステップ415において、被写体が同一でないと定義する被写体同一性情報を記憶部120に記録する。さらに、ステップ416において、撮像装置50から受信した画像データを消去して処理を終了する。なお、ステップ415により記録された被写体同一性情報は、以後撮像装置50から画像データを受信した際に、上述したステップ410におけるユーザ確認の必要性判断処理で利用される。   On the other hand, when an instruction is received from the user via the operation input unit 102 that the subject is not the same in step 412, the subject identity setting unit 402 determines that the subject is not the same in step 415. Is stored in the storage unit 120. Further, in step 416, the image data received from the imaging device 50 is deleted, and the process is terminated. Note that the subject identity information recorded in step 415 is used in the user confirmation necessity determination process in step 410 described above when image data is received from the imaging device 50 thereafter.

具体的には、ステップ410において、被写体同一性設定部402は、ステップ194による被写体の非同一性が、ステップ415により記録された被写体同一性情報に基づくものか否かを基準に判断する。例えば、ユーザによって一度非同一と判断された被写体の画像データを受信した際に、再度ユーザに被写体の同一性を判断させることは好ましくない。したがって、特徴量判断部118がステップ415により記録された被写体同一性情報に基づいて被写体が同一でないと判断した場合、被写体同一性設定部402は、ユーザによる被写体同一性判断は必要ないと判断し、ステップ411〜414の処理を行わない。   Specifically, in step 410, the subject identity setting unit 402 determines based on whether the subject non-identity in step 194 is based on the subject identity information recorded in step 415. For example, when receiving image data of a subject that is once determined to be non-identical by the user, it is not preferable to cause the user to determine the identity of the subject again. Therefore, when the feature amount determination unit 118 determines that the subject is not the same based on the subject identity information recorded in step 415, the subject identity setting unit 402 determines that the subject identity determination by the user is not necessary. , Steps 411 to 414 are not performed.

この場合、被写体同一性設定部402は、ステップ415において、ステップ190および192で抽出した特徴量が異なる被写体であることを定義する被写体同一性情報を記憶部120に記録し、ステップ416において、画像データを消去する。このように、被写体の同一性に関する情報を蓄積していくことにより、無駄なユーザ確認処理を極力回避することができる。   In this case, the subject identity setting unit 402 records, in step 415, subject identity information that defines that the feature amounts extracted in steps 190 and 192 are different subjects in the storage unit 120. In step 416, the subject identity setting unit 402 records the image. Erase the data. As described above, by accumulating information on the identity of the subject, useless user confirmation processing can be avoided as much as possible.

(互換性パターン2の場合の処理)
図13は、互換性パターン2の他の撮像装置50から画角判断情報を受信した際の撮像装置400による処理の流れの一例を示すフロー図であり、実施形態1に係る撮像装置100で説明した図7のフロー図に対応する。
(Processing for compatibility pattern 2)
FIG. 13 is a flowchart illustrating an example of a flow of processing performed by the imaging apparatus 400 when the angle-of-view determination information is received from the other imaging apparatus 50 of the compatibility pattern 2, and will be described with the imaging apparatus 100 according to the first embodiment. This corresponds to the flowchart of FIG.

互換性パターン2の場合も、ステップ212において、特徴量判断部118により被写体が同一でないと判断された場合、被写体同一性設定部402は、ステップ420でユーザ確認の必要性を判断した上で、必要に応じて、ステップ421〜426において、ユーザに対する被写体同一性確認処理を行う。なお、ステップ420〜426の処理は、図12で説明したステップ410〜416と同様であるため詳細は省略する。   Also in the case of the compatibility pattern 2, when the feature amount determination unit 118 determines that the subject is not the same in step 212, the subject identity setting unit 402 determines the necessity of user confirmation in step 420. In steps 421 to 426, subject identity confirmation processing for the user is performed as necessary. Note that the processing in steps 420 to 426 is the same as that in steps 410 to 416 described in FIG.

(互換性パターン3の場合の処理)
図14は、互換性パターン3の他の撮像装置50から画角判断情報を受信した際の撮像装置400による処理の流れの一例を示すフロー図であり、実施形態1に係る撮像装置100で説明した図8のフロー図に対応する。
(Processing for compatibility pattern 3)
FIG. 14 is a flowchart illustrating an example of a flow of processing performed by the imaging device 400 when the angle-of-view determination information is received from the other imaging device 50 of the compatibility pattern 3, and will be described with the imaging device 100 according to the first embodiment. This corresponds to the flowchart of FIG.

互換性パターン3の場合も、ステップ230において、特徴量判断部118により被写体が同一でないと判断された場合、被写体同一性設定部402は、ステップ430でユーザ確認の必要性を判断した上で、必要に応じて、ステップ431において、ユーザに対して被写体の同一性の確認を行う。なお、互換性パターン3の場合、この時点では撮像装置50から画像データを受信していないため、特徴量に基づく被写体の形状、色彩分布、近似率等をディスプレイに表示させることによりユーザに被写体の同一性を判断させる。   In the case of the compatibility pattern 3 as well, when the feature amount determination unit 118 determines that the subject is not the same in step 230, the subject identity setting unit 402 determines the necessity of user confirmation in step 430. If necessary, in step 431, the identity of the subject is confirmed with respect to the user. In the case of the compatibility pattern 3, since image data has not been received from the imaging device 50 at this time, the shape of the subject based on the feature amount, the color distribution, the approximation rate, and the like are displayed on the display to the user. Let the identity be judged.

その後、ステップ432において、操作入力部102を介してユーザから被写体が同一であるとの指示を受けた場合、被写体同一性設定部402は、ステップ434において、被写体が同一であると定義する被写体同一性情報を記憶部120に記録する。その後は、図8で説明したように、ステップ232〜236において、撮像装置50から取得した画像データを取得する。   Thereafter, in step 432, when receiving an instruction from the user that the subject is the same via the operation input unit 102, the subject identity setting unit 402 determines that the subject is the same as that defined in step 434. Sex information is recorded in the storage unit 120. Thereafter, as described in FIG. 8, the image data acquired from the imaging device 50 is acquired in steps 232 to 236.

一方、ステップ432において、操作入力部102を介してユーザから被写体が同一でないとの指示を受けた場合、被写体同一性設定部402は、ステップ436において、被写体が同一でないと定義する被写体同一性情報を記憶部120に記録して処理を終了する。   On the other hand, when an instruction that the subject is not identical is received from the user via the operation input unit 102 in step 432, the subject identity setting unit 402 defines subject identity information that defines that the subject is not identical in step 436. Is stored in the storage unit 120 and the process is terminated.

(互換性パターン4の場合の処理)
図15は、互換性パターン4の他の撮像装置50から特徴量情報を受信した際の撮像装置400による処理の流れの一例を示すフロー図であり、実施形態1に係る撮像装置100で説明した図9のフロー図に対応する。
(Processing for compatibility pattern 4)
FIG. 15 is a flowchart illustrating an example of a process flow performed by the imaging device 400 when feature amount information is received from another imaging device 50 of the compatibility pattern 4, and has been described in the imaging device 100 according to the first embodiment. This corresponds to the flowchart of FIG.

互換性パターン4の場合も、ステップ242において、特徴量判断部118により被写体が同一でないと判断された場合、被写体同一性設定部402は、ステップ440でユーザ確認の必要性を判断した上で、必要に応じて、ステップ441〜446において、ユーザに対する被写体同一性確認処理を行う。なお、ステップ440〜446の処理は、図14で説明したステップ430〜436と同様であるため詳細は省略する。   Also in the case of the compatibility pattern 4, when it is determined in step 242 that the subject is not the same by the feature amount determination unit 118, the subject identity setting unit 402 determines the necessity of user confirmation in step 440. If necessary, in steps 441 to 446, subject identity confirmation processing for the user is performed. Note that the processing in steps 440 to 446 is the same as that in steps 430 to 436 described with reference to FIG.

以上説明したように、第2実施形態に係る撮像装置400は、特徴量に基づいて被写体が同一でないと判断された場合においても、ユーザによる任意の設定に応じて、同一被写体とみなして画像データを保存することができる。この結果、同一の被写体を異なる位置から撮像して特徴量が大きく異なる場合においても、ユーザが1度だけ被写体の同一性を設定することにより、以後他の撮像装置で撮像された画像データを、特徴量が大きく異なる場合でも同一の被写体と自動で判断して保存することができる。したがって、1つの撮像装置で同一被写体を複数のアングルであらかじめ撮像する必要もなく、ユーザ負担を極力軽減することができる。このように、実施形態2に係る撮像装置400は、特徴量のみによる判断では実現することができない最適な同一被写体の画像データの共有を、少ないユーザ負担で実現することができる。   As described above, the imaging apparatus 400 according to the second embodiment regards the image data as the same subject according to an arbitrary setting by the user even when it is determined that the subject is not the same based on the feature amount. Can be saved. As a result, even when the same subject is imaged from different positions and the feature amount is greatly different, the user sets the subject identity only once, so that the image data captured by another imaging device is Even when the feature amount is greatly different, it can be automatically determined and stored as the same subject. Therefore, it is not necessary to previously image the same subject at a plurality of angles with one imaging device, and the burden on the user can be reduced as much as possible. As described above, the imaging apparatus 400 according to the second embodiment can realize sharing of optimal image data of the same subject, which cannot be realized only by a feature amount, with a small user burden.

また、ユーザが1度だけ被写体の非同一性を設定することにより、撮像装置400は、以後他の撮像装置で撮像された該被写体の画像データを受信した際に、ユーザに対する被写体の同一性確認を繰り返し行う必要がない。したがって、被写体が同一でないと定義する被写体同一性情報を蓄積していくことにより、被写体の同一性判断の柔軟性を向上させるのみでなく、ユーザに対する負担も極力軽減させることができる。   In addition, when the user sets the non-identity of the subject only once, the imaging device 400 confirms the identity of the subject with respect to the user when receiving image data of the subject captured by another imaging device thereafter. Need not be repeated. Therefore, by accumulating the subject identity information that defines that the subject is not the same, not only the flexibility of the subject identity determination can be improved, but also the burden on the user can be reduced as much as possible.

また、上記説明において互換性パターン3および4の場合は、画像データの受信前にユーザに対する被写体同一性確認処理を行っているため、ユーザは画像データを確認することができない。したがって、ユーザは、ディスプレイに表示される被写体の形状や色彩、近似率等に基づいて被写体の同一性を判断する必要がある。しかし、互換性パターン3および4の場合においても、特徴量判断部118により被写体が同一でないと判断された場合に、他の撮像装置50から画像データを取得した上で被写体同一性確認処理を行ってもよい。この場合、ユーザは画像データを確認した上で被写体の同一性を判断することができる。   In the case of the compatibility patterns 3 and 4 in the above description, since the subject identity confirmation process is performed on the user before the image data is received, the user cannot confirm the image data. Therefore, the user needs to determine the identity of the subject based on the shape and color of the subject displayed on the display, the approximation rate, and the like. However, even in the case of the compatibility patterns 3 and 4, when the feature amount determination unit 118 determines that the subject is not the same, the subject identity confirmation process is performed after obtaining the image data from the other imaging device 50. May be. In this case, the user can determine the identity of the subject after confirming the image data.

(4.第3実施形態に係る撮像装置600)
次に、本発明の第3実施形態に係る撮像装置600について説明する。上述したように、第2実施形態に係る撮像装置400は、他の撮像装置で撮像された特徴量が異なる画像データであっても、ユーザによる設定に応じて、同一被写体の画像データとして保存することができる。すなわち、ユーザ設定という観点から被写体の同一性判断の柔軟性を向上させることができる。これに対して、第3実施形態に係る撮像装置600は、画角判断情報を利用することにより、特徴量に基づく被写体の同一性判断の柔軟性をさらに向上させることができる。
(4. Imaging apparatus 600 according to the third embodiment)
Next, an imaging apparatus 600 according to the third embodiment of the present invention will be described. As described above, the imaging device 400 according to the second embodiment stores image data of the same subject according to the setting by the user, even if the image data has different feature amounts captured by other imaging devices. be able to. That is, it is possible to improve the flexibility of determining the identity of the subject from the viewpoint of user setting. On the other hand, the imaging apparatus 600 according to the third embodiment can further improve the flexibility of the subject identity determination based on the feature amount by using the angle-of-view determination information.

上述したように、画角判断情報には撮像装置の位置、撮像方向および画角の情報が含まれている。したがって、撮像位置や方向が異なる2つの画像の特徴量を比較する場合、画角判断情報に基づいて特徴量を補正した上で被写体の同一性を判断するほうが好ましい。例えば、同一被写体を異なる位置から撮像することにより特徴量が大きく異なる場合でも、画角判断情報により特徴量を補正することにより、特徴量判断部118は2つの特徴量が同一被写体から抽出されたものであると判断できる可能性が大きくなる。この結果、ユーザ負担を極力減少させることができる。   As described above, the angle-of-view determination information includes information on the position of the imaging device, the imaging direction, and the angle of view. Therefore, when comparing feature amounts of two images having different imaging positions and directions, it is preferable to determine the identity of the subject after correcting the feature amounts based on the angle-of-view determination information. For example, even when the feature amount differs greatly by capturing the same subject from different positions, the feature amount determination unit 118 extracts two feature amounts from the same subject by correcting the feature amount based on the angle-of-view determination information. The possibility that it can be judged that it is a thing increases. As a result, the user burden can be reduced as much as possible.

以上説明したような特徴を有する本発明の第3実施形態に係る撮像装置600について以下に詳細に説明する。   An imaging apparatus 600 according to the third embodiment of the present invention having the features described above will be described in detail below.

(4−1.撮像装置600の機能構成)
まず、撮像装置600の機能構成について説明する。図16は、第3実施形態に係る撮像装置600の機能構成の一例を示すブロック図である。図16に示すように、撮像装置600は、上記第2実施形態に係る撮像装置400が備える機能構成に加えて、特徴量補正部602をさらに備えている。
(4-1. Functional Configuration of Imaging Device 600)
First, the functional configuration of the imaging apparatus 600 will be described. FIG. 16 is a block diagram illustrating an example of a functional configuration of the imaging apparatus 600 according to the third embodiment. As illustrated in FIG. 16, the imaging apparatus 600 further includes a feature amount correction unit 602 in addition to the functional configuration included in the imaging apparatus 400 according to the second embodiment.

(特徴量補正部602)
特徴量補正部602は、画角判断情報に基づいて特徴量を補正する機能部である。上述したように、同一被写体を撮像した画像データであっても、撮像位置や撮像条件が異なる場合特徴量が大きく異なることも考えられる。このような場合において、特徴量補正部602は、画角判断情報に基づいて特徴量を補正し、特徴量に基づく被写体の同一性判断の正確性を向上させる。
(Feature correction unit 602)
The feature amount correction unit 602 is a functional unit that corrects the feature amount based on the angle-of-view determination information. As described above, even in the case of image data obtained by imaging the same subject, it is conceivable that the feature amounts differ greatly when the imaging position and imaging conditions are different. In such a case, the feature amount correction unit 602 corrects the feature amount based on the angle-of-view determination information, and improves the accuracy of the subject identity determination based on the feature amount.

図17は、本実施形態において、特徴量補正部602による特徴量補正処理の概念を示す説明図である。図17の例では、1の被写体42を撮像装置600Aおよび600Bが異なる位置から撮像している場面を想定している。   FIG. 17 is an explanatory diagram showing the concept of feature amount correction processing by the feature amount correction unit 602 in the present embodiment. In the example of FIG. 17, a scene is assumed in which the imaging device 600 </ b> A and 600 </ b> B captures one subject 42 from different positions.

撮像装置600Aの特徴量補正部602はまず、撮像装置600Aの画角判断情報と撮像装置600Bの画角判断情報とを比較し、撮像装置600Aおよび撮像装置600Bの撮像条件の差異を計測する。次に、特徴量補正部602は、画角判断情報から計測した撮像装置600Aおよび撮像装置600Bの撮像条件の差異に基づいて、撮像装置600Aで撮像された画像データの特徴量CA6を補正して、特徴量CA6’を算出する。   First, the feature amount correction unit 602 of the imaging apparatus 600A compares the angle of view determination information of the imaging apparatus 600A and the angle of view determination information of the imaging apparatus 600B, and measures the difference between the imaging conditions of the imaging apparatus 600A and the imaging apparatus 600B. Next, the feature amount correction unit 602 corrects the feature amount CA6 of the image data captured by the imaging device 600A based on the difference in imaging conditions between the imaging device 600A and the imaging device 600B measured from the angle-of-view determination information. The feature amount CA6 ′ is calculated.

特徴量補正部602は、例えば、画角判断情報に基づいて特徴量CA6を、あたかも撮像装置600Bと同じ撮像条件で撮像されたように補正して特徴量CA6’を算出する。なお、特徴量の補正は、撮像位置、撮像方向および画角に関する情報を含む画角判断情報に基づいて行うが、特定の方法に限定されるものではない。例えば、特開2005−277603に記載されているような既知の特徴量補正技術を利用してもよい。また、撮像位置による明るさの差異を考慮して、特徴量情報に含まれる色彩情報を補正してもよい。本実施形態は、特徴量補正技術を利用することで上記実施形態1および2における被写体の同一性判断の正確性をさらに向上させることを目的としており、特徴量補正方法は特定の方法に限定されない。   For example, the feature amount correction unit 602 calculates the feature amount CA6 ′ by correcting the feature amount CA6 as if it was captured under the same imaging conditions as the imaging device 600B based on the angle-of-view determination information. Note that the feature amount correction is performed based on angle-of-view determination information including information regarding the imaging position, imaging direction, and angle of view, but is not limited to a specific method. For example, a known feature amount correction technique as described in JP-A-2005-277603 may be used. In addition, the color information included in the feature amount information may be corrected in consideration of the difference in brightness depending on the imaging position. The present embodiment aims to further improve the accuracy of subject identity determination in the first and second embodiments by using the feature amount correction technique, and the feature amount correction method is not limited to a specific method. .

その後、特徴量判断部118は、特徴量補正部602によって補正された特徴量CA6’と、撮像装置600Bで撮像された画像データの特徴量CB6を比較した上で被写体の同一性を判断する(図17の比較1)。これにより、特徴量CA6とCB6とを比較する場合よりも、被写体の同一性をより正確に判断することができる。   Thereafter, the feature amount determining unit 118 determines the identity of the subject after comparing the feature amount CA6 ′ corrected by the feature amount correcting unit 602 with the feature amount CB6 of the image data captured by the imaging device 600B ( Comparison 1 in FIG. Thereby, it is possible to determine the identity of the subject more accurately than when comparing the feature amounts CA6 and CB6.

また、図17に示すように、特徴量補正部602はさらに、CB6の特徴量も画角情報に基づいて補正してもよい。例えば、特徴量補正部602は、撮像装置600Aと撮像装置600Bの撮像エリアの共通範囲(図17の矢印の範囲)のみを抽出してCB6’を算出してもよい。これにより、特徴量判断部118は、特徴量CA6’とCB6’とを比較した上で被写体の同一性を判断することができ(図17の比較2)、被写体の同一性をより正確に判断することもできる。   In addition, as illustrated in FIG. 17, the feature amount correction unit 602 may further correct the feature amount of CB6 based on the view angle information. For example, the feature amount correction unit 602 may extract only the common range (the range indicated by the arrow in FIG. 17) of the imaging areas of the imaging device 600A and the imaging device 600B and calculate CB6 ′. Thereby, the feature amount determination unit 118 can determine the identity of the subject after comparing the feature amounts CA6 ′ and CB6 ′ (Comparison 2 in FIG. 17), and more accurately determine the identity of the subject. You can also

なお、上記説明では、撮像装置600Aの特徴量補正部602は、自己の撮像装置600Aで撮像された画像データの特徴量CA6を他の撮像装置600Bの画角判断情報に合わせて補正したが、本実施形態は係る例に限定されない。例えば、特徴量補正部602は、他の撮像装置600Bで撮像された画像データの特徴量CB6を自己の撮像装置600Aの画角判断情報に合わせて補正してもよいし、両方の特徴量CA6およびCB6を所定の画角判断情報に合わせて補正してもよい。   In the above description, the feature amount correction unit 602 of the image capturing apparatus 600A corrects the feature amount CA6 of the image data captured by the image capturing apparatus 600A according to the field angle determination information of the other image capturing apparatus 600B. The present embodiment is not limited to such an example. For example, the feature amount correction unit 602 may correct the feature amount CB6 of the image data captured by the other imaging device 600B in accordance with the angle-of-view determination information of its own imaging device 600A, or both feature amounts CA6. And CB6 may be corrected according to predetermined angle-of-view determination information.

(4−2.撮像装置600による処理の流れ)
次に、特徴量補正部602を備える撮像装置600によって行われる本発明の特徴的な処理の流れについて、処理フローを参照に詳細に説明する。なお、本実施形態は、画角判断情報に基づいて特徴量の補正を行うため、特徴量補正は、画角判断情報の互換性を有している互換性パターン2および3においてのみ行われる処理である。以下の説明では、特徴量補正が実行される互換性パターン2および3の処理の流れを中心に説明する。
(4-2. Flow of Processing by Imaging Device 600)
Next, the characteristic processing flow of the present invention performed by the imaging apparatus 600 including the feature amount correction unit 602 will be described in detail with reference to the processing flow. In this embodiment, since the feature amount is corrected based on the view angle determination information, the feature amount correction is performed only in the compatibility patterns 2 and 3 having compatibility of the view angle determination information. It is. In the following description, the processing flow of the compatibility patterns 2 and 3 in which feature amount correction is performed will be mainly described.

(互換性パターン2の場合の処理)
図18は、互換性パターン2の他の撮像装置50から画角判断情報を受信した際の撮像装置600による処理の流れの一例を示すフロー図であり、実施形態2に係る撮像装置400で説明した図13のフロー図に対応する。以下の説明では図13のフローと異なる処理を中心に説明する。
(Processing for compatibility pattern 2)
FIG. 18 is a flowchart illustrating an example of a flow of processing performed by the imaging device 600 when the angle-of-view determination information is received from the other imaging device 50 of the compatibility pattern 2, and will be described with the imaging device 400 according to the second embodiment. This corresponds to the flowchart of FIG. In the following description, processing different from the flow in FIG. 13 will be mainly described.

図18に示すように、ステップ610において、特徴量補正部602は、撮像装置50から受信した画角判断情報および自己の撮像装置600の画角判断情報に基づいて、ステップ208で抽出した特徴量または/およびステップ210で抽出した特徴量を補正する。その後、ステップ612において、特徴量判断部118は、ステップ610により補正された特徴量に基づいて被写体の同一性を判断する。以後の処理は上記実施形態1または2と同様のため詳細は省略する。   As illustrated in FIG. 18, in step 610, the feature amount correction unit 602 extracts the feature amount extracted in step 208 based on the view angle determination information received from the imaging device 50 and the view angle determination information of its own image capturing device 600. Or / and the feature amount extracted in step 210 is corrected. Thereafter, in step 612, the feature amount determination unit 118 determines the identity of the subject based on the feature amount corrected in step 610. Since the subsequent processing is the same as that of the first or second embodiment, the details are omitted.

このように、特徴量に基づく被写体の同一性判断を行う前に、画角判断情報に基づく特徴量の補正を行っているため、特徴量判断部118による被写体の同一性判断の正確性をさらに向上させることができる。この結果、上記実施形態2で説明したユーザによる被写体同一性設定の機会を軽減させることもできる。   As described above, since the feature amount is corrected based on the angle-of-view determination information before the subject identity determination based on the feature amount, the accuracy of the subject identity determination by the feature amount determination unit 118 is further improved. Can be improved. As a result, the opportunity for the subject identity setting by the user described in the second embodiment can be reduced.

(互換性パターン3の場合の処理)
図19は、互換性パターン3の他の撮像装置50から画角判断情報を受信した際の撮像装置600による処理の流れの一例を示すフロー図であり、実施形態2に係る撮像装置400で説明した図14のフロー図に対応する。以下の説明では図14のフローと異なる処理を中心に説明する。
(Processing for compatibility pattern 3)
FIG. 19 is a flowchart illustrating an example of a flow of processing performed by the imaging apparatus 600 when the angle-of-view determination information is received from the other imaging apparatus 50 of the compatibility pattern 3, and will be described with the imaging apparatus 400 according to the second embodiment. This corresponds to the flowchart of FIG. In the following description, processing different from the flow in FIG. 14 will be mainly described.

図19に示すように、ステップ620において特徴量補正部602による特徴量補正が行われ、ステップ622において特徴量判断部118による被写体の同一性判断処理が行われる。なお、ステップ620および622の処理は、図18で説明したステップ610および612と同様であり、以後の処理は上記実施形態1または2と同様のため詳細は省略する。   As shown in FIG. 19, feature amount correction is performed by the feature amount correction unit 602 in step 620, and subject identity determination processing is performed by the feature amount determination unit 118 in step 622. Note that the processing in steps 620 and 622 is the same as that in steps 610 and 612 described with reference to FIG. 18, and the subsequent processing is the same as that in the first or second embodiment, and thus the details thereof are omitted.

以上説明したように、第3実施形態に係る撮像装置600は、画角判断情報に基づいて特徴量を補正した上で被写体の同一性を判断することができる。したがって、他の撮像装置と画角判断情報の互換性を有している場合、画角判断情報を取得して特徴量を補正することにより、被写体の同一性判断をより正確に行うことができる。この結果、異なる撮像条件で同一被写体を撮像している撮像装置からも、より正確に同一被写体の画像データを取得して保存することができる。したがって、例えば、実施形態2で説明した被写体同一性設定機能を備えているような場合でも、ユーザ負担を極力軽減させることが可能である。   As described above, the imaging apparatus 600 according to the third embodiment can determine the identity of the subject after correcting the feature amount based on the angle-of-view determination information. Accordingly, when the angle of view determination information is compatible with other imaging devices, it is possible to more accurately determine the identity of the subject by acquiring the angle of view determination information and correcting the feature amount. . As a result, image data of the same subject can be acquired and stored more accurately from imaging devices that are capturing the same subject under different imaging conditions. Therefore, for example, even when the subject identity setting function described in the second embodiment is provided, the user burden can be reduced as much as possible.

(6.まとめ)
以上説明したように、本発明の各種実施形態に係る撮像装置は、撮像位置、撮像方向および画角に関する情報を含む画角判断情報、および画像データから抽出される特徴量情報の互換性の有無に基づいて、撮像時のデータ送信方法や、データ受信時の処理を変化させる。これにより、データを送受信可能な複数の撮像装置間において、画像データから抽出される特徴量の互換性の有無に関わらず、同一被写体の画像データを共有することを可能としている。
(6. Summary)
As described above, the imaging apparatus according to various embodiments of the present invention is compatible with the angle of view determination information including information regarding the imaging position, the imaging direction, and the angle of view, and the feature amount information extracted from the image data. Based on the above, the data transmission method at the time of imaging and the processing at the time of data reception are changed. This makes it possible to share image data of the same subject between a plurality of imaging devices capable of transmitting and receiving data regardless of the compatibility of feature amounts extracted from the image data.

まず、画角判断情報および特徴量情報のいずれにも互換性がない互換性パターン1の場合、画像データを撮像した撮像装置は他の撮像装置へ画像データを送信する。画像データを受信した撮像装置は、受信した画像データから特徴量を抽出することにより被写体の同一性を判断することができる。このように、画角判断情報や特徴量情報に互換性がない場合であっても、自己の撮像装置に備えられる特徴量抽出機能を利用することができる。したがって、撮像装置間の特徴量抽出方法の違い、特徴量のパラメータの違い、特徴量のデータ形式の違いに関わらず被写体の同一性を判断することができ、他の撮像装置で撮像された同一被写体の画像データを共有することが可能である。   First, in the case of the compatibility pattern 1 in which neither the angle-of-view determination information nor the feature amount information is compatible, the imaging device that captured the image data transmits the image data to another imaging device. The imaging device that has received the image data can determine the identity of the subject by extracting a feature amount from the received image data. As described above, even if the angle-of-view determination information and the feature amount information are not compatible, the feature amount extraction function provided in the own imaging apparatus can be used. Therefore, the identity of the subject can be determined regardless of the difference in the feature quantity extraction method between the imaging devices, the difference in the feature quantity parameters, and the difference in the data format of the feature quantity. It is possible to share the image data of the subject.

画角判断情報の互換性はあるが特徴量情報の互換性がない互換性パターン2の場合、まず画角判断情報に基づいて同じ撮像エリアを撮像対象としているか否かを判断することにより、無駄な画像データの送受信を回避することができる。この結果、撮像装置の消費電力や通信負荷の軽減を実現することもできる。また、画角判断情報に基づいて特徴量を補正した上で被写体の同一性を判断することにより、被写体の同一性判断の正確性をより向上させることもできる。また、特徴量情報に基づいて被写体が同一でないと判断された場合においても、ユーザからの指示に応じた被写体同一設定処理を行うことにより、被写体の同一性判断の柔軟性を向上させることもできる。この結果、同一被写体を大きく異なるアングルで撮像したような画像に関しても、少ないユーザ負担で画像共有することもできる。   In the case of the compatibility pattern 2 in which the angle-of-view determination information is compatible but the feature amount information is not compatible, first, it is unnecessary to determine whether or not the same imaging area is the imaging target based on the angle-of-view determination information. Transmission / reception of image data can be avoided. As a result, it is possible to reduce power consumption and communication load of the imaging apparatus. In addition, by correcting the feature amount based on the angle-of-view determination information and determining the identity of the subject, the accuracy of the subject identity determination can be further improved. Also, even when it is determined that the subject is not the same based on the feature amount information, the subject identity setting process according to the instruction from the user can improve the flexibility of the subject identity determination. . As a result, it is also possible to share an image with a small burden on the user even when images of the same subject are captured at greatly different angles.

画角判断情報および特徴量情報のいずれにも互換性がある互換性パターン3の場合も同様に、まず画角判断情報に基づいて同じ撮像エリアを撮像対象としているか否かを判断することにより、無駄な画像データの送受信を回避することができる。この結果、撮像装置の消費電力や通信負荷の軽減を実現することもできる。また、画角判断情報に基づいて特徴量を補正した上で被写体の同一性を判断することにより、被写体の同一性判断の正確性をより向上させることもできる。   Similarly, in the case of the compatibility pattern 3 in which both the angle-of-view determination information and the feature amount information are compatible, first, based on the angle-of-view determination information, it is determined whether or not the same imaging area is an imaging target. Transmission / reception of useless image data can be avoided. As a result, it is possible to reduce power consumption and communication load of the imaging apparatus. In addition, by correcting the feature amount based on the angle-of-view determination information and determining the identity of the subject, the accuracy of the subject identity determination can be further improved.

画角判断情報の互換性はないが特徴量情報の互換性がある互換性パターン4の場合、従来の特徴量情報に基づく被写体の同一性判断を行うこともできる。さらに、特徴量情報に基づいて被写体が同一でないと判断された場合においても、ユーザからの指示に応じた被写体同一設定処理を行うことにより、被写体の同一性判断の柔軟性を向上させることもできる。この結果、同一被写体を大きく異なるアングルで撮像したような画像に関しても、少ないユーザ負担で画像共有することもできる。   In the case of the compatibility pattern 4 in which the angle-of-view determination information is not compatible but the feature amount information is compatible, it is possible to determine the identity of the subject based on the conventional feature amount information. Further, even when it is determined that the subject is not the same based on the feature amount information, the subject identity setting process according to the instruction from the user can improve the flexibility of the subject identity determination. . As a result, it is also possible to share an image with a small burden on the user even when images of the same subject are captured at greatly different angles.

以上のように、本発明の各実施形態に係る撮像装置は、データを送受信可能な複数の撮像装置間において、画像データから抽出される特徴量の互換性の有無に関わらず、同一被写体の画像データを共有することが可能である。   As described above, in the imaging devices according to the embodiments of the present invention, the images of the same subject can be used regardless of whether or not the feature amounts extracted from the image data are compatible among a plurality of imaging devices capable of transmitting and receiving data. It is possible to share data.

以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。   The preferred embodiments of the present invention have been described in detail above with reference to the accompanying drawings, but the present invention is not limited to such examples. It is obvious that a person having ordinary knowledge in the technical field to which the present invention pertains can come up with various changes or modifications within the scope of the technical idea described in the claims. Of course, it is understood that these also belong to the technical scope of the present invention.

また、本明細書において、フロー図に記述されたステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的に又は個別的に実行される処理をも含む。また時系列的に処理されるステップでも、場合によっては適宜順序を変更することが可能であることは言うまでもない。   Further, in the present specification, the steps described in the flowchart are not only processed in time series in the order described, but also in parallel or individually even if not necessarily processed in time series. Also includes processing to be performed. Further, it goes without saying that the order can be appropriately changed even in the steps processed in time series.

100、400、600 撮像装置
102 操作入力部
104 表示制御部
106 撮像部
108 特徴量抽出部
110 画角判断情報計測部
112 通信部
114 互換性判断部
116 画角判断部
118 特徴量判断部
120 記憶部
122 制御部
402 被写体同一性設定部
602 特徴量補正部
DESCRIPTION OF SYMBOLS 100, 400, 600 Image pick-up device 102 Operation input part 104 Display control part 106 Imaging part 108 Feature-value extraction part 110 Angle-of-view judgment information measurement part 112 Communication part 114 Compatibility judgment part 116 Angle-of-view judgment part 118 Feature-value judgment part 120 Storage Unit 122 control unit 402 subject identity setting unit 602 feature amount correction unit

Claims (13)

所定の被写体を撮像する撮像部と、
ネットワークを介して他の撮像装置と所定のデータを送受信する通信部と、
前記撮像部による撮像位置、撮像方向および画角を計測し画角判断情報として記憶部に記録する画角判断情報計測部と、
前記撮像部により撮像される画像データから特徴量を抽出し特徴量情報として前記記憶部に記録する特徴量抽出部と、
前記通信部により通信可能な少なくとも1以上の他の撮像装置との前記画角判断情報および前記特徴量情報に関する互換性を判断し、該他の撮像装置の識別情報とともに互換性の判断結果を互換性情報として前記記憶部に記録する互換性判断部と、を備え、
前記撮像部により所定の被写体が撮像された場合、前記互換性情報に基づいて、前記画角判断情報、前記特徴量情報、または前記撮像部により撮像された画像データのいずれかを前記通信部が現在通信可能な他の撮像装置へ送信することを特徴とする、撮像装置。
An imaging unit for imaging a predetermined subject;
A communication unit that transmits and receives predetermined data to and from another imaging device via a network;
An angle-of-view determination information measuring unit that measures an image pickup position, an image pickup direction, and an angle of view by the image pickup unit and records them in the storage unit as angle-of-view determination information;
A feature amount extraction unit that extracts feature amounts from image data captured by the imaging unit and records the feature amounts as feature amount information in the storage unit;
The compatibility with respect to the angle-of-view determination information and the feature amount information with at least one other imaging device that can communicate with the communication unit is determined, and the compatibility determination result is compatible with the identification information of the other imaging device. A compatibility determination unit for recording in the storage unit as sex information,
When a predetermined subject is imaged by the imaging unit, the communication unit determines any one of the angle-of-view determination information, the feature amount information, or image data captured by the imaging unit based on the compatibility information. An image pickup apparatus that transmits to another image pickup apparatus that is currently communicable.
前記通信部は、前記撮像部により所定の被写体が撮像された場合、前記互換性情報に基づいて、該通信部が現在通信可能な他の撮像装置との前記画角判断情報および前記特徴量情報に関する互換性の有無を判断し、
前記画角判断情報および前記特徴量情報のいずれにも互換性がない第1の互換性パターンの場合、前記撮像部により撮像された画像データを該他の撮像装置へ送信し、
前記画角判断情報の互換性はあるが前記特徴量情報の互換性がない第2の互換性パターンの場合、前記画角判断情報計測部により計測された前記画角判断情報を該他の撮像装置へ送信し、
前記画角判断情報および前記特徴量情報のいずれにも互換性がある第3の互換性パターン場合、前記画角判断情報計測部により計測された前記画角判断情報を該他の撮像装置へ送信し、
前記画角判断情報の互換性はないが前記特徴量情報の互換性がある第4の互換性パターンの場合、前記特徴量抽出部により前記画像データから抽出された前記特徴量情報を該他の撮像装置へ送信することを特徴とする、請求項1に記載の撮像装置。
The communication unit, when a predetermined subject is imaged by the imaging unit, based on the compatibility information, the angle-of-view determination information and the feature amount information with another imaging device with which the communication unit can currently communicate To determine the compatibility of
In the case of the first compatibility pattern in which neither the angle of view determination information nor the feature amount information is compatible, the image data captured by the imaging unit is transmitted to the other imaging device,
In the case of the second compatibility pattern in which the angle-of-view determination information is compatible but the feature amount information is not compatible, the angle-of-view determination information measured by the angle-of-view determination information measurement unit is used for the other imaging. To the device,
In the case of the third compatibility pattern in which both the angle of view determination information and the feature amount information are compatible, the angle of view determination information measured by the angle of view determination information measuring unit is transmitted to the other imaging device. And
In the case of the fourth compatibility pattern in which the angle of view determination information is not compatible but the feature amount information is compatible, the feature amount information extracted from the image data by the feature amount extraction unit The imaging apparatus according to claim 1, wherein the imaging apparatus transmits the image to the imaging apparatus.
複数の撮像装置の前記互換性情報を比較することにより、該複数の撮像装置が同一の撮像エリアを撮像対象としているか否かを判断する画角判断部と
複数の画像データから抽出された前記特徴量情報を比較することにより、該複数の画像データに同一の被写体が存在するか否かを判断する特徴量判断部と、をさらに備え、
前記通信部により他の撮像装置から所定のデータを受信した場合、前記画角判断部および前記特徴量判断部の判断結果に応じて該他の撮像装置で撮像された画像データを前記記憶部に記録することを特徴とする、請求項2に記載の撮像装置。
An angle-of-view determination unit that determines whether or not the plurality of imaging devices target the same imaging area by comparing the compatibility information of a plurality of imaging devices, and the feature extracted from a plurality of image data A feature amount determination unit that determines whether the same subject exists in the plurality of image data by comparing the amount information;
When predetermined data is received from another imaging device by the communication unit, image data captured by the other imaging device is stored in the storage unit according to the determination results of the angle of view determination unit and the feature amount determination unit. The imaging apparatus according to claim 2, wherein recording is performed.
前記第1の互換性パターンの他の撮像装置から画像データを受信した場合、
前記特徴量抽出部は、該他の撮像装置から受信した画像データから特徴量情報を抽出し、
前記特徴量判断部は、前記特徴量抽出部により自己の撮像装置の画像データから抽出された特徴量情報と、該他の撮像装置から受信した画像データから抽出された前記特徴量情報とを比較して同一被写体が撮像されているか否かを判断し、同一被写体が撮像されていると判断された場合にのみ、前記記憶部に該他の撮像装置から受信した画像データを記録することを特徴とする、請求項3に記載の撮像装置。
When image data is received from another imaging device of the first compatibility pattern,
The feature amount extraction unit extracts feature amount information from image data received from the other imaging device,
The feature amount determination unit compares the feature amount information extracted from the image data of its own imaging device by the feature amount extraction unit with the feature amount information extracted from the image data received from the other imaging device. Whether or not the same subject is imaged is determined, and only when it is determined that the same subject is imaged, the image data received from the other imaging device is recorded in the storage unit. The imaging apparatus according to claim 3.
前記第2の互換性パターンの他の撮像装置から画角判断情報を受信した場合、
前記画角判断部は、前記画角判断情報計測部により計測された自己の撮像装置の画角判断情報と、該他の撮像装置から受信した前記画角判断情報とを比較して撮像対象エリアが同一か否かを判断し、撮像対象エリアが同一である場合にのみ、該他の撮像装置へ画像データの送信を要求し、
前記画像データの送信要求に応じて該他の撮像装置から画像データを受信した場合、
前記特徴量抽出部は、該他の撮像装置から受信した画像データから特徴量情報を抽出し、
前記特徴量判断部は、前記特徴量抽出部により自己の撮像装置の画像データから抽出された特徴量情報と、該他の撮像装置から受信した画像データから抽出された前記特徴量情報とを比較して同一被写体が撮像されているか否かを判断し、同一被写体が撮像されていると判断された場合にのみ、前記記憶部に該他の撮像装置から受信した画像データを記録することを特徴とする、請求項4に記載の撮像装置。
When viewing angle determination information is received from another imaging device of the second compatibility pattern,
The angle-of-view determination unit compares the angle-of-view determination information of its own imaging device measured by the angle-of-view determination information measurement unit with the angle-of-view determination information received from the other imaging device, Are determined to be the same, and only when the imaging target areas are the same, request transmission of image data to the other imaging device,
When receiving image data from the other imaging device in response to the transmission request for the image data,
The feature amount extraction unit extracts feature amount information from image data received from the other imaging device,
The feature amount determination unit compares the feature amount information extracted from the image data of its own imaging device by the feature amount extraction unit with the feature amount information extracted from the image data received from the other imaging device. Whether or not the same subject is imaged is determined, and only when it is determined that the same subject is imaged, the image data received from the other imaging device is recorded in the storage unit. The imaging apparatus according to claim 4.
前記第3の互換性パターンの他の撮像装置から画角判断情報を受信した場合、
前記画角判断部は、前記画角判断情報計測部により計測された自己の撮像装置の画角判断情報と、該他の撮像装置から受信した前記画角判断情報とを比較して撮像対象エリアが同一か否かを判断し、撮像対象エリアが同一である場合にのみ、該他の撮像装置へ特徴量情報の送信を要求し、
前記特徴量情報の送信要求に応じて該他の撮像装置から特徴量情報を受信した場合、
前記特徴量判断部は、前記特徴量抽出部により自己の撮像装置の画像データから抽出された特徴量情報と、該他の撮像装置から受信した前記特徴量情報とを比較して同一被写体が撮像されているか否かを判断し、同一被写体が撮像されていると判断された場合にのみ、該他の撮像装置へ画像データの送信を要求し、
前記画像データの送信要求に応じて該他の撮像装置から画像データを受信した場合、該画像データを前記記憶部に記録することを特徴とする、請求項5に記載の撮像装置。
When viewing angle determination information is received from another imaging device of the third compatibility pattern,
The angle-of-view determination unit compares the angle-of-view determination information of its own imaging device measured by the angle-of-view determination information measurement unit with the angle-of-view determination information received from the other imaging device, Only when the imaging target areas are the same, request the other imaging device to transmit the feature amount information,
When the feature amount information is received from the other imaging device in response to the feature amount information transmission request,
The feature amount determination unit compares the feature amount information extracted from the image data of its own imaging device by the feature amount extraction unit with the feature amount information received from the other imaging device, and images the same subject. Only when it is determined that the same subject is being imaged, the other imaging device is requested to transmit image data,
The imaging apparatus according to claim 5, wherein when image data is received from the other imaging apparatus in response to the transmission request for the image data, the image data is recorded in the storage unit.
前記第4の互換性パターンの他の撮像装置から特徴量情報を受信した場合、
前記特徴量判断部は、前記特徴量抽出部により自己の撮像装置の画像データから抽出された特徴量情報と、該他の撮像装置から受信した前記特徴量情報とを比較して同一被写体が撮像されているか否かを判断し、同一被写体が撮像されていると判断された場合にのみ、該他の撮像装置へ画像データの送信を要求し、
前記画像データの送信要求に応じて該他の撮像装置から画像データを受信した場合、該画像データを前記記憶部に記録することを特徴とする、請求項6に記載の撮像装置。
When feature amount information is received from another imaging device of the fourth compatibility pattern,
The feature amount determination unit compares the feature amount information extracted from the image data of its own imaging device by the feature amount extraction unit with the feature amount information received from the other imaging device, and images the same subject. Only when it is determined that the same subject is being imaged, the other imaging device is requested to transmit image data,
The imaging apparatus according to claim 6, wherein when image data is received from the other imaging apparatus in response to the transmission request for the image data, the image data is recorded in the storage unit.
前記画角判断情報に基づいて前記特徴量情報を補正する特徴量補正部をさらに備え、
前記第2の互換性パターンの他の撮像装置から画像データを受信した場合、
前記特徴量補正部は、前記画角判断情報計測部により計測された自己の撮像装置の前記画角判断情報と、該他の撮像装置から受信した前記画角判断情報とに基づいて、前記特徴量抽出部により自己の撮像装置の画像データから抽出された前記特徴量情報および該他の撮像装置から受信した画像データから抽出された前記特徴量情報のいずれか一方または両方を補正し、
前記特徴量判断部は、前記特徴量補正部によって補正された前記特徴量情報に基づいて被写体の同一性を判断することを特徴とする、請求項7に記載の撮像装置。
A feature amount correction unit that corrects the feature amount information based on the angle-of-view determination information;
When image data is received from another imaging device of the second compatibility pattern,
The feature amount correction unit is based on the view angle determination information of its own imaging device measured by the view angle determination information measurement unit and the view angle determination information received from the other imaging device. Correcting one or both of the feature amount information extracted from the image data of the own imaging device by the amount extraction unit and the feature amount information extracted from the image data received from the other imaging device;
The imaging apparatus according to claim 7, wherein the feature amount determination unit determines the identity of a subject based on the feature amount information corrected by the feature amount correction unit.
前記第3の互換性パターンの他の撮像装置から特徴量情報を受信した場合、
前記特徴量補正部は、前記画角判断情報計測部により計測された自己の撮像装置の前記画角判断情報と、該他の撮像装置から受信した前記画角判断情報とに基づいて、前記特徴量抽出部により自己の撮像装置の画像データから抽出された特徴量情報および該他の撮像装置から受信した特徴量情報のいずれか一方または両方を補正し、
前記特徴量判断部は、前記特徴量補正部によって補正された前記特徴量情報に基づいて被写体の同一性を判断することを特徴とする、請求項8に記載の撮像装置。
When feature amount information is received from another imaging device of the third compatibility pattern,
The feature amount correction unit is based on the view angle determination information of its own imaging device measured by the view angle determination information measurement unit and the view angle determination information received from the other imaging device. Correcting one or both of the feature amount information extracted from the image data of the own imaging device and the feature amount information received from the other imaging device by the amount extraction unit;
The imaging apparatus according to claim 8, wherein the feature amount determination unit determines the identity of a subject based on the feature amount information corrected by the feature amount correction unit.
前記特徴量判断部により同一被写体でないと判断された2つの特徴量情報を、ユーザからの指示に応じて、該2つの特徴量情報が同一被写体または非同一被写体から抽出された特徴量であると定義する被写体同一性情報を前記記憶部に記録する被写体同一性設定部をさらに備え、
前記特徴量判断部は、前記被写体同一性情報に基づいて被写体の同一性を判断することを特徴とする、請求項9に記載の撮像装置。
Two feature amount information determined by the feature amount determination unit as not being the same subject is the feature amount extracted from the same subject or a non-identical subject according to an instruction from the user. A subject identity setting unit that records subject identity information to be defined in the storage unit;
The imaging apparatus according to claim 9, wherein the feature amount determination unit determines the identity of a subject based on the subject identity information.
前記通信部は、通信可能な他の1以上の撮像装置を検出した場合、自己の撮像装置の識別番号と、前記画角判断情報計測部により計測される画角判断情報のフォーマット情報と、前記特徴量抽出部により抽出される特徴量情報のフォーマット情報とを、該他の撮像装置へ送信することを特徴とする、請求項1〜10のいずれかに記載の撮像装置。   When the communication unit detects one or more other imaging devices that can communicate with each other, the identification number of the imaging device of itself, the format information of the angle-of-view determination information measured by the angle-of-view determination information measurement unit, The imaging apparatus according to claim 1, wherein format information of feature quantity information extracted by a feature quantity extraction unit is transmitted to the other imaging apparatus. 撮像部により所定の被写体を撮像する撮像ステップと、
前記撮像部による撮像位置、撮像方向および画角を計測し画角判断情報として記憶部に記録する画角判断情報計測ステップと、
前記撮像部によって撮像される画像データから特徴量を抽出し特徴量情報として前記記憶部に記録する特徴量抽出ステップと、
通信部により通信可能な少なくとも1以上の他の撮像装置との前記画角判断情報および前記特徴量情報に関する互換性を判断する互換性判断ステップと、
前記互換性判断ステップによる判断結果に基づいて、前記画角判断情報、前記特徴量情報、または前記撮像ステップにより撮像された画像データのいずれかを前記通信部が現在通信可能な他の撮像装置へ送信する画像データ送信ステップと、
を含むことを特徴とする、画像データ共有方法。
An imaging step of imaging a predetermined subject by the imaging unit;
An angle-of-view determination information measuring step of measuring an image pickup position, an image pickup direction, and an angle of view by the image pickup unit and recording the angle as angle-of-view determination information in a storage unit;
A feature amount extraction step of extracting a feature amount from image data captured by the imaging unit and recording the feature amount as feature amount information in the storage unit;
A compatibility determination step of determining compatibility with respect to the angle-of-view determination information and the feature amount information with at least one or more other imaging devices that can communicate with the communication unit;
Based on the determination result in the compatibility determination step, any one of the angle-of-view determination information, the feature amount information, or the image data imaged in the imaging step is transmitted to another imaging device with which the communication unit can currently communicate. An image data transmission step for transmission;
An image data sharing method comprising:
撮像部により所定の被写体を撮像する撮像ステップと、
前記撮像部による撮像位置、撮像方向および画角を計測し画角判断情報として記憶部に記録する画角判断情報計測ステップと、
前記撮像部によって撮像される画像データから特徴量を抽出し特徴量情報として前記記憶部に記録する特徴量抽出ステップと、
通信部により通信可能な少なくとも1以上の他の撮像装置との前記画角判断情報および前記特徴量情報に関する互換性を判断する互換性判断ステップと、
前記互換性判断ステップによる判断結果に基づいて、前記画角判断情報、前記特徴量情報、または前記撮像ステップにより撮像された画像データのいずれかを前記通信部が現在通信可能な他の撮像装置へ送信する画像データ送信ステップと、
をコンピュータに実行させることを特徴とする、画像データ共有プログラム。
An imaging step of imaging a predetermined subject by the imaging unit;
An angle-of-view determination information measuring step of measuring an image pickup position, an image pickup direction, and an angle of view by the image pickup unit and recording the angle as angle-of-view determination information in a storage unit;
A feature amount extraction step of extracting a feature amount from image data captured by the imaging unit and recording the feature amount as feature amount information in the storage unit;
A compatibility determination step of determining compatibility with respect to the angle-of-view determination information and the feature amount information with at least one or more other imaging devices that can communicate with the communication unit;
Based on the determination result in the compatibility determination step, any one of the angle-of-view determination information, the feature amount information, or the image data imaged in the imaging step is transmitted to another imaging device with which the communication unit can currently communicate. An image data transmission step for transmission;
A computer-executable image data sharing program.
JP2009293477A 2009-12-24 2009-12-24 Image capturing apparatus, image sharing method, and image sharing program Pending JP2011135380A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009293477A JP2011135380A (en) 2009-12-24 2009-12-24 Image capturing apparatus, image sharing method, and image sharing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009293477A JP2011135380A (en) 2009-12-24 2009-12-24 Image capturing apparatus, image sharing method, and image sharing program

Publications (1)

Publication Number Publication Date
JP2011135380A true JP2011135380A (en) 2011-07-07

Family

ID=44347632

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009293477A Pending JP2011135380A (en) 2009-12-24 2009-12-24 Image capturing apparatus, image sharing method, and image sharing program

Country Status (1)

Country Link
JP (1) JP2011135380A (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011234321A (en) * 2010-04-30 2011-11-17 Canon Inc Imaging device, control method of the same, and program
WO2012173112A1 (en) 2011-06-17 2012-12-20 三菱電機株式会社 Amplifier and signal processing device
JP2014187420A (en) * 2013-03-21 2014-10-02 Casio Comput Co Ltd Imaging apparatus, communication method, program, and communication system
KR20160022630A (en) * 2014-08-20 2016-03-02 삼성전자주식회사 Method for sharing data and electronic device thereof

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011234321A (en) * 2010-04-30 2011-11-17 Canon Inc Imaging device, control method of the same, and program
WO2012173112A1 (en) 2011-06-17 2012-12-20 三菱電機株式会社 Amplifier and signal processing device
JP2014187420A (en) * 2013-03-21 2014-10-02 Casio Comput Co Ltd Imaging apparatus, communication method, program, and communication system
KR20160022630A (en) * 2014-08-20 2016-03-02 삼성전자주식회사 Method for sharing data and electronic device thereof
WO2016028093A3 (en) * 2014-08-20 2016-04-14 삼성전자주식회사 Data sharing method and electronic device therefor
US10748005B2 (en) 2014-08-20 2020-08-18 Samsung Electronics Co., Ltd. Data sharing method and electronic device therefor
KR102226820B1 (en) 2014-08-20 2021-03-11 삼성전자주식회사 Method for sharing data and electronic device thereof

Similar Documents

Publication Publication Date Title
KR100944908B1 (en) Image device, focus control method and storage medium recording a focus control program
JP5056061B2 (en) Imaging device
US8823861B2 (en) Imaging apparatus, image display apparatus, imaging method, method of displaying image and method of correcting position of focusing-area frame
US10440278B2 (en) Imaging device and system including imaging device and server
US20110187914A1 (en) Digital photographing apparatus, method of controlling the same, and computer-readable medium
KR20090039595A (en) Composition determining apparatus, composition determining method and program
JP2013068671A (en) Imaging apparatus, control method thereof, program, and storage medium
JP5096297B2 (en) Imaging device
JP2008299784A (en) Object determination device and program therefor
US9674496B2 (en) Method for selecting metering mode and image capturing device thereof
JP2011135380A (en) Image capturing apparatus, image sharing method, and image sharing program
KR20140115984A (en) Image capture apparatus, a communication method, a storage medium and a communication system
US9122129B2 (en) Image pickup apparatus, driving control method thereof, and computer-readable recording medium
JP5942260B2 (en) Imaging device, image reproduction device
JP2003050990A (en) Image processor and program making computer function as the image processor
US20120075495A1 (en) Electronic camera
US20130222632A1 (en) Electronic camera
US20120188437A1 (en) Electronic camera
JP2006127489A (en) Imaging device, image-processing device, method for controlling imaging device, and program for making computer execute the same
JP5332497B2 (en) Imaging apparatus and image transfer method
JP2021153229A (en) Information processing apparatus, imaging apparatus, method, program, and storage medium
US10038835B2 (en) Image pickup device and still picture generating method
JP2016144006A (en) Image processor, imaging device, image processing method, program, and recording medium
US9525815B2 (en) Imaging apparatus, method for controlling the same, and recording medium to control light emission
JP6128929B2 (en) Imaging apparatus, control method therefor, and program