JP2019009651A

JP2019009651A - Imaging control apparatus, imaging control method, and program

Info

Publication number: JP2019009651A
Application number: JP2017124441A
Authority: JP
Inventors: 孝一斉藤; Koichi Saito
Original assignee: Casio Computer Co Ltd
Current assignee: Casio Computer Co Ltd
Priority date: 2017-06-26
Filing date: 2017-06-26
Publication date: 2019-01-17

Abstract

To enable movie shooting taking account of the presence of a subject image.SOLUTION: Digital cameras 10-1, 10-2, and 10-3 each include a battery, and share the remaining battery level and face feature points in a captured moving image via a network 5 with each other. The digital cameras 10-1, 10-2, and 10-3 select a digital camera 10 to which the moving image data being captured is to be transferred, on the basis of the face feature points of another apparatuses when the remaining battery level of the own apparatus decreases (becomes equal to or less than a predetermined threshold value) and transfer the moving image data to the selected digital camera 10. In the other apparatus, the moving image data that has been captured so far and the moving image data that has been transferred are combined to continue shooting.SELECTED DRAWING: Figure 1

Description

本発明は、撮像制御装置、撮像制御方法、及びプログラムに関する。 The present invention relates to an imaging control device, an imaging control method, and a program.

従来、複数のカメラと無線接続し、多視点撮影を実現する撮影システムにおいて、ユーザーが指定した切り替えタイミングでカメラを切り替える技術が開示されている（例えば特許文献１参照）。 2. Description of the Related Art Conventionally, there has been disclosed a technique for switching cameras at a switching timing designated by a user in an imaging system that wirelessly connects to a plurality of cameras to realize multi-viewpoint imaging (see, for example, Patent Document 1).

特開２０１５−１７７３９４号公報JP2015-177394A

しかしながら、従来技術では、その映像において重要な被写体像があったとしても、複数の撮影方向を捕らえるカメラの夫々の撮影範囲で撮影された映像は、必ずしもそれに注目しているものにはならないという問題があった。 However, in the prior art, even if there is an important subject image in the video, the video shot in each shooting range of the camera that captures a plurality of shooting directions is not necessarily focused on it. was there.

そこで本発明は、被写体像の存在を考慮した動画撮影を可能とすることを目的とする。 Accordingly, an object of the present invention is to enable moving image shooting in consideration of the existence of a subject image.

この発明に係る撮像制御装置は、複数の撮像装置から撮像画像を取得する画像取得手段と、前記複数の撮像装置において特定の被写体像を含む撮像範囲の画像を撮像している撮像装置に対し、前記画像を記録させる記録手段と、前記画像取得手段が取得した前記複数の撮像装置の各々における撮像画像の撮像範囲に前記特定の被写体像が存在するか否かを判断する判断手段と、前記判断手段による判断結果に基づいて、前記複数の撮像装置の中から記録動作すべき撮像装置を選択する選択手段と、前記選択手段によって選択された撮像装置に対し、前記記録手段による記録を切り替えて行うよう制御する制御手段と、を備えたことを特徴とする。 An imaging control apparatus according to the present invention provides an image acquisition unit that acquires captured images from a plurality of imaging apparatuses, and an imaging apparatus that captures an image of an imaging range including a specific subject image in the plurality of imaging apparatuses. Recording means for recording the image, determination means for determining whether or not the specific subject image exists in an imaging range of the captured image in each of the plurality of imaging devices acquired by the image acquisition means, and the determination On the basis of the determination result by the means, a selection unit that selects an imaging device to be recorded from the plurality of imaging devices and an image recording device selected by the selection unit are switched to perform recording by the recording unit. And a control means for controlling such that.

この発明に係る撮像制御方法は、複数の撮像装置とから撮像画像を取得する画像取得ステップと、前記複数の撮像装置において特定の被写体像を含む撮像範囲の画像を撮像している撮像装置に対し、前記画像を記録させる記録ステップと、前記画像取得ステップにて取得した前記複数の撮像装置の各々における撮像画像の撮像範囲に前記特定の被写体像が存在するか否かを判断する判断ステップと、前記判断ステップでの判断結果に基づいて、前記複数の撮像装置の中から記録動作すべき撮像装置を選択する選択ステップと、前記選択ステップにて選択された撮像装置に対し、前記記録ステップでの記録を切り替えて行うよう制御する制御ステップと、を含むことを特徴とする。 An imaging control method according to the present invention provides an image acquisition step of acquiring captured images from a plurality of imaging devices, and an imaging device that captures an image of an imaging range including a specific subject image in the plurality of imaging devices. A recording step for recording the image; a determination step for determining whether or not the specific subject image exists in an imaging range of a captured image in each of the plurality of imaging devices acquired in the image acquisition step; A selection step for selecting an imaging device to be recorded from the plurality of imaging devices based on a determination result in the determination step, and for the imaging device selected in the selection step, in the recording step And a control step for controlling the recording to be performed.

この発明に係るプログラムは、コンピュータに、複数の撮像装置とから撮像画像を取得する画像取得機能、前記複数の撮像装置において特定の被写体像を含む撮像範囲の画像を撮像している撮像装置に対し、前記画像を記録させる記録機能、前記画像取得機能が取得した前記複数の撮像装置の各々における撮像画像の撮像範囲に前記特定の被写体像が存在するか否かを判断する判断機能、前記判断機能による判断結果に基づいて、前記複数の撮像装置の中から記録動作すべき撮像装置を選択する選択機能、前記選択機能によって選択された撮像装置に対し、前記記録機能による記録を切り替えて行うよう制御する制御機能、を実現させることを特徴とする。 The program according to the present invention is provided for an image acquisition function for acquiring captured images from a plurality of imaging devices in a computer, and for an imaging device that captures an image of an imaging range including a specific subject image in the plurality of imaging devices. A recording function for recording the image, a determination function for determining whether or not the specific subject image exists in an imaging range of a captured image in each of the plurality of imaging devices acquired by the image acquisition function, and the determination function A selection function for selecting an imaging device to be recorded from the plurality of imaging devices based on a determination result by the control, and a control for switching the recording by the recording function to the imaging device selected by the selection function It is characterized by realizing a control function.

この発明によれば、被写体像の存在を考慮した動画撮影を可能とすることができる。 According to the present invention, it is possible to shoot moving images in consideration of the existence of a subject image.

本発明の実施形態による撮影システムの構成を示すブロック図である。It is a block diagram which shows the structure of the imaging | photography system by embodiment of this invention. 本実施形態によるデジタルカメラ１０の構成を示すブロック図である。It is a block diagram which shows the structure of the digital camera 10 by this embodiment. 本実施形態によるデジタルカメラ１０のカメラ情報テーブル１６１を説明するための概念図である。It is a conceptual diagram for demonstrating the camera information table 161 of the digital camera 10 by this embodiment. 本実施形態のデジタルカメラ１０の動作を説明するためのフローチャートである。4 is a flowchart for explaining the operation of the digital camera 10 of the present embodiment. 本実施形態のデジタルカメラ１０による撮影状況を説明するための概念図である。It is a conceptual diagram for demonstrating the imaging | photography condition by the digital camera 10 of this embodiment.

以下、本発明の実施の形態を、図面を参照して説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.

Ａ．実施形態の構成
図１は、本発明の実施形態による撮影システムの構成を示すブロック図である。図において、撮影システムは、複数のデジタルカメラ１０−１、１０−２、１０−３（以下、総称する場合にはデジタルカメラ１０という）から構成されている。複数のデジタルカメラ１０−１、１０−２、１０−３は、各々、無線通信（ＷｉＦｉ（登録商標）などの無線ＬＡＮなど）１００、１０１、１０２を用いて、インターネットや、通信事業者の通信回線網などのネットワーク５を介して、相互に撮影データを送受信できるようにリンクしている。 A. Configuration of Embodiment FIG. 1 is a block diagram showing a configuration of an imaging system according to an embodiment of the present invention. In the figure, the photographing system is composed of a plurality of digital cameras 10-1, 10-2, 10-3 (hereinafter collectively referred to as digital camera 10). The plurality of digital cameras 10-1, 10-2, and 10-3 use the wireless communication (such as a wireless LAN such as WiFi (registered trademark)) 100, 101, 102 to communicate with the Internet or a communication carrier. The network 5 is linked so that photographing data can be transmitted and received with each other via a network 5 such as a circuit network.

複数のデジタルカメラ１０−１、１０−２、１０−３は、各々、共通する被写体１−１、１−２、１−３を異なる方向（画角）で撮影するよう設置されている。複数のデジタルカメラ１０−１、１０−２、１０−３は、ネットワーク５を介して、互いのバッテリー残量、撮影している画像における顔特徴点を共有している。複数のデジタルカメラ１０−１、１０−２、１０−３は、各々、バッテリーを備えており、自機のバッテリー残量が少なくなると（所定の閾値以下になると）、他機における顔特徴点に基づいて、撮影中の動画データを転送すべきデジタルカメラ１０を選択し、該選択したデジタルカメラ１０に撮影中の動画データを転送する。他機では、これまで撮影した動画データと転送されてきた動画データとを結合して撮影を継続する。これにより、バッテリー残量によらず、継続性を考慮した動画撮影を可能とする。 The plurality of digital cameras 10-1, 10-2, and 10-3 are installed so as to photograph the common subjects 1-1, 1-2, and 1-3 in different directions (angles of view). The plurality of digital cameras 10-1, 10-2, and 10-3 share the remaining battery capacity and facial feature points in the captured image via the network 5. Each of the plurality of digital cameras 10-1, 10-2, and 10-3 includes a battery. When the battery level of the own device decreases (below a predetermined threshold), the facial feature points of other devices Based on this, the digital camera 10 to which the moving image data being shot is to be transferred is selected, and the moving image data being shot is transferred to the selected digital camera 10. In other devices, the shooting is continued by combining the moving image data shot so far with the transferred moving image data. As a result, it is possible to shoot moving images in consideration of continuity regardless of the remaining battery level.

図２は、本実施形態によるデジタルカメラ１０の構成を示すブロック図である。図において、本実施形態のデジタルカメラ１０は、撮像部１１、画像処理部１２、画像記録部１３、無線通信部１４、操作検出部１５、ワークメモリ１６、プログラム記憶部１７、制御部１８、レンズブロック１９、電源管理部２０、及び、バッテリー２１を備えている。 FIG. 2 is a block diagram illustrating the configuration of the digital camera 10 according to the present embodiment. In the figure, a digital camera 10 according to the present embodiment includes an imaging unit 11, an image processing unit 12, an image recording unit 13, a wireless communication unit 14, an operation detection unit 15, a work memory 16, a program storage unit 17, a control unit 18, and a lens. A block 19, a power management unit 20, and a battery 21 are provided.

撮像部１１は、ＣＣＤや、ＣＭＯＳなどの撮像素子からなり、光学レンズ群からなるレンズブロック１９から入った画像を撮像素子によりデジタル信号に変換して出力する。画像処理部１２は、撮影された画像データの画像処理（画素補間処理、γ補正、輝度色差信号の生成、ホワイトバランス処理、露出補正処理、重畳合成処理やフィルタ処理等）、画像データの圧縮・伸張（例えば、ＪＰＥＧ形式やＭ−ＪＰＥＧ形式又はＭＰＥＧ形式の圧縮・伸張）の処理、撮像画像のトリミングや撮像画像のデジタルズームなどの処理などを行う。 The imaging unit 11 includes an image sensor such as a CCD or CMOS, and converts an image input from a lens block 19 including an optical lens group into a digital signal and outputs the digital signal. The image processing unit 12 performs image processing of captured image data (pixel interpolation processing, γ correction, generation of luminance and color difference signals, white balance processing, exposure correction processing, superimposition synthesis processing, filter processing, etc.), image data compression / Processing such as decompression (for example, compression / expansion in JPEG format, M-JPEG format or MPEG format), trimming of a captured image, digital zooming of a captured image, and the like are performed.

画像記録部１３は、撮像された静止画データ／動画データを記録する。無線通信部１４は、無線通信（ＷｉＦｉ（登録商標）などの無線ＬＡＮなど）を用いて、インターネットや、通信事業者の通信回線網などのネットワーク５に接続し、デジタルカメラ１０間でのデータ送受信を可能とする。操作検出部１５は、シャッタキー、ズームキー、モードキー、ムービー記録開始／終了キー、電源オンオフキー等の複数のメカニカル操作キーや、画面上へのタッチ操作を検出し、ユーザーのキー操作に応じた操作信号を出力する。 The image recording unit 13 records captured still image data / moving image data. The wireless communication unit 14 uses wireless communication (such as a wireless LAN such as WiFi (registered trademark)) to connect to the Internet 5 or a network 5 such as a communication network of a communication carrier, and transmit and receive data between the digital cameras 10. Is possible. The operation detection unit 15 detects a plurality of mechanical operation keys such as a shutter key, a zoom key, a mode key, a movie recording start / end key, a power on / off key, and a touch operation on the screen, and responds to the user's key operation. Outputs an operation signal.

ワークメモリ１６は、撮像部１１によって撮像された静止画データ／動画データを一時記憶するバッファメモリとして使用されるとともに、後述する制御部１８がプログラムを実行した際のワーキングメモリとして使用される。特に、本実施形態では、自機、及び他機のバッテリー２１のバッテリー残量を監視・管理する電源管理部２０と、撮影画像から取得した被写体像の顔特徴点とを保持するカメラ情報テーブル１６１を備えている。カメラ情報テーブル１６１の詳細については後述する。プログラム記憶部１７は、後述する制御部１８により実行されるプログラムや動作等に必要とされる各種パラメータなどを記憶している。 The work memory 16 is used as a buffer memory for temporarily storing still image data / moving image data picked up by the image pickup unit 11 and used as a working memory when the control unit 18 described later executes a program. In particular, in this embodiment, a power management unit 20 that monitors and manages the remaining battery levels of the battery 21 of the own device and other devices, and a camera information table 161 that holds facial feature points of the subject image acquired from the captured image. It has. Details of the camera information table 161 will be described later. The program storage unit 17 stores a program executed by the control unit 18 to be described later, various parameters necessary for operations, and the like.

制御部１８は、上述したプログラム記憶部１７に記憶されているプログラムを実行することで各部の動作を制御する。特に、本実施形態では、制御部１８は、マルチカメラ撮影モードによる撮影が開始されると、無線通信部１４により、無線通信１００、１０１、１０２を用いて、ネットワーク５を介して、電源管理部２０が逐次取得するバッテリー２１のバッテリー残量、撮影している画像における顔特徴点を、他のデジタルカメラ１０に逐次送信するとともに、他のデジタルカメラ１０の電源管理部２０が取得したバッテリー２１のバッテリー残量、撮影している画像における顔特徴点を逐次受信する。 The control unit 18 controls the operation of each unit by executing the program stored in the program storage unit 17 described above. In particular, in the present embodiment, when shooting in the multi-camera shooting mode is started, the control unit 18 uses the wireless communication unit 14, the wireless communication 100, 101, 102, and the power management unit via the network 5. 20 sequentially transmits the remaining battery capacity of the battery 21 and the facial feature points in the photographed image to the other digital camera 10, and the battery 21 acquired by the power management unit 20 of the other digital camera 10. The battery remaining amount and facial feature points in the image being taken are sequentially received.

また、制御部１８は、自機のバッテリー２１のバッテリー残量を電源管理部２０から定期的に取得し、このバッテリー残量が少なくなると（所定の閾値以下になると）、カメラ情報テーブル１６１を参照し、自機の顔特徴点と他機の顔特徴点とのマッチングを行い、自機の顔特徴点に最もマッチングしたデジタルカメラ１０を選択し、該選択したデジタルカメラ１０に撮影中の動画データと、これまでに撮影され、画像記録部１３に格納された動画データとを転送する。 Further, the control unit 18 periodically acquires the remaining battery level of the battery 21 of its own device from the power management unit 20, and when the remaining battery level becomes low (below a predetermined threshold), the camera information table 161 is referred to. Then, the face feature point of the own device and the face feature point of the other device are matched, the digital camera 10 that best matches the face feature point of the own device is selected, and the moving image data being photographed by the selected digital camera 10 is selected. And moving image data that has been shot so far and stored in the image recording unit 13 is transferred.

選択されたデジタルカメラ１０の制御部１８では、これまで自身が撮影し、画像記録部１３とワークメモリ１６とに格納された動画データと転送されてきた動画データとの結合処理を行いつつ、撮影を継続する。これにより、複数のデジタルカメラ１０のうち、いずれかのデジタルカメラ１０のバッテリー２１のバッテリー残量が少なくなっても、撮影不能となる前に、他のデジタルカメラ１０で撮影を継続することができるので、バッテリー残量を気にすることなく、継続性を考慮した動画撮影が可能となる。 The control unit 18 of the selected digital camera 10 shoots while performing the combination processing of the moving image data that has been shot by itself and stored in the image recording unit 13 and the work memory 16 and the transferred moving image data. Continue. Thereby, even if the remaining battery level of the battery 21 of any of the plurality of digital cameras 10 is low, shooting with another digital camera 10 can be continued before shooting becomes impossible. Therefore, it is possible to shoot a video considering continuity without worrying about the remaining battery level.

図３は、本実施形態によるデジタルカメラ１０のカメラ情報テーブル１６１を説明するための概念図である。図３に示すように、デジタルカメラ１０−１、１０−２、１０−３は、各々、カメラ情報テーブル１６１を備えている。カメラ情報テーブル１６１は、カメラＩＤ１６２に対応付けて、カメラＩＤ１６２で特定されるデジタルカメラ１０のバッテリー２１のバッテリー残量１６３と、そのデジタルカメラ１０で撮影されている画像から抽出された被写体像の顔特徴点１６４とがデータとして保持されている。これらバッテリー残量１６３と顔特徴点１６４とは、所定の時間間隔で逐次更新される。したがって、デジタルカメラ１０−１、１０−２、１０−３は、各々、カメラ情報テーブル１６１を参照することで、自機のバッテリー残量を知ることができ、顔特徴点１６４を比較（マッチング）することで自機と同様の被写体像を撮影しているデジタルカメラ１０を特定・選択することができる。 FIG. 3 is a conceptual diagram for explaining the camera information table 161 of the digital camera 10 according to the present embodiment. As shown in FIG. 3, each of the digital cameras 10-1, 10-2, and 10-3 includes a camera information table 161. The camera information table 161 is associated with the camera ID 162, the remaining battery capacity 163 of the battery 21 of the digital camera 10 specified by the camera ID 162, and the face of the subject image extracted from the image captured by the digital camera 10. The feature points 164 are held as data. The remaining battery capacity 163 and the face feature point 164 are sequentially updated at predetermined time intervals. Therefore, each of the digital cameras 10-1, 10-2, and 10-3 can know the battery level of the own device by referring to the camera information table 161, and compare (match) the facial feature points 164. By doing so, it is possible to identify and select the digital camera 10 that is shooting the same subject image as the own device.

Ｂ．実施形態の動作
次に、上述した実施形態の動作について説明する。
図４は、本実施形態のデジタルカメラ１０の動作を説明するためのフローチャートである。また、図５は、本実施形態のデジタルカメラ１０による撮影状況を説明するための概念図である。 B. Operation of Embodiment Next, the operation of the above-described embodiment will be described.
FIG. 4 is a flowchart for explaining the operation of the digital camera 10 of the present embodiment. FIG. 5 is a conceptual diagram for explaining a shooting situation by the digital camera 10 of the present embodiment.

尚、撮影システムによる撮影状況としては、図５に示すように、デジタルカメラ１０−１、１０−２、１０−３が、各々、略中央に位置するステージ上の複数の人によるパフォーマンスを、夫々異なる方向から撮影するようにステージの周囲に配置されている。デジタルカメラ１０−１、１０−２、１０−３では、マルチカメラ撮影モードにて撮影（記録）が開始されると、各々において、制御部１８によって、図４に示すフローチャートが実行される。 Note that, as shown in FIG. 5, the shooting situation by the shooting system is that each of the digital cameras 10-1, 10-2, and 10-3 performs by a plurality of people on a stage located substantially in the center. It is arranged around the stage so as to shoot from different directions. In the digital cameras 10-1, 10-2, and 10-3, when shooting (recording) is started in the multi-camera shooting mode, the flowchart shown in FIG. 4 is executed by the control unit 18.

まず、制御部１８は、自機のバッテリー残量及び顔特徴点を取得し、カメラ情報テーブル１６１に逐次記憶させるとともに、これらの情報を、無線通信１００、１０１、１０２を介して他機に送信する。一方、他機のバッテリー残量及び顔特徴点を、無線通信１００、１０１、１０２を介して取得し、カメラ情報テーブル１６１に格納する（ステップＳ１０）。次に、制御部１８は、カメラ情報テーブル１６１を参照し、自機のバッテリー２１のバッテリー残量が少ないか否か（所定の閾値以下か否か）を判断する（ステップＳ１２）。そして、自機のバッテリー残量が少なくない、つまり、撮影の継続が可能と判断した場合には（ステップＳ１２のＮＯ）、デジタルカメラ１０（他機）からの、撮影（記録）したデータの受け入れ要求があるか否かを判断する（ステップＳ２４）。そして、デジタルカメラ１０（他機）からのデータの受け入れ要求がないと判断した場合には（ステップＳ２４のＮＯ）、ステップＳ１０に戻り、撮影を継続したまま、バッテリー残量及び顔特徴点の取得を繰り返す。 First, the control unit 18 acquires the battery remaining amount and the facial feature point of its own device, sequentially stores them in the camera information table 161, and transmits these information to other devices via the wireless communication 100, 101, 102. To do. On the other hand, the remaining battery level and facial feature points of the other devices are acquired via the wireless communication 100, 101, 102 and stored in the camera information table 161 (step S10). Next, the control unit 18 refers to the camera information table 161 and determines whether or not the battery level of the battery 21 of the own device is low (whether it is equal to or less than a predetermined threshold value) (step S12). If it is determined that the battery level of the own device is not low, that is, it is possible to continue shooting (NO in step S12), the captured (recorded) data is accepted from the digital camera 10 (other device). It is determined whether there is a request (step S24). If it is determined that there is no request for accepting data from the digital camera 10 (another device) (NO in step S24), the process returns to step S10, and the remaining battery level and facial feature points are acquired while shooting continues. repeat.

一方、撮影中にバッテリー残量が少なくなったと判断した場合（所定の閾値以下になった場合）には（ステップＳ１２のＹＥＳ）、制御部１８は、カメラ情報テーブル１６１を参照し、自機による顔特徴点と他機による顔特徴点とを比較（マッチング）する（ステップＳ１４）。 On the other hand, when it is determined that the remaining battery level is low during shooting (when the battery level is below a predetermined threshold) (YES in step S12), the control unit 18 refers to the camera information table 161 and determines whether the battery level is low. The face feature point is compared (matched) with the face feature point by another machine (step S14).

例えば、図５に示す例において、デジタルカメラ１０−３のバッテリー残量が少なくなったと判断した場合（所定の閾値以下になった場合）、デジタルカメラ１０−３は、自機のカメラ情報テーブル１６１を参照し、自機による顔特徴点と、デジタルカメラ１０−１、１０−２による顔特徴点とを比較（マッチング）する。 For example, in the example illustrated in FIG. 5, when it is determined that the remaining battery level of the digital camera 10-3 is low (when the battery level is below a predetermined threshold), the digital camera 10-3 has its own camera information table 161. , The face feature points by the own device and the face feature points by the digital cameras 10-1 and 10-2 are compared (matched).

次に、制御部１８は、双方の顔特徴点のマッチングが最大になるデジタルカメラ１０（他機）が存在するか否かを判断し（ステップＳ１６）、存在しないと判断した場合には（ステップＳ１６のＮＯ）、バッテリー残量が無くなるか、操作検出部１５に対する撮影（記録）終了操作を検出することにより、当該処理を終了する。一方、顔特徴点のマッチングが最大になるデジタルカメラ１０（他機）が存在すると判断すると（ステップＳ１６のＹＥＳ）、制御部１８は、そのデジタルカメラ１０が自機と同様の被写体像を撮影していると判断し、そのデジタルカメラ１０を撮影した画像データ（動画データ）の受け入れ先として選択する（ステップＳ１８）。 Next, the control unit 18 determines whether or not there is a digital camera 10 (another device) that maximizes the matching of both facial feature points (step S16). When the remaining battery level is exhausted or the photographing (recording) end operation on the operation detection unit 15 is detected, the process ends. On the other hand, if it is determined that there is a digital camera 10 (another device) that maximizes the matching of facial feature points (YES in step S16), the control unit 18 captures the same subject image as that of the own device. The digital camera 10 is selected as a receiving destination for image data (moving image data) taken (step S18).

例えば、図５に示す例において、デジタルカメラ１０−３と同様に観客席側から撮影しているデジタルカメラ１０−２で、夫々の撮像範囲に含まれる顔特徴点のマッチングが最大であると判断すると、それは、デジタルカメラ１０−３と１０−２との撮像範囲に含まれる被写体像が一致すると見做すことができる。この場合、デジタルカメラ１０−３は、自身が撮影（記録）している画像データ（動画データ）の受け入れ先として、デジタルカメラ１０−２を選択する。 For example, in the example shown in FIG. 5, it is determined that the matching of facial feature points included in each imaging range is the maximum in the digital camera 10-2 that is shooting from the spectator seat side as with the digital camera 10-3. Then, it can be considered that the subject images included in the imaging ranges of the digital cameras 10-3 and 10-2 match. In this case, the digital camera 10-3 selects the digital camera 10-2 as an accepting destination of image data (moving image data) taken (recorded) by itself.

次に、制御部１８は、選択したデジタルカメラ１０にデータ受け入れ要求を送信する（ステップＳ２０）。制御部１８は、この選択したデジタルカメラ１０からデータ受け入れ要求に対する応答があると、選択したデジタルカメラ１０に自機で撮影した画像データ（動画データ）を送信すべく無線通信部１４を制御する（ステップＳ２２）。
図５に示す例では、デジタルカメラ１０−３で撮影した画像データ（動画データ）がデジタルカメラ１０−２に送信し、当該処理を終了する。 Next, the control unit 18 transmits a data acceptance request to the selected digital camera 10 (step S20). When there is a response to the data acceptance request from the selected digital camera 10, the control unit 18 controls the wireless communication unit 14 to transmit image data (moving image data) captured by the own device to the selected digital camera 10 ( Step S22).
In the example illustrated in FIG. 5, image data (moving image data) captured by the digital camera 10-3 is transmitted to the digital camera 10-2, and the process ends.

一方、撮影（記録）中にデジタルカメラ１０（他機）からデータ受け入れ要求があると判断すると（ステップＳ２４のＹＥＳ）、ステップＳ２６以降の処理を実行する。換言すれば、以下の動作は、バッテリー残量が所定の閾値以下となったデジタルカメラ１０（他機）からデータ受け入れ要求を受信したデジタルカメラ１０での動作となる。図５に示す例では、デジタルカメラ１０−２での動作となる。 On the other hand, if it is determined that there is a data acceptance request from the digital camera 10 (other device) during shooting (recording) (YES in step S24), the processing from step S26 is executed. In other words, the following operations are operations in the digital camera 10 that has received a data acceptance request from the digital camera 10 (another device) whose remaining battery level is equal to or less than a predetermined threshold. In the example shown in FIG. 5, the operation is performed by the digital camera 10-2.

データ受け入れ要求を受信した制御部１８は、該データ受け入れ要求に対する応答を返し、デジタルカメラ１０（他機）から送信される画像データ（動画データ）を受信する（ステップＳ２６）。次に、制御部１８は、画像処理部１２により、自機で撮影している画像データ（動画データ）と受信した画像データ（動画データ）との結合部分を解析し（ステップＳ２８）、双方の音声が一致するか否か、すなわち音声が途切れることなく連続して結合可能であるか否かを判断する（ステップＳ３０）。尚、データ受け入れ要求に対する応答には、その時の自機の画像記録部１３における空き容量（記憶領域）、及び、バッテリー残量に基づいて送信（受信）可／不可を判定し、その判定結果が含まれる。つまり応答内容に送信（受信）可が含まれる場合にステップＳ２６以降の処理を実行する。 The control unit 18 that has received the data acceptance request returns a response to the data acceptance request, and receives image data (moving image data) transmitted from the digital camera 10 (another device) (step S26). Next, the control unit 18 analyzes the combined portion of the image data (moving image data) captured by the image processing unit 12 and the received image data (moving image data) by the image processing unit 12 (step S28). It is determined whether or not the voices match, that is, whether or not the voices can be combined continuously without interruption (step S30). In response to the data acceptance request, whether or not transmission (reception) is possible is determined based on the free space (storage area) in the image recording unit 13 and the remaining battery level at that time. included. That is, if the response content includes “transmission (reception)”, the processing after step S26 is executed.

そして、双方の音声が一致し、音声が途切れることなく連続して結合可能な結合部分が抽出できると判断すると（ステップＳ３０のＹＥＳ）、制御部１８は、画像処理部１２により、双方の結合部分を合成して１つのデータにする合成処理を実行し、合成処理した動画データを画像記録部１３に格納する（ステップＳ３２）。次に、制御部１８は、自機による動画撮影を継続する（この継続には記録動作の切り替えも含まれる）（ステップＳ３４）。その後、ステップＳ１０に戻り、上述した処理を繰り返す。一方、双方の音声が一致しない場合には（ステップＳ３０のＮＯ）、受信した動画データは合成処理せずに画像記録部１３に格納する（ステップＳ３６）。次に、制御部１８は、自機による動画撮影を継続する（ステップＳ３４）。 Then, when it is determined that the two voices match and it is possible to extract a joint portion that can be continuously joined without the voice being interrupted (YES in step S30), the control unit 18 causes the image processing unit 12 to perform both joint portions. Is combined into one data, and the combined moving image data is stored in the image recording unit 13 (step S32). Next, the control unit 18 continues moving image shooting by the own device (this continuation includes switching of the recording operation) (step S34). Then, it returns to step S10 and repeats the process mentioned above. On the other hand, if the two voices do not match (NO in step S30), the received moving image data is stored in the image recording unit 13 without being synthesized (step S36). Next, the control unit 18 continues moving image shooting by the own device (step S34).

すなわち、デジタルカメラ１０−３は自機のバッテリー残量が少なくなったと判断すると（所定の閾値以下になると）、デジタルカメラ１０−３と同様の被写体像を撮影しているデジタルカメラ１０−２に対し、これまで撮影していた画像データ（動画データ）の受け入れ要求する、デジタルカメラ１０−２は、この受け入れに対する応答をすると、デジタルカメラ１０−３はこれまで撮像していた画像データ（動画データ）を送信し、デジタルカメラ１０−２がこれを受信する。そして、双方の音声が一致するか否か、すなわち音声が途切れることなく連続して結合可能であるか否かを判断することで受信した画像データ（動画データ）と撮像（記録）している画像データ（動画データ）との合成処理が可能か否かを判断する。これにより、継続性を維持した動画撮影が可能となる。 That is, when the digital camera 10-3 determines that its battery level is low (below a predetermined threshold), the digital camera 10-3 captures the same subject image as the digital camera 10-3. On the other hand, when the digital camera 10-2 that requests acceptance of the image data (moving image data) that has been captured so far responds to the acceptance, the digital camera 10-3 captures the image data (moving image data) that has been captured so far. ) And the digital camera 10-2 receives it. The received image data (moving image data) and the image captured (recorded) are determined by determining whether or not both sounds match, that is, whether or not the sounds can be combined continuously without interruption. It is determined whether or not synthesis processing with data (moving image data) is possible. Thereby, it is possible to shoot a moving image while maintaining continuity.

上述した実施形態によれば、複数のデジタルカメラ１０における撮像画像から、夫々の撮像範囲に特定の被写体像が存在するか否かを、顔特徴点を用いて判断し、該判断結果に基づいて、複数のデジタルカメラ１０の中から記録動作すべきデジタルカメラ１０を選択するようにしたので、いずれかのデジタルカメラ１０で記録動作が不可能になった場合でも、他のデジタルカメラ１０で記録動作を切り替えさせ、結果、その記録動作を継続することができる。 According to the above-described embodiment, whether or not a specific subject image exists in each imaging range from the captured images of the plurality of digital cameras 10 is determined using the facial feature point, and based on the determination result. Since the digital camera 10 that should perform the recording operation is selected from among the plurality of digital cameras 10, the recording operation can be performed with the other digital camera 10 even when the recording operation is disabled with any of the digital cameras 10. As a result, the recording operation can be continued.

上述した実施形態によれば、複数のデジタルカメラ１０の各々に内蔵されるバッテリーの残量を一括管理し、複数のデジタルカメラ１０のうち、いずれかのバッテリー残量が所定値以下になると、記録動作すべきデジタルカメラ１０を選択するようにしたので、いずれかのデジタルカメラ１０でバッテリー残量が所定値以下になって記録動作が不可能になった場合でも、他のデジタルカメラ１０で記録動作を切り替えさせ、結果、その記録動作を継続することができる。 According to the above-described embodiment, the remaining amount of the battery built in each of the plurality of digital cameras 10 is collectively managed, and when any of the plurality of digital cameras 10 has a predetermined remaining battery level or less, recording is performed. Since the digital camera 10 to be operated is selected, even if the remaining battery level of one of the digital cameras 10 becomes a predetermined value or less and the recording operation becomes impossible, the recording operation is performed by another digital camera 10. As a result, the recording operation can be continued.

上述した実施形態によれば、撮像範囲の特定の被写体像の個数に応じて、複数のデジタルカメラ１０の中から記録動作すべきデジタルカメラ１０を選択するようにしたので、送信元のデジタルカメラ１０による撮像画像と同じような撮影画像を撮影しているデジタルカメラ１０を送信先として選択することができ、画像データ（動画データ）を違和感なく結合することができる。 According to the above-described embodiment, the digital camera 10 to be recorded is selected from the plurality of digital cameras 10 according to the number of specific subject images in the imaging range. The digital camera 10 that is capturing a captured image similar to the captured image can be selected as a transmission destination, and image data (moving image data) can be combined without a sense of incongruity.

上述した実施形態によれば、送信先のデジタルカメラ１０として、データ送信前から撮影を開始しているデジタルカメラ１０を選択するようにしたので、転送されてくる画像データ（動画データ）を違和感なく結合することができる。 According to the above-described embodiment, since the digital camera 10 that has started shooting before data transmission is selected as the transmission destination digital camera 10, the transferred image data (moving image data) can be displayed without any sense of incongruity. Can be combined.

尚、上述した実施形態においては、デジタルカメラ１０−１、１０−２、１０−３は、ネットワーク５を介してリンクしていたが、これに限らず、デジタルカメラ１０−１、１０−２、１０−３同士が直接、無線ＬＡＮ、Ｂｌｕｅｔｏｏｔｈ（登録商標）等を用いてリンクするようにしてもよい。 In the above-described embodiment, the digital cameras 10-1, 10-2, and 10-3 are linked via the network 5, but not limited thereto, the digital cameras 10-1, 10-2, 10-3 may be linked directly using a wireless LAN, Bluetooth (registered trademark), or the like.

また、上述した実施形態においては、顔特徴点のマッチングを行ったが、これに限らず、特定の被写体像の個数も含めるようにしてもよい。この場合も、顔特徴点のマッチングと同様に、送信元のデジタルカメラ１０による撮像画像と同じような撮影画像を撮影しているデジタルカメラ１０を送信先として選択することができ、画像データ（動画データ）を違和感なく結合することができる。 In the above-described embodiment, face feature points are matched. However, the present invention is not limited to this, and the number of specific subject images may be included. Also in this case, similarly to the matching of the facial feature points, the digital camera 10 that is capturing a captured image similar to the captured image of the transmission source digital camera 10 can be selected as the transmission destination, and the image data (moving image) Data) can be combined without any sense of incongruity.

また、上述した実施形態では、デジタルカメラ１０−１、１０−２、１０−３にマスター（メイン）、スレーブ（サブ）等の区別がないが、いずれか１つのデジタルカメラ１０をマスター（メイン）とし、他のデジタルカメラ１０をスレーブ（サブ）としてもよい。この場合、マスター（メイン）のデジタルカメラ１０が、図４のステップＳ１０〜Ｓ２２を実行し、常に動画データの転送元となり、スレーブ（サブ）のデジタルカメラ１０が、図４のステップＳ２６〜Ｓ３６を実行し、常に動画データの転送先となるようにしてもよい。 In the above-described embodiment, the digital cameras 10-1, 10-2, and 10-3 are not distinguished as master (main), slave (sub), etc., but any one digital camera 10 is master (main). The other digital camera 10 may be a slave (sub). In this case, the master (main) digital camera 10 executes steps S10 to S22 in FIG. 4 and is always a transfer source of moving image data, and the slave (sub) digital camera 10 performs steps S26 to S36 in FIG. It may be executed to always be a transfer destination of moving image data.

このとき、スレーブ（サブ）のデジタルカメラ１０は、マスター（メイン）のデジタルカメラ１０での撮影中、自機のライブビュー画像から顔特徴点を抽出し、所定の時間間隔で、自機のバッテリー残量とともに、マスター（メイン）のデジタルカメラ１０に送信する。そして、スレーブ（サブ）のデジタルカメラ１０は、データ転送が始まる前に実際の動画撮影（記録）を開始することで動画データの合成処理（結合）を実現する。 At this time, the slave (sub) digital camera 10 extracts facial feature points from the live view image of the own device during shooting by the master (main) digital camera 10, and at a predetermined time interval, the battery of the own device. Along with the remaining amount, it is transmitted to the master (main) digital camera 10. Then, the slave (sub) digital camera 10 realizes moving image data composition processing (combination) by starting actual moving image shooting (recording) before data transfer starts.

以上、この発明のいくつかの実施形態について説明したが、この発明は、これらに限定されるものではなく、特許請求の範囲に記載された発明とその均等の範囲を含むものである。
以下に、本願出願の特許請求の範囲に記載された発明を付記する。 As mentioned above, although several embodiment of this invention was described, this invention is not limited to these, The invention described in the claim, and its equal range are included.
Below, the invention described in the claims of the present application is appended.

（付記１）
付記１に記載の発明は、複数の撮像装置から撮像画像を取得する画像取得手段と、前記複数の撮像装置において特定の被写体像を含む撮像範囲の画像を撮像している撮像装置に対し、前記画像を記録させる記録手段と、前記画像取得手段が取得した前記複数の撮像装置の各々における撮像画像の撮像範囲に前記特定の被写体像が存在するか否かを判断する判断手段と、前記判断手段による判断結果に基づいて、前記複数の撮像装置の中から記録動作すべき撮像装置を選択する選択手段と、前記選択手段によって選択された撮像装置に対し、前記記録手段による記録を切り替えて行うよう制御する制御手段と、を備えたことを特徴とする撮像制御装置である。 (Appendix 1)
The invention according to attachment 1 is directed to an image acquisition unit that acquires captured images from a plurality of imaging devices, and an imaging device that captures an image of an imaging range including a specific subject image in the plurality of imaging devices. A recording unit that records an image; a determination unit that determines whether or not the specific subject image exists in an imaging range of a captured image in each of the plurality of imaging devices acquired by the image acquisition unit; and the determination unit On the basis of the determination result, the selection unit for selecting an imaging device to be recorded from the plurality of imaging devices, and the recording by the recording unit are switched for the imaging device selected by the selection unit. An imaging control apparatus comprising a control means for controlling.

（付記２）
付記２に記載の発明は、前記複数の撮像装置は、各々、内部電源を有するとともに、前記複数の撮像装置の各々における内部電源の電池残量を取得する電池残量取得手段を更に備え、前記選択手段は、前記電池残量取得手段によって取得された前記複数の撮像装置の各々の内部電源の電池残量とに基づいて、前記記録動作すべき撮像装置を選択することを特徴とする付記１に記載の撮像制御装置である。 (Appendix 2)
The invention according to appendix 2, wherein each of the plurality of imaging devices further includes an internal power source, and further includes a remaining battery level acquisition unit configured to acquire a remaining battery level of the internal power source in each of the plurality of imaging devices, The selecting unit selects the imaging device to be recorded based on the remaining battery level of the internal power source of each of the plurality of imaging devices acquired by the remaining battery level acquiring unit. It is an imaging control apparatus as described in above.

（付記３）
付記３に記載の発明は、前記選択手段は、更に、前記複数の撮像装置各々との撮像範囲における前記特定の被写体像の個数に基づいて、前記記録動作すべき撮像装置を選択することを特徴とする付記２に記載の撮像制御装置である。 (Appendix 3)
The invention according to attachment 3 is characterized in that the selection means further selects the imaging device to be recorded based on the number of the specific subject images in the imaging range with each of the plurality of imaging devices. It is an imaging control device given in appendix 2.

（付記４）
付記４に記載の発明は、前記特定の被写体像とは、特定の人物像又は顔画像であることを特徴とする付記２又は３に記載の撮像制御装置である。 (Appendix 4)
The invention according to appendix 4 is the imaging control device according to appendix 2 or 3, wherein the specific subject image is a specific person image or a face image.

（付記５）
付記５に記載の発明は、前記選択手段は、前記複数の撮像装置のいずれかの電池残量が所定値以下になると、前記記録動作すべき撮像装置を選択することを特徴とする付記２乃至４のいずれか一つに記載の撮像制御装置である。 (Appendix 5)
The invention according to appendix 5 is characterized in that the selection means selects the imaging device to be recorded when the remaining battery level of any of the plurality of imaging devices becomes a predetermined value or less. 4. The imaging control device according to claim 1.

（付記６）
付記６に記載の発明は、前記画像取得手段による撮像画像と前記内部電源の電池残量との少なくとも一方は、無線信号により取得されることを特徴とする付記２乃至５のいずれか一つに記載の撮像制御装置である。 (Appendix 6)
The invention according to appendix 6 is any one of appendices 2 to 5, wherein at least one of the image captured by the image acquisition means and the remaining battery level of the internal power supply is acquired by a radio signal. It is an imaging control device of description.

（付記７）
付記７に記載の発明は、複数の撮像装置とから撮像画像を取得する画像取得ステップと、前記複数の撮像装置において特定の被写体像を含む撮像範囲の画像を撮像している撮像装置に対し、前記画像を記録させる記録ステップと、前記画像取得ステップにて取得した前記複数の撮像装置の各々における撮像画像の撮像範囲に前記特定の被写体像が存在するか否かを判断する判断ステップと、前記判断ステップでの判断結果に基づいて、前記複数の撮像装置の中から記録動作すべき撮像装置を選択する選択ステップと、前記選択ステップにて選択された撮像装置に対し、前記記録ステップでの記録を切り替えて行うよう制御する制御ステップと、を含むことを特徴とする撮像制御方法である。 (Appendix 7)
The invention according to appendix 7 is directed to an image acquisition step of acquiring captured images from a plurality of imaging devices, and an imaging device that captures an image of an imaging range including a specific subject image in the plurality of imaging devices. A recording step of recording the image, a determination step of determining whether or not the specific subject image exists in an imaging range of a captured image in each of the plurality of imaging devices acquired in the image acquisition step; A selection step for selecting an imaging device to be recorded from the plurality of imaging devices based on a determination result in the determination step, and recording in the recording step for the imaging device selected in the selection step And a control step for performing control by switching between the image pickup method and the image pickup control method.

（付記８）
付記８に記載の発明は、コンピュータに、複数の撮像装置とから撮像画像を取得する画像取得機能、前記複数の撮像装置において特定の被写体像を含む撮像範囲の画像を撮像している撮像装置に対し、前記画像を記録させる記録機能、前記画像取得機能が取得した前記複数の撮像装置の各々における撮像画像の撮像範囲に前記特定の被写体像が存在するか否かを判断する判断機能、前記判断機能による判断結果に基づいて、前記複数の撮像装置の中から記録動作すべき撮像装置を選択する選択機能、前記選択機能によって選択された撮像装置に対し、前記記録機能による記録を切り替えて行うよう制御する制御機能、を実現させるためのプログラムである。 (Appendix 8)
The invention according to appendix 8 is an image acquisition function for acquiring a captured image from a plurality of imaging devices in a computer, and an imaging device that captures an image in an imaging range including a specific subject image in the plurality of imaging devices. On the other hand, a recording function for recording the image, a determination function for determining whether or not the specific subject image exists in the imaging range of the captured image in each of the plurality of imaging devices acquired by the image acquisition function, the determination A selection function for selecting an imaging device to be recorded from the plurality of imaging devices based on a determination result by the function, and recording by the recording function is switched for the imaging device selected by the selection function. This is a program for realizing a control function to be controlled.

１−１〜１−３被写体
１０、１０−１〜１０−３デジタルカメラ
５ネットワーク
１１撮像部
１２画像処理部
１３画像記録部
１４無線通信部
１５操作検出部
１６ワークメモリ
１７プログラム記憶部
１８制御部
１９レンズブロック
２０電源管理部
２１バッテリー
１００、１０１、１０２無線通信
１６１カメラ情報テーブル
１６２カメラＩＤ
１６３バッテリー残量
１６４顔特徴点
1-1 to 1-3 Subject 10, 10-1 to 10-3 Digital camera 5 Network 11 Imaging unit 12 Image processing unit 13 Image recording unit 14 Wireless communication unit 15 Operation detection unit 16 Work memory 17 Program storage unit 18 Control unit 19 Lens block 20 Power management unit 21 Battery 100, 101, 102 Wireless communication 161 Camera information table 162 Camera ID
163 Battery level 164 Facial features

Claims

Image acquisition means for acquiring captured images from a plurality of imaging devices;
A recording unit configured to record the image with respect to an imaging device that captures an image of an imaging range including a specific subject image in the plurality of imaging devices;
A determination unit that determines whether or not the specific subject image exists in an imaging range of a captured image in each of the plurality of imaging devices acquired by the image acquisition unit;
A selection unit that selects an imaging device to be recorded from the plurality of imaging devices based on a determination result by the determination unit;
Control means for controlling the image pickup apparatus selected by the selection means to switch recording by the recording means;
An imaging control apparatus comprising:

Each of the plurality of imaging devices further includes an internal power source, and further includes a remaining battery level acquisition unit that acquires a remaining battery level of the internal power source in each of the plurality of imaging devices.
The selection unit selects the imaging device to perform the recording operation based on a remaining battery level of an internal power source of each of the plurality of imaging devices acquired by the battery remaining level acquisition unit. Item 2. The imaging control device according to Item 1.

The said selection means further selects the imaging device which should perform the said recording operation based on the number of the said specific subject images in the imaging range with each of these imaging devices. Imaging control device.

The imaging control apparatus according to claim 2, wherein the specific subject image is a specific person image or a face image.

5. The apparatus according to claim 2, wherein when the remaining battery level of any of the plurality of imaging devices becomes equal to or less than a predetermined value, the selection unit selects the imaging device that is to perform the recording operation. The imaging control device described.

6. The imaging control apparatus according to claim 2, wherein at least one of an image captured by the image acquisition unit and a remaining battery level of the internal power supply is acquired by a wireless signal.

An image acquisition step of acquiring captured images from a plurality of imaging devices;
A recording step of recording the image on an imaging device that captures an image of an imaging range including a specific subject image in the plurality of imaging devices;
A determination step of determining whether or not the specific subject image exists in an imaging range of a captured image in each of the plurality of imaging devices acquired in the image acquisition step;
A selection step of selecting an imaging device that is to perform a recording operation from the plurality of imaging devices, based on a determination result in the determination step;
A control step for controlling the imaging device selected in the selection step to switch recording in the recording step; and
An imaging control method comprising:

On the computer,
An image acquisition function for acquiring captured images from a plurality of imaging devices;
A recording function for recording the image to an imaging device that captures an image of an imaging range including a specific subject image in the plurality of imaging devices;
A determination function for determining whether or not the specific subject image exists in an imaging range of a captured image in each of the plurality of imaging devices acquired by the image acquisition function;
A selection function for selecting an imaging device to be recorded from the plurality of imaging devices based on a determination result by the determination function;
A control function for controlling the imaging device selected by the selection function to switch recording by the recording function;
A program to realize