JP2018006994A

JP2018006994A - Imaging device and imaging element

Info

Publication number: JP2018006994A
Application number: JP2016130969A
Authority: JP
Inventors: 史郎綱井; Shiro Tsunai; 泰照山野; Yasuteru Yamano; 眞一古川; Shinichi Furukawa; 寿人井出; Hisato Ide
Original assignee: Nikon Corp
Current assignee: Nikon Corp
Priority date: 2016-06-30
Filing date: 2016-06-30
Publication date: 2018-01-11

Abstract

PROBLEM TO BE SOLVED: To reduce a risk of photographing miss.SOLUTION: An imaging device comprises: an imaging element that images a first dynamic image of a first aspect ratio; a first image segmentation unit that cuts out a second dynamic image of a second aspect ratio larger than the first aspect ratio, from the first dynamic image; a recording unit that records the second dynamic image in recording medium; and a controller that controls the first image segmentation unit so that a length at a long side of a screen of the second dynamic image corresponds to that of the first dynamic image.SELECTED DRAWING: Figure 2

Description

本発明は、撮像装置および撮像素子に関する。 The present invention relates to an imaging device and an imaging element.

パノラマ動画像を編集する装置が知られている（特許文献１参照）。従来技術では、センサ上に結像されたものの、動画像として記録されない領域があった。 An apparatus for editing a panoramic video is known (see Patent Document 1). In the prior art, there is a region that is imaged on the sensor but is not recorded as a moving image.

特開２０１４−１６５７６３号公報JP 2014-165663 A

第１の態様による撮像装置は、第１アスペクト比の第１の動画像を撮像する撮像素子と、前記第１アスペクト比より大きい第２アスペクト比の第２の動画像を前記第１の動画像から切り出す第１の画像切り出し部と、前記第２の動画像を記録媒体に記録する記録部と、前記第２の動画像の画面の長辺の長さが前記第１の動画像の画面の長辺の長さに対応するように前記第１の画像切り出し部を制御する制御部とを備える。
第２の態様による撮像素子は、複数の画素の信号を加算するビニング撮像機能と、前記ビニング撮像機能によって加算する信号数を変えることにより、異なるアスペクト比の動画像の信号を生成するアスペクト比可変機能とを備える。 An imaging device according to a first aspect includes an imaging element that captures a first moving image having a first aspect ratio, and a second moving image having a second aspect ratio that is larger than the first aspect ratio. A first image cutout unit cut out from a recording unit, a recording unit that records the second moving image on a recording medium, and a length of a long side of the screen of the second moving image is the length of the screen of the first moving image A control unit that controls the first image cutout unit so as to correspond to the length of the long side.
The imaging device according to the second aspect has a variable aspect ratio that generates a moving image signal having a different aspect ratio by changing a binning imaging function that adds signals of a plurality of pixels and a number of signals that are added by the binning imaging function. With functionality.

カメラの使用場面を例示する図である。It is a figure which illustrates the use scene of a camera. 全体構成を説明する図である。It is a figure explaining the whole structure. 図３(a)は、動画像１の場合のデータサイズを説明する図であり、図３(b)は、視聴者へ配信される動画像のデータサイズを例示する図である。FIG. 3A is a diagram illustrating the data size in the case of the moving image 1, and FIG. 3B is a diagram illustrating the data size of the moving image distributed to the viewer. 図４(a)は、動画像２の場合のデータサイズを説明する図であり、図４(b)は、視聴者へ配信される動画像のデータサイズを例示する図である。FIG. 4A is a diagram illustrating the data size in the case of the moving image 2, and FIG. 4B is a diagram illustrating the data size of the moving image distributed to the viewer. 図５(a)は、動画像３の場合のデータサイズを説明する図であり、図５(b)は、視聴者へ配信される動画像のデータサイズを例示する図である。FIG. 5A is a diagram illustrating the data size in the case of the moving image 3, and FIG. 5B is a diagram illustrating the data size of the moving image distributed to the viewer. 図６(a)は、静止画像の場合のデータサイズを説明する図であり、図６(b)は、視聴者へ配信される静止画像のデータサイズを例示する図である。FIG. 6A is a diagram illustrating the data size in the case of a still image, and FIG. 6B is a diagram illustrating the data size of the still image delivered to the viewer.

＜使用場面の説明＞
図１は、発明の一実施の形態による撮像装置であるカメラ５１の使用場面を例示する図である。図１において、サッカー場のフィールドに向けてカメラ５１が設置されている。カメラ５１は、三脚５３に取り付けられた電動雲台５２にセットされている。モータによって駆動される電動雲台５２がパン（左右に回転）、チルト（上下に回転）動作をすることにより、電動雲台５２にセットされているカメラ５１の撮像中心方向が制御可能である。 <Explanation of usage>
FIG. 1 is a diagram illustrating a use scene of a camera 51 which is an imaging apparatus according to an embodiment of the invention. In FIG. 1, a camera 51 is installed toward the field of a soccer field. The camera 51 is set on an electric pan head 52 attached to a tripod 53. The panning (rotating left and right) and tilting (rotating up and down) operations of the electric camera platform 52 driven by the motor can control the imaging center direction of the camera 51 set on the electric camera platform 52.

カメラ５１の撮像中心方向は、例えばフィールドの中央に向けて固定され、カメラ５１の撮像画角は、例えばフィールドの全域を含めるように調節されている。なお、フィールドに加えて観客席を含めてもよい。カメラ５１は、撮像画面の少なくとも横方向について、後述する撮像センサに結像される被写体像をパノラマ動画像として全て記録しておき、フィールド上のどの位置の画像でも後から読み出し可能に構成される。このようなカメラ５１について、以下に詳細に説明する。 The imaging center direction of the camera 51 is fixed, for example, toward the center of the field, and the imaging field angle of the camera 51 is adjusted to include, for example, the entire field. In addition to the field, a spectator seat may be included. The camera 51 is configured to record all subject images formed on an imaging sensor, which will be described later, as a panoramic moving image in at least the horizontal direction of the imaging screen, and to read an image at any position on the field later. . Such a camera 51 will be described in detail below.

図２は、本実施の形態による全体構成を説明する図である。カメラ５１は電動雲台５２にセットされ、電動雲台５２は三脚５３に取り付けられている。カメラ５１、電動雲台５２、オペレータ用端末７０、および制御装置６０は、それぞれネットワーク８０を介して接続されている。ネットワーク８０の接続は、有線でも無線でも構わない。 FIG. 2 is a diagram for explaining the overall configuration according to the present embodiment. The camera 51 is set on an electric head 52, and the electric head 52 is attached to a tripod 53. The camera 51, the electric camera platform 52, the operator terminal 70, and the control device 60 are connected via a network 80, respectively. Connection of the network 80 may be wired or wireless.

電動雲台５２のパン動作およびチルト動作（すなわち、カメラ５１の撮像中心方向の設定）は、ネットワーク８０を介して送られる制御装置６０からの制御信号によって制御される。また、カメラ５１の撮像条件（撮像画角、シャッター速度、絞り、フレームレート等）や撮像タイミング（静止画を撮像する場合）の設定も、ネットワーク８０を介して送られる制御装置６０からの制御信号によって制御可能である。 The panning and tilting operations of the electric camera platform 52 (that is, the setting of the imaging center direction of the camera 51) are controlled by a control signal from the control device 60 sent via the network 80. In addition, the setting of the imaging conditions of the camera 51 (imaging field angle, shutter speed, aperture, frame rate, etc.) and imaging timing (when capturing a still image) are also sent from the control device 60 via the network 80. It is controllable by.

カメラ５１で撮像された画像は、ネットワーク８０を介して制御装置６０へ集められる。カメラ５１から制御装置６０へ画像を送るタイミングは、カメラ５１で撮像された画像を一旦カメラ５１の中のメモリカード３２に蓄積しておき、メモリカード３２に蓄積された画像を所定の時間間隔で制御装置６０へ送信してもよいし、カメラ５１で撮像される毎に撮像された画像を制御装置６０へ送信してもよい。制御装置６０は、カメラ５１から送信された画像をストレージ装置６１に記録保存する。 Images captured by the camera 51 are collected to the control device 60 via the network 80. The timing at which an image is sent from the camera 51 to the control device 60 is that the image captured by the camera 51 is temporarily stored in the memory card 32 in the camera 51, and the image stored in the memory card 32 is stored at a predetermined time interval. You may transmit to the control apparatus 60, and you may transmit the image imaged to the control apparatus 60, whenever it images with the camera 51. FIG. The control device 60 records and saves the image transmitted from the camera 51 in the storage device 61.

カメラ５１で撮像された画像は、制御装置６０を介して視聴者１（図１）へ配信可能に構成される。画像の配信は、ネットワーク８０を経由して行ってもよいし、ネットワーク８０とは別に画像用の配信経路を設けてもよい。図１の視聴者１は、制御装置６０から配信された画像を表示するモニタ１００に映し出された映像を観察する。なお、図１では１人の視聴者１を図示するのみであるが、制御装置６０は複数の視聴者に対して画像を配信可能である。画像の配信先は、スマートフォンやタブレット端末、ウェアラブル端末でもよい。 An image captured by the camera 51 is configured to be distributed to the viewer 1 (FIG. 1) via the control device 60. The image distribution may be performed via the network 80, or an image distribution route may be provided separately from the network 80. The viewer 1 in FIG. 1 observes the video displayed on the monitor 100 that displays the image distributed from the control device 60. Although only one viewer 1 is shown in FIG. 1, the control device 60 can distribute images to a plurality of viewers. The distribution destination of the image may be a smartphone, a tablet terminal, or a wearable terminal.

制御装置６０は、例えばサーバによって構成される。制御装置６０は、あらかじめ用意された制御プログラムを実行することにより、カメラ５１を自動で撮像制御するとともに、電動雲台５２のパン動作およびチルト動作をそれぞれ自動で制御する。 The control device 60 is configured by a server, for example. The control device 60 automatically controls the imaging of the camera 51 by executing a control program prepared in advance, and automatically controls the pan operation and the tilt operation of the electric head 52.

制御装置６０によるカメラ制御の状態は、ネットワーク８０に接続されたオペレータ用端末７０から、オペレータ５によって確認可能に構成されている。オペレータ用端末７０は、例えばパーソナルコンピュータによって構成される。オペレータ用端末７０は、あらかじめ用意された管理用プログラムを実行することにより、制御装置６０によるカメラ制御の状態を示す不図示の管理画面をオペレータ用端末７０のモニタに表示させる。 The state of camera control by the control device 60 can be confirmed by the operator 5 from an operator terminal 70 connected to the network 80. The operator terminal 70 is constituted by a personal computer, for example. The operator terminal 70 executes a management program prepared in advance to display a management screen (not shown) indicating the state of camera control by the control device 60 on the monitor of the operator terminal 70.

制御装置６０が実行する制御プログラムは、オペレータ５による手動操作を受け付け可能に構成されている。例えば、オペレータ５がオペレータ用端末７０のキーボードまたはポインティングデバイス（例えばジョイスティック等）を操作することによってオペレータ用端末７０が割り込み要求を発信すると、割り込み要求を受信した制御装置６０は、オペレータ用端末７０からの割り込み要求を受け付ける。 The control program executed by the control device 60 is configured to accept manual operation by the operator 5. For example, when the operator terminal 70 issues an interrupt request by operating the keyboard or pointing device (for example, a joystick) of the operator terminal 70, the control device 60 that has received the interrupt request receives the interrupt request from the operator terminal 70. An interrupt request is accepted.

オペレータ用端末７０は、オペレータ５によるポインティングデバイスの操作に応じて、電動雲台５２のパン動作、チルト動作や、カメラ５１の撮像条件の制御を要求することができる。さらに、オペレータ用端末７０は、オペレータ５によるポインティングデバイス等の操作に応じて、視聴者１へ配信する画像の注目方向を制御装置６０へ要求することができる。 The operator terminal 70 can request panning and tilting operations of the electric camera platform 52 and control of imaging conditions of the camera 51 in accordance with the pointing device operation by the operator 5. Further, the operator terminal 70 can request the control device 60 for the attention direction of the image to be distributed to the viewer 1 in accordance with the operation of the pointing device or the like by the operator 5.

オペレータ用端末７０からパン動作／チルト動作の要求を受けた制御装置６０は、オペレータ用端末７０から送信された要求に応じて、電動雲台５２に対するパン動作、チルト動作を制御する。また、オペレータ用端末７０から撮像条件の制御の要求を受けた制御装置６０は、オペレータ用端末７０から送信された要求に応じて、カメラ５１に対する撮像条件を制御する。 In response to the request transmitted from the operator terminal 70, the control device 60 that has received the request for the pan operation / tilt operation from the operator terminal 70 controls the pan operation and tilt operation for the electric pan head 52. Further, the control device 60 that has received the request for controlling the imaging condition from the operator terminal 70 controls the imaging condition for the camera 51 in accordance with the request transmitted from the operator terminal 70.

さらにまた、オペレータ用端末７０から配信する画像の注目方向についての要求を受けた制御装置６０は、カメラ５１で撮像された画像のうち、要求された注目方向の画像を切り出して図１の視聴者１へ配信する。 Furthermore, the control device 60 that has received a request for the attention direction of the image distributed from the operator terminal 70 cuts out the image of the requested attention direction from among the images captured by the camera 51, and the viewer of FIG. Deliver to 1.

＜カメラの説明＞
図２において、カメラ５１は、レンズ群１１と、撮像センサ１２と、電源コントローラ１３と、カードコントローラ１４と、カードスロット１５と、ＣＰＵ１６と、通信ドライバ１７と、送受信回路１８と、Ｉ／Ｆ（インターフェース）ドライバ１９と、操作部材２０と、メモリ２１と、ＬＣＤドライバ２２と、ディスプレイ２３とを有し、電池３１とメモリカード３２とが実装される。 <Explanation of camera>
In FIG. 2, the camera 51 includes a lens group 11, an image sensor 12, a power controller 13, a card controller 14, a card slot 15, a CPU 16, a communication driver 17, a transmission / reception circuit 18, an I / F ( Interface) A driver 19, an operation member 20, a memory 21, an LCD driver 22, and a display 23, and a battery 31 and a memory card 32 are mounted.

レンズ群１１はズームレンズを含み、被写体像を撮像センサ１２の撮像面に結像させる。撮像センサ１２は、レンズ群１１により結像された被写体像を撮像する。電源コントローラ１３は、電池３１の電圧を所定の電圧に変換してカメラ５１内の各部へ供給する。カードコントローラ１４は、ＣＰＵ１６からの指示に応じてカードスロット１５に実装されたメモリカード３２に対するデータの書き込みや、メモリカード３２に記録されているデータの読み出しを行う。 The lens group 11 includes a zoom lens, and forms a subject image on the imaging surface of the imaging sensor 12. The imaging sensor 12 captures the subject image formed by the lens group 11. The power controller 13 converts the voltage of the battery 31 into a predetermined voltage and supplies it to each part in the camera 51. The card controller 14 writes data to the memory card 32 mounted in the card slot 15 and reads data recorded on the memory card 32 in accordance with an instruction from the CPU 16.

ＣＰＵ１６は、ＣＰＵ１６内の不揮発性メモリに記録された所定のプログラムに基づいてカメラ５１内の各部を制御しながら、自動焦点調節（ＡＦ）、自動露出調節（ＡＥ）、撮像を行う。ＣＰＵ１６にはデータ抽出し部１６Ｂが含まれる。データ抽出し部１６Ｂについては後述する。 The CPU 16 performs automatic focus adjustment (AF), automatic exposure adjustment (AE), and imaging while controlling each part in the camera 51 based on a predetermined program recorded in a nonvolatile memory in the CPU 16. The CPU 16 includes a data extraction unit 16B. The data extraction unit 16B will be described later.

通信ドライバ１７は、ＣＰＵ１６からの指示に応じて送受信回路１８を駆動する。送受信回路１８は無線ＬＡＮユニットを構成し、外部機器（不図示の無線ＬＡＮ用アクセスポイント）を介して制御装置６０との間で無線通信を行う。送受信回路１８は、撮像動作の開始指示（すなわちレリーズ指示）や焦点距離の変更、シャッター速度や絞り値、露出補正などの撮像条件を変更するために制御装置６０から送信されたカメラ設定指示を、無線ＬＡＮ（ネットワーク８０）を介して受信する。 The communication driver 17 drives the transmission / reception circuit 18 in response to an instruction from the CPU 16. The transmission / reception circuit 18 constitutes a wireless LAN unit, and performs wireless communication with the control device 60 via an external device (not shown wireless LAN access point). The transmission / reception circuit 18 receives a camera setting instruction transmitted from the control device 60 in order to change an imaging condition such as an instruction to start an imaging operation (that is, a release instruction), a change in focal length, a shutter speed, an aperture value, and exposure correction. Receive via the wireless LAN (network 80).

また、送受信回路１８は、カメラ５１が取得した画像を、無線ＬＡＮ（ネットワーク８０）を介して制御装置６０へ送信する。なお、送受信回路１８および通信ドライバ１７は、カメラ５１に内蔵する代わりに、カメラ５１の筐体外部のアクセサリ端子などに装着させてもよい。 The transmission / reception circuit 18 transmits the image acquired by the camera 51 to the control device 60 via the wireless LAN (network 80). The transmission / reception circuit 18 and the communication driver 17 may be attached to an accessory terminal outside the housing of the camera 51 instead of being built in the camera 51.

Ｉ／Ｆドライバ１９は、操作部材２０からの操作信号を所定のデータに変換してＣＰＵ１６へ送出する。操作部材２０はレリーズボタンやコマンドダイヤルなどを含み、操作部材２０に対する操作に応じた操作信号を発する。メモリ２１は、ＣＰＵ１６のワークメモリとして用いられる。ＬＣＤドライバ２２は、ＣＰＵ１６からの指示に基づいて、ディスプレイ２３に画像を表示させるための表示制御信号を生成する。ディスプレイ２３は、例えばＬＣＤ（液晶表示）パネルによって構成され、ＬＣＤドライバ２３からの表示制御信号に基づいて画像などを表示する。 The I / F driver 19 converts an operation signal from the operation member 20 into predetermined data and sends it to the CPU 16. The operation member 20 includes a release button, a command dial, and the like, and issues an operation signal corresponding to an operation on the operation member 20. The memory 21 is used as a work memory for the CPU 16. The LCD driver 22 generates a display control signal for displaying an image on the display 23 based on an instruction from the CPU 16. The display 23 is constituted by an LCD (liquid crystal display) panel, for example, and displays an image or the like based on a display control signal from the LCD driver 23.

＜電動雲台の説明＞
電動雲台５２は、駆動モータ４１と、電源コントローラ４２と、ＣＰＵ４３と、通信ドライバ４４と、送受信回路４５と、メモリ４６とを有し、電池３３が実装されている。 <Explanation of electric pan head>
The electric head 52 includes a drive motor 41, a power supply controller 42, a CPU 43, a communication driver 44, a transmission / reception circuit 45, and a memory 46, and a battery 33 is mounted thereon.

駆動モータ４１は、パン用モータおよびチルト用モータによって構成される。駆動モータ４１は、電源コントローラ４２から供給される駆動パルス信号に応じて、電動雲台５２を左右方向に回転させたり、電動雲台５２を上下方向に回転させたりする。電源コントローラ４２は、電池３３の電圧を所定の電圧に変換して電動雲台５２内の各部へ供給する他、ＣＰＵ４３からの指示に応じてパン用モータおよびチルト用モータに対する駆動パルス信号を生成する。 The drive motor 41 includes a pan motor and a tilt motor. The drive motor 41 rotates the electric head 52 in the left-right direction or rotates the electric head 52 in the up-down direction according to the drive pulse signal supplied from the power controller 42. The power controller 42 converts the voltage of the battery 33 into a predetermined voltage and supplies it to each part in the electric head 52, and generates drive pulse signals for the pan motor and tilt motor according to instructions from the CPU 43. .

ＣＰＵ４３は、ＣＰＵ４３内の不揮発性メモリに記録された所定のプログラムに基づいて電動雲台５２内の各部を制御する。通信ドライバ４４は、ＣＰＵ４３からの指示に応じて送受信回路４５を駆動する。送受信回路４５は無線ＬＡＮユニットを構成し、外部機器（本例では不図示の無線ＬＡＮ用アクセスポイント）を介して制御装置６０との間で無線通信を行う。 The CPU 43 controls each part in the electric head 52 based on a predetermined program recorded in the nonvolatile memory in the CPU 43. The communication driver 44 drives the transmission / reception circuit 45 in response to an instruction from the CPU 43. The transmission / reception circuit 45 constitutes a wireless LAN unit, and performs wireless communication with the control device 60 via an external device (in this example, a wireless LAN access point not shown).

送受信回路４５は、電動雲台５２を左右方向に回転するために制御装置６０から送信された指示や、電動雲台５２を上下方向に回転するために制御装置６０から送信された指示を、無線ＬＡＮ（ネットワーク８０）を介して受信する。送受信回路４５は、電動雲台５２の角度（左右方向および上下方向）を示す情報を、無線ＬＡＮ（ネットワーク８０）を介して制御装置６０へ送信する。メモリ４６は、ＣＰＵ４３のワークメモリとして用いられる。 The transmission / reception circuit 45 wirelessly transmits an instruction transmitted from the control device 60 to rotate the electric head 52 in the left-right direction and an instruction transmitted from the control device 60 in order to rotate the electric head 52 in the vertical direction. Receive via the LAN (network 80). The transmission / reception circuit 45 transmits information indicating the angle (left-right direction and up-down direction) of the electric head 52 to the control device 60 via the wireless LAN (network 80). The memory 46 is used as a work memory for the CPU 43.

＜カメラの動作モード＞
カメラ５１の動作モードは、動画撮像モード、および静止画撮像モードに分けられている。動画撮像モードは、動画像を撮像するモードである。静止画撮像モードは、静止画を撮像するモードである。 <Camera operation mode>
The operation mode of the camera 51 is divided into a moving image capturing mode and a still image capturing mode. The moving image capturing mode is a mode for capturing a moving image. The still image capturing mode is a mode for capturing a still image.

カメラ５１のＣＰＵ１６は、操作部材２０からの操作信号、または、無線ＬＡＮ（ネットワーク８０）を介して入力された制御装置６０からの要求に基づいて、動画撮像モードを起動させる。ＣＰＵ１６は、操作部材２０の動画撮像ボタン（不図示）が押下操作された場合、または制御装置６０から動画撮像要求が入力された場合に動画撮像を開始させる。また、ＣＰＵ１６は、動画撮像中に操作部材２０の動画撮像ボタンが再び押下操作された場合、または制御装置６０から動画撮像終了要求が制御装置６０から入力された場合に動画撮像を終了させる。 The CPU 16 of the camera 51 activates the moving image capturing mode based on an operation signal from the operation member 20 or a request from the control device 60 input via the wireless LAN (network 80). The CPU 16 starts moving image capturing when a moving image capturing button (not shown) of the operation member 20 is pressed or when a moving image capturing request is input from the control device 60. Further, the CPU 16 ends moving image capturing when the moving image capturing button of the operation member 20 is pressed again during moving image capturing, or when a moving image capturing end request is input from the control device 60 from the control device 60.

カメラ５１のＣＰＵ１６は、操作部材２０からの操作信号、または、無線ＬＡＮ（ネットワーク８０）を介して入力された制御装置６０からの要求に基づいて、静止画撮像モードを起動させる。ＣＰＵ１６は、操作部材２０のレリーズ釦が押下操作された場合、または制御装置６０から静止画撮像要求が入力された場合に所定の静止画撮像処理を行う。 The CPU 16 of the camera 51 activates the still image capturing mode based on an operation signal from the operation member 20 or a request from the control device 60 input via the wireless LAN (network 80). The CPU 16 performs a predetermined still image imaging process when the release button of the operation member 20 is pressed or when a still image imaging request is input from the control device 60.

＜画像のデータサイズ＞
カメラ５１に備わる撮像センサ１２の有効受光範囲は、例えば５７６０（横）×４３２０（縦）ピクセルである。すなわち、撮像センサ１２の全ピクセルを用いて構成される画像（動画像、静止画像）のアスペクト比は、横４：縦３である。 <Image data size>
The effective light receiving range of the image sensor 12 provided in the camera 51 is, for example, 5760 (horizontal) × 4320 (vertical) pixels. That is, the aspect ratio of an image (moving image or still image) configured using all pixels of the image sensor 12 is 4: 4 in the horizontal direction.

＜動画像の場合＞
カメラ５１のＣＰＵ１６は、操作部材２０からの操作信号、または、無線ＬＡＮ（ネットワーク８０）を介して入力された制御装置６０からの要求に基づいて、以下に説明する動画像１〜動画像３の３つの動画撮像モードを切り替えることができる。動画像１〜動画像３の切り替えは、オペレータ５がオペレータ用端末７０を操作、または、オペレータ５がカメラ５１の操作部材２０を操作することによって行われる。オペレータ５は、例えば画面の縦方向について広く撮りたい場合に動画像１を選ぶ。オペレータ５は、画面の縦方向について広く撮らなくてもよい場合には、動画像２または動画像３を選ぶ。 <For video>
Based on an operation signal from the operation member 20 or a request from the control device 60 input via the wireless LAN (network 80), the CPU 16 of the camera 51 performs moving image 1 to moving image 3 described below. Three moving image capturing modes can be switched. Switching between the moving image 1 to the moving image 3 is performed by the operator 5 operating the operator terminal 70 or the operator 5 operating the operation member 20 of the camera 51. The operator 5 selects the moving image 1 when, for example, it is desired to take a wide image in the vertical direction of the screen. The operator 5 selects the moving image 2 or the moving image 3 when it is not necessary to shoot widely in the vertical direction of the screen.

（動画像１）
動画像１は、カメラ５１によって画面の縦方向を広く撮像する横長の動画像である。図３(a)は、動画像１の場合のデータサイズを説明する図である。カメラ５１のＣＰＵ１６は、動画像１が要求された場合に、例えば５７６０（横）×３２４０（縦）ピクセルでパノラマ動画像の撮像を行わせる。つまり、撮像センサ１２の有効受光範囲のうち上下の所定数の画素を除いた斜線領域を撮像範囲として、斜線領域からの画素信号を読み出してメモリカード３２に記録する。この撮像範囲のアスペクト比は横１６：縦９であり、視聴者１のモニタ１００の表示解像度（例えば１９２０（横）×１０８０（縦）ピクセル）に合わせて定めたものである。図３(a)によれば、横方向においてフィールドの全域を含み、縦方向においてフィールドの外側である上下領域を省いた斜線領域が撮像範囲である。 (Movie 1)
The moving image 1 is a horizontally long moving image in which the camera 51 widely captures the vertical direction of the screen. FIG. 3A is a diagram for explaining the data size in the case of the moving image 1. When the moving image 1 is requested, the CPU 16 of the camera 51 causes the panoramic moving image to be captured with, for example, 5760 (horizontal) × 3240 (vertical) pixels. That is, the pixel signal from the hatched area is read out and recorded in the memory card 32 using the hatched area excluding a predetermined number of pixels above and below the effective light receiving range of the image sensor 12 as the imaging range. The aspect ratio of the imaging range is 16: 9 horizontally, and is determined in accordance with the display resolution of the monitor 100 of the viewer 1 (for example, 1920 (horizontal) × 1080 (vertical) pixels). According to FIG. 3 (a), the shaded area including the entire field in the horizontal direction and excluding the upper and lower areas outside the field in the vertical direction is the imaging range.

カメラ５１のＣＰＵ１６は、外部の再生機器（視聴者１のモニタ１００）における再生アスペクト比（横１６：縦９）に対応させて、上記メモリカード３２に記録したパノラマ動画像（５７６０（横）×３２４０（縦）ピクセル）に基づき、以下の動画像を生成する。すなわち、データ抽出し部１６Ｂは、上記斜線領域のパノラマ動画像のデータから図３(a)において斜線で示す５７６０（横）×３２４０（縦）ピクセルのデータを全て抽出する。 The CPU 16 of the camera 51 corresponds to the playback aspect ratio (horizontal 16: vertical 9) of the external playback device (viewer 1 monitor 100), and the panoramic video (5760 (horizontal) ×) recorded on the memory card 32. 3240 (vertical) pixels), the following moving image is generated. That is, the data extraction unit 16B extracts all 5760 (horizontal) × 3240 (vertical) pixel data indicated by hatching in FIG. 3A from the panoramic moving image data in the hatched area.

カメラ５１のＣＰＵ１６は、データ抽出し部１６Ｂで抽出したデータを縦横それぞれ３ピクセルずつ加算することによってリサイズ処理を行い、視聴者１へ配信する１９２０（横）×１０８０（縦）ピクセルの動画像を生成する。 The CPU 16 of the camera 51 performs a resizing process by extracting the data extracted by the data extraction unit 16B by 3 pixels in each of the vertical and horizontal directions, and a 1920 (horizontal) × 1080 (vertical) pixel moving image distributed to the viewer 1 is obtained. Generate.

カメラ５１のＣＰＵ１６が生成した動画像は、無線ＬＡＮ（ネットワーク８０）を介して制御装置６０へ送られる。動画像はさらに、制御装置６０から視聴者１へ配信される。図３(b)は、視聴者１へ配信される動画像のデータサイズ（１９２０（横）×１０８０（縦）ピクセル）を例示する図である。視聴者１のモニタ１００（図１）には、図３(a)の斜線領域と同じ範囲が映し出される。 The moving image generated by the CPU 16 of the camera 51 is sent to the control device 60 via the wireless LAN (network 80). The moving image is further distributed from the control device 60 to the viewer 1. FIG. 3B is a diagram illustrating a data size (1920 (horizontal) × 1080 (vertical) pixels) of a moving image distributed to the viewer 1. The same range as the hatched area in FIG. 3A is displayed on the monitor 100 (FIG. 1) of the viewer 1.

（動画像２）
動画像２は、上記動画像１に比べて画面の縦方向が狭い（例えば２／３）横長の動画像である。図４(a)は、動画像２の場合のデータサイズを説明する図である。カメラ５１のＣＰＵ１６は、動画像２が要求された場合に、例えば５７６０（横）×２１６０（縦）ピクセル（アスペクト比は横１６：縦６）でパノラマ動画像の撮像を行わせる。つまり、有効受光範囲のうち上下の所定数の画素を除いた斜線領域を撮像範囲として、斜線領域からの画素信号を読み出してメモリカード３２に記録する。 (Movie 2)
The moving image 2 is a horizontally long moving image in which the vertical direction of the screen is narrower (for example, 2/3) than the moving image 1. FIG. 4A illustrates the data size in the case of the moving image 2. When the moving image 2 is requested, the CPU 16 of the camera 51 causes the panoramic moving image to be captured with, for example, 5760 (horizontal) × 2160 (vertical) pixels (aspect ratio is horizontal 16: vertical 6). That is, the pixel signal from the hatched area is read out and recorded in the memory card 32 using the hatched area excluding a predetermined number of pixels above and below the effective light receiving range as the imaging range.

カメラ５１のＣＰＵ１６は、外部の再生機器（視聴者１のモニタ１００）における再生アスペクト比（横１６：縦９）に対応させて、上記メモリカード３２に記録したパノラマ動画像（５７６０（横）×２１６０（縦）ピクセル）に基づき、以下の動画像を生成する。すなわち、データ抽出し部１６Ｂは、上記斜線領域のパノラマ動画像のデータから図４(a)において破線で示す３８４０（横）×２１６０（縦）ピクセルのデータを抽出する。抽出するデータのアスペクト比は、横１６：縦９であり、視聴者１のモニタ１００の表示解像度（本例では１９２０（横）×１０８０（縦）ピクセル）に合わせて定めたものである。図４(a)によれば、例えば、フィールドの中でボールが存在する領域の方向が注目方向とされ、注目方向として破線領域で示されるデータがパノラマ動画像のデータから抽出される。 The CPU 16 of the camera 51 corresponds to the playback aspect ratio (horizontal 16: vertical 9) of the external playback device (viewer 1 monitor 100), and the panoramic video (5760 (horizontal) ×) recorded on the memory card 32. 2160 (vertical) pixels), the following moving image is generated. That is, the data extraction unit 16B extracts 3840 (horizontal) × 2160 (vertical) pixel data indicated by a broken line in FIG. 4A from the panoramic moving image data in the shaded area. The aspect ratio of the data to be extracted is 16: 9 in the horizontal direction, and is determined in accordance with the display resolution of the monitor 100 of the viewer 1 (in this example, 1920 (horizontal) × 1080 (vertical) pixels). According to FIG. 4 (a), for example, the direction of the area where the ball is present in the field is the attention direction, and the data indicated by the broken line area as the attention direction is extracted from the panoramic video data.

カメラ５１のＣＰＵ１６は、データ抽出し部１６Ｂで抽出したデータを縦横それぞれ２ピクセルずつ加算することによってリサイズ処理を行い、視聴者１へ配信する１９２０（横）×１０８０（縦）ピクセルの動画像を生成する。 The CPU 16 of the camera 51 performs the resizing process by adding the data extracted by the data extraction unit 16B by 2 pixels each in the vertical and horizontal directions, and the moving image of 1920 (horizontal) × 1080 (vertical) pixels to be distributed to the viewer 1 is obtained. Generate.

カメラ５１のＣＰＵ１６が生成した動画像は、無線ＬＡＮ（ネットワーク８０）を介して制御装置６０へ送られる。動画像はさらに、制御装置６０から視聴者１へ配信される。図４(b)は、視聴者１へ配信される動画像のデータサイズ（１９２０（横）×１０８０（縦）ピクセル）を例示する図である。視聴者１のモニタ１００（図１）には、図４(a)の破線領域と同じ範囲が映し出される。 The moving image generated by the CPU 16 of the camera 51 is sent to the control device 60 via the wireless LAN (network 80). The moving image is further distributed from the control device 60 to the viewer 1. FIG. 4B is a diagram illustrating a data size (1920 (horizontal) × 1080 (vertical) pixels) of a moving image distributed to the viewer 1. The same range as the broken line area in FIG. 4A is displayed on the monitor 100 (FIG. 1) of the viewer 1.

（動画像３）
動画像３は、カメラ５１によって画面の縦方向を最も狭く撮像する横長の動画像である。図５(a)は、動画像３の場合のデータサイズを説明する図である。カメラ５１のＣＰＵ１６は、動画像３が要求された場合に、例えば５７６０（横）×１０８０（縦）ピクセル（アスペクト比は横１６：縦３）でパノラマ動画像の撮像を行わせる。つまり、有効受光範囲のうち上下の所定数の画素を除いた斜線領域を撮像範囲として、斜線領域からの画素信号を読み出してメモリカード３２に記録する。 (Movie 3)
The moving image 3 is a horizontally long moving image captured by the camera 51 in the narrowest vertical direction of the screen. FIG. 5A illustrates the data size in the case of the moving image 3. When the moving image 3 is requested, the CPU 16 of the camera 51 causes the panoramic moving image to be captured with, for example, 5760 (horizontal) × 1080 (vertical) pixels (aspect ratio is horizontal 16: vertical 3). That is, the pixel signal from the hatched area is read out and recorded in the memory card 32 using the hatched area excluding a predetermined number of pixels above and below the effective light receiving range as the imaging range.

カメラ５１のＣＰＵ１６は、外部の再生機器（視聴者１のモニタ１００）における再生アスペクト比（横１６：縦９）に対応させて、上記メモリカード３２に記録したパノラマ動画像（５７６０（横）×１０８０（縦）ピクセル）に基づき、以下の動画像を生成する。すなわち、データ抽出し部１６Ｂは、上記斜線領域のパノラマ動画像のデータから図５(a)において破線で示す１９２０（横）×１０８０（縦）ピクセルのデータを抽出する。抽出するデータのアスペクト比は、横１６：縦９であり、視聴者１のモニタ１００の表示解像度（本例では１９２０（横）×１０８０（縦）ピクセル）に合わせて定めたものである。図５(a)によれば、例えば、フィールドの中でボールが存在する領域の方向が注目方向とされ、注目方向として破線領域で示されるデータがパノラマ動画像のデータから抽出される The CPU 16 of the camera 51 corresponds to the playback aspect ratio (horizontal 16: vertical 9) of the external playback device (viewer 1 monitor 100), and the panoramic video (5760 (horizontal) ×) recorded on the memory card 32. The following moving image is generated based on (1080 (vertical) pixels). That is, the data extraction unit 16B extracts 1920 (horizontal) × 1080 (vertical) pixel data indicated by a broken line in FIG. 5A from the panoramic moving image data in the shaded area. The aspect ratio of the data to be extracted is 16: 9 in the horizontal direction, and is determined in accordance with the display resolution of the monitor 100 of the viewer 1 (in this example, 1920 (horizontal) × 1080 (vertical) pixels). According to FIG. 5 (a), for example, the direction of the area where the ball is present in the field is the attention direction, and the data indicated by the broken line area is extracted from the panoramic video data as the attention direction.

上述したように、制御装置６０から視聴者１へ配信する動画像のデータサイズは、１９２０（横）×１０８０（縦）ピクセルである。カメラ５１のＣＰＵ１６は、データ抽出し部１６Ｂで抽出したデータを用いて、視聴者１へ配信する１９２０（横）×１０８０（縦）ピクセルの動画像を生成する。 As described above, the data size of the moving image distributed from the control device 60 to the viewer 1 is 1920 (horizontal) × 1080 (vertical) pixels. The CPU 16 of the camera 51 generates a 1920 (horizontal) × 1080 (vertical) pixel moving image to be distributed to the viewer 1 using the data extracted by the data extraction unit 16B.

ＣＰＵ１６が生成した動画像は、無線ＬＡＮ（ネットワーク８０）を介して制御装置６０へ送られる。動画像はさらに、制御装置６０から視聴者１へ配信される。図５(b)は、視聴者１へ配信される動画像のデータサイズ（１９２０（横）×１０８０（縦）ピクセル）を例示する図である。視聴者１のモニタ１００（図１）には、図５(a)の破線領域と同じ範囲が映し出される。 The moving image generated by the CPU 16 is sent to the control device 60 via the wireless LAN (network 80). The moving image is further distributed from the control device 60 to the viewer 1. FIG. 5B is a diagram illustrating the data size (1920 (horizontal) × 1080 (vertical) pixels) of a moving image distributed to the viewer 1. The same range as the broken line area in FIG. 5A is displayed on the monitor 100 (FIG. 1) of the viewer 1.

＜抽出するデータ位置＞
動画像２または動画像３の場合、図４(a)または図５(a)に示す撮像領域（斜線領域）よりも、動画像２または動画像３を生成するためのデータを抽出する領域（破線領域）が狭いため、視聴者１へ配信する動画像の範囲を変更することができる。本実施の形態では、オペレータ５（図２）は、視聴者１からの要望により、視聴者１へ配信する動画像によって映し出す範囲（注目方向）を変更する操作を行うことが可能である。 <Data location to extract>
In the case of the moving image 2 or the moving image 3, an area (data for generating the moving image 2 or the moving image 3 is extracted from the imaging area (hatched area) shown in FIG. 4A or 5A. Since the broken line area is narrow, the range of moving images distributed to the viewer 1 can be changed. In the present embodiment, the operator 5 (FIG. 2) can perform an operation of changing the range (attention direction) displayed by the moving image distributed to the viewer 1 according to the request from the viewer 1.

例えば、フィールドの右側を映す動画像を鑑賞したいという要望が視聴者１からオペレータ５へ寄せられた場合に、オペレータ５はオペレータ用端末７０を操作する。オペレータ用端末７０は、オペレータ５による操作に応じて、パノラマ動画像（すなわち上記斜線領域）から抽出するデータの範囲（上記破線領域）を図４(a)または図５(a)において右側へ変更する（すなわち、注目方向を右側へ変更する）要求を制御装置６０へ送る。 For example, the operator 5 operates the operator terminal 70 when the viewer 1 requests the operator 5 to view a moving image that reflects the right side of the field. The operator terminal 70 changes the data range (the broken line area) extracted from the panoramic video (that is, the hatched area) to the right side in FIG. 4 (a) or FIG. 5 (a) according to the operation by the operator 5. (Ie, change the attention direction to the right) is sent to the control device 60.

制御装置６０がカメラ５１へ、パノラマ動画像から抽出するデータの範囲を変更する要求を送ると、カメラ５１のデータ抽出し部１６Ｂが抽出するデータの範囲を変更する。そして、カメラ５１のＣＰＵ１６がデータ抽出し部１６Ｂで抽出されたデータを用いて視聴者１へ配信する１９２０（横）×１０８０（縦）ピクセルの動画像を生成する。 When the control device 60 sends a request for changing the range of data extracted from the panoramic video to the camera 51, the data extraction unit 16B of the camera 51 changes the range of data extracted. Then, the CPU 16 of the camera 51 extracts data and generates a 1920 (horizontal) × 1080 (vertical) pixel moving image to be distributed to the viewer 1 using the data extracted by the unit 16B.

カメラ５１のＣＰＵ１６が生成した動画像は、無線ＬＡＮ（ネットワーク８０）を介して制御装置６０へ送られ、さらに視聴者１へ配信される。以上により、視聴者１は、要望した範囲（注目方向）の動画像を鑑賞することができる。
このように、電子カメラ５１は、当初配信されなかった映像（例えば、フィールド上のボールがないところで起こったハプニング映像）を、視聴者１へ配信することができる。 The moving image generated by the CPU 16 of the camera 51 is sent to the control device 60 via the wireless LAN (network 80) and further distributed to the viewer 1. As described above, the viewer 1 can appreciate the moving image in the requested range (attention direction).
In this way, the electronic camera 51 can distribute to the viewer 1 video that was not initially distributed (for example, a happening video that occurred in the absence of a ball on the field).

なお、カメラ５１によって撮像された動画像２または動画像３が制御装置６０へ送られた後において、パノラマ動画像から抽出するデータの範囲を変更する要求がオペレータ用端末７０から制御装置６０へ送られた場合は、パノラマ動画像から抽出するデータの範囲の変更と、抽出したデータを用いた１９２０（横）×１０８０（縦）ピクセルの動画像を生成とを、カメラ５１に代わって制御装置６０が行う。 Note that after the moving image 2 or the moving image 3 captured by the camera 51 is sent to the control device 60, a request to change the range of data extracted from the panoramic moving image is sent from the operator terminal 70 to the control device 60. If it is determined, the control device 60 replaces the camera 51 with a change in the range of data extracted from the panoramic moving image and a 1920 (horizontal) × 1080 (vertical) pixel moving image using the extracted data. Do.

＜静止画像の場合＞
図６(a)は、静止画像の場合のデータサイズを説明する図である。カメラ５１のＣＰＵ１６は、静止画像撮像時に５７６０（横）×４３２０（縦）ピクセルで撮像する。すなわち、静止画像の場合において、撮像センサ１２の有効受光範囲（横４：縦３）を撮像範囲とする。 <For still images>
FIG. 6A illustrates the data size in the case of a still image. The CPU 16 of the camera 51 captures images with 5760 (horizontal) × 4320 (vertical) pixels when capturing a still image. That is, in the case of a still image, the effective light receiving range (horizontal 4: vertical 3) of the imaging sensor 12 is set as the imaging range.

カメラ５１のＣＰＵ１６は、外部の再生機器（視聴者１のモニタ１００）における表示解像度（本例では１９２０（横）×１０８０（縦）ピクセル）に対応させて、以下の静止画像を生成する。すなわち、データ抽出し部１６Ｂは、図６(a)における５７６０（横）×４３２０（縦）ピクセルのデータを全て抽出する。 The CPU 16 of the camera 51 generates the following still image corresponding to the display resolution (1920 (horizontal) × 1080 (vertical) pixels in this example) on the external playback device (the monitor 100 of the viewer 1). That is, the data extraction unit 16B extracts all data of 5760 (horizontal) × 4320 (vertical) pixels in FIG.

カメラ５１のＣＰＵ１６は、制御装置６０からの要求のもとに、データ抽出し部１６Ｂで抽出したデータを縦横それぞれ４ピクセルずつ加算することによってリサイズ処理を行い、１４４０（横）×１０８０（縦）ピクセルの静止画像を生成する。カメラ５１のＣＰＵ１６は、例えば、生成した１４４０（横）×１０８０（縦）ピクセルの静止画像の左右にグレー画像を付加して１９２０（横）×１０８０（縦）ピクセルの配信用の静止画像を得る。 The CPU 16 of the camera 51 performs a resizing process by adding 4 pixels each of the data extracted and extracted by the data extraction unit 16B in response to a request from the control device 60, and 1440 (horizontal) × 1080 (vertical) Generate a still image of pixels. For example, the CPU 16 of the camera 51 adds a gray image to the left and right of the generated still image of 1440 (horizontal) × 1080 (vertical) pixels to obtain a still image for delivery of 1920 (horizontal) × 1080 (vertical) pixels. .

ＣＰＵ１６が生成した配信用の静止画像は、無線ＬＡＮ（ネットワーク８０）を介して制御装置６０へ送られる。配信用の静止画像はさらに、制御装置６０から視聴者１へ配信される。図６(b)は、視聴者１へ配信される静止画像のデータサイズ（１９２０（横）×１０８０（縦）ピクセル）を例示する図である。左右の斜線領域は、それぞれ付加されたグレー画像に対応する。視聴者１のモニタ１００（図１）には、図６(a)の領域を含む画像が映し出される。 The distribution still image generated by the CPU 16 is sent to the control device 60 via the wireless LAN (network 80). The distribution still image is further distributed from the control device 60 to the viewer 1. FIG. 6B is a diagram illustrating the data size (1920 (horizontal) × 1080 (vertical) pixels) of a still image distributed to the viewer 1. The left and right hatched areas correspond to the added gray images, respectively. An image including the area shown in FIG. 6A is displayed on the monitor 100 (FIG. 1) of the viewer 1.

なお、配信用の静止画像を得る際に、５７６０（横）×４３２０（縦）ピクセルの静止画像から、視聴者１より要望があった位置の１９２０（横）×１０８０（縦）ピクセルの静止画像を抽出して、配信用の静止画像を得るようにしてもよい。抽出する１９２０（横）×１０８０（縦）ピクセルは、視聴者１のモニタ１００における表示解像度である。 When obtaining a still image for distribution, a still image of 1920 (horizontal) × 1080 (vertical) pixels at a position requested by the viewer 1 from a still image of 5760 (horizontal) × 4320 (vertical) pixels. May be extracted to obtain a still image for distribution. The 1920 (horizontal) × 1080 (vertical) pixel to be extracted is the display resolution on the monitor 100 of the viewer 1.

上述した実施の形態によれば、次の作用効果が得られる。
（１）カメラ５１は、第１アスペクト比（４：３）の動画像（５７６０（横）×４３２０（縦）ピクセル）を撮像する撮像センサ１２と、４：３より大きい第２アスペクト比（１６：６）のパノラマ動画像（５７６０（横）×２１６０（縦）ピクセル）を動画像から読み出すＣＰＵ１６と、パノラマ動画像をメモリカード３２に記録するカードコントローラ１４と、パノラマ動画像の画面の長辺の長さ（５７６０ピクセル）が第１アスペクト比（４：３）の動画像の画面の長辺の長さ（５７６０ピクセル）に対応するように制御するＣＰＵ１６とを備える。
これにより、撮像センサ１２に結像された画面の長辺方向に広い動画像をパノラマ動画像として記録しておけるので、撮りこぼしのリスクを少なくすることができる。すなわち、撮像中心方向が固定された撮像環境の中での出来事に、後から注目することが可能になる。 According to the embodiment described above, the following operational effects can be obtained.
(1) The camera 51 captures a moving image (5760 (horizontal) × 4320 (vertical) pixels) having a first aspect ratio (4: 3) and a second aspect ratio (16 greater than 4: 3). 6) panorama moving image (5760 (horizontal) × 2160 (vertical) pixel) from the moving image, the card controller 14 for recording the panoramic moving image on the memory card 32, and the long side of the panoramic moving image screen Is controlled so that the length (5760 pixels) corresponds to the length (5760 pixels) of the long side of the moving image having the first aspect ratio (4: 3).
As a result, since a wide moving image in the long side direction of the screen imaged on the image sensor 12 can be recorded as a panoramic moving image, the risk of spilling can be reduced. That is, it becomes possible to pay attention later to events in the imaging environment in which the imaging center direction is fixed.

（２）カメラ５１はさらに、第１アスペクト比（４：３）より大、かつ第２アスペクト比（１６：６）より小である第３アスペクト比（１６：９）の動画像（３８４０（横）×２１６０（縦）ピクセル）を、メモリカード３２に記録されているパノラマ動画像から抽出するデータ抽出し部１６Ｂを備えるようにした。
これにより、例えば視聴者１へ配信する動画像として、メモリカード３２に記録したパノラマ動画像よりも狭い動画像を抽出できる。この結果として、当初配信した動画像に映っていなかった動画像（例えば、フィールド上のボールがないところで起こったハプニング映像）をメモリカード３２から読み出し、新たに視聴者１へ配信することができる。 (2) The camera 51 further has a third aspect ratio (16: 9) moving image (3840 (horizontal) that is larger than the first aspect ratio (4: 3) and smaller than the second aspect ratio (16: 6). ) × 2160 (vertical) pixels) is provided with a data extraction unit 16B for extracting from the panoramic video recorded in the memory card 32.
Thereby, for example, a moving image narrower than the panoramic moving image recorded in the memory card 32 can be extracted as a moving image to be distributed to the viewer 1. As a result, a moving image (for example, a happening video that occurred in the absence of a ball on the field) that was not reflected in the originally distributed moving image can be read from the memory card 32 and newly distributed to the viewer 1.

（３）カメラ５１のＣＰＵ１６は、第３アスペクト比（１６：９）の動画像の画面の短辺の長さ（２１６０ピクセル）がパノラマ動画像の画面の短辺の長さ（２１６０ピクセル）に対応するようにデータ抽出し部１６Ｂを制御する。
例えば視聴者１へ配信する動画像として、メモリカード３２に記録したパノラマ動画像から画面の短辺方向の長さいっぱいに抽出することで、記録データを有効に活かすことができる。 (3) The CPU 16 of the camera 51 sets the short side length (2160 pixels) of the third aspect ratio (16: 9) moving image screen to the short side length (2160 pixels) of the panoramic moving image screen. The data extraction unit 16B is controlled so as to correspond.
For example, by extracting the panoramic moving image recorded in the memory card 32 to the full length in the short side direction as a moving image to be distributed to the viewer 1, the recorded data can be used effectively.

（４）カメラ５１のＣＰＵ１６は、第３アスペクト比（１６：９）の動画像の画面の長辺の長さ（３８４０ピクセル）が少なくともパノラマ動画像の画面の長辺の長さ（５７６０ピクセル）以下になるようにデータ抽出し部１６Ｂを制御する。
これにより、適切に、メモリカード３２に記録したパノラマ動画像よりも狭い動画像を抽出できる。 (4) The CPU 16 of the camera 51 has at least a long side length (3840 pixels) of the moving image screen of the third aspect ratio (16: 9) and a long side length (5760 pixels) of the panoramic moving image screen. Data extraction unit 16B is controlled so as to be as follows.
Thereby, a moving image narrower than the panoramic moving image recorded in the memory card 32 can be extracted appropriately.

（５）カメラ５１はさらに、動画像をリサイズ処理するＣＰＵ１６を備え、リサイズ処理が行われる場合において、ＣＰＵ１６は、データ抽出し部１６Ｂによって抽出された第３アスペクト比（１６：９）の動画像に対してリサイズ処理をする。
パノラマ動画像よりもデータ数が少ない第３アスペクト比（１６：９）の動画像に対してリサイズ処理を行うことで、リサイズ処理の負担を軽減することができる。 (5) The camera 51 further includes a CPU 16 for resizing the moving image. When the resizing process is performed, the CPU 16 moves the moving image having the third aspect ratio (16: 9) extracted by the data extracting unit 16B. Resize process for.
By performing the resizing process on the moving image having the third aspect ratio (16: 9) having a smaller number of data than the panoramic moving image, the burden of the resizing process can be reduced.

（６）カメラ５１のＣＰＵ１６は、第３アスペクト比（１６：９）の動画像の画面の短辺のピクセル数を１０８０ピクセルに制御するようにリサイズ処理の要否を決めるので、例えば視聴者１へ配信する動画像を、視聴者１のモニタ１００における表示解像度（本例では１９２０（横）×１０８０（縦）ピクセル）に対応させることができる。 (6) The CPU 16 of the camera 51 determines whether or not the resizing process is necessary so that the number of pixels on the short side of the moving image having the third aspect ratio (16: 9) is controlled to 1080 pixels. Can be made to correspond to the display resolution (in this example, 1920 (horizontal) × 1080 (vertical) pixels) on the monitor 100 of the viewer 1.

次のような変形も本発明の範囲内であり、変形例の一つ、もしくは複数を上述の実施形態と組み合わせることも可能である。
（変形例１）
上述した実施の形態では、動画像１および動画像２を取得する場合に行うデータの加算（画素ビニング）について、カメラ５１のＣＰＵ１６が加算するデジタル加算の例を説明した。デジタル加算は、撮像センサ１２により光電変換された信号をアナログデータからデジタルデータへＡ／Ｄ変換した後に行う加算である。 The following modifications are also within the scope of the present invention, and one or a plurality of modifications can be combined with the above-described embodiment.
(Modification 1)
In the above-described embodiment, an example of digital addition in which the CPU 16 of the camera 51 adds the data addition (pixel binning) performed when the moving image 1 and the moving image 2 are acquired has been described. Digital addition is addition performed after A / D converting the signal photoelectrically converted by the image sensor 12 from analog data to digital data.

画素ビニングは、上記デジタル加算に限らず、光電変換信号がＡ／Ｄ変換される前に、撮像センサ１２によってアナログ的に行うこともできる。変形例１において、例えば、撮像センサ１２における複数の画素間に、各々の画素を構成する電荷電圧変換部の間をオン／オフさせる連結トランジスタを設けることによって撮像センサ１２内で画素ビニングを行う。 The pixel binning is not limited to the digital addition, and can be performed in an analog manner by the image sensor 12 before the photoelectric conversion signal is A / D converted. In the first modification, for example, pixel binning is performed in the image sensor 12 by providing a connecting transistor that turns on / off between the charge-voltage converters constituting each pixel between a plurality of pixels in the image sensor 12.

カメラ５１のＣＰＵ１６は、撮像センサ１２の連結トランジスタを、画素信号を加算しない場合（画素ビニングなし）にオフさせ、画素信号を加算する場合（画素ビニングあり）にオンさせることにより、Ａ／Ｄ変換前に行う画素信号の加算なし／加算ありを切り替える。 The CPU 16 of the camera 51 performs A / D conversion by turning off the connection transistor of the image sensor 12 when the pixel signal is not added (without pixel binning) and when the pixel signal is added (with pixel binning). Switch between before / after pixel signal addition performed before.

変形例１によれば、カメラ５１が、動画像のデータを画素ビニングする撮像センサ１２を備え、画素ビニングが行われる場合、ＣＰＵ１６は、撮像センサ１２によって画素ビニングされた後に第２アスペクト比（１６：６）のパノラマ動画像を読み出す。例えば、縦横２画素ずつ画素信号を加算する２×２ビニングによって、２８８０（横）×１０８０（縦）ピクセルのパノラマ動画像（動画像２）を読み出す。画素ビニング前のデータ数（５７６０（横）×２１６０（縦）ピクセル）よりもデータ数が少なくなる画素ビニング後にパノラマ動画像を読み出すことで、パノラマ動画像の読み出し時間を短縮することができる。 According to the first modification, when the camera 51 includes the imaging sensor 12 that performs pixel binning on moving image data, and pixel binning is performed, the CPU 16 performs the second aspect ratio (16 after pixel binning is performed by the imaging sensor 12. : 6) The panoramic video is read out. For example, a panoramic moving image (moving image 2) of 2880 (horizontal) × 1080 (vertical) pixels is read out by 2 × 2 binning in which pixel signals are added by two vertical and horizontal pixels. By reading out a panoramic video after pixel binning in which the number of data is smaller than the number of data before pixel binning (5760 (horizontal) × 2160 (vertical) pixels), it is possible to reduce the panoramic video readout time.

ＣＰＵ１６は、撮像センサ１２によって画素ビニングされた後に第３アスペクト比（１６：９）のパノラマ動画像（動画像１）を読み出してもよい。例えば、縦横３画素ずつ画素信号を加算する３×３ビニングによって、１９２０（横）×１０８０（縦）ピクセルのパノラマ動画像を読み出す。画素ビニング前のデータ数（５７６０（横）×３２４０（縦）ピクセル）よりもデータ数が少なくなる画素ビニング後にパノラマ動画像を読み出すことで、パノラマ動画像の読み出し時間を短縮することができる。 The CPU 16 may read the panoramic moving image (moving image 1) having the third aspect ratio (16: 9) after pixel binning by the image sensor 12. For example, a panoramic moving image of 1920 (horizontal) × 1080 (vertical) pixels is read out by 3 × 3 binning in which pixel signals are added in units of 3 pixels vertically and horizontally. By reading out a panoramic video after pixel binning in which the number of data is smaller than the number of data before pixel binning (5760 (horizontal) × 3240 (vertical) pixels), it is possible to reduce the panoramic video readout time.

なお、画素ビニングを行わない場合、ＣＰＵ１６は、撮像センサ１２から第１アスペクト比（１６：３）のパノラマ動画像（動画像３）を読み出す。例えば、５７６０（横）×１０８０（縦）ピクセルのパノラマ動画像を読み出す。 When pixel binning is not performed, the CPU 16 reads a panoramic moving image (moving image 3) having the first aspect ratio (16: 3) from the imaging sensor 12. For example, a panoramic video of 5760 (horizontal) × 1080 (vertical) pixels is read out.

撮像センサ１２による画素ビニング後は、動画像１、動画像２、動画像３の場合におけるパノラマ動画像の縦方向のピクセル数が上記例において１０８０に揃う。このため、撮像センサ１２からパノラマ動画像としての画素信号を読み出す際の動画像１、動画像２、動画像３の場合における各々の読み出しフレームレートを一定にすることができる。 After pixel binning by the image sensor 12, the number of pixels in the vertical direction of the panoramic moving image in the case of the moving image 1, the moving image 2, and the moving image 3 is equal to 1080 in the above example. For this reason, the readout frame rates in the case of the moving image 1, the moving image 2, and the moving image 3 when the pixel signal as the panoramic moving image is read from the imaging sensor 12 can be made constant.

（変形例２）
上述した説明では、動画像１、動画像２、および静止画像を構成するピクセル数を変更するリサイズ処理の一例として画素ビニングを説明した。リサイズ処理としては、画素ビニングの代わりに、画素からの信号を間欠的に採用する間引きを採用することもできる。 (Modification 2)
In the above description, the pixel binning has been described as an example of the resizing process for changing the number of pixels constituting the moving image 1, the moving image 2, and the still image. As the resizing process, thinning that intermittently employs signals from pixels can be employed instead of pixel binning.

上記では、種々の実施の形態および変形例を説明したが、本発明はこれらの内容に限定されるものではない。本発明の技術的思想の範囲内で考えられるその他の態様も本発明の範囲内に含まれる。 Although various embodiments and modifications have been described above, the present invention is not limited to these contents. Other embodiments conceivable within the scope of the technical idea of the present invention are also included in the scope of the present invention.

１…視聴者
５…オペレータ
５１…カメラ
５２…電動雲台
６０…制御装置
６１…ストレージ装置
１６…ＣＰＵ
１６Ｂ…データ抽出し部
７０…オペレータ用端末
１００…モニタ DESCRIPTION OF SYMBOLS 1 ... Viewer 5 ... Operator 51 ... Camera 52 ... Electric pan head 60 ... Control apparatus 61 ... Storage apparatus 16 ... CPU
16B ... Data extraction unit 70 ... Operator terminal 100 ... Monitor

Claims

An image sensor that captures a first moving image having a first aspect ratio;
A first image cutout unit that cuts out a second moving image having a second aspect ratio larger than the first aspect ratio from the first moving image;
A recording unit for recording the second moving image on a recording medium;
A control unit that controls the first image cutout unit by causing a length of a long side of the screen of the second moving image to correspond to a length of a long side of the screen of the first moving image. apparatus.

The imaging device according to claim 1,
A second image cut out from the second moving image recorded on the recording medium, the third moving image having a third aspect ratio that is larger than the first aspect ratio and smaller than the second aspect ratio. An imaging apparatus including a cutout unit.

The imaging device according to claim 2,
The control unit controls the second image cutout unit by causing a length of a short side of the screen of the third moving image to correspond to a length of a short side of the screen of the second moving image. .

In the imaging device according to claim 2 or 3,
The control unit controls the second image cutout unit by setting a length of a long side of the screen of the third moving image to at least a length of a long side of the screen of the second moving image. .

In the imaging device according to claim 3 or 4,
It has a resolution change processing unit that changes the resolution of moving images,
When the resolution is changed, the resolution change processing unit changes the resolution with respect to the third moving image cut out by the second image cutout unit.

In the imaging device according to claim 3 or 4,
It has a resolution change processing unit that changes the resolution of moving images,
When the resolution is changed, the first image cutout unit cuts out the second moving image from the first moving image whose resolution has been changed by the resolution change processing unit.

In the imaging device according to claim 5 or 6,
The imaging device determines whether or not the resolution needs to be changed so that the number of pixels on a short side of the screen of the third moving image is controlled to be constant.

A binning imaging function for adding signals from a plurality of pixels;
An imaging device comprising: an aspect ratio variable function that generates a moving image signal having a different aspect ratio by changing the number of signals to be added by the binning imaging function.

The image sensor according to claim 8, wherein
The aspect ratio variable function is an image pickup device that changes the aspect ratio by changing the number of pixels on the long side without changing the number of pixels on the short side constituting the moving image.