JP2018046397A - Video reproduction device, imaging device, video reproduction method, and video reproduction program - Google Patents

Video reproduction device, imaging device, video reproduction method, and video reproduction program Download PDF

Info

Publication number
JP2018046397A
JP2018046397A JP2016179474A JP2016179474A JP2018046397A JP 2018046397 A JP2018046397 A JP 2018046397A JP 2016179474 A JP2016179474 A JP 2016179474A JP 2016179474 A JP2016179474 A JP 2016179474A JP 2018046397 A JP2018046397 A JP 2018046397A
Authority
JP
Japan
Prior art keywords
image
data
video
reproduction
playback
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2016179474A
Other languages
Japanese (ja)
Inventor
卓磨 ▲柳▼澤
卓磨 ▲柳▼澤
Takuma Yanagisawa
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2016179474A priority Critical patent/JP2018046397A/en
Publication of JP2018046397A publication Critical patent/JP2018046397A/en
Pending legal-status Critical Current

Links

Abstract

PROBLEM TO BE SOLVED: To prevent an unnatural change in a video field angle when vibration-proof reproduction is started.SOLUTION: A video reproduction device reproduces video data recorded by imaging. The device includes: vibration data acquisition means 201, 203 for acquiring vibration data, data on vibration during imaging; and vibration-proof reproduction means 204, 223 for carrying out vibration-proof reproduction of video data by sequentially displaying vibration-proof images generated by enlarging partial image data cut out according to a cut-out position and a cut-out size corresponding to the vibration data from each of plural pieces of unit image data constituting the video data. The vibration-proof reproduction means displays a stop image before starting reproduction and starts vibration-proof reproduction in response to receiving reproduction instructions. As the stop image, a vibration-proof image as a reproduction start image displayed at first at the time of starting vibration-proof reproduction is displayed.SELECTED DRAWING: Figure 2

Description

本発明は、記録済みの映像データを再生する際に防振処理を行う映像再生装置に関する。   The present invention relates to a video playback apparatus that performs image stabilization processing when playing back recorded video data.

ビデオカメラ等の撮像装置を用いて記録された映像データが撮像中の手振れ等によるカメラ振れに起因した像振れを含む場合に、該映像データの再生中に像振れを低減(補正)する防振処理を行う防振再生が可能な映像再生装置が用いられている。特許文献1には、再生する映像データから像振れを示す動きベクトルを検出し、該動きベクトルに応じて映像データから切り出す部分領域をシフトし、該部分領域を拡大表示することにより防振再生を行う装置が開示されている。特許文献2には、映像データの記録時に角速度センサにより検出したカメラ振れを映像データと共に記録し、該映像データの再生時に、記録されたカメラ振れに基づいて防振処理を行う装置が開示されている。特許文献3には、大きな像振れを含む映像データの再生時にフレーム間において拡大率(画角)の急激な変化によって映像を観察するユーザに違和感を与えないように、予め記録した像振れ量を先読みすることで拡大率を緩やかに変化させる装置が開示されている。   Anti-shake that reduces (corrects) image blur during playback of video data when video data recorded using an imaging device such as a video camera includes camera shake due to camera shake during imaging Video playback devices capable of image stabilization playback that perform processing are used. In Patent Document 1, a motion vector indicating image blur is detected from video data to be reproduced, a partial area cut out from the video data is shifted in accordance with the motion vector, and the partial area is displayed in an enlarged manner to perform image stabilization reproduction. An apparatus for performing is disclosed. Patent Document 2 discloses an apparatus that records camera shake detected by an angular velocity sensor at the time of recording video data together with the video data and performs image stabilization processing based on the recorded camera shake at the time of reproduction of the video data. Yes. Patent Document 3 describes a prerecorded image blur amount so that a user who observes a video image does not give a sense of incongruity due to a sudden change in magnification (view angle) between frames when reproducing video data including a large image blur. An apparatus that gradually changes the enlargement ratio by prefetching is disclosed.

特開平7−143380号公報JP-A-7-143380 特開平10−042233号公報Japanese Patent Laid-Open No. 10-042233 特開2012−044418号公報JP 2012-044418 A

しかしながら、特許文献1〜3にて開示された映像再生装置を含む従来の映像再生装置には、以下のような問題がある。通常、映像データの再生が開始される前には、その映像データの先頭フレーム等の画像データが停止画像やサムネイル画像として表示される。そして、ユーザによる再生指示を受けることに応じてその停止画像から映像データの防振再生が開始される。この防振再生の開始直後に防振処理の結果として再生される映像の画角が急激に変化すると、ユーザに違和感を与えるおそれがある。   However, conventional video playback devices including the video playback devices disclosed in Patent Documents 1 to 3 have the following problems. Usually, before reproduction of video data is started, image data such as the first frame of the video data is displayed as a stop image or a thumbnail image. Then, in response to receiving a reproduction instruction from the user, the vibration-proof reproduction of the video data is started from the stopped image. Immediately after the start of the image stabilization reproduction, if the angle of view of the video reproduced as a result of the image stabilization processing changes abruptly, the user may feel uncomfortable.

本発明は、防振再生が開始される際の不自然な映像画角の変化を防止することができるようにした映像再生装置等を提供する。   The present invention provides a video playback apparatus and the like that can prevent an unnatural change in video angle of view when image stabilization playback is started.

本発明の一側面としての映像再生装置は、撮像により記録された映像データを再生する。該映像再生装置は、撮像中の振れに関するデータとして記録された振れデータを取得する振れデータ取得手段と、映像データを構成する複数の単位画像データのそれぞれから振れデータに応じた切出し位置と切出しサイズで切り出した部分画像データを拡大して生成した防振画像を順次表示することで映像データの防振再生を行う防振再生手段とを有する。そして、防振再生手段は、再生開始前において停止画像を表示し、再生指示を受けることに応じて防振再生を開始し、停止画像として、防振再生の開始時に最初に表示する再生開始画像としての防振画像を表示することを特徴とする。   A video playback apparatus as one aspect of the present invention plays back video data recorded by imaging. The video reproduction device includes shake data acquisition means for acquiring shake data recorded as data relating to shake during imaging, and a cut-out position and a cut-out size corresponding to the shake data from each of a plurality of unit image data constituting the video data. And image stabilization reproduction means for performing image stabilization reproduction of the video data by sequentially displaying the image stabilization generated by enlarging the partial image data cut out in step (b). Then, the image stabilization reproduction means displays a stop image before the start of reproduction, starts image stabilization reproduction in response to receiving a reproduction instruction, and first displays a reproduction start image as a stop image at the start of image stabilization reproduction. The image stabilization image is displayed.

なお、被写体像を撮像する撮像手段と、撮像により生成された映像データを記録するとともに、該撮像中の振れに関するデータとして記録された振れデータを記録する記録手段と、上記映像再生装置とを有する撮像装置も、本発明の他の一側面を構成する。   Note that the image reproduction apparatus includes an imaging unit that captures a subject image, video data generated by the imaging, recording unit that records shake data recorded as data relating to shake during the imaging, and the video reproduction device. The imaging device also constitutes another aspect of the present invention.

さらに、本発明の他の一側面としての映像再生方法は、撮像により記録された映像データを再生する方法であり、撮像中の振れに関するデータとして記録された振れデータを取得し、映像データを構成する複数の単位画像データのそれぞれから振れデータに応じた切出し位置と切出しサイズで切り出した部分画像データを拡大して生成した防振画像を順次表示することで映像データの防振再生を行う。そして、防振再生において、再生開始前において停止画像を表示し、再生指示を受けることに応じて防振再生を開始し、停止画像として、防振再生の開始時に最初に表示する再生開始画像としての防振画像を表示することを特徴とする。   Furthermore, a video playback method according to another aspect of the present invention is a method for playing back video data recorded by imaging, and acquires video shake data recorded as data relating to camera shake during imaging, thereby configuring video data. The image data is subjected to image stabilization reproduction by sequentially displaying the image stabilization images generated by enlarging the partial image data extracted from each of the plurality of unit image data with the extraction position and the extraction size corresponding to the oscillation data. Then, in the image stabilization playback, the stop image is displayed before the start of playback, and the image stabilization playback is started in response to receiving the playback instruction. As the stop image, the playback start image displayed first when the image stabilization playback starts The image stabilization image is displayed.

なお、コンピュータを上記映像再生装置として機能させるコンピュータプログラムである映像再生プログラムも、本発明の他の一側面を構成する。   Note that a video playback program that is a computer program that causes a computer to function as the video playback device also constitutes another aspect of the present invention.

本発明によれば、防振再生の開始前に表示する停止画像として再生開始画像である防振画像を表示することで、防振再生の開始時における不自然な映像画角の変化を防止することができる。   According to the present invention, an image stabilization angle that is a reproduction start image is displayed as a stop image to be displayed before the start of image stabilization playback, thereby preventing an unnatural change in the video field angle at the start of image stabilization playback. be able to.

本発明の実施例であるビデオカメラの構成を示すブロック図。1 is a block diagram illustrating a configuration of a video camera that is an embodiment of the present invention. 実施例のビデオカメラのうち映像再生に係る構成を示すブロック図。The block diagram which shows the structure which concerns on image reproduction among the video cameras of an Example. 実施例における映像再生処理を示すフローチャート。The flowchart which shows the video reproduction process in an Example. 実施例における切出し領域の決定処理を示すフローチャート。The flowchart which shows the determination process of the extraction area | region in an Example. 従来の映像再生における画像表示例を示す図。The figure which shows the example of an image display in the conventional video reproduction | regeneration. 実施例における映像再生における画像表示例を示す図。The figure which shows the example of an image display in the video reproduction | regeneration in an Example.

以下、本発明の実施例について図面を参照しながら説明する。   Embodiments of the present invention will be described below with reference to the drawings.

図1には、本発明の実施例である映像再生装置を内蔵した撮像装置としてのビデオカメラ100のうち映像記録に関わる構成を示す。撮像光学系を構成するレンズユニット101は、被写体からの光を結像して被写体像を形成する。撮像素子(撮像手段)102は、CCDセンサやCMOSセンサ等により構成され、レンズユニット101により形成された被写体像を光電変換(撮像)する。アナログ信号処理部103は、撮像素子102から出力されたアナログ信号に対して処理を行うことでアナログ撮像信号を生成する。アナログ信号処理部103は、例えばCDS(Co-related Double Sampling:相関二重サンプリング)回路やAGC(Automatic Gain Control)回路等を含む。カメラ信号処理部104は、A/D変換器を備えており、アナログ信号処理部103で生成されたアナログ撮像信号からデジタルビデオ信号としての映像データを生成する。符号化部105は、アナログ信号処理部103で生成された映像データをMPEG2形式で符号化し、MPEG2のストリームを出力する。   FIG. 1 shows a configuration relating to video recording in a video camera 100 as an imaging apparatus incorporating a video playback apparatus according to an embodiment of the present invention. The lens unit 101 constituting the imaging optical system forms an object image by forming an image of light from the object. The imaging element (imaging means) 102 is constituted by a CCD sensor, a CMOS sensor, or the like, and photoelectrically converts (captures) a subject image formed by the lens unit 101. The analog signal processing unit 103 generates an analog image signal by performing processing on the analog signal output from the image sensor 102. The analog signal processing unit 103 includes, for example, a CDS (Co-related Double Sampling) circuit, an AGC (Automatic Gain Control) circuit, and the like. The camera signal processing unit 104 includes an A / D converter, and generates video data as a digital video signal from the analog imaging signal generated by the analog signal processing unit 103. The encoding unit 105 encodes the video data generated by the analog signal processing unit 103 in the MPEG2 format, and outputs an MPEG2 stream.

角速度センサ111は、ビデオカメラ100に加わる手振れ等のカメラ振れの角速度を検出する。角度振れ量算出部112は、角速度センサ111からの出力を積分してカメラ振れ量である角度振れ量を算出する。タイムコード設定部114は、時計113から取得した時刻情報を用いて映像記録時のタイムコードを設定する。メタデータ設定部115は、角度振れ量、タイムコードおよび不図示の他のデータをメタデータとして出力する。   The angular velocity sensor 111 detects an angular velocity of camera shake such as camera shake applied to the video camera 100. The angular shake amount calculation unit 112 integrates the output from the angular velocity sensor 111 and calculates an angular shake amount that is a camera shake amount. The time code setting unit 114 sets the time code at the time of video recording using the time information acquired from the clock 113. The metadata setting unit 115 outputs the angular shake amount, time code, and other data (not shown) as metadata.

記録制御部(記録手段)121は、符号化部105からのMPEG2ストリームとメタデータ設定部115からのメタデータとを互いに関連付けて記録メディア122に記録する。これにより、ストリーム化された映像データと、該映像データを記録するための撮像中の振れ(カメラ振れ)に関するデータである振れデータとしての角度振れ量を含む付加データとしてのメタデータとが記録メディア122に記録される。なお、後述するように、記録制御部121は、記録メディア122からMPEG2ストリームを再生して出力することもでき、また任意のメタデータを読み出すことが可能である。   The recording control unit (recording unit) 121 records the MPEG2 stream from the encoding unit 105 and the metadata from the metadata setting unit 115 on the recording medium 122 in association with each other. As a result, the streamed video data and metadata as additional data including the angular shake amount as shake data that is data relating to shake (camera shake) during imaging for recording the video data are recorded on the recording medium. 122 is recorded. As will be described later, the recording control unit 121 can reproduce and output the MPEG2 stream from the recording medium 122, and can read arbitrary metadata.

図2には、ビデオカメラ100のうち映像再生に関わる構成、すなわち映像再生装置としての構成を示している。なお、本実施例では映像再生装置と映像記録装置とが一体となって映像記録再生装置(ビデオカメラ)を構成している場合について説明するが、映像再生装置をパーソナルコンピュータ等を用いて、映像記録装置とは別の装置と構成してもよい。   FIG. 2 shows a configuration related to video playback in the video camera 100, that is, a configuration as a video playback device. In this embodiment, the case where the video playback device and the video recording device are integrated to form a video recording / playback device (video camera) will be described. You may comprise with an apparatus different from a recording device.

前述したように、記録メディア122には、角度振れ量を含むメタデータが付加されたMPEG2ストリームが記録されている。ただし、ビデオカメラ100が角度振れ量と映像データとを関連付けて取得可能である限り、これらの記録形式はどのようなものであってもよく、例えばメタデータが映像データとは別に記録されていてもよい。   As described above, the MPEG2 stream to which the metadata including the angular shake amount is added is recorded on the recording medium 122. However, as long as the video camera 100 can acquire the angular shake amount and the video data in association with each other, any recording format may be used. For example, the metadata is recorded separately from the video data. Also good.

記録制御部121は、記録メディア122から、MPEG2ストリームおよびメタデータを取得する。復号化部221は、記録制御部121が取得したMPEG2ストリームを復号化し、復号化された映像データ(デジタルビデオ信号)をメタデータと共にメモリ222に出力する。映像データは、複数のフレームにより構成されている。映像データにおける各フレームの画像データ(単位画像データ)を、フレーム画像データという。ただし、1フレームが複数のフィールドで構成されている場合には、単位画像データを該フィールドの画像データとしてもよい。   The recording control unit 121 acquires an MPEG2 stream and metadata from the recording medium 122. The decoding unit 221 decodes the MPEG2 stream acquired by the recording control unit 121, and outputs the decoded video data (digital video signal) to the memory 222 together with the metadata. Video data is composed of a plurality of frames. Image data (unit image data) of each frame in the video data is referred to as frame image data. However, when one frame is composed of a plurality of fields, the unit image data may be the image data of the field.

メモリ222は、復号化された映像データを数秒間分、すなわち数秒間分の複数のフレーム画像データを記憶しておく。メモリ222に数秒間分のフレーム画像データを記憶させることにより、表示部224に出力されている再生(表示)中のフレームに対して時間的に先のフレームの角度振れ量を取得することが可能となる。   The memory 222 stores the decoded video data for several seconds, that is, a plurality of frame image data for several seconds. By storing frame image data for several seconds in the memory 222, it is possible to acquire the angular shake amount of the previous frame with respect to the frame being reproduced (displayed) output to the display unit 224. It becomes.

画像処理部223は、複数のフレーム画像データのそれぞれから、後述するマイクロコンピュータ210が振れデータに応じて決定した切出し位置および切出しサイズの切出し領域を切り出す。そして、これら切出し領域の画像データ(部分画像データ)を所定の表示サイズに拡大する電子ズーム処理を行って防振画像データを生成し、該防振画像データを順次、表示部224に出力する。表示部224は、入力される防振画像データを順次表示(再生)する。これにより、映像データの防振再生が行われる。   The image processing unit 223 cuts out a cut-out area and a cut-out area having a cut-out size determined by the microcomputer 210 described later according to shake data from each of the plurality of frame image data. Then, electronic zoom processing for enlarging the image data (partial image data) of these cutout areas to a predetermined display size is performed to generate image stabilization image data, and the image stabilization image data is sequentially output to the display unit 224. The display unit 224 sequentially displays (reproduces) the input image stabilization image data. As a result, the vibration-proof reproduction of the video data is performed.

ジョイスティック231、再生/一時停止ボタン232および停止ボタン233はそれぞれ、ユーザによって操作される操作部材である。各操作部材は、ユーザ操作に応じた指示(信号)をマイクロコンピュータ210に通知する。具体的には、上下左右に傾くように操作されたジョイスティック231は、マイクロコンピュータ210に、その操作方向に表示部224の表示画面内で項目を選択するためのカーソルを移動させる指示を通知する。押下げ操作された再生/一時停止ボタン232は、マイクロコンピュータ210に映像再生の開始指示(再生指示)や一時停止指示を通知する。押下げ操作された停止ボタン233は、マイクロコンピュータ210に映像再生の終了指示を通知する。   The joystick 231, the play / pause button 232, and the stop button 233 are operation members operated by the user. Each operation member notifies the microcomputer 210 of an instruction (signal) corresponding to a user operation. Specifically, the joystick 231 operated to tilt up, down, left, and right notifies the microcomputer 210 an instruction to move a cursor for selecting an item on the display screen of the display unit 224 in the operation direction. The pressed play / pause button 232 notifies the microcomputer 210 of a video playback start instruction (playback instruction) and a pause instruction. The stop button 233 that has been pressed down notifies the microcomputer 210 of a video playback end instruction.

マイクロコンピュータ(以下、マイコンという)210は、動きベクトル量取得部201、メタデータ読み出し部202、角速度振れ量取得部203、振れ補正量決定部204、タイムコード設定部205および読み出しアドレス設定部206を含む。動きベクトル量取得部201、メタデータ読み出し部202および角速度振れ量取得部203は振れデータ取得手段に相当し、振れ補正量決定部204および前述した画像処理部223は防振再生手段に相当する。   A microcomputer (hereinafter referred to as a microcomputer) 210 includes a motion vector amount acquisition unit 201, a metadata reading unit 202, an angular velocity shake amount acquisition unit 203, a shake correction amount determination unit 204, a time code setting unit 205, and a read address setting unit 206. Including. The motion vector amount acquisition unit 201, the metadata reading unit 202, and the angular velocity shake amount acquisition unit 203 correspond to a shake data acquisition unit, and the shake correction amount determination unit 204 and the above-described image processing unit 223 correspond to an image stabilization reproduction unit.

動きベクトル量取得部201は、メモリ222から読み出した映像データのうち連続する前後のフレーム画像データ間での映像の動き(像振れ)を示す動きベクトル量を取得する。この動きベクトル量も、撮像中の振れに関するデータとして映像データに関連付けて記録された(さらに言えば、映像データ自体に含まれている)振れデータである。メタデータ読み出し部202は、メモリ222から映像データに付加されているメタデータのうち、後述する読み出しアドレス設定部206が設定した読み出しアドレスのメタデータを読み出す。   The motion vector amount acquisition unit 201 acquires a motion vector amount indicating video motion (image shake) between consecutive frame image data in the video data read from the memory 222. This motion vector amount is also shake data recorded in association with video data as data related to shake during imaging (more specifically, it is included in the video data itself). The metadata reading unit 202 reads the metadata of the read address set by the read address setting unit 206 described later from the metadata added to the video data from the memory 222.

角度振れ量取得部203は、読み出されたメタデータから角度振れ量を取得する。振れ補正量決定部204は、動きベクトル量取得部201からの動きベクトル量と角度振れ量取得部203からの角度振れ量とに基づいて、像振れが低減(補正)されるように各フレーム画像データからの切出し領域の切出し位置と切出しサイズを決定する。そして、決定した切出し位置と切出しサイズを画像処理部223に設定する。画像処理部223は、各フレーム画像データから該フレーム画像データに対して決定された切出し位置と切出しサイズで部分画像データを切り出し、切出しサイズに応じた拡大率での電子ズーム処理により生成した防振画像データを表示部224に表示させる。これにより、防振処理(像振れ補正処理)を行いながら映像を再生する防振再生が行われる。また、振れ補正量決定部204は、メタデータに切出し位置と切出しサイズが記録されている場合には、メタデータ読み出し部202を介してこれら切出し位置と切出しサイズを取得して画像処理部223に設定する。   The angular shake amount acquisition unit 203 acquires the angular shake amount from the read metadata. Based on the motion vector amount from the motion vector amount acquisition unit 201 and the angular shake amount from the angular shake amount acquisition unit 203, the shake correction amount determination unit 204 is configured to reduce (correct) each frame image. Determine the cutout position and cutout size of the cutout area from the data. Then, the determined cutout position and cutout size are set in the image processing unit 223. The image processing unit 223 cuts out partial image data from each frame image data with the cut-out position and cut-out size determined for the frame image data, and generates image stabilization generated by electronic zoom processing at an enlargement ratio corresponding to the cut-out size. The image data is displayed on the display unit 224. As a result, image stabilization reproduction is performed in which an image is reproduced while performing image stabilization processing (image blur correction processing). In addition, when the cutout position and the cutout size are recorded in the metadata, the shake correction amount determining unit 204 acquires the cutout position and the cutout size via the metadata reading unit 202 and stores them in the image processing unit 223. Set.

タイムコード設定部205は、現在再生しているフレームのタイムコードをメタデータ読み出し部202から取得し、取得したタイムコードよりも所定時間だけ後のタイムコードを読み出しアドレス設定部206に通知する。読み出しアドレス設定部206は、通知されたタイムコードに対応するアドレスをメモリ222に設定する。これにより、メタデータ読み出し部202は、現在再生しているフレームより所定時間だけ後に再生される(すなわち所定時間先の)フレームのメタデータを取得することができる。   The time code setting unit 205 acquires the time code of the currently reproduced frame from the metadata reading unit 202, and notifies the read time setting unit 206 of a time code that is a predetermined time after the acquired time code. The read address setting unit 206 sets an address corresponding to the notified time code in the memory 222. As a result, the metadata reading unit 202 can acquire metadata of a frame that is reproduced after a predetermined time (that is, ahead of a predetermined time) after the currently reproduced frame.

さらにマイコン210は、画像処理部223とともに、図3および図4のフローチャートに示す処理を行う。図3のフローチャートには、マイコン210および画像処理部223がコンピュータプログラムである映像再生プログラムに従って実行する映像再生処理の流れを示している。以下の説明および図3および図4において、「S」はステップを意味する。また、以下の説明において、映像データ、フレーム画像データおよび他のXX画像データをそれぞれ単に映像、フレーム画像およびXX画像という。   Further, the microcomputer 210 performs the processing shown in the flowcharts of FIGS. 3 and 4 together with the image processing unit 223. The flowchart of FIG. 3 shows the flow of a video playback process executed by the microcomputer 210 and the image processing unit 223 in accordance with a video playback program that is a computer program. In the following description and FIG. 3 and FIG. 4, “S” means a step. In the following description, video data, frame image data, and other XX image data are simply referred to as video, frame image, and XX image, respectively.

図3に示すS301〜S305では、マイコン210は再生する映像を選択するための選択画像の表示に係る処理を行う。本実施例では、選択画像は映像の1番目のフレーム(先頭フレーム)のフレーム画像(防振再生の開始時に最初に表示する再生開始画像:以下、先頭フレーム画像という)から生成したサムネイル画像とする。S306〜S307では、マイコン210は、映像再生が停止しているときの停止画像の表示に係る処理を行う。また、S308〜S312では、マイコン210は、再生映像の表示に係る処理を行う。   In S301 to S305 shown in FIG. 3, the microcomputer 210 performs processing related to display of a selected image for selecting a video to be reproduced. In this embodiment, the selected image is a thumbnail image generated from a frame image of the first frame (first frame) of the video (a reproduction start image displayed first at the start of image stabilization reproduction: hereinafter referred to as the first frame image). . In S <b> 306 to S <b> 307, the microcomputer 210 performs processing related to the display of a stopped image when video reproduction is stopped. In S308 to S312, the microcomputer 210 performs processing related to display of a reproduced video.

本実施例では、N個(N≧1)の映像Vが予め記録されて記録メディア122に保存されているものとし、n番目(1≦n≦N)の映像をV(n)と表記する。また、映像V(n)を構成するM(n)個(M(n)≧1)のフレーム画像Fについて、m番目(1≦m≦M(n))のフレーム画像をF(m)と表記し、フレーム画像F(m)の切出し領域の切出し位置をP(m)と、切出しサイズをS(m)とそれぞれ表記する。また、N個の映像V(n)のうち再生する映像をV(A)と表記する。これらの表記は後述する図4の処理でも同じである。   In this embodiment, it is assumed that N (N ≧ 1) videos V are recorded in advance and stored in the recording medium 122, and the nth (1 ≦ n ≦ N) video is denoted as V (n). . For the M (n) (M (n) ≧ 1) frame images F constituting the video V (n), the m-th (1 ≦ m ≦ M (n)) frame image is denoted by F (m). The cutout position of the cutout area of the frame image F (m) is written as P (m), and the cutout size is written as S (m). Also, a video to be reproduced among N videos V (n) is denoted as V (A). These notations are the same in the processing of FIG. 4 described later.

まずS301において、マイコン210内の振れ補正量決定部204は、メタデータ読み出し部202を介して映像V(n)の先頭フレーム画像F(1)における切出し位置P(1)と切出しサイズS(1)をメタデータから取得する。そして、これらを不図示の一時メモリに保存してS304に進む。ただし、P(1)とS(1)がメタデータに記録されていない(メタデータから取得できない)場合にはS302に進む。   First, in step S301, the shake correction amount determination unit 204 in the microcomputer 210 performs the extraction position P (1) and the extraction size S (1) in the first frame image F (1) of the video V (n) via the metadata reading unit 202. ) From the metadata. These are stored in a temporary memory (not shown) and the process proceeds to S304. However, if P (1) and S (1) are not recorded in the metadata (cannot be acquired from the metadata), the process proceeds to S302.

S302では、振れ補正量決定部204は、映像V(n)の先頭フレーム画像F(1)における切出し位置P(1)と切出しサイズS(1)を決定し、該P(1)とS(1)を一時メモリに保存してS303に進む。P(1)とS(1)の決定処理の詳細については後述する。   In S302, the shake correction amount determination unit 204 determines a cutout position P (1) and a cutout size S (1) in the first frame image F (1) of the video V (n), and the P (1) and S ( 1) is stored in the temporary memory and the process proceeds to S303. Details of the determination process of P (1) and S (1) will be described later.

S303では、振れ補正量決定部204は、メタデータ設定部115を介して、S302で決定した映像V(n)の先頭フレーム画像F(1)における切出し位置P(1)と切出しサイズS(1)をメタデータに記録してS304に進む。   In S303, the shake correction amount determination unit 204, via the metadata setting unit 115, extracts the cutting position P (1) and the cutting size S (1) in the first frame image F (1) of the video V (n) determined in S302. ) Is recorded in the metadata, and the process proceeds to S304.

S304では、振れ補正量決定部204は、S301またはS302で一時メモリに保存した、映像V(n)の先頭フレーム画像F(1)における切出し領域の切出し位置P(1)と切出しサイズS(1)を取得し、これらを画像処理部223に設定する。これにより、画像処理部223を通じて、映像V(n)の先頭フレーム画像F(1)から切り出した部分画像を拡大して生成した画像(ただし表示サイズは小さい)が選択画像であるサムネイル画像として表示部224に表示される。選択画像は、後述するP(1)とS(1)の決定処理の結果に応じて、防振画像または非防振画像と同じ(ただし表示サイズは小さい)画像となる。この後、マイコン210は、S305に進む。   In S304, the shake correction amount determination unit 204 stores the cutout position P (1) and the cutout size S (1) of the cutout area in the first frame image F (1) of the video V (n) stored in the temporary memory in S301 or S302. ) And these are set in the image processing unit 223. As a result, an image generated by enlarging the partial image cut out from the first frame image F (1) of the video V (n) through the image processing unit 223 (however, the display size is small) is displayed as a thumbnail image that is the selected image. Displayed on the part 224. The selected image is the same image (however, the display size is small) as the anti-vibration image or the non-anti-vibration image according to the result of the determination process of P (1) and S (1) described later. Thereafter, the microcomputer 210 proceeds to S305.

S305では、マイコン210は、N個の全ての映像Vの選択画像が表示部224に表示されたか否かを判定し、全ての映像Vの選択画像が表示部224に表示された場合はS306に進む。一方、まだ全ての映像Vの選択画像が表示部224に表示されていない場合はマイコン210はS301に戻り、次の映像V(n+1)に対してS301〜S304の処理を再度行う。   In S305, the microcomputer 210 determines whether or not all N selected images of the video V are displayed on the display unit 224. If all the selected images of the video V are displayed on the display unit 224, the process proceeds to S306. move on. On the other hand, if all the selected images of the video V have not been displayed on the display unit 224, the microcomputer 210 returns to S301, and performs the processing of S301 to S304 again for the next video V (n + 1).

S306では、マイコン210は、ジョイスティック231のユーザ操作により再生する映像V(A)の選択画像が選択されたか否かを判定し、選択された場合はS307に進む。選択されていない場合はマイコン210は本ステップの処理を再度行う。   In S306, the microcomputer 210 determines whether or not a selection image of the video V (A) to be reproduced is selected by a user operation of the joystick 231. If selected, the process proceeds to S307. If not selected, the microcomputer 210 performs the process of this step again.

S307では、振れ補正量決定部204は、S301またはS302で一時メモリに保存した映像V(A)の先頭フレーム画像F(1)における切出し位置P(1)と切出しサイズS(1)を取得し、これらを画像処理部223に設定する。これにより、画像処理部223を通じて、映像V(A) の先頭フレーム画像F(1)から切り出した部分画像を拡大して生成した画像が停止画像として表示部224に表示される。停止画像は、後述するP(1)とS(1)の決定処理の結果に応じて、防振画像または非防振画像と同じ(表示サイズも同じ)画像となる。この後、マイコン210はS308に進む。   In S307, the shake correction amount determination unit 204 acquires the extraction position P (1) and the extraction size S (1) in the first frame image F (1) of the video V (A) stored in the temporary memory in S301 or S302. These are set in the image processing unit 223. As a result, an image generated by enlarging the partial image cut out from the first frame image F (1) of the video V (A) is displayed on the display unit 224 through the image processing unit 223 as a stop image. The stop image is the same image (with the same display size) as the anti-vibration image or the non-anti-vibration image depending on the result of determination processing of P (1) and S (1) described later. Thereafter, the microcomputer 210 proceeds to S308.

S308では、マイコン210は、停止ボタン233のユーザ操作により映像V(A)の再生の終了指示がなされたか否かを判定する。再生の終了指示がなされた場合は、マイコン210はS301に進み、S301〜S305の選択画像の表示に係る処理を再度行う。再生の終了指示がなされていない場合は、マイコン210はS309に進む。   In S <b> 308, the microcomputer 210 determines whether or not an instruction to end playback of the video V (A) is given by a user operation of the stop button 233. If an instruction to end reproduction is given, the microcomputer 210 proceeds to S301 and performs again the processing related to the display of the selected image in S301 to S305. If the reproduction end instruction has not been given, the microcomputer 210 proceeds to S309.

S309では、マイコン210は、再生/一時停止ボタン232のユーザ操作により映像V(A)の再生の開始指示がなされたか否かを判定する。再生の開始指示がなされた場合は、マイコン210はS310に進む。再生の開始指示がなされていない(または再生の一時停止指示がなされた)場合はS308に進む。   In S <b> 309, the microcomputer 210 determines whether or not an instruction to start playback of the video V (A) has been given by the user operation of the playback / pause button 232. If the reproduction start instruction is given, the microcomputer 210 proceeds to S310. If a playback start instruction has not been given (or a playback pause instruction has been given), the process proceeds to S308.

S310では、振れ補正量決定部204は、映像V(A)において現在再生されているフレームのフレーム画像(再生フレーム画像)F(m)における切出し位置P(m)と切出しサイズS(m)を決定し、該P(m)と(m)を一時メモリに保存してS311に進む。P(m)とS(m)の決定処理の詳細についても、S302と同様に後述する。   In S310, the shake correction amount determination unit 204 sets the extraction position P (m) and the extraction size S (m) in the frame image (reproduction frame image) F (m) of the frame currently reproduced in the video V (A). The P (m) and (m) are stored in a temporary memory, and the process proceeds to S311. Details of the determination process of P (m) and S (m) will be described later in the same manner as S302.

S311では、振れ補正量決定部204は、S310で一時メモリに保存した映像V(A)の再生フレーム画像F(m)における切出し位置P(m)と切出しサイズS(m)を取得し、これらを画像処理部223に設定する。これにより、画像処理部223を通じて、映像V(A)の再生フレーム画像F(m)から切り出された部分画像を拡大して生成された再生画像が表示部224に表示される。この後、マイコン210はS312に進む。再生画像は、後述するP(m)とS(m)の決定処理の結果に応じて、防振画像または非防振画像となる。   In S311, the shake correction amount determination unit 204 acquires the cutout position P (m) and the cutout size S (m) in the playback frame image F (m) of the video V (A) stored in the temporary memory in S310. Is set in the image processing unit 223. As a result, a playback image generated by enlarging the partial image cut out from the playback frame image F (m) of the video V (A) is displayed on the display unit 224 through the image processing unit 223. Thereafter, the microcomputer 210 proceeds to S312. The reproduced image becomes a vibration-proof image or a non-vibration-proof image according to the result of determination processing of P (m) and S (m) described later.

S312では、マイコン210は、映像V(A)における全てのフレーム画像F(1〜M(A))の切出し領域が再生画像として表示されたか否かを判定する。全ての再生画像が表示された場合はマイコン210は301に進み、S301〜S305の選択画像の表示に係る処理を再度行う。まだ全ての再生画像が表示されていない場合は、マイコン210はS308に進み、次のフレーム画像F(m+1)についてS308〜S312の処理を再度行う。   In S312, the microcomputer 210 determines whether or not the clipped areas of all the frame images F (1 to M (A)) in the video V (A) are displayed as playback images. When all the reproduced images are displayed, the microcomputer 210 proceeds to 301 and performs again the processing related to the display of the selected image in S301 to S305. If all the reproduced images are not displayed yet, the microcomputer 210 proceeds to S308, and performs the processing of S308 to S312 again for the next frame image F (m + 1).

図4のフローチャートには、図3のS302とS310にて振れ補正量決定部204が動きベクトル量取得部201と角度振れ量取得部203とともに行うフレーム画像からの切出し領域の切出し位置と切出しサイズの決定処理(つまりは防振処理)を示している。前述したようにフレーム画像Fについてm番目(1≦m≦M(n))のフレーム画像をF(m)と表記するとき、S302におけるmは1であり、S310におけるmは1≦m≦Mである。   In the flowchart of FIG. 4, the cutout position and cutout size of the cutout region from the frame image performed by the shake correction amount determination unit 204 together with the motion vector amount acquisition unit 201 and the angular shake amount acquisition unit 203 in S302 and S310 of FIG. A determination process (that is, an image stabilization process) is shown. As described above, when the m-th (1 ≦ m ≦ M (n)) frame image of the frame image F is expressed as F (m), m in S302 is 1, and m in S310 is 1 ≦ m ≦ M. It is.

S401では、動きベクトル量取得部201は、映像Vのフレーム画像F(m)から先の所定期間分の動きベクトル量を取得する。また、角度振れ量取得部203は、メタデータ読み出し部202を介して、同様に映像VのフレームF(m)から先の所定期間分の角度振れ量を取得する。手振れによるカメラ振れは通常は4〜9Hzの周波数を持つため、所定期間とは、例えば4Hzの約2周期分に相当する約0.5秒である。   In S401, the motion vector amount acquisition unit 201 acquires a motion vector amount for a predetermined period from the frame image F (m) of the video V. Similarly, the angular shake amount acquisition unit 203 acquires the angular shake amount for the predetermined period from the frame F (m) of the video V via the metadata reading unit 202. Since camera shake due to camera shake usually has a frequency of 4 to 9 Hz, the predetermined period is, for example, about 0.5 seconds corresponding to about 2 cycles of 4 Hz.

次にS402では、振れ補正量決定部204は、所定期間内でカメラ100のパンニングが行われたか否かを判定する。具体的には、振れ補正量決定部204は、S401にて取得された所定期間分の動きベクトル量または角度振れ量が該所定期間内において所定の閾値を超えて一方向に増加または減少している場合にパンニングが行われたと判定する。振れ補正量決定部204は、パンニングが行われたと判定した場合はS404に進み、パンニングが行われていないと判定した場合はS403に進む。パンニング時は一般に動きベクトル量および角度振れ量が大きくなるため、切出し領域の切出し位置が限界位置(切出し端位置)に達してしまう。このため、パンニングが行われたと判定した振れ補正量決定部204は、再生中の防振処理を停止する制御を行う。なお、パンニングには、カメラの100水平方向の角度変位だけでなく、垂直方向の角度変位(チルティングともいう)を含めてもよい。   In step S <b> 402, the shake correction amount determination unit 204 determines whether panning of the camera 100 has been performed within a predetermined period. Specifically, the shake correction amount determination unit 204 increases or decreases the motion vector amount or the angular shake amount for a predetermined period acquired in S401 in one direction exceeding a predetermined threshold within the predetermined period. It is determined that panning has been performed. If the shake correction amount determination unit 204 determines that panning has been performed, the process proceeds to S404. If it is determined that panning has not been performed, the process proceeds to S403. During panning, the amount of motion vector and the amount of angular deflection generally increase, and the cutout position of the cutout area reaches the limit position (cutout end position). For this reason, the shake correction amount determination unit 204 that has determined that panning has been performed performs control to stop the image stabilization process being played back. Note that panning may include not only the 100 horizontal angular displacement of the camera but also the vertical angular displacement (also referred to as tilting).

S403では、振れ補正量決定部204は、S401で取得した所定期間分の動きベクトル量または角度振れ量に基づいて、再生映像Vに対して防振処理を行うためのフレーム画像F(m)における切出し領域の切出し位置P(m)と切出しサイズS(m)を決定する。   In S403, the shake correction amount determination unit 204 in the frame image F (m) for performing the image stabilization process on the reproduced video V based on the motion vector amount or the angular shake amount for the predetermined period acquired in S401. The cut position P (m) and the cut size S (m) of the cut area are determined.

S404では、振れ補正量決定部204は、再生中の映像Vに対して防振処理を行わない(停止する)ようにフレーム画像F(m)における切出し領域の切出し位置P(m)と切出しサイズS(m)を所定の切出し位置と所定の切出しサイズに決定する。本実施例では、振れ補正量決定部204は、フレーム画像F(m)に対する切出し位置P(m)と切出しサイズS(m)を、その前のフレーム画像F(m−1)に対する切出し位置P(m−1)と切出しサイズS(m−1)と同じに決定する。また、振れ補正量決定部204は、先頭フレーム画像F(1)については、該先頭フレーム画像F(1)の中心領域を切り出し領域として切り出すように切出し位置P(m)を決定する。さらに、先頭フレーム画像F(1)については、S402で用いた閾値に相当する動きベクトル量または角度振れ量に基づいてフレーム画像F(m)における切出し領域の切出しサイズS(m)を決定する。これらの場合、フレーム画像F(m)(先頭フレーム画像F(1)を含む)から切り出されて拡大されて生成される画像は非防振画像となる。   In S <b> 404, the shake correction amount determination unit 204 determines the cutout position P (m) and the cutout size of the cutout area in the frame image F (m) so that the image stabilization process is not performed (stopped) on the video V being played back. S (m) is determined as a predetermined cutting position and a predetermined cutting size. In the present embodiment, the shake correction amount determination unit 204 determines the extraction position P (m) and the extraction size S (m) for the frame image F (m), and the extraction position P for the previous frame image F (m−1). (m-1) is determined to be the same as the cut-out size S (m-1). Further, the shake correction amount determination unit 204 determines the cutout position P (m) so that the center area of the head frame image F (1) is cut out as the cutout area for the head frame image F (1). Further, for the first frame image F (1), the cut-out size S (m) of the cut-out area in the frame image F (m) is determined based on the motion vector amount or the angular shake amount corresponding to the threshold used in S402. In these cases, an image generated by being cut out from the frame image F (m) (including the first frame image F (1)) and enlarged is a non-vibration-proof image.

次に、図5(A)〜(C)および図6(A)〜(C)を用いて、本実施例における画像表示の例を従来と比較しつつ説明する。図5(A)には従来における選択画像を、図5(B)には従来における停止画像を、図5(C)には従来において再生開始直後に表示される再生画像の例を示している。図5(A)においては、記録メディアから読み出された映像の先頭フレーム画像がそのまま選択画像として表示される。つまり、この選択画像は、先頭フレーム画像から切り出されて拡大されたものではない。この選択画像を通じて映像が選択されると、図5(B)に示すように該映像の停止画像が表示されるが、このときも先頭フレーム画像から切り出されて拡大されることなく、先頭フレーム画像がそのまま停止画像として表示される。   Next, an example of image display in the present embodiment will be described using FIGS. 5A to 5C and FIGS. FIG. 5A shows an example of a conventional selection image, FIG. 5B shows an example of a conventional stop image, and FIG. 5C shows an example of a conventional reproduction image displayed immediately after the start of reproduction. . In FIG. 5A, the first frame image of the video read from the recording medium is displayed as it is as the selected image. In other words, this selected image is not cut out from the top frame image and enlarged. When a video is selected through the selected image, a stop image of the video is displayed as shown in FIG. 5B. At this time, the first frame image is not cut out and enlarged. Is displayed as a stop image.

そして、図5(C)に示すように、停止画像の表示状態から映像の再生の開始直後には、防振処理によって先頭フレーム画像からの切出し領域が拡大された画像としての再生画像が表示される。したがって、図5(B)に示した停止画像の画角と図5(C)に示した再生画像の画角が大きく変化する。   Then, as shown in FIG. 5 (C), immediately after the start of video playback from the display state of the stop image, a playback image is displayed as an image in which the cut-out area from the top frame image has been expanded by the image stabilization process. The Therefore, the angle of view of the stop image shown in FIG. 5B and the angle of view of the reproduced image shown in FIG.

一方、図6(A)には本実施例における選択画像を、図6(B)には本実施例における停止画像を、図6(C)には本実施例において再生開始直後に表示される再生画像の例を示している。図6(A)においては、記録メディアから読み出された映像の先頭フレーム画像F(1)から防振処理により決定された切出し位置P(1)と切出しサイズS(1)で切り出された切出し領域の画像が拡大されて選択画像として表示されている。この選択画像を通じて映像が選択されると、図6(B)に示すように該映像の停止画像が表示される。ここでも、先頭フレーム画像F(1)から防振処理により決定された切出し位置P(1)と切出しサイズS(1)で切り出された切出し領域の画像が拡大されて停止画像として表示される。   On the other hand, FIG. 6A shows the selected image in the present embodiment, FIG. 6B shows the stop image in the present embodiment, and FIG. 6C shows the display immediately after the start of reproduction in the present embodiment. An example of a reproduced image is shown. In FIG. 6 (A), a cutout cut out from the first frame image F (1) of the video read from the recording medium at the cutout position P (1) and cutout size S (1) determined by the image stabilization process. The image of the area is enlarged and displayed as a selected image. When a video is selected through this selected image, a stop image of the video is displayed as shown in FIG. Also in this case, the image of the cut-out area cut out with the cut-out position P (1) and the cut-out size S (1) determined by the image stabilization process from the top frame image F (1) is enlarged and displayed as a stop image.

そして、図6(C)に示すように、停止画像の表示状態から映像の再生の開始直後には、防振処理によって先頭フレーム画像F(1)から切出し位置P(1)と切出しサイズS(1)で切り出された切出し領域の画像が拡大されて再生画像が表示される。したがって、図6(B)に示した停止画像の画角と図6(C)に示した再生画像の画角とは変化がなく、同じである。   Then, as shown in FIG. 6C, immediately after the start of video playback from the display state of the stop image, the cropping position P (1) and the cropping size S ( The image of the cutout area cut out in 1) is enlarged and a reproduced image is displayed. Therefore, the angle of view of the stop image shown in FIG. 6B is the same as the angle of view of the reproduced image shown in FIG. 6C.

以上説明した本実施例では、記録済み映像の防振再生を行う場合において、映像をユーザに選択させるための選択画像および映像が選択されてから再生が開始されるまでに表示される停止画像を、再生開始直後に表示される再生画素と同じ画角の画像とする。このため、映像の再生開始前の停止画像の表示状態から再生開始直後にかけての不自然な画角の変化を防ぐことができる。   In the present embodiment described above, when performing vibration-proof reproduction of a recorded video, a selection image for allowing the user to select a video and a stop image that is displayed after the video is selected until playback is started are displayed. The image has the same angle of view as the reproduction pixel displayed immediately after the start of reproduction. For this reason, it is possible to prevent an unnatural change in the angle of view from the display state of the stop image before the start of video playback to immediately after the start of playback.

なお、本実施例では、再生される映像の先頭フレーム画像から生成した画像を再生開始画像とする場合について説明したが、再生開始画像は必ずしも先頭フレーム画像から生成された画像に限られない。例えば、映像の再生を先頭フレーム以外の中間フレームで停止させた場合は、中間フレームのフレーム画像から生成した画像を再生開始画像とし、これを停止画像や選択画像として用いてもよい。   In this embodiment, the case where the image generated from the first frame image of the reproduced video is used as the reproduction start image has been described. However, the reproduction start image is not necessarily limited to the image generated from the first frame image. For example, when video playback is stopped at an intermediate frame other than the first frame, an image generated from the frame image of the intermediate frame may be used as a playback start image and used as a stop image or a selected image.

ビデオカメラ100における映像再生処理ついて説明した。しかし、同様の映像再生処理は、デジタルカメラ、パーソナルコンピュータ、PDA、携帯電話、携帯画像ビューワ、ディスプレイ付きプリンタ、デジタルフォトフレーム、音楽プレーヤ、ゲーム機、電子ブックリーダ等の映像再生機能を有する各種装置に適用可能である。
(その他の実施例)
本発明は、上述の実施形態の1以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける1つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、1以上の機能を実現する回路(例えば、ASIC)によっても実現可能である。
The video playback process in the video camera 100 has been described. However, similar video playback processing is performed by various devices having video playback functions such as digital cameras, personal computers, PDAs, mobile phones, portable image viewers, printers with displays, digital photo frames, music players, game machines, electronic book readers, and the like. It is applicable to.
(Other examples)
The present invention supplies a program that realizes one or more functions of the above-described embodiments to a system or apparatus via a network or a storage medium, and one or more processors in a computer of the system or apparatus read and execute the program This process can be realized. It can also be realized by a circuit (for example, ASIC) that realizes one or more functions.

以上説明した各実施例は代表的な例にすぎず、本発明の実施に際しては、各実施例に対して種々の変形や変更が可能である。   Each embodiment described above is only a representative example, and various modifications and changes can be made to each embodiment in carrying out the present invention.

201 動きベクトル量取得部
202 メタデータ読み出し部
203 角度振れ量取得部
204 振れ補正量決定部
210 マイクロコンピュータ
223 画像処理部
201 motion vector amount acquisition unit 202 metadata reading unit 203 angle shake amount acquisition unit 204 shake correction amount determination unit 210 microcomputer 223 image processing unit

Claims (8)

撮像により記録された映像データを再生する映像再生装置であって、
前記撮像中の振れに関するデータとして記録された振れデータを取得する振れデータ取得手段と、
前記映像データを構成する複数の単位画像データのそれぞれから前記振れデータに応じた切出し位置と切出しサイズで切り出した部分画像データを拡大して生成した防振画像を順次表示することで前記映像データの防振再生を行う防振再生手段とを有し、
前記防振再生手段は、
再生開始前において停止画像を表示し、再生指示を受けることに応じて前記防振再生を開始し、
前記停止画像として、前記防振再生の開始時に最初に表示する再生開始画像としての前記防振画像を表示することを特徴とする映像再生装置。
A video playback device for playing back video data recorded by imaging,
Shake data acquisition means for acquiring shake data recorded as data relating to shake during imaging;
The image data of the video data is sequentially displayed by enlarging the partial image data cut out with a cutout position and cutout size corresponding to the shake data from each of the plurality of unit image data constituting the video data. A vibration-proof reproduction means for performing vibration-proof reproduction,
The anti-vibration reproduction means includes
Display a stop image before starting playback, start the image stabilization playback in response to receiving a playback instruction,
The video playback apparatus, wherein the image stabilization image is displayed as a playback start image that is displayed first when the image stabilization playback is started as the stop image.
前記防振再生手段は、
前記停止画像を、前記防振再生における前記防振画像の表示サイズと同じ表示サイズで表示することを特徴とする請求項1に記載の映像再生装置。
The anti-vibration reproduction means includes
The video playback apparatus according to claim 1, wherein the stop image is displayed with a display size that is the same as a display size of the image stabilization image in the image stabilization playback.
前記防振再生手段は、
前記振れデータが前記撮像中にパンニングが行われたことを示す場合は、前記単位画像データから所定の切出し位置と所定の切出しサイズで切り出した部分画像データを拡大して生成した非防振画像を表示し、
前記再生開始画像が前記非防振画像であるときは、前記停止画像として該非防振画像を表示することを特徴とする請求項1または2に記載の映像再生装置。
The anti-vibration reproduction means includes
When the shake data indicates that panning has been performed during the imaging, a non-vibration-proof image generated by enlarging the partial image data cut out from the unit image data at a predetermined cut-out position and a predetermined cut-out size is generated. Display
3. The video reproduction apparatus according to claim 1, wherein when the reproduction start image is the non-shake image, the non-shake image is displayed as the stop image.
前記防振再生手段は、
前記振れデータが取得できない場合は、前記単位画像データから所定の切出し位置と所定の切出しサイズで切り出した部分画像データを拡大して生成した非防振画像を表示し、
前記再生開始画像が前記非防振画像であるときは、前記停止画像として該非防振画像を表示することを特徴とする請求項1または2に記載の映像再生装置。
The anti-vibration reproduction means includes
When the shake data cannot be obtained, a non-vibration-proof image generated by enlarging the partial image data cut out from the unit image data with a predetermined cut-out position and a predetermined cut-out size is displayed.
3. The video reproduction apparatus according to claim 1, wherein when the reproduction start image is the non-shake image, the non-shake image is displayed as the stop image.
前記防振再生手段は、
前記停止画像を表示する前に前記映像データの再生をユーザに選択させるための選択画像を表示し、
前記選択画像として、前記再生開始画像を前記停止画像より小さい表示サイズで表示することを特徴とする請求項1から4のいずれか一項に記載の映像再生装置。
The anti-vibration reproduction means includes
Displaying a selection image for allowing the user to select reproduction of the video data before displaying the stop image;
5. The video reproduction apparatus according to claim 1, wherein the reproduction start image is displayed with a display size smaller than the stop image as the selection image. 6.
被写体像を撮像する撮像手段と、
前記撮像により生成された映像データを記録するとともに、前記撮像中の振れに関するデータである振れデータを記録する記録手段と、
請求項1から5のいずれか一項に記載の映像再生装置とを有することを特徴とする撮像装置。
Imaging means for capturing a subject image;
Recording means for recording video data generated by the imaging and recording shake data that is data relating to shake during the imaging;
An image pickup apparatus comprising: the video reproduction apparatus according to claim 1.
撮像により記録された映像データを再生する映像再生方法であって、
前記撮像中の振れに関するデータとして記録された振れデータを取得し、
前記映像データを構成する複数の単位画像データのそれぞれから前記振れデータに応じた切出し位置と切出しサイズで切り出した部分画像データを拡大して生成した防振画像を順次表示することで前記映像データの防振再生を行い、
前記防振再生において、
再生開始前において停止画像を表示し、再生指示を受けることに応じて前記防振再生を開始し、
前記停止画像として、前記防振再生の開始時に最初に表示する再生開始画像としての前記防振画像を表示することを特徴とする映像再生方法。
A video playback method for playing back video data recorded by imaging,
Obtaining shake data recorded as data relating to shake during imaging;
The image data of the video data is sequentially displayed by enlarging the partial image data cut out with a cutout position and cutout size corresponding to the shake data from each of the plurality of unit image data constituting the video data. Anti-vibration playback
In the anti-vibration reproduction,
Display a stop image before starting playback, start the image stabilization playback in response to receiving a playback instruction,
A video reproduction method, wherein the image stabilization image is displayed as a reproduction start image that is initially displayed when the image stabilization reproduction is started as the stop image.
コンピュータに、撮像により記録された映像データを再生する映像再生処理を実行させるコンピュータプログラムであって、
前記コンピュータに、
前記撮像中の振れに関するデータとして記録された振れデータを取得させ、
前記映像データを構成する複数の単位画像データのそれぞれから前記振れデータに応じた切出し位置と切出しサイズで切り出した部分画像データを拡大して生成した防振画像を順次表示することで前記映像データの防振再生を行わせ、
前記防振再生を行う前記コンピュータに、
再生開始前において停止画像を表示させ、再生指示を受けることに応じて前記防振再生を開始させ、
前記停止画像として、前記防振再生の開始時に最初に表示する再生開始画像としての前記防振画像を表示させることを特徴とする映像再生プログラム。
A computer program for causing a computer to execute video reproduction processing for reproducing video data recorded by imaging,
In the computer,
The shake data recorded as the data related to shake during imaging is acquired,
The image data of the video data is sequentially displayed by enlarging the partial image data cut out with a cutout position and cutout size corresponding to the shake data from each of the plurality of unit image data constituting the video data. Let the image stabilization play,
In the computer that performs the image stabilization reproduction,
Display a stop image before starting playback, start the image stabilization playback in response to receiving a playback instruction,
A video playback program that displays the image stabilization image as a playback start image to be displayed first when the image stabilization playback starts as the stop image.
JP2016179474A 2016-09-14 2016-09-14 Video reproduction device, imaging device, video reproduction method, and video reproduction program Pending JP2018046397A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016179474A JP2018046397A (en) 2016-09-14 2016-09-14 Video reproduction device, imaging device, video reproduction method, and video reproduction program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016179474A JP2018046397A (en) 2016-09-14 2016-09-14 Video reproduction device, imaging device, video reproduction method, and video reproduction program

Publications (1)

Publication Number Publication Date
JP2018046397A true JP2018046397A (en) 2018-03-22

Family

ID=61695275

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016179474A Pending JP2018046397A (en) 2016-09-14 2016-09-14 Video reproduction device, imaging device, video reproduction method, and video reproduction program

Country Status (1)

Country Link
JP (1) JP2018046397A (en)

Similar Documents

Publication Publication Date Title
JP4479829B2 (en) Imaging apparatus and imaging method
JP5597061B2 (en) Video playback apparatus and control method thereof
JP5516662B2 (en) Imaging device
JP5077979B2 (en) Display control apparatus, display control method, and program
JP2012015830A (en) Camera
JP2011087183A (en) Imaging apparatus, image processing apparatus, and program
JP2008022306A (en) Imaging device and program thereof
JP2011193424A (en) Imaging apparatus and method, and program
JP2009272840A (en) Image recording/reproducing device, image recording/reproducing method, image processing device, and image processing method
US10200616B2 (en) Image processing device that performs image rotation processing, method of controlling the same, and storage medium
JP5126392B2 (en) REPRODUCTION CONTROL DEVICE, REPRODUCTION CONTROL METHOD, AND PROGRAM
JP5683291B2 (en) Movie reproducing apparatus, method, program, and recording medium
JP2009038478A (en) Program, image processing apparatus, imaging apparatus, and image processing method
JP5217709B2 (en) Image processing apparatus and imaging apparatus
JP5213557B2 (en) Moving image processing apparatus and moving image processing method
JP2007201570A (en) Image processor, photography apparatus, image processing method and control program
JP2018046397A (en) Video reproduction device, imaging device, video reproduction method, and video reproduction program
US11030716B2 (en) Image processing apparatus
JP2017063276A (en) Video display device, video display method and program
JP6995490B2 (en) Video playback device and its control method and program
JP6371656B2 (en) Image reproduction apparatus, image reproduction method and program, and imaging apparatus
JP4915978B2 (en) Movie playback apparatus and program thereof
JP2008097727A (en) Animation-reproducing device
JP2006311145A (en) Imaging apparatus, reproducing apparatus, control method, and program
JP6463967B2 (en) Imaging apparatus and control method thereof